數(shù)據(jù)湖
云數(shù)據(jù)倉庫數(shù)據(jù)湖分析
數(shù)據(jù)湖 分析 整合數(shù)據(jù)資源,構(gòu)建 大數(shù)據(jù) 平臺,發(fā)現(xiàn)數(shù)據(jù)價值,成為企業(yè)經(jīng)營的新趨勢和迫切訴求。DWS Express可直接對存儲在 對象存儲OBS 上的大數(shù)據(jù)平臺集成、處理后的數(shù)據(jù)進行分析 優(yōu)勢 統(tǒng)一分析入口 以DWS的SQL作為上層應(yīng)用的統(tǒng)一入口,應(yīng)用開發(fā)人員使用熟悉的SQL語言即可訪問所有數(shù)據(jù) 實時交互式分析 針對即時的分析需求,分析人員通過DWS Express,可實時從大數(shù)據(jù)平臺中獲取信息 彈性伸縮 客戶可使用DWS Express提供的由成百上千節(jié)點組成的加速集群,相比本地托管集群,效率提升數(shù)百倍。 建議搭配使用: 數(shù)據(jù)湖探索 DLI、 MapReduce服務(wù) 、數(shù)據(jù)湖治理中心 DGC
云數(shù)據(jù)倉庫傳統(tǒng)數(shù)倉替換
傳統(tǒng)數(shù)倉替換 傳統(tǒng) 數(shù)據(jù)庫 或數(shù)倉產(chǎn)品面臨數(shù)據(jù)存不下、查不出、擴容難、成本高的痛點。GaussDB(DWS)作為新一代全場景 數(shù)據(jù)倉庫 ,具備極致性能、高擴展、極簡易用、一站式分析等特性,滿足大數(shù)據(jù)時代企業(yè)構(gòu)建新型數(shù)倉的需求。 優(yōu)勢 平滑 遷移 提供配套的遷移工具,可支持Teradata、Oracle/Exadata、Greenplum等數(shù)據(jù)分析系統(tǒng)的平滑遷移 完備的數(shù)據(jù)庫及SQL能力 支持SQL 2003標(biāo)準(zhǔn),兼容Oracle/Teradata的部分語法和數(shù)據(jù)結(jié)構(gòu),支持全局事務(wù)、存儲過程、數(shù)據(jù)強一致性保證 庫倉一體 邏輯集群,支持一套集群容納 數(shù)據(jù)集 市、數(shù)據(jù)倉庫 建議搭配使用: 數(shù)據(jù)接入服務(wù) DIS、 云數(shù)據(jù)遷移 CDM 、數(shù)據(jù)湖治理中心 DGC
湖倉構(gòu)建數(shù)據(jù)湖建設(shè)和持續(xù)運營
場景描述 數(shù)據(jù)湖建設(shè)和持續(xù)運營,是指數(shù)據(jù)湖的初始化建設(shè)及后續(xù)日常的海量元數(shù)據(jù)及權(quán)限管理,因此客戶需要便捷高效的建設(shè)和管理方式。 傳統(tǒng)方式的弊端 · 僅支持通過計算引擎(Hive、Spark等)執(zhí)行SQL實現(xiàn)元數(shù)據(jù)的定義、修改、查詢,對客戶有一定的技能要求,缺少提升易用性的可視化界面。 · 一個完整的授權(quán)活動,需要針對計算引擎、 對象存儲 執(zhí)行兩次授權(quán)操作,對客戶操作帶來不便,易用性差。 服務(wù)優(yōu)勢 · 站式可視化數(shù)據(jù)湖構(gòu)建:提供數(shù)據(jù)湖元數(shù)據(jù)統(tǒng)一定義和授權(quán)的可視化界面,支持客戶便捷操作,快速構(gòu)建。 · 聯(lián)動授權(quán):支持在元數(shù)據(jù)授權(quán)的同時, 自動化 完成元數(shù)據(jù)所映射的文件目錄的授權(quán),使客戶授權(quán)操作更便捷和高效。 · 細(xì)粒度訪問控制:實現(xiàn)針對數(shù)據(jù)湖的庫、表、列級元數(shù)據(jù)的細(xì)粒度訪問控制,為業(yè)務(wù)數(shù)據(jù)的安全性提供有力保障。 建議搭配服務(wù):MapReduce服務(wù)、數(shù)據(jù)湖探索 DLI、云數(shù)據(jù)倉庫 GaussDB、 數(shù)據(jù)治理中心 DataArts Studio、 AI開發(fā)平臺 ModelArts
云數(shù)據(jù)倉庫一站式BI解決方案
一站式BI解決方案 企業(yè)積累的海量數(shù)據(jù)及各種數(shù)據(jù)資產(chǎn),體量龐大,需高性能大數(shù)據(jù)平臺支撐進行全量數(shù)據(jù)分析和挖掘。依托DWS+BI工具打造全局的、直觀的、關(guān)聯(lián)性的、可視化的運營數(shù)字化分析平臺 ,以數(shù)據(jù)分析來驅(qū)動業(yè)務(wù)價值提升及管理提升 優(yōu)勢 多源數(shù)據(jù)接入 多源數(shù)據(jù)采集,打破數(shù)據(jù)孤島,形成統(tǒng)一的數(shù)據(jù)展現(xiàn)平臺 統(tǒng)一分析決策平臺 統(tǒng)一的數(shù)據(jù)決策平臺,多維分析企業(yè)經(jīng)營數(shù)據(jù),有效支撐企業(yè)的經(jīng)營決策; 多場景展現(xiàn) 搭配BI工具多終端數(shù)據(jù)展現(xiàn)PC端/移動端/大屏,滿足業(yè)務(wù)部門各種報表訴求。 建議搭配使用:云 數(shù)據(jù)遷移 CDM、數(shù)據(jù)湖治理中心 DGC、BI/報表軟件
湖倉構(gòu)建功能描述
實例類別 LakeFormation提供了共享、獨享實例類別,滿足不同場景下客戶對性能和成本的不同訴求。 共享型側(cè)重對成本、性價比要求較高的場景,適合中輕載企業(yè)應(yīng)用;獨享型對性能、穩(wěn)定性要求高的場景,適合重載企業(yè)應(yīng)用。 實例管理 LakeFormation提供實例的創(chuàng)建、總覽、刪除等基本功能,幫助您便捷的進行實例管理,加速實現(xiàn)數(shù)據(jù)湖承載的業(yè)務(wù)的規(guī)劃和部署。 元 數(shù)據(jù)管理 LakeFormation提供數(shù)據(jù)湖元數(shù)據(jù)Catalog、Database、Table的創(chuàng)建、修改、刪除、查看等生命周期管理的功能。幫助您便捷的進行數(shù)據(jù)湖初始化構(gòu)建以及持續(xù)運營,集中式的統(tǒng)一管理LakeFormation實例下所有的元數(shù)據(jù),加速實現(xiàn)數(shù)據(jù)湖承載的業(yè)務(wù)的規(guī)劃和部署。 數(shù)據(jù)權(quán)限管理 LakeFormation提供針對Catalog、Database、Table等數(shù)據(jù)資源的授權(quán)、取消、查看等功能。幫助您對數(shù)據(jù)湖實現(xiàn)便捷的統(tǒng)一的數(shù)據(jù)權(quán)限管理。
湖倉構(gòu)建產(chǎn)品優(yōu)勢
生態(tài)開放 遵循開源事實標(biāo)準(zhǔn),支撐存量業(yè)務(wù)平滑演進 —提供兼容Hive/Spark/Flink/Trino社區(qū)的元數(shù)據(jù)接口,支持華為計算引擎和開源引擎的無縫對接 —提供兼容Ranger的權(quán)限接口,一次授權(quán),統(tǒng)一生效 —提供遷移工具,支持存量集群相關(guān)元數(shù)據(jù)的平滑遷移 數(shù)智融合 打通大數(shù)據(jù)和AI的數(shù)據(jù)壁壘,實現(xiàn)真正數(shù)智融合 —支持?jǐn)?shù)據(jù)庫、表、UDF、AI模型、非結(jié)構(gòu)化數(shù)據(jù)集等統(tǒng)一管理 —實現(xiàn)統(tǒng)一的細(xì)粒度數(shù)據(jù)權(quán)限管理,支持跨用戶/跨租戶的數(shù)據(jù)共享 大規(guī)格高可靠 支撐超大規(guī)模大數(shù)據(jù)業(yè)務(wù)的高可靠 —超大規(guī)模元數(shù)據(jù)管理能力 —統(tǒng)一權(quán)限管理能力,突破 IAM 細(xì)粒度權(quán)限瓶頸 —支持多AZ、多實例的容災(zāi)能力 簡單易用 提供基于元數(shù)據(jù)的增值管理能力 —Serverless架構(gòu),開箱即用 —提供數(shù)據(jù)湖管理、元數(shù)據(jù)統(tǒng)計等管理能力