對象存儲大數(shù)據(jù)分析存儲應用場景
場景描述
OBS提供的大數(shù)據(jù)解決方案主要面向海量數(shù)據(jù)存儲分析、歷史數(shù)據(jù)明細查詢、海量行為日志分析和公共事務分析統(tǒng)計等場景,向用戶提供低成本、高性能、不斷業(yè)務、無須擴容的解決方案。
海量數(shù)據(jù)存儲分析的典型場景:PB級的數(shù)據(jù)存儲,批量數(shù)據(jù)分析,毫秒級的數(shù)據(jù)詳單查詢等
歷史數(shù)據(jù)明細查詢的典型場景:流水審計,設備歷史能耗分析,軌跡回放,車輛駕駛行為分析,精細化監(jiān)控等
海量行為日志分析的典型場景:學習習慣分析,運營日志分析,系統(tǒng)操作日志分析查詢等
公共事務分析統(tǒng)計的典型場景:犯罪追蹤,關聯(lián)案件查詢,交通擁堵分析,景點熱度統(tǒng)計等
用戶通過DES等遷移服務將海量數(shù)據(jù)遷移至OBS,再基于華為云提供的MapReduce等大數(shù)據(jù)服務或開源的Hadoop、Spark等運算框架,對存儲在OBS上的海量數(shù)據(jù)進行大數(shù)據(jù)分析,最終將分析的結果呈現(xiàn)在ECS中的各類程序或應用上。
建議搭配服務
MapReduce服務 MRS,彈性云服務器 ECS,數(shù)據(jù)快遞服務 DES
圖1 大數(shù)據(jù)分析

對象存儲數(shù)據(jù)備份歸檔應用場景
場景描述
OBS提供高并發(fā)、高可靠、低時延、低成本的海量存儲系統(tǒng),滿足各種企業(yè)應用、數(shù)據(jù)庫和非結構化數(shù)據(jù)的備份歸檔需求。
企業(yè)數(shù)據(jù)中心的各類數(shù)據(jù)通過使用同步客戶端(如OBS Browser+、obsutil)、主流備份軟件、云存儲網(wǎng)關或數(shù)據(jù)快遞服務DES,備份至華為云對象存儲服務OBS。OBS提供生命周期功能實現(xiàn)對象存儲類別自動轉(zhuǎn)換,以降低存儲成本。在需要時,可將OBS中的數(shù)據(jù)恢復到云上的災備主機或測試主機。
同步客戶端:適用于單數(shù)據(jù)庫/程序場景,手工備份,成本最低
備份軟件:適用于多應用、多主機場景,自動備份,兼容性強
云存儲網(wǎng)關:可無縫嵌入本地已有的備份系統(tǒng)
數(shù)據(jù)快遞:適用于海量數(shù)據(jù)歸檔場景,離線郵寄上云
建議搭配服務
數(shù)據(jù)快遞服務 DES,彈性云服務器 ECS
圖2 備份歸檔

對象存儲支持的大數(shù)據(jù)平臺簡介
場景描述
華為云大數(shù)據(jù)存算分離方案中,OBS支持與多種大數(shù)據(jù)平臺對接,包括華為云MapReduce服務(MRS)、Cloudera CDH和Hortonworks HDP,滿足用戶業(yè)務的靈活訴求。
華為云MapReduce服務(MRS)
華為云MapReduce服務(MRS)是華為云提供的大數(shù)據(jù)服務,可以在華為云上部署和管理Hadoop系統(tǒng),一鍵即可部署Hadoop集群。
MRS提供用戶完全可控的一站式企業(yè)級大數(shù)據(jù)集群云服務,完全兼容開源接口,結合華為云計算、存儲優(yōu)勢及大數(shù)據(jù)行業(yè)經(jīng)驗,為客戶提供高性能、低成本、靈活易用的全棧大數(shù)據(jù)平臺,輕松運行Hadoop、Spark、HBase、Kafka、Storm等大數(shù)據(jù)組件,并具備在后續(xù)根據(jù)業(yè)務需要進行定制開發(fā)的能力,幫助企業(yè)快速構建海量數(shù)據(jù)信息處理系統(tǒng),并通過對海量信息數(shù)據(jù)實時與非實時的分析挖掘,發(fā)現(xiàn)全新價值點和企業(yè)商機。
MRS與OBS對接的具體操作,請參見華為云MRS對接OBS。
Cloudera CDH
CDH是Cloudera基于Apache Hadoop生態(tài)系統(tǒng)構建的大數(shù)據(jù)分析管理平臺發(fā)行版。
Cloudera CDH與OBS對接的具體操作,請參見Cloudera CDH對接OBS。
Hortonworks HDP
HDP是Hortonworks基于Apache Hadoop生態(tài)系統(tǒng)開源組件構建的大數(shù)據(jù)分析管理平臺。
Hortonworks HDP與OBS對接的具體操作,請參見Hortonworks HDP對接OBS