華為云計(jì)算 云知識(shí) 數(shù)據(jù)倉庫DWS應(yīng)用案例 數(shù)據(jù)處理耗時(shí)從天級(jí)縮短至小時(shí)級(jí)
數(shù)據(jù)倉庫DWS應(yīng)用案例 數(shù)據(jù)處理耗時(shí)從天級(jí)縮短至小時(shí)級(jí)

數(shù)據(jù)倉庫 服務(wù)(Data Warehouse Service,簡稱DWS)是一種即開即用、安全可靠的在線數(shù)據(jù)倉庫服務(wù),為用戶提供海量數(shù)據(jù)的存儲(chǔ)、挖掘和分析能力。

數(shù)據(jù)倉庫DWS應(yīng)用案例 數(shù)據(jù)處理耗時(shí)從天級(jí)縮短至小時(shí)級(jí)

客戶痛點(diǎn)

【數(shù)據(jù)處理耗時(shí)】:使用開源Hadoop處理數(shù)據(jù)耗時(shí)長,每次處理耗時(shí)1天;

【不支持關(guān)聯(lián)分析】:ES不能支持關(guān)聯(lián)等復(fù)雜查詢分析;

【數(shù)據(jù)更新難】:數(shù)據(jù)使用寬表存儲(chǔ),維度數(shù)據(jù)變化需要更新整個(gè)寬表,工作量大。

華為云方案

ES+DWS 大數(shù)據(jù) 分析平臺(tái);

利用DWS進(jìn)行數(shù)據(jù)清洗加工,支持?jǐn)?shù)據(jù)更新;

利用DWS的標(biāo)準(zhǔn)SQL實(shí)現(xiàn)數(shù)據(jù)復(fù)雜關(guān)聯(lián)查詢。

客戶價(jià)值

數(shù)據(jù)處理耗時(shí)從1天降至3個(gè)小時(shí);

開發(fā)人員基于SQL語言可快速開發(fā)分析應(yīng)用,同時(shí)將可分析維度從2-3個(gè)擴(kuò)展為5-10個(gè),擴(kuò)充業(yè)務(wù)范圍;

在DWS中維護(hù)維度數(shù)據(jù),再更新ES中數(shù)據(jù),降低了數(shù)據(jù)更新的工作量。