3步快速使用數(shù)據(jù)治理中心
3步快速使用數(shù)據(jù)治理中心
注冊(cè)華為云并實(shí)名認(rèn)證
打開華為云網(wǎng)站,單擊”注冊(cè)“,根據(jù)提示信息完成注冊(cè),注冊(cè)成功后,按指引完成個(gè)人或企業(yè)實(shí)名認(rèn)證。
購買并登錄DataArts Studio
DataArts Studio采用基礎(chǔ)包+增量包的計(jì)費(fèi)模式,其中基礎(chǔ)包即DataArts Studio實(shí)例。
創(chuàng)建并管理工作空間
購買DataArts Studio實(shí)例的用戶,系統(tǒng)將默認(rèn)為其創(chuàng)建一個(gè)默認(rèn)的工作空間“default”,并賦予該用戶管理員角色。您可以使用默認(rèn)的工作空間,也可以創(chuàng)建一個(gè)新的工作空間。
精選教程帶您快速走進(jìn)數(shù)據(jù)世界
精選教程帶您快速走進(jìn)數(shù)據(jù)世界
大數(shù)據(jù)入門與應(yīng)用
通過本課程,系統(tǒng)地學(xué)習(xí)大數(shù)據(jù)知識(shí),了解大數(shù)據(jù)的產(chǎn)生及應(yīng)用等。
數(shù)據(jù)治理中心(DataArts Studio)
本課程介紹數(shù)據(jù)治理中心(DataArts Studio)基本架構(gòu),工作原理,主要功能,產(chǎn)品優(yōu)勢(shì)等。
數(shù)據(jù)中心:全面云化的新一代互聯(lián)網(wǎng)基礎(chǔ)
本課程將會(huì)從“什么是數(shù)據(jù)”開始,為您介紹數(shù)據(jù)和數(shù)據(jù)中心的概念,發(fā)展歷程,以及云數(shù)據(jù)中心的發(fā)展趨勢(shì)。
數(shù)據(jù)指標(biāo)與數(shù)據(jù)服務(wù)設(shè)計(jì)
通過本課程的學(xué)習(xí),您能夠初步具有一個(gè)典型企業(yè)數(shù)據(jù)指標(biāo)和數(shù)據(jù)服務(wù)方案設(shè)計(jì)能力。
最佳實(shí)踐
最佳實(shí)踐
通過數(shù)據(jù)質(zhì)量對(duì)比數(shù)據(jù)遷移前后結(jié)果
數(shù)據(jù)對(duì)賬對(duì)數(shù)據(jù)遷移流程中的數(shù)據(jù)一致性至關(guān)重要,數(shù)據(jù)對(duì)賬的能力是檢驗(yàn)數(shù)據(jù)遷移或數(shù)據(jù)加工前后是否一致的關(guān)鍵指標(biāo)。
通過數(shù)據(jù)開發(fā)實(shí)現(xiàn)數(shù)據(jù)增量遷移
DataArts Studio服務(wù)的DLF組件提供了一站式的大數(shù)據(jù)協(xié)同開發(fā)平臺(tái),借助DLF的在線腳本編輯、周期調(diào)度CDM的遷移作業(yè),也可以實(shí)現(xiàn)增量數(shù)據(jù)遷移。
通過數(shù)據(jù)開發(fā)使用參數(shù)傳遞靈活調(diào)度CDM作業(yè)
當(dāng)CDM作業(yè)接收來自數(shù)據(jù)開發(fā)作業(yè)配置的參數(shù)時(shí),則在數(shù)據(jù)開發(fā)模塊可以使用諸如EL表達(dá)式傳遞動(dòng)態(tài)參數(shù)來調(diào)度CDM作業(yè)。
如何查看表行數(shù)和庫大小
在數(shù)據(jù)治理流程中,我們常常需要統(tǒng)計(jì)數(shù)據(jù)表行數(shù)或數(shù)據(jù)庫的大小。其中,數(shù)據(jù)表的行數(shù)可以通過SQL命令或數(shù)據(jù)質(zhì)量作業(yè)獲?。粩?shù)據(jù)庫大小可以直接在數(shù)據(jù)目錄組件中查看。
跨工作空間的DataArts Studio數(shù)據(jù)搬遷
您可以參考本文檔,將原有工作空間的數(shù)據(jù)(包含管理中心數(shù)據(jù)連接、數(shù)據(jù)集成連接和作業(yè)、數(shù)據(jù)架構(gòu)表、數(shù)據(jù)開發(fā)腳本、數(shù)據(jù)開發(fā)作業(yè)、數(shù)據(jù)質(zhì)量作業(yè)等),搬遷到新建的工作空間中。
通過CDM節(jié)點(diǎn)批量創(chuàng)建分表遷移作業(yè)
業(yè)務(wù)系統(tǒng)中,數(shù)據(jù)源往往會(huì)采用分表的形式,以減少單表大小,支持復(fù)雜的業(yè)務(wù)應(yīng)用場(chǎng)景。在這種情況下,通過CDM進(jìn)行數(shù)據(jù)集成時(shí),需要針對(duì)每張表創(chuàng)建一個(gè)數(shù)據(jù)遷移作業(yè)。