數(shù)據(jù)湖探索 DLI
數(shù)據(jù)湖探索快速入門(mén)
本視頻介紹的是：華為云 數(shù)據(jù)湖探索 DLI操作指導(dǎo): 數(shù)據(jù)湖 探索快速入門(mén)
數(shù)據(jù)湖探索產(chǎn)品介紹
本視頻介紹的是：華為云數(shù)據(jù)湖探索 DLI產(chǎn)品介紹:數(shù)據(jù)湖探索產(chǎn)品介紹
異構(gòu)數(shù)據(jù)整合
異構(gòu)數(shù)據(jù)整合，可以將海量數(shù)據(jù)中的一個(gè)或多個(gè)異構(gòu)的數(shù)據(jù)進(jìn)行整合，進(jìn)行統(tǒng)一的數(shù)據(jù)存儲(chǔ)、挖掘和分析。數(shù)據(jù)統(tǒng)一存儲(chǔ)，是用戶(hù)在自建的 數(shù)據(jù)倉(cāng)庫(kù) 的過(guò)程中，通常是以任務(wù)調(diào)度為主，而數(shù)據(jù)源是之間對(duì)外提供的，是以整體進(jìn)行分析處理的一種方法。例如，一個(gè)保險(xiǎn)公司的保險(xiǎn)公司在銷(xiāo)售查詢(xún)某一筆經(jīng)營(yíng)資金，可以查詢(xún)到每個(gè)月的消費(fèi)明細(xì)。面對(duì)這些數(shù)據(jù)的整合分析，就涉及到消費(fèi)者、供應(yīng)商、商品等信息。本文將對(duì)該場(chǎng)景進(jìn)行了具體的描述。該場(chǎng)景主要描述的是查詢(xún)特定時(shí)間范圍內(nèi)的數(shù)據(jù)，以秒為單位的查詢(xún)時(shí)為度量，可以對(duì)查詢(xún)的時(shí)間、運(yùn)營(yíng)商、商品信息等進(jìn)行過(guò)濾查詢(xún)。DIS的更多信息，請(qǐng)參見(jiàn)《數(shù)據(jù)湖探索用戶(hù)指南》。請(qǐng)務(wù)必確保您的賬戶(hù)下已在數(shù)據(jù)湖探索服務(wù)(DLI)里創(chuàng)建了DLI隊(duì)列。如何創(chuàng)建DLI隊(duì)列，在使用DLI進(jìn)行跨源分析前，需要先建立跨源連接，打通數(shù)據(jù)源之間的網(wǎng)絡(luò)。通過(guò)增強(qiáng)型跨源連接，可對(duì)隊(duì)列進(jìn)行網(wǎng)絡(luò)打通。具體操作請(qǐng)參考《數(shù)據(jù)湖探索用戶(hù)指南》中增強(qiáng)型跨源連接章節(jié)。如何設(shè)置安全組規(guī)則，請(qǐng)參見(jiàn)《 虛擬私有云 用戶(hù)指南》中“安全組”章節(jié)。SQL作業(yè)時(shí)，在作業(yè)編輯界面的“運(yùn)行參數(shù)”處，“Flink版本”需要選擇“1.12”，勾選“保存作業(yè)日志”并設(shè)置保存作業(yè)日志的OBS桶，方便后續(xù)查看作業(yè)日志。