華為云計(jì)算 云知識(shí) 數(shù)據(jù)湖探索與其他云服務(wù)的關(guān)系
數(shù)據(jù)湖探索與其他云服務(wù)的關(guān)系

對(duì)象存儲(chǔ)服務(wù) 的關(guān)系

對(duì)象存儲(chǔ) 服務(wù)( Object Storage Service ,簡(jiǎn)稱OBS)作為DLI的數(shù)據(jù)來源及數(shù)據(jù)存儲(chǔ),與DLI配合一起使用,關(guān)系有如下四種。

數(shù)據(jù)來源:DLI服務(wù)提供API,支持將OBS對(duì)應(yīng)路徑的數(shù)據(jù)導(dǎo)入到DLI。

存儲(chǔ)數(shù)據(jù):DLI中支持創(chuàng)建OBS表,該類型表在DLI服務(wù)中只有元數(shù)據(jù),實(shí)際數(shù)據(jù)在該表對(duì)應(yīng)的OBS路徑中。

備份數(shù)據(jù):DLI提供導(dǎo)出API,支持將DLI的數(shù)據(jù)導(dǎo)出到OBS中備份。

存儲(chǔ)查詢結(jié)果:DLI提供API供用戶將日常作業(yè)的查詢結(jié)果數(shù)據(jù)保存到OBS。

統(tǒng)一身份認(rèn)證 服務(wù)的關(guān)系

統(tǒng)一身份認(rèn)證服務(wù)(Identity and Access Management,簡(jiǎn)稱 IAM )為DLI提供了華為云統(tǒng)一入口鑒權(quán)功能。

云審計(jì) 服務(wù)的關(guān)系

云審計(jì)服務(wù)(Cloud Trace Service,簡(jiǎn)稱 CTS )為DLI提供對(duì)應(yīng)用戶的操作審計(jì)。

云監(jiān)控服務(wù) 的關(guān)系

云監(jiān)控 (Cloud Eye)為DLI提供監(jiān)控?cái)?shù)據(jù),監(jiān)控作業(yè)中的多項(xiàng)指標(biāo),從而集中高效地呈現(xiàn)狀態(tài)信息。

消息通知 服務(wù)的關(guān)系

消息通知服務(wù)(Simple Message Notification)可以在DLI發(fā)生作業(yè)運(yùn)行異常時(shí)給用戶發(fā)送通知。

云數(shù)據(jù)遷移 服務(wù)的關(guān)系

數(shù)據(jù)遷移 服務(wù)(Cloud Data Migration,簡(jiǎn)稱 CDM )可以將OBS的數(shù)據(jù) 遷移 到DLI中。

數(shù)據(jù)接入服務(wù) 的關(guān)系

數(shù)據(jù)接入服務(wù)(Data Ingestion Service,簡(jiǎn)稱DIS)通過通道將數(shù)據(jù)導(dǎo)入到DLI。

表格存儲(chǔ)服務(wù) 的關(guān)系

表格存儲(chǔ) 服務(wù)(CloudTable Service)作為DLI的數(shù)據(jù)來源及數(shù)據(jù)存儲(chǔ),與DLI配合一起使用,關(guān)系有如下兩種。

數(shù)據(jù)來源:DLI服務(wù)提供DataFrame和SQL方式從CloudTable中導(dǎo)入數(shù)據(jù)到DLI。

存儲(chǔ)查詢結(jié)果:DLI使用標(biāo)準(zhǔn)SQL的Insert語法將日常作業(yè)的查詢結(jié)果數(shù)據(jù)存放到CloudTable表中。

與關(guān)系型 數(shù)據(jù)庫 服務(wù)的關(guān)系

關(guān)系型數(shù)據(jù)庫(Relational Database Service,簡(jiǎn)稱RDS)作為DLI的數(shù)據(jù)來源及數(shù)據(jù)存儲(chǔ),與DLI配合一起使用,關(guān)系有如下兩種。

數(shù)據(jù)來源:DLI服務(wù)提供DataFrame和SQL方式從RDS中導(dǎo)入數(shù)據(jù)到DLI。

存儲(chǔ)查詢結(jié)果:DLI使用標(biāo)準(zhǔn)SQL的Insert語法將日常作業(yè)的查詢結(jié)果數(shù)據(jù)存放到RDS表中。

數(shù)據(jù)倉庫 服務(wù)的關(guān)系

數(shù)據(jù)倉庫服務(wù)(Data Warehouse Service,簡(jiǎn)稱DWS)作為DLI的數(shù)據(jù)來源及數(shù)據(jù)存儲(chǔ),與DLI配合一起使用,關(guān)系有如下兩種。

數(shù)據(jù)來源:DLI服務(wù)提供DataFrame和SQL方式從DWS中導(dǎo)入數(shù)據(jù)到DLI。

存儲(chǔ)查詢結(jié)果:DLI使用標(biāo)準(zhǔn)SQL的Insert語法將日常作業(yè)的查詢結(jié)果數(shù)據(jù)存放到DWS表中。

云搜索服務(wù) 的關(guān)系

云搜索 服務(wù)(Cloud Search Service,簡(jiǎn)稱CSS)作為DLI的數(shù)據(jù)來源及數(shù)據(jù)存儲(chǔ),與DLI配合一起使用,關(guān)系有如下兩種。

數(shù)據(jù)來源:DLI服務(wù)提供DataFrame和SQL方式從CSS中導(dǎo)入數(shù)據(jù)到DLI。

存儲(chǔ)查詢結(jié)果:DLI使用標(biāo)準(zhǔn)SQL的Insert語法將日常作業(yè)的查詢結(jié)果數(shù)據(jù)存放到CSS表中。

與分布式緩存服務(wù)的關(guān)系

分布式緩存服務(wù)(Distributed Cache Service)作為DLI的數(shù)據(jù)來源及數(shù)據(jù)存儲(chǔ),與DLI配合一起使用,關(guān)系有如下兩種。

數(shù)據(jù)來源:DLI服務(wù)提供DataFrame和SQL方式從DCS中導(dǎo)入數(shù)據(jù)到DLI。

存儲(chǔ)查詢結(jié)果:DLI使用標(biāo)準(zhǔn)SQL的Insert語法將日常作業(yè)的查詢結(jié)果數(shù)據(jù)存放到DCS表中。

文檔數(shù)據(jù)庫服務(wù) 的關(guān)系

文檔數(shù)據(jù)庫 服務(wù)(Document Database Service)作為DLI的數(shù)據(jù)來源及數(shù)據(jù)存儲(chǔ),與DLI配合一起使用,關(guān)系有如下兩種。

數(shù)據(jù)來源:DLI服務(wù)提供DataFrame和SQL方式從DCS中導(dǎo)入數(shù)據(jù)到DLI。

存儲(chǔ)查詢結(jié)果:DLI使用標(biāo)準(zhǔn)SQL的Insert語法將日常作業(yè)的查詢結(jié)果數(shù)據(jù)存放到DCS表中。