4步快速使用MapReduce服務(wù)
4步快速使用MapReduce服務(wù)
上傳數(shù)據(jù)
如果您沒有購買集群,請(qǐng)上傳程序和數(shù)據(jù)到對(duì)象存儲(chǔ)服務(wù)(OBS)中;如果您已經(jīng)購買了集群,請(qǐng)上傳程序和數(shù)據(jù)到HDFS。
購買集群
進(jìn)入MapReduce管理控制臺(tái),單擊“購買集群”并配置相關(guān)參數(shù)。用戶可以指定集群類型用于離線數(shù)據(jù)分析和流處理任務(wù),指定集群中預(yù)置的彈性云服務(wù)器實(shí)例規(guī)格、實(shí)例數(shù)量、數(shù)據(jù)盤類型、要安裝的組件。
提交作業(yè)
您可以通過MRS控制臺(tái)界面提交作業(yè),也可以通過MRS集群節(jié)點(diǎn)使用命令提交作業(yè)。
查看作業(yè)執(zhí)行結(jié)果
可在每個(gè)集群的“作業(yè)管理”頁簽查看作業(yè)運(yùn)行記錄和查詢結(jié)果或者下載分析結(jié)果。也可以將結(jié)果轉(zhuǎn)儲(chǔ)到用戶OBS上,轉(zhuǎn)儲(chǔ)成功后,使用OBS工具下載文件,查看結(jié)果。
沙箱實(shí)驗(yàn)室
沙箱實(shí)驗(yàn)室
MRS基礎(chǔ)入門實(shí)踐
該實(shí)驗(yàn)旨在指導(dǎo)用戶短時(shí)間內(nèi)熟悉并利用云原生數(shù)據(jù)湖MapReduce服務(wù)提供租戶完全可控的企業(yè)級(jí)大數(shù)據(jù)集群云服務(wù)。
基于Spark實(shí)現(xiàn)車主駕駛行為分析
通過MRS服務(wù)Spark組件分析統(tǒng)計(jì)指定時(shí)間內(nèi),車主急加速、急剎車、空擋滑行、超速等違法行為的次數(shù)。
MRS基礎(chǔ)組件之 HDFS與MapReduce開發(fā)與應(yīng)用
本實(shí)驗(yàn)基于MRS環(huán)境,通過介紹如何利用HDFS和MapReduce的常用JAVA API來進(jìn)行相關(guān)操作。