ModelArts AI應(yīng)用來(lái)源
-
收起
自動(dòng)學(xué)習(xí) 收起
使用ModelArts自動(dòng)學(xué)習(xí)開(kāi)發(fā)AI模型無(wú)需編寫(xiě)代碼,您只需上傳數(shù)據(jù)、創(chuàng)建項(xiàng)目、完成數(shù)據(jù)標(biāo)注、發(fā)布訓(xùn)練、然后將訓(xùn)練的模型部署上線。新版自動(dòng)學(xué)習(xí)中,流程由workflow進(jìn)行承載。
-
收起
Workflow 收起
Workflow(也稱(chēng)工作流)本質(zhì)是開(kāi)發(fā)者基于實(shí)際業(yè)務(wù)場(chǎng)景開(kāi)發(fā)用于部署模型或應(yīng)用的流水線工具。在機(jī)器學(xué)習(xí)的場(chǎng)景中,流水線可能會(huì)覆蓋數(shù)據(jù)標(biāo)注、數(shù)據(jù)處理、模型開(kāi)發(fā)/訓(xùn)練、模型評(píng)估、應(yīng)用開(kāi)發(fā)、應(yīng)用評(píng)估等步驟。
-
收起
開(kāi)發(fā)環(huán)境Notebook 收起
ModelArts開(kāi)發(fā)環(huán)境,以云原生的資源使用和開(kāi)發(fā)工具鏈的集成,目標(biāo)為不同類(lèi)型AI開(kāi)發(fā)、探索、教學(xué)用戶,提供更好云化AI開(kāi)發(fā)體驗(yàn)。開(kāi)發(fā)環(huán)境支持一鍵鏡像保存功能。
-
收起
訓(xùn)練作業(yè) 收起
ModelArts提供了模型訓(xùn)練的功能,方便您查看訓(xùn)練情況并不斷調(diào)整您的模型參數(shù)。您還可以基于不同的數(shù)據(jù),選擇不同規(guī)格的資源池用于模型訓(xùn)練。除支持用戶自己開(kāi)發(fā)的模型外,ModelArts還提供了從AI Gallery訂閱算法,您可以不關(guān)注模型開(kāi)發(fā),直接使用AI Gallery的算法,通過(guò)算法參數(shù)的調(diào)整,得到一個(gè)滿意的模型。
-
收起
本地構(gòu)建鏡像 收起
本地開(kāi)發(fā)好模型,構(gòu)建自定義鏡像,最后上傳至容器鏡像服務(wù)SWR,從SWR中導(dǎo)入鏡像創(chuàng)建AI為應(yīng)用。
-
收起
本地準(zhǔn)備模型包 收起
在本地準(zhǔn)備模型包,編寫(xiě)模型配置文件和模型推理代碼,將準(zhǔn)備好的模型包上傳至對(duì)象存儲(chǔ)服務(wù)OBS,從OBS導(dǎo)入模型創(chuàng)建為AI應(yīng)用。
-
收起
AI Gellary訂閱模型 收起
在AI Gallery中,支持訂閱官方發(fā)布或者他人分享的模型,訂閱后的模型,可推送至ModelArts模型管理中,進(jìn)行統(tǒng)一管理。
自動(dòng)學(xué)習(xí)
使用ModelArts自動(dòng)學(xué)習(xí)開(kāi)發(fā)AI模型無(wú)需編寫(xiě)代碼,您只需上傳數(shù)據(jù)、創(chuàng)建項(xiàng)目、完成數(shù)據(jù)標(biāo)注、發(fā)布訓(xùn)練、然后將訓(xùn)練的模型部署上線。將訓(xùn)練的模型部署上線的過(guò)程中,將會(huì)生成一個(gè)AI應(yīng)用,命名規(guī)范為exeMl-{類(lèi)別}_ExeMl_xxx。
命名規(guī)范
Workflow
ModelArts服務(wù)為用戶提供了Workflow工具,區(qū)別于傳統(tǒng)的機(jī)器學(xué)習(xí)模型構(gòu)建,開(kāi)發(fā)者可以使用Workflow開(kāi)發(fā)生產(chǎn)流水線。基于MLOps的概念,Workflow會(huì)提供運(yùn)行記錄、監(jiān)控、持續(xù)運(yùn)行等功能。根據(jù)角色的分工與概念,產(chǎn)品上將工作流的開(kāi)發(fā)和持續(xù)迭代分開(kāi)。
Workflow(也稱(chēng)工作流)本質(zhì)是開(kāi)發(fā)者基于實(shí)際業(yè)務(wù)場(chǎng)景開(kāi)發(fā)用于部署模型或應(yīng)用的流水線工具。在機(jī)器學(xué)習(xí)的場(chǎng)景中,流水線可能會(huì)覆蓋數(shù)據(jù)標(biāo)注、數(shù)據(jù)處理、模型開(kāi)發(fā)/訓(xùn)練、模型評(píng)估、應(yīng)用開(kāi)發(fā)、應(yīng)用評(píng)估等步驟。

開(kāi)發(fā)環(huán)境Notebook
在AI開(kāi)發(fā)階段,ModelArts也致力于提升AI開(kāi)發(fā)體驗(yàn),降低開(kāi)發(fā)門(mén)檻。ModelArts開(kāi)發(fā)環(huán)境,以云原生的資源使用和開(kāi)發(fā)工具鏈的集成,目標(biāo)為不同類(lèi)型AI開(kāi)發(fā)、探索、教學(xué)用戶,提供更好云化AI開(kāi)發(fā)體驗(yàn)。Notebook支持一鍵鏡像保存。保存后的鏡像可以通過(guò)容器鏡像導(dǎo)入模型方式創(chuàng)建AI應(yīng)用。
訓(xùn)練作業(yè)
ModelArts提供了模型訓(xùn)練的功能,方便您查看訓(xùn)練情況并不斷調(diào)整您的模型參數(shù)。您還可以基于不同的數(shù)據(jù),選擇不同規(guī)格的資源池用于模型訓(xùn)練。除支持用戶自己開(kāi)發(fā)的模型外,ModelArts還提供了從AI Gallery訂閱算法,您可以不關(guān)注模型開(kāi)發(fā),直接使用AI Gallery的算法,通過(guò)算法參數(shù)的調(diào)整,得到一個(gè)滿意的模型。
創(chuàng)建AI應(yīng)用時(shí),導(dǎo)入ModelArts訓(xùn)練作業(yè)中訓(xùn)練完成的模型。
本地構(gòu)建鏡像
本地開(kāi)發(fā)好模型,構(gòu)建自定義鏡像,最后上傳至容器鏡像服務(wù)SWR,從SWR中導(dǎo)入鏡像創(chuàng)建AI為應(yīng)用。如何制作自定義鏡像,請(qǐng)參考ModelArts官網(wǎng)文檔從0-1制作自定義鏡像并創(chuàng)建AI應(yīng)用。
針對(duì)您本地開(kāi)發(fā)的模型,在制作AI應(yīng)用的自定義鏡像時(shí),需滿足ModelArts定義的規(guī)范。請(qǐng)參考ModelArts官網(wǎng)文檔創(chuàng)建AI應(yīng)用的自定義鏡像規(guī)范。
本地準(zhǔn)備模型包
ModelArts支持本地準(zhǔn)備模型包,編寫(xiě)模型配置文件和模型推理代碼,將準(zhǔn)備好的模型包上傳至對(duì)象存儲(chǔ)服務(wù)OBS,從OBS導(dǎo)入模型創(chuàng)建為AI應(yīng)用。
制作模型包,則需要符合一定的模型包規(guī)范。模型包里面必需包含“model”文件夾,“model”文件夾下面放置模型文件,模型配置文件,模型推理代碼文件。
模型包結(jié)構(gòu)示例(以TensorFlow模型包結(jié)構(gòu)為例)
發(fā)布該模型時(shí)只需要指定到“ocr”目錄。
在AI Gellary中訂閱模型
在AI Gallery中,支持訂閱官方發(fā)布或者他人分享的模型,訂閱后的模型,可推送至ModelArts模型管理中,進(jìn)行統(tǒng)一管理。