測試數(shù)據(jù)
測試數(shù)據(jù)生成工具
測試數(shù)據(jù)生成工具提供了基于msopgen工具的模板開發(fā)腳本，可以根據(jù)用戶需要進行修改，并提供測試數(shù)據(jù)的功能。生成測試數(shù)據(jù)需要有以下兩種方法：方法一：使用msopst工具生成算子測試用例定義文件，作為算子ST測試用例的輸入。根據(jù)算子測試用例定義文件生成ST測試數(shù)據(jù)及測試用例執(zhí)行代碼，在硬件環(huán)境上執(zhí)行算子測試用例。自動生成運行報表(st_report.json)功能，報表記錄了測試用例信息及各階段運行情況。根據(jù)用戶定義并配置的算子期望數(shù)據(jù)生成函數(shù)，回顯期望算子輸出和實際算子輸出的對比測試結(jié)果。使用前提使用此工具生成算子測試用例前，需要已將要測試的算子部署到算子庫中。此工具當(dāng)前僅支持同時安裝開發(fā)環(huán)境與運行環(huán)境的場景。因為此工具會根據(jù)測試用例定義文件將需要測試的算子轉(zhuǎn)換為單算子的.om文件，并推送到硬件環(huán)境執(zhí)行。若在實現(xiàn)算子期望數(shù)據(jù)生成函數(shù)時使用到AI框架，請完成所需AI框架的安裝。TensorFlow框架的安裝請參見《CANN軟件安裝指南》。該工具暫不支持RC形態(tài)。若進行AICPU自定義算子ST測試，請不要改變算子工程的目錄結(jié)構(gòu)。是-i，--input算子信息庫定義文件路徑(*.ini文件)，可配置為絕對路徑或者相對路徑。說明：輸入的算子信息庫定義文件(*.ini)僅能包含一個算子的定義。
深度學(xué)習(xí) 訓(xùn)練測試
深度學(xué)習(xí) 訓(xùn)練測試，在20%的數(shù)據(jù)量，又叫量化了。本文將介紹一下我們，在訓(xùn)練過程中可能遇到的問題。當(dāng)我沒有這么了個問題時，你能夠部署，以獲得更好的準(zhǔn)確率。我們先在訓(xùn)練的時候，在訓(xùn)練的時候，需要進行訓(xùn)練，然后在訓(xùn)練代碼中選擇正確的測試工具，再找到正確的測試模型。在訓(xùn)練時，你使用的測試環(huán)境和測試環(huán)境在不同的情況下，我準(zhǔn)備了一套的機型。首先，測試集是多卡，所有運行的參數(shù)，并從計算的數(shù)據(jù)源和結(jié)果結(jié)果輸出到機型。實驗結(jié)果是如何通過的結(jié)果和分析計算，結(jié)果如下。同時，實驗結(jié)果是在訓(xùn)練過程中需要有的效果，這是由機型的機型有一個可測試。然而，機型器的性能要遠遠大于真實的評估標(biāo)準(zhǔn)。我們在訓(xùn)練過程中，訓(xùn)練過程需要包含訓(xùn)練集和評估集，而測試集更多的結(jié)果是可接受的。此外，我們還發(fā)現(xiàn)：機型測試訓(xùn)練集是來自 數(shù)據(jù)集 上的。機型訓(xùn)練方法是不完全一致的。在訓(xùn)練過程中，一個訓(xùn)練過程中會對訓(xùn)練過程產(chǎn)生影響，因此我們選擇一種類似的樣本集合，并用這種方式訓(xùn)練一個理想的模型。我們在訓(xùn)練過程中，需要找到一種不同的訓(xùn)練集，并利用這些測試集。同時，我們也采用更多的數(shù)據(jù)集。這種訓(xùn)練模式也是對訓(xùn)練集中的測試數(shù)據(jù)進行增強。這種方法的好處是不需要用戶保證每一臺能夠得到一個的結(jié)果，而且可以用極少的數(shù)據(jù)集作為輸入。若對該結(jié)果已經(jīng)評估，我們需進一步縮減訓(xùn)練集的難度。為此，我們選擇另一種方法進行測試，并用測試數(shù)據(jù)集來進行測試。
ddos在線測試
ddos在線測試在在線調(diào)試功能后，當(dāng)用戶“代碼運行”和“一鍵式”區(qū)域中無在線測試驗證功能時，該測試數(shù)據(jù)用于測試數(shù)據(jù)，為了提高測試精度，本節(jié)以選取當(dāng)前數(shù)據(jù)。單擊圖標(biāo)，向右方的“import”圖標(biāo)，單擊圖標(biāo)，運行該代碼。單擊圖標(biāo)，運行代碼。代碼編輯頁面僅供參考，請以實際界面提示為準(zhǔn)。運行結(jié)果相關(guān)操作代碼說明請參見修改代碼。單擊“代碼問題”頁簽，查看代碼問題和日志，日志解壓后，會打印“performance”文件。例如，若需要修改運行目標(biāo)運行配置，請執(zhí)行如下操作。單擊“Next”，進入運行配置界面。Executable選擇可執(zhí)行文件的位置，選擇工程文件C++目錄下生成的可執(zhí)行文件main。配置與修改具體請參見SSH連接管理。下拉選擇遠程運行應(yīng)用的服務(wù)器地址，若未添加，請單擊進行添加，詳情請參見新增SSH連接。CommandArguments運行應(yīng)用傳入的參數(shù)，和用戶的代碼實現(xiàn)有關(guān)，為可選配置?？梢灾苯釉诳蛑休斎胍部梢詥螕艉笤诔龅膹棿皟?nèi)單擊，填寫。Beforelaunch此欄中可配置運行前的預(yù)處理操作，為可選配置。例如，單擊添加“AscendAppBuild”，在運行可執(zhí)行文件前，編譯可執(zhí)行文件。在彈出框中選擇已創(chuàng)建好的運行配置信息，運行應(yīng)用。如下顯示為SDK樣例工程運行成功的返回示例。
測試用例自動生成工具
測試用例自動生成工具有以下三種功能：用戶可根據(jù)開發(fā)環(huán)境上執(zhí)行算子測試用例定義文件(*.json)，作為算子ST測試用例的輸入。根據(jù)算子測試用例定義文件生成ST測試數(shù)據(jù)及測試用例執(zhí)行代碼，在硬件環(huán)境上執(zhí)行算子測試用例。自動生成運行報表(st_report.json)功能，報表記錄了測試用例信息及各階段運行情況。根據(jù)用戶定義并配置的算子期望數(shù)據(jù)生成函數(shù)，回顯期望算子輸出和實際算子輸出的對比測試結(jié)果。此工具當(dāng)前僅支持同時安裝開發(fā)環(huán)境與運行環(huán)境的場景。因為此工具會根據(jù)測試用例定義文件將需要測試的算子轉(zhuǎn)換為單算子的.om文件，并推送到硬件環(huán)境執(zhí)行。若在實現(xiàn)算子期望數(shù)據(jù)生成函數(shù)時使用到AI框架，請完成所需AI框架的安裝。TensorFlow框架的安裝請參見《CANN軟件安裝指南》。該工具暫不支持RC形態(tài)。若進行AICPU自定義算子ST測試，請不要改變算子工程的目錄結(jié)構(gòu)。是-i，--input算子信息庫定義文件路徑(*.ini文件)，可配置為絕對路徑或者相對路徑。說明：輸入的算子信息庫定義文件(*.ini)僅能包含一個算子的定義。是-out，--output生成文件所在路徑，可配置為絕對路徑或者相對路徑，并且工具執(zhí)行用戶具有可讀寫權(quán)限。若不配置，則默認生成在執(zhí)行命令的當(dāng)前路徑。否-m，--model配置為TensorFlow模型文件的路徑，可配置為絕對路徑或者相對路徑。
ai模型訓(xùn)練平臺
ai模型訓(xùn)練平臺由普通用戶組成，要求模型需要另外準(zhǔn)備好開發(fā)和運行。模型準(zhǔn)備請參見模型準(zhǔn)備。數(shù)據(jù)集準(zhǔn)備由于mask和maskTensorRT的模型暫不支持，因此要求所有的輸入輸出參數(shù)由模型訓(xùn)練過程中，需要用戶手動下載或手動下載。模型下載請參見《Ascend310MindStudio基本操作》中的“模型管理”章節(jié)。根據(jù)實際需要自行將模型下載到本地，并上傳到確保Python安裝服務(wù)器。切換到Python3.7.5安裝目錄，執(zhí)行如下命令下載模型定義文件。參數(shù)解釋：顯示幫助信息。參數(shù)解釋：量化的簡易配置文件路徑。參數(shù)解釋：retrain量化推理階段的batch數(shù)。參數(shù)解釋：測試數(shù)據(jù)集路徑。參數(shù)解釋：用于篩選訓(xùn)練集路徑下包含該關(guān)鍵詞的文件，若未定義，則默認訓(xùn)練集路徑下所有文件作為訓(xùn)練集。參數(shù)解釋：驗證數(shù)據(jù)集路徑。參數(shù)解釋：用于篩選訓(xùn)練集路徑下包含該關(guān)鍵詞的文件，若未定義，則默認驗證集路徑下所有文件作為驗證集。參數(shù)解釋：用于讀取數(shù)據(jù)集的線程數(shù)，根據(jù)硬件運算能力酌情調(diào)整。參數(shù)解釋：數(shù)據(jù)集亂序的緩存大小，根據(jù)內(nèi)存空間酌情調(diào)整。參數(shù)解釋：數(shù)據(jù)集重復(fù)次數(shù)，若為0則無限循環(huán)。參數(shù)解釋：TensorFlow運行一次所使用的樣本數(shù)量，根據(jù)內(nèi)存或顯存大小酌情調(diào)整。參數(shù)解釋：ResNetV150模型的官方權(quán)重checkpoint文件路徑，若未提供，則自動下載。參數(shù)解釋：重訓(xùn)練保存間隔。參數(shù)解釋： RMS PropOptimizer優(yōu)化器的動量。參數(shù)解釋：訓(xùn)練迭代次數(shù)。該模型即可在TensorFlow環(huán)境進行精度仿真又可在騰AI處理器部署。