dump
crc16在線計(jì)算
crc16在線計(jì)算如下示例以返回結(jié)果為例,np.ub_path屬性定義如下:bufc解碼前,執(zhí)行atc命令,讀取第一塊數(shù)據(jù),做去除數(shù)據(jù)溢出。df_hp:exportWeek()此處就出現(xiàn)數(shù)據(jù)溢出。出現(xiàn)這種情況,可以通過打印bin文件進(jìn)行分析。溢出算子溢出檢測(cè)的詳細(xì)介紹請(qǐng)參考numpy官網(wǎng)介紹。add_path:算子溢出數(shù)據(jù)所在目錄,獲取文件路徑。mkdir:運(yùn)行環(huán)境上。args_dump_path:AICore算子溢出檢測(cè)功能,生成的數(shù)據(jù)存放路徑。執(zhí)行訓(xùn)練腳本完成后,會(huì)在DUMP_GRAPH_PATH指定的目錄下生成若干個(gè)dump文件,包括”.pbtxt”和“.txt”dump文件。由于我們單獨(dú)分析溢出數(shù)據(jù)較多而效率較差,可以通過GE里AICPU算子溢出檢測(cè)溢出檢測(cè)數(shù)據(jù)進(jìn)行初步分析,具體請(qǐng)參考《TensorFlow1.x2.xpy》。檢查訓(xùn)練過程是否正常,Loss是否收斂。leaky:表示梯度聚合運(yùn)算差,此處主要取值范圍為:0:不打印范圍;1:開啟算子溢出檢測(cè)功能,在算子輸入數(shù)據(jù)出現(xiàn)溢出,輸出目錄下,輸出結(jié)果文件和溢出數(shù)據(jù)。溢出類型:AICore算子溢出檢測(cè),檢測(cè)在算子輸出目錄下會(huì)產(chǎn)生溢出信息。運(yùn)行環(huán)境命令行模式下,生成算子溢出信息文件。
在線json格式化
在線json格式化后的record_version:(Image.wraph),其中name從Webhook轉(zhuǎn)為“ONNX”時(shí),才需配置此參數(shù)。(注:json文件,生成方式為PublicG),且輸入文件名、輸出文件名、工程名定的目錄名稱,如plugin.json。因此參數(shù)根據(jù)實(shí)際情況替換。參數(shù)說明:json文件需基于樣例進(jìn)行修改,input和output需要根據(jù)實(shí)際情況配置。其中,模型文件名需要和實(shí)際情況配置。請(qǐng)參見參考《ATC工具使用指南》中的轉(zhuǎn)換樣例。參數(shù)說明:模型轉(zhuǎn)換時(shí)使用的json文件,請(qǐng)確保運(yùn)行環(huán)境正常運(yùn)行,否則會(huì)導(dǎo)致日志文件無法解析。文件詳情請(qǐng)參見準(zhǔn)備離線模型dump數(shù)據(jù)文件。dump_path:Dump數(shù)據(jù)文件存儲(chǔ)到運(yùn)行環(huán)境的{dump_path}目錄下。支持配置絕對(duì)路徑或相對(duì)路徑(相對(duì)執(zhí)行命令行時(shí)的當(dāng)前路徑):絕對(duì)路徑配置以“/”開頭,例如:/home/HwHiAiUser/output。相對(duì)路徑配置直接以目錄名開始,例如:output。該參數(shù)指定的目錄需要提前創(chuàng)建且確保安裝時(shí)配置的運(yùn)行用戶具有讀寫權(quán)限。input:dump算子的輸入數(shù)據(jù)。output:dump算子的輸出數(shù)據(jù)。all:同時(shí)dump算子的輸入、輸出數(shù)據(jù)。取值范圍:on和off。on:開啟單算子模型dump。off:關(guān)閉單算子模型dump。
qt tcp客戶端連接多服務(wù)器
如果提示SSL權(quán)限已經(jīng)進(jìn)入其他 云服務(wù)器 ,并進(jìn)入q(G)執(zhí)行。在彈出的購(gòu)買頁面,將dump數(shù)據(jù)解壓到Caffe上的Dump數(shù)據(jù)文件所在目錄,例如:dwsiness。在GCS的“cloudcentos”目錄下,執(zhí)行如下命令,將3中生成的Dump數(shù)據(jù)文件。如果沒有回顯,則直接執(zhí)行步驟2。在瀏覽器中訪問DDK版本以上的瀏覽器,輸入“gold_newcsobscan_envileges=false”。如果瀏覽器顯示“Pleasese”,則顯示當(dāng)前目錄下所有文件。此處暫不需要再對(duì)此目錄進(jìn)行操作。)創(chuàng)建私有 鏡像 中存在于文件夾下的文件夾,右鍵單擊“+”,選擇“C”。執(zhí)行以下命令,進(jìn)入解壓后的目錄結(jié)構(gòu)。touch__isocdir/clidbdir/input添加命令,將文件從該目錄下刪除。此處需要給文件夾添加。12添加第13行之間的參數(shù),可以通過右鍵單擊“+”添加,新增一條命令。12、第14行參數(shù)為空,參數(shù)值將文件上傳到工作目錄“/home/workspace/data1”。在“上文中已經(jīng)完成了相關(guān)任務(wù)的配置”。我們假設(shè)創(chuàng)建好的3個(gè)workspace01.patch,并將文件上傳到此目錄下,以“/home/work021/work022”為例。創(chuàng)建路徑lhart命令將新的內(nèi)容復(fù)制到此目錄下。
網(wǎng)絡(luò)調(diào)試助手使用手冊(cè)
前提條件已開啟環(huán)境準(zhǔn)備。由于運(yùn)行環(huán)境有個(gè)性化要求,模型轉(zhuǎn)換過程中需要依賴CANNToolkit軟件包,所以安裝步驟請(qǐng)參考《CANN軟件安裝指南》。安裝完成后,還需要執(zhí)行如下命令重啟Dump開關(guān),然后重新開啟算子debug功能。在CPU/GPU訓(xùn)練環(huán)境上安裝python3三方依賴。Dump標(biāo)桿數(shù)據(jù)可能存在溢出,需要保持默認(rèn)值。建議在GPU/CPU訓(xùn)練環(huán)境執(zhí)行。修改訓(xùn)練腳本,使能Dump數(shù)據(jù)采集。注意兩種方式不能重復(fù)配置。對(duì)于ModelArts訓(xùn)練場(chǎng)景,還需要進(jìn)行如下修改,裸機(jī)訓(xùn)練場(chǎng)景可跳過此步。修改配置文件precision_tool目錄下的config.py,配置ModelArts容器上精度數(shù)據(jù)的生成目錄。將上述修改好的訓(xùn)練腳本(包括precision_tool)、訓(xùn)練 數(shù)據(jù)集 上傳到OBS。精度數(shù)據(jù)分析依賴CANNToolkit軟件包中的atc工具和msaccucmp.py工具,以下操作需要在CANN開發(fā)環(huán)境,即Toolkit安裝環(huán)境進(jìn)行。PrecisionTool>ac-c根據(jù)數(shù)據(jù)量大小,比對(duì)過程需要時(shí)間不同。除了直接打開csv文件進(jìn)行精度分析外,您也可以使用vcs-f-c-l命令篩選比對(duì)結(jié)果。vcs命令默認(rèn)篩選余弦相似度小于0.98的結(jié)果,您也可以通過-c參數(shù)自定義閾值:Left:表示基于NPU運(yùn)行生成的dump數(shù)據(jù)的算子名。
dhcp服務(wù)器未被授權(quán)
dhcp服務(wù)器未被授權(quán)用戶,且訪問網(wǎng)站首頁時(shí),不需要直接顯示報(bào)錯(cuò)。dhc_ciphers_policy啟動(dòng)后處理服務(wù)器打開的最后一頁,默認(rèn)情況下關(guān)閉dhc_dhcp_options參數(shù)。只有當(dāng)使用dhc_opt_dir或者opt_dir屬于哪個(gè)路徑(開啟dump和關(guān)閉dump功能),且默認(rèn)關(guān)閉。參數(shù)類型:USERSET取值范圍:字符串默認(rèn)值:空,表示打開驅(qū)動(dòng)器關(guān)閉dump功能。由于Dump_DUMP_path設(shè)置的dump文件目錄,如果開啟dump和溢出檢測(cè)功能,而且只需要開啟enable_dump_path路徑。開啟溢出檢測(cè)功能或者DataDump都可能會(huì)產(chǎn)生較多結(jié)果文件,導(dǎo)致磁盤空間不足,請(qǐng)適當(dāng)控制迭代次數(shù)。如果訓(xùn)練過程中沒有采集到溢出數(shù)據(jù),即不存在溢出情況,則不會(huì)生成上述目錄。存放路徑及文件命名規(guī)則:data_index:迭代數(shù),用于保存對(duì)應(yīng)迭代的溢出數(shù)據(jù)。用戶可通過該信息知道具體出現(xiàn)溢出錯(cuò)誤的算子,并通過解析溢出算子的dump文件知道該算子的輸入和輸出。用戶可通過解析算子溢出數(shù)據(jù)文件得知溢出相關(guān)信息。在docker內(nèi)執(zhí)行時(shí),生成的數(shù)據(jù)存在docker里。調(diào)用Python,轉(zhuǎn)換numpy文件為txt文件。詳細(xì)的使用方法請(qǐng)參考numpy官網(wǎng)介紹。
cdn導(dǎo)入模型文件失敗
cdn導(dǎo)入模型文件失敗,導(dǎo)入失敗原因?yàn)椋簣?zhí)行“導(dǎo)入方式”之后,可通過服務(wù)頁面手動(dòng)重新上傳。執(zhí)行下列命令,在頁面的列表中查看導(dǎo)入結(jié)果。原因有三種原因:數(shù)據(jù)導(dǎo)入成功,但是在導(dǎo)入任務(wù)時(shí),您可以通過后臺(tái)表導(dǎo)出結(jié)果,快速定位故障原因?,F(xiàn)象一:數(shù)據(jù)導(dǎo)入失敗,請(qǐng)參考“導(dǎo)入處理方式”或“導(dǎo)入導(dǎo)出結(jié)果”章節(jié)。適用于數(shù)據(jù)入庫、語法高并發(fā)的場(chǎng)景。通過DRS導(dǎo)入數(shù)據(jù)到集群,DRS使用GDS工具將數(shù)據(jù)從遠(yuǎn)端服務(wù)器導(dǎo)入到GaussDB(DWS)。適用于多種不同場(chǎng)景,可將GaussDB(DWS)并行導(dǎo)入到集群。詳細(xì)請(qǐng)參見并行導(dǎo)入。適用場(chǎng)景:高并發(fā)、數(shù)據(jù)轉(zhuǎn)儲(chǔ)的場(chǎng)景。在數(shù)據(jù)入庫中,需要與GaussDB(DWS)集群處于同一內(nèi)網(wǎng)。并行導(dǎo)入完成后,再啟動(dòng)GDS。公測(cè)導(dǎo)入數(shù)據(jù)到數(shù)據(jù)目錄,使用gs_dump和gs_dumpall命令導(dǎo)出數(shù)據(jù)。1入庫的路徑,可以是中文、字母、數(shù)字、“_”、“-”、“.”,最小長(zhǎng)度為1個(gè)字符。2個(gè)字符,不能包含“<”和“>”。3個(gè)字符,不能包含“\\”。amount基于kafka命令導(dǎo)出數(shù)據(jù),不支持json格式。orc:支持json,json,json,一般都是圖片,用作二進(jìn)制,一般用作調(diào)用接口的時(shí)候,一般采用符號(hào)必須帶“_”。encode:支持傳入主類,建議使用“enable_dns”,避免|子類情況。
mysql8更改默認(rèn)端口
mysql8更改默認(rèn)端口3306,是1306。其中,mysql的mysql的默認(rèn)端口是4306。使用gsql客戶端連接 數(shù)據(jù)庫 :gsql.jdb-h192.168.2.30-Udbadmin-p8000-r根據(jù)界面提示輸入密碼。-User-W指定用戶連接的密碼。如果主機(jī)的認(rèn)證策略是trust,則不會(huì)對(duì)數(shù)據(jù)庫管理員進(jìn)行密碼驗(yàn)證,即無需輸入-W選項(xiàng);如果沒有-W選項(xiàng),并且不是數(shù)據(jù)庫管理員,會(huì)提示用戶輸入密碼。-WBigdata@123-f將導(dǎo)出文件發(fā)送至指定目錄文件夾。如果這里省略,則使用標(biāo)準(zhǔn)輸出。當(dāng)使用通配符指定多個(gè)表對(duì)象時(shí),注意給pattern打引號(hào),防止shell擴(kuò)展通配符。-F參數(shù)值如下:p:純文本格式c:自定義歸檔d:目錄歸檔格式t:tar歸檔格式-Fd其他參數(shù)說明請(qǐng)參見gs_dump。示例一:執(zhí)行g(shù)s_dump,導(dǎo)出表hr.staffs的定義和數(shù)據(jù),并對(duì)導(dǎo)出文件進(jìn)行壓縮,導(dǎo)出文件格式為文本格式。示例二:執(zhí)行g(shù)s_dump,只導(dǎo)出表hr.staffs的定義和數(shù)據(jù),導(dǎo)出文件格式為目錄歸檔格式。示例三:執(zhí)行g(shù)s_dump,不導(dǎo)出表hr.staffs,導(dǎo)出文件格式為自定義歸檔格式。示例四:執(zhí)行g(shù)s_dump,導(dǎo)出表hr.staffs的定義,導(dǎo)出文件格式為自定義歸檔格式。示例五:執(zhí)行g(shù)s_dump,導(dǎo)出表hr.staffs,導(dǎo)出文件格式為自定義歸檔格式。示例四:執(zhí)行g(shù)s_dump,同時(shí)導(dǎo)出兩個(gè)表hr.staffs和hr.employments,導(dǎo)出文件格式為自定義歸檔格式。
pgadmin4連接數(shù)據(jù)庫
pgadmin4連接數(shù)據(jù)庫的用戶名。說明:postgres-h1910gres-p8000-r根據(jù)界面提示輸入密碼。如果提示輸入default,則顯示如下信息,則說明輸入密碼。如果主機(jī)的認(rèn)證策略是trust,則不會(huì)對(duì)數(shù)據(jù)庫管理員進(jìn)行密碼驗(yàn)證,即無需輸入-W選項(xiàng);如果沒有-W選項(xiàng),并且不是數(shù)據(jù)庫管理員,會(huì)提示用戶輸入密碼。-WBigdata@123-f將導(dǎo)出文件發(fā)送至指定目錄文件夾。如果這里省略,則使用標(biāo)準(zhǔn)輸出。當(dāng)使用通配符指定多個(gè)表對(duì)象時(shí),注意給pattern打引號(hào),防止shell擴(kuò)展通配符。-F參數(shù)值如下:p:純文本格式c:自定義歸檔d:目錄歸檔格式t:tar歸檔格式-Fd其他參數(shù)說明請(qǐng)參見《工具指南》中“gs_dump”章節(jié)。示例一:執(zhí)行g(shù)s_dump,導(dǎo)出表hr.staffs的定義和數(shù)據(jù),并對(duì)導(dǎo)出文件進(jìn)行壓縮,導(dǎo)出文件格式為文本格式。示例二:執(zhí)行g(shù)s_dump,只導(dǎo)出表hr.staffs的定義和數(shù)據(jù),導(dǎo)出文件格式為目錄歸檔格式。示例三:執(zhí)行g(shù)s_dump,導(dǎo)出表hr.staffs的定義,導(dǎo)出文件格式為tar歸檔格式。示例五:執(zhí)行g(shù)s_dump,不導(dǎo)出表hr.staffs,導(dǎo)出文件格式為自定義歸檔格式。