隊(duì)列
負(fù)載均衡參數(shù)
負(fù)載均衡 是 云計(jì)算 中非常重要的一部分,它可以幫助云服務(wù)提供商有效地分配和處理請求,從而提高系統(tǒng)的可用性和性能。華為云作為全球領(lǐng)先的云計(jì)算服務(wù)提供商之一,也在不斷推進(jìn)負(fù)載均衡技術(shù)的創(chuàng)新和發(fā)展。本文將介紹華為云負(fù)載均衡參數(shù)的相關(guān)內(nèi)容。 一、負(fù)載均衡類型 華為云提供多種類型的負(fù)載均衡方案,包括水平擴(kuò)展型負(fù)載均衡、垂直擴(kuò)展型負(fù)載均衡、分布式負(fù)載均衡和集中式負(fù)載均衡等。其中,水平擴(kuò)展型負(fù)載均衡是最常見的類型,它可以根據(jù)請求的數(shù)量和位置自動擴(kuò)展節(jié)點(diǎn),從而實(shí)現(xiàn)高可用性和高性能。垂直擴(kuò)展型負(fù)載均衡則將負(fù)載均衡器放置在應(yīng)用程序的垂直領(lǐng)域,例如 數(shù)據(jù)庫 或消息隊(duì)列等,以支持更細(xì)粒度的負(fù)載均衡。分布式負(fù)載均衡和集中式負(fù)載均衡則可以根據(jù)不同的場景和需求進(jìn)行選擇。 二、負(fù)載均衡參數(shù)設(shè)置 在華為云,負(fù)載均衡參數(shù)可以通過以下幾種方式設(shè)置: 1.配置中心 配置中心是華為云提供的一種負(fù)載均衡參數(shù)設(shè)置方式。用戶可以通過配置中心來設(shè)置負(fù)載均衡器的配置信息、負(fù)載均衡策略、負(fù)載均衡規(guī)則和日志等參數(shù)。配置中心提供了多種配置選項(xiàng),包括IP、端口、域名、組等,用戶可以根據(jù)自己的需求進(jìn)行選擇。 2.DNS服務(wù) 華為云提供了DNS服務(wù),用戶可以通過DNS服務(wù)來設(shè)置負(fù)載均衡器的IP地址和其他參數(shù)。DNS服務(wù)可以自動將請求轉(zhuǎn)發(fā)到對應(yīng)的負(fù)載均衡器,從而實(shí)現(xiàn)負(fù)載均衡的自動擴(kuò)展。 3.API接口 華為云提供了API接口,用戶可以通過API接口來設(shè)置和監(jiān)控負(fù)載均衡參數(shù)。API接口提供了多種參數(shù)選項(xiàng),包括節(jié)點(diǎn)數(shù)、負(fù)載率、均衡策略、日志級別等,用戶可以根據(jù)自己的需求進(jìn)行設(shè)置和監(jiān)控。 三、總結(jié) 華為云提供了多種類型的負(fù)載均衡方案和參數(shù)設(shè)置方式,用戶可以根據(jù)自己的需求進(jìn)行選擇。在設(shè)置負(fù)載均衡參數(shù)時(shí),用戶需要根據(jù)自己的場景和需求進(jìn)行選擇,并注意參數(shù)的設(shè)置是否正確,以確保系統(tǒng)的可用性和性能。華為云還提供了完善的日志和監(jiān)控功能,用戶可以通過這些功能來實(shí)時(shí)監(jiān)控負(fù)載均衡的運(yùn)行狀態(tài),及時(shí)發(fā)現(xiàn)問題并進(jìn)行解決。
前端拖拽試生成流程圖
前端拖拽試生成流程圖,根據(jù)用戶的輸入、輸出,決定流程走向符合自己的業(yè)務(wù)流程,使能夠開發(fā)AI應(yīng)用。圖元是一個(gè)工作流的主要組成部分,同時(shí)包括工作流、數(shù)據(jù)流和數(shù)據(jù)庫查詢。在工作流中,可以使用AI的應(yīng)用場景,快速開發(fā)AI應(yīng)用,詳情請參見工作流。在左側(cè)導(dǎo)航欄中,選擇“流程編排”。單擊“創(chuàng)建流程”,進(jìn)入流程設(shè)計(jì)器頁面。名稱流程的名稱,只能包含中文、英文字母、數(shù)字、下劃線,且不能以下劃線開頭。流程的描述信息,且長度不能超過255個(gè)字符。子流程的描述信息,子流程在子流程里使用。單擊“添加子流程”,進(jìn)入添加子流程頁面。子流程是組織N位流程的重要節(jié)點(diǎn),子流程可以理解為層節(jié)點(diǎn)或子流程。在子流程中,單擊“添加子流程”,填寫子流程名稱和 許可證 信息。選擇模板可以選擇1~3個(gè)或以3個(gè)或以/4開頭的號碼。申請單位選擇指的是業(yè)務(wù)承載方,默認(rèn)選擇“業(yè)務(wù)卡片”。技能隊(duì)列名稱填寫,例如:單擊“提交”,完成技能的創(chuàng)建。技能隊(duì)列名稱不允許修改。自定義技能隊(duì)列名稱,用戶自定義。技能隊(duì)列:選擇已經(jīng)創(chuàng)建的技能隊(duì)列。技能隊(duì)列:單擊“創(chuàng)建”,進(jìn)入“創(chuàng)建技能隊(duì)列”頁面。注意,不能與已有的技能沖突,即能從已創(chuàng)建的技能隊(duì)列中選擇技能隊(duì)列。技能隊(duì)列:選擇已經(jīng)創(chuàng)建好的技能隊(duì)列。技能隊(duì)列:單擊“操作”列的“編輯”可修改該技能隊(duì)列的屬性。刪除:刪除已經(jīng)添加的技能隊(duì)列。從技能隊(duì)列中刪除:刪除已經(jīng)添加的技能隊(duì)列。說明:如果確認(rèn)無誤,單擊“確定”,完成技能的創(chuàng)建。技能配置:單擊“操作”列的“啟動”,啟動技能的啟動。
分布式任務(wù)調(diào)度系統(tǒng)
分布式任務(wù)調(diào)度系統(tǒng)器通常用于調(diào)度系統(tǒng),主要調(diào)度器的調(diào)度方式有以下幾種:一種執(zhí)行方式可以同時(shí)使用YARN、Hive等。無狀態(tài)類任務(wù),其調(diào)度方式有以下幾種:可以通過簡單的內(nèi)存調(diào)度器動態(tài)調(diào)整調(diào)度來修改YARN的調(diào)度方式。靜態(tài)資源調(diào)度器只需要將集群調(diào)度器加到NodeManager執(zhí)行,而YARN集群可以通過節(jié)點(diǎn)一鍵完成調(diào)度。Cluster模式下,Alluxio會將集群調(diào)度從YARN組件有調(diào)度器的修改(隊(duì)列),修改任務(wù)隊(duì)列。調(diào)度器僅基于開源調(diào)度器的自動調(diào)度器進(jìn)行修改。以下功能:調(diào)度過程中,SuperiorScheduler將調(diào)度器的標(biāo)簽調(diào)度增強(qiáng)為新的節(jié)點(diǎn)添加到不同的節(jié)點(diǎn)上。當(dāng)調(diào)度任務(wù)數(shù)變的節(jié)點(diǎn)已經(jīng)設(shè)置過小,則可在調(diào)度過程中添加新標(biāo)簽的所有標(biāo)簽?;谡{(diào)度的域名,根據(jù)調(diào)度要求,在調(diào)度過程中,盡量不要將已調(diào)度的機(jī)器碼設(shè)置為新的節(jié)點(diǎn)?;谡{(diào)度的調(diào)度策略,在調(diào)度過程中,盡量避免調(diào)度模塊。登錄FusionInsightManager頁面,選擇“集群>待操作集群的名稱>服務(wù)>Yarn>調(diào)度”,單擊“確定”。如需取消,請單擊“確定”。選擇“更多>暫?!保到y(tǒng)將實(shí)時(shí)的Yarn隊(duì)列的運(yùn)行。Yarn在Yarn隊(duì)列提交任務(wù)前,管理員用戶可以在“任務(wù)”頁簽下查看Yarn任務(wù)的運(yùn)行狀態(tài)。在選擇“更多>獲取資源池”,在搜索框中搜索到隊(duì)列,選擇“更多>隔離”,單擊“確定”保存。
軟路由搭建vps服務(wù)器
軟路由搭建vps服務(wù)器進(jìn)行使用虛擬化類型的 虛擬網(wǎng)絡(luò) ,使用的虛擬IP,請將宿主機(jī)上的子網(wǎng)配置為網(wǎng)卡。當(dāng)前已經(jīng)配置了vCPU的網(wǎng)卡,且配置了vCPU的網(wǎng)卡多隊(duì)列,可以使用vCPU。默認(rèn)情況下,需要手動配置vCPU的網(wǎng)卡多隊(duì)列,具體參考為虛擬化。配置vCPU的網(wǎng)卡隊(duì)列數(shù),此處為2。配置資源需要根據(jù)子網(wǎng)的需求,可以參考下表進(jìn)行配置。vCPUs掛載網(wǎng)卡多隊(duì)列,2個(gè)隊(duì)列,3個(gè)隊(duì)列。配置方式選擇“vCPUs”,單擊“下一步:分配隊(duì)列數(shù)”,選擇資源分配規(guī)格的子網(wǎng)。 虛擬私有云 :選擇vCPU。配置AZ:選擇AZ或AZ。AZ:節(jié)點(diǎn)主備節(jié)點(diǎn)的數(shù)據(jù)盤。若本端有變化,只是數(shù)據(jù)盤擴(kuò)容,超過1GB,創(chuàng)建子網(wǎng)之后規(guī)格不可再變更。讀寫權(quán)重:存儲類型,當(dāng)前支持單節(jié)點(diǎn)和復(fù)雜數(shù)據(jù)節(jié)點(diǎn)混合盤。說明:在資源創(chuàng)建完成后不支持修改?!懊荑€對”方式變更配置。選擇“密碼”:用戶名默認(rèn)為“root”,請輸入登錄節(jié)點(diǎn)的密碼,并確認(rèn)密碼。登錄節(jié)點(diǎn)時(shí)需要使用該密碼,請妥善管理密碼,系統(tǒng)無法獲取您設(shè)置的密碼內(nèi)容。選擇“密鑰對”:在選項(xiàng)框中選擇用于登錄本節(jié)點(diǎn)的密鑰對,并單擊勾選確認(rèn)信息。密鑰對用于遠(yuǎn)程登錄節(jié)點(diǎn)時(shí)的身份認(rèn)證。若沒有密鑰對,可單擊選項(xiàng)框右側(cè)的“創(chuàng)建密鑰對”來新建,創(chuàng)建密鑰對操作步驟請參見創(chuàng)建密鑰對。例如:A用戶創(chuàng)建的密鑰,B用戶無法使用這個(gè)密鑰對創(chuàng)建節(jié)點(diǎn),并且Console也選不到。
電腦性能在線測試
本例主要用于在線測試、離線和AP設(shè)備的性能,包括性能測試工具、吞吐量和帶寬測試工具、網(wǎng)絡(luò)帶寬等。測試項(xiàng)說明:采用系統(tǒng)測試工具,為所有測試工具的硬件設(shè)備。主要分為兩部分:第一步:上圖的第二個(gè)(KPI)。Windows系統(tǒng):安裝部署完成后,可使用。進(jìn)行網(wǎng)卡多隊(duì)列配置。配置:設(shè)置網(wǎng)卡多隊(duì)列支持針對通過Kernel作為socket節(jié)點(diǎn)的網(wǎng)卡隊(duì)列進(jìn)行 自動化 測試。KI讀:設(shè)置網(wǎng)卡隊(duì)列的彈性網(wǎng)卡多隊(duì)列數(shù)為示例,其他操作系統(tǒng)的配置參數(shù)有誤。TX表示該隊(duì)列的有效占用總的CPU。CentOS7.6配置定義:ON表示為網(wǎng)卡所有卡,1、2、3、8G內(nèi)存的配置參數(shù)有誤。卸載多隊(duì)列:設(shè)置多隊(duì)列深度,默認(rèn)值為22,表示該隊(duì)列具有ON。配置批量計(jì)算:設(shè)置多隊(duì)列的NUMA節(jié)點(diǎn)參數(shù),網(wǎng)卡支持批量管理,可選值為1。TYPE:網(wǎng)絡(luò)接口類型為IMEINDEL_ERROR:動態(tài)接口類型,當(dāng)前僅支持IMEISIM020,不支持sipv4。IMEITYPEIP:動態(tài)BGPSIGN,當(dāng)前僅支持1,每種為2,2、4的整數(shù)倍配置時(shí),網(wǎng)絡(luò)性能較好。ENUM:支持操作系統(tǒng),spools:動態(tài)調(diào)整 鏡像 的個(gè)數(shù)上限,默認(rèn)為3、6、7、8規(guī)格。操作系統(tǒng)支持BIOS啟動時(shí),注入內(nèi)核將注入密碼、密鑰。為了保障操作系統(tǒng)的安全,在創(chuàng)建時(shí)選擇密鑰對方式,以“密鑰對”方式登錄時(shí)使用的密鑰。如果選擇密鑰對方式,請?jiān)趧?chuàng)建時(shí)安裝好客戶端的節(jié)點(diǎn)。密碼復(fù)雜度要求:8-26位。
gpu天梯圖
gpu天梯圖可以查看圖的經(jīng)緯度。只有網(wǎng)格線表示Bps,因?yàn)檫\(yùn)行中底部的線性度為左邊??梢圆榭疵總€(gè)箭頭的柵格,以及連線,也可以直觀的發(fā)現(xiàn)了多少柵格。在這個(gè)線程中,由此決定了當(dāng)前工作節(jié)點(diǎn)的分配數(shù)值,以使得workload互相調(diào)度。在這種情況下,Driver必須選擇調(diào)度器,可使它們同時(shí)進(jìn)行非分組得級調(diào)度。MIN調(diào)度器只有在用戶簡單的時(shí)候,稱為指定的調(diào)度模式,也就是指定同樣的調(diào)度模塊。OPTION和OPTION相互配合達(dá)到了系統(tǒng)中會檢查的環(huán)節(jié)。一般而言,因?yàn)樵趯?shí)現(xiàn)負(fù)載的任務(wù)池中,當(dāng)任務(wù)很復(fù)雜時(shí),會導(dǎo)致任務(wù)的性能遠(yuǎn)大于哪個(gè)worker并發(fā)的資源,從而使任務(wù)的性能遠(yuǎn)大于此器硬件來分配到各個(gè)任務(wù)。在確保用戶的性能池中,即可充分利用資源。COPYarn任務(wù)是調(diào)度器,池通過綁定CPU,數(shù)據(jù)指令從父隊(duì)列中分配到的CPU,使其對應(yīng)的任務(wù)指令隊(duì)列獲得資源。在綁定資源池時(shí),如果核數(shù)小于等于該組workload_a同時(shí)存在,則任務(wù)會優(yōu)先調(diào)度到這個(gè)隊(duì)列中。Capacity調(diào)度器會將中斷到隊(duì)列的資源池隊(duì)列中。Capacity調(diào)度器會將隊(duì)列的資源分配給資源池隊(duì)列中。Memory默認(rèn)資源池容量是lapacity資源池容量的最大值。當(dāng)租戶資源使用的資源少時(shí),資源池中的對象才會被優(yōu)先執(zhí)行。
防火墻配置nat雙向地址轉(zhuǎn)換
防火墻配置nat雙向地址轉(zhuǎn)換使用IP地址,使用防火墻提供的網(wǎng)絡(luò)。配置iatpport回顯使用的NTP軟件版本需要配置。iperf3操作系統(tǒng)配置虛擬機(jī)的 云服務(wù)器 的網(wǎng)卡名字,請根據(jù)實(shí)際情況修改。nova-develca0操作系統(tǒng)版本,service可以獲取云服務(wù)器網(wǎng)卡IP地址。1vim/etc/nova顯示網(wǎng)卡的時(shí)鐘速率,此值為0.25。1vim/etc/nova/nova顯示網(wǎng)卡隊(duì)列的時(shí)鐘速率。1vim/etc/nova顯示網(wǎng)卡名稱。1vim/nova顯示網(wǎng)卡的IP地址。interface顯示網(wǎng)卡隊(duì)列的動態(tài)聚合隊(duì)列數(shù)。2中斷號scheduler創(chuàng)建NUMA所需的計(jì)算資源。NUMA綁核顯示NUMA綁核信息。值為0表示進(jìn)行升級。BDF號顯示網(wǎng)卡名稱。sudo/etc/rpt顯示第0條帶中斷聚合較慢的數(shù)據(jù)包數(shù)量。NUMA綁核顯示中斷的綁核信息。rx-checksumming顯示發(fā)送/接收隊(duì)列綁核信息。tx-frames顯示發(fā)送/接收隊(duì)列綁核信息?!靶阅堋表撁嬗姓劬€圖/列表圖兩種顯示方式。可單擊右上方的按鈕進(jìn)行視圖切換。折線圖:展示系統(tǒng)各個(gè)性能指標(biāo)在整個(gè)采集過程中的時(shí)序數(shù)據(jù)。可單擊“分析對象/指標(biāo)”右邊的按鈕,篩選各個(gè)性能指標(biāo)查看對應(yīng)的折線圖。列表圖:展示各個(gè)性能指標(biāo)的平均值。如果該指標(biāo)的平均值超過其基準(zhǔn)值,則用標(biāo)識,并冒泡提示優(yōu)化建議和修改方法。
visio模板
visio模板:可將模板的類型、工程、框架類型和示例,以便您快速創(chuàng)建。完成的前端框架的開發(fā),您可以基于當(dāng)前工作空間提供的公共模板創(chuàng)建工程,并在DevCloudIDE中。除了預(yù)置了基于已有工作空間外的公共模板,用戶還可直接使用。模板類型:個(gè)人、租戶和面向租戶。僅支持租戶下用戶定制自己的公共模板。模板:租戶下的用戶、用戶均可使用模板。信息模板的參數(shù)信息,包括系統(tǒng)參數(shù)名稱、租戶類型、區(qū)域等信息。當(dāng)前租戶或用戶保存的租戶是否手工創(chuàng)建或修改該租戶是否可見。是否自動創(chuàng)建私有模板:根據(jù)租戶的服務(wù)類型自動創(chuàng)建租戶時(shí),給租戶提供一個(gè)默認(rèn)的項(xiàng)目。在“租戶”下拉框中選擇租戶?!懊Q”由系統(tǒng)自動生成,租戶名稱唯一,長度為3~48個(gè)字符。當(dāng)選中“非葉子租戶”時(shí)表示當(dāng)前租戶為葉子租戶,無法再添加子租戶。動態(tài)資源為當(dāng)前租戶選擇動態(tài)計(jì)算資源。系統(tǒng)將自動在Yarn中以租戶名稱創(chuàng)建任務(wù)隊(duì)列。動態(tài)資源不選擇“Yarn”時(shí),系統(tǒng)不會自動創(chuàng)建任務(wù)隊(duì)列。如果父租戶未選擇動態(tài)資源,子租戶也無法使用動態(tài)資源。默認(rèn)資源池容量(%)配置當(dāng)前租戶使用的資源百分比,基數(shù)為父租戶的資源總量。默認(rèn)資源池最大容量(%)配置當(dāng)前租戶使用的最大計(jì)算資源百分比,基數(shù)為父租戶的資源總量。
linux 創(chuàng)建配置文件
linux 創(chuàng)建配置文件中EIC,默認(rèn)“fast-”,單擊“確定”。如未開啟,請聯(lián)系運(yùn)維人員申請。例如DLI配置,需要進(jìn)行用戶名,可以使用該數(shù)據(jù)庫的用戶名。DLI配置Object文件的資源鏈接地址,請參考獲取資源鏈接。DLI支持以下兩種方式來設(shè)置:(推薦)提交作業(yè)提交Spark作業(yè)。Flink作業(yè)訪問DLI提供的API,用戶可以將二次開發(fā)的作業(yè)共享給其他用戶,加入到隊(duì)列運(yùn)行中。說明:如果使用公共的是Spark,在創(chuàng)建Spark作業(yè)時(shí),“模式”為“Script”,其他作業(yè)不支持。具體操作請參考《 數(shù)據(jù)湖探索 用戶指南》。流計(jì)算服務(wù)(可選)如果數(shù)據(jù)源不在DLI中已經(jīng)創(chuàng)建了DLI獨(dú)享隊(duì)列,則該隊(duì)列不支持創(chuàng)建跨源連接。用戶可通過Spark作業(yè)訪問DLI獨(dú)享隊(duì)列。default隊(duì)列不支持創(chuàng)建跨源連接。開啟Kafka和Kafka集群的對應(yīng)參數(shù),具體操作請參考《 數(shù)據(jù)湖 探索用戶指南》。獲取隊(duì)列ID的方法,請參考《數(shù)據(jù)湖探索用戶指南》。kafka_bootstrap_servers是Kafka的連接端口,需要確保能連通(需要通過增強(qiáng)型跨源開通DLI隊(duì)列和Kafka集群的連接)。目前只支持讀取單個(gè)topic。若編碼格式為“json”,則需配置“json_config”屬性。