ai大模型發(fā)展白皮書
面向數(shù)據(jù)與AI協(xié)同發(fā)展新周期， 華為云Stack 推出AI可信數(shù)據(jù)空間解決方案，通過融合“供得出、流得動(dòng)、用得好、保安全”四大核心能力及行業(yè)場(chǎng)景，構(gòu)建“泛在入湖、數(shù)據(jù)可信、AI可用”的新型智能數(shù)據(jù)基礎(chǔ)設(shè)施，致力于成為數(shù)據(jù)空間信賴之選。
從業(yè)務(wù)上好云到用好云，實(shí)現(xiàn)深度用云 大模型混合云 AI可信數(shù)據(jù)空間 智能研發(fā)生產(chǎn)線 工業(yè)互聯(lián)網(wǎng) 專業(yè)服務(wù) 大模型混合云 賦能千行萬業(yè) 支持盤古CV、NLP、預(yù)測(cè)、多模態(tài)大模型和第三方大模型， 提供30+專業(yè)服務(wù)與持續(xù)運(yùn)營體系，使能政企一站式建設(shè)專屬大模型 使能百模千態(tài) 提供一站式AI大模型開發(fā)平臺(tái)和工程工具鏈，使能數(shù)據(jù)、模型和應(yīng)用一站式開發(fā)
•用：靈活應(yīng)用，支持?jǐn)?shù)據(jù)服務(wù)API靈活自定義，打通API設(shè)計(jì)/開發(fā)/發(fā)布和消費(fèi)全流程，支撐數(shù)據(jù)高效應(yīng)用 •智：通過盤古大模型加持，實(shí)現(xiàn)數(shù)據(jù)智能采集、智能開發(fā)、智能分析，賦能數(shù)據(jù)產(chǎn)品加工效率數(shù)倍提升 城市數(shù)據(jù)空間新范式 城市數(shù)據(jù)空間新范式 了解詳情 打造城市數(shù)據(jù)空間新范式 持續(xù)探索新型數(shù)據(jù)基礎(chǔ)設(shè)施
什么是盤古大模型 盤古CV大模型能力與規(guī)格 盤古大模型用戶指南 如何調(diào)用盤古CV大模型API 查看全部 AI Gallery百模千態(tài)社區(qū) AI Gallery百模千態(tài)社區(qū) 優(yōu)質(zhì)昇騰云AI模型專區(qū) 幾行代碼自由部署AI應(yīng)用 豐富多樣的AI訓(xùn)練數(shù)據(jù)集 場(chǎng)景化AI案例，助力AI賦能千行百業(yè) 查看全部
全鏈路專業(yè)服務(wù)，讓大模型從可用到好用 · 6大階段30+專業(yè)服務(wù)，覆蓋大模型建設(shè)全流程，加速政企落地大模型 · 創(chuàng)新運(yùn)營服務(wù)模式，實(shí)現(xiàn)全場(chǎng)景模型經(jīng)驗(yàn)沉淀、全流程運(yùn)營賦能產(chǎn)業(yè)，快速孵化大模型場(chǎng)景化應(yīng)用 大模型混合云十大創(chuàng)新技術(shù) 大模型混合云十大創(chuàng)新技術(shù) 了解詳情 十大創(chuàng)新技術(shù) 加速構(gòu)建企業(yè)專屬大模型
文檔與學(xué)習(xí)成長 盤古大模型 盤古大模型 什么是盤古大模型 盤古預(yù)測(cè)大模型能力與規(guī)格 盤古大模型快速入門 如何調(diào)用盤古大模型API 查看全部 AI Gallery百模千態(tài)社區(qū) AI Gallery百模千態(tài)社區(qū) 優(yōu)質(zhì)昇騰云AI模型專區(qū) 幾行代碼自由部署AI應(yīng)用 豐富多樣的AI訓(xùn)練數(shù)據(jù)集 場(chǎng)景化AI案例，助力AI賦能千行百業(yè)
盤古大模型 PanguLargeModels 盤古大模型 PanguLargeModels 盤古大模型是面向B端行業(yè)的大模型，包含L0中5類基礎(chǔ)大模型、L1行業(yè)大模型及L2場(chǎng)景模型三層架構(gòu) 盤古大模型是面向B端行業(yè)的大模型，包含L0中5類基礎(chǔ)大模型、L1行業(yè)大模型及L2場(chǎng)景模型三層架構(gòu)
體驗(yàn) 政企知識(shí)檢索 智能創(chuàng)意營銷 行業(yè)API助手 行業(yè)研發(fā)助手 政企會(huì)議助手 文檔與學(xué)習(xí)成長 盤古大模型 盤古大模型 什么是盤古大模型 盤古NLP大模型能力與規(guī)格 盤古大模型快速入門 如何調(diào)用盤古大模型API 查看全部 AI Gallery百模千態(tài)社區(qū) AI Gallery百模千態(tài)社區(qū)
內(nèi)全量構(gòu)建的極速構(gòu)建、支持億級(jí)測(cè)試用例資產(chǎn)復(fù)用、千萬級(jí)壓測(cè)先進(jìn)能力。 更智能： CodeArts引用大模型AIGC的突破，已實(shí)現(xiàn)代碼智能生成、測(cè)試文本用例智能生成等，后續(xù)CodeArts會(huì)不斷創(chuàng)新探索，將AI技術(shù)貫穿軟件開發(fā)生命周期始終。 更安全： CodeArts致力從運(yùn)行態(tài)的
提供高精度的全球模型，無需定制和訓(xùn)練，直接訂閱即可推理 多種部署形態(tài) 支持公有云、混合云、邊緣多種形態(tài)，滿足不同需求 文檔與學(xué)習(xí)成長 盤古大模型 盤古大模型 什么是盤古大模型 盤古科學(xué)計(jì)算大模型能力與規(guī)格 盤古大模型用戶指南 如何調(diào)用盤古大模型API 查看全部 AI Gallery百模千態(tài)社區(qū)
《互聯(lián)網(wǎng)信息服務(wù)算法推薦管理規(guī)定》明確，具有輿論屬性或者社會(huì)動(dòng)員能力的算法推薦服務(wù)提供者應(yīng)當(dāng)在提供服務(wù)之日起十個(gè)工作日內(nèi)通過互聯(lián)網(wǎng)信息服務(wù)算法備案系統(tǒng)填報(bào)服務(wù)提供者的名稱、服務(wù)形式、應(yīng)用領(lǐng)域、算法類型、算法自評(píng)估報(bào)告、擬公示內(nèi)容等信息 方便
湘江鯤鵬目前在人工智能大模型領(lǐng)域擁有算力、數(shù)據(jù)、算法三大關(guān)鍵要素的經(jīng)驗(yàn)積累，構(gòu)建了大模型三個(gè)方面的差異化競(jìng)爭(zhēng)力，盤古大模型AI專業(yè)服務(wù)覆蓋從前期咨詢、規(guī)劃設(shè)計(jì)，到數(shù)據(jù)工程、模型訓(xùn)練，再到應(yīng)用工程及模型運(yùn)維的完整流程?；谌A為盤古提供的AI專業(yè)服務(wù)包，致力于為企業(yè)提供一站式人工智能解決方案
angChain等流行的大模型開發(fā)框架，構(gòu)建企業(yè)級(jí)AI應(yīng)用；團(tuán)隊(duì)擁有成熟的軟件工程技術(shù)和管理能力。6. 大模型使用的技術(shù)支持，用戶使用大模型平臺(tái)，解答用戶使用過程遇到的問題；大模型與應(yīng)用對(duì)接集成，以及進(jìn)行日常巡檢、故障處理、模型升級(jí)等服務(wù)。4. 工業(yè)數(shù)據(jù)模型（CAD模型、CAE模
太杉天尊大模型AIGC場(chǎng)景解決方案是以AI場(chǎng)景解決方案為核心的全棧Maas綜合方案，助力政企客戶靈活部署(可公有可私有部署）。具備自研的行業(yè)模型能力，主要用于政府/公安/教育等行業(yè)的數(shù)據(jù)處理、文本處理以及多模態(tài)處理等多場(chǎng)景。太杉天尊大模型AIGC場(chǎng)景解決方案，是一款專為滿足政府企
公司集成了世界領(lǐng)先的底層大模型，具備打通跨模型和工具鏈的平臺(tái)，提供從需求分析、數(shù)據(jù)收集、模型設(shè)計(jì)、訓(xùn)練優(yōu)化、評(píng)估、系統(tǒng)集成、用戶界面設(shè)計(jì)、部署維護(hù)、合規(guī)性檢查、技術(shù)支持、性能監(jiān)控、擴(kuò)展性設(shè)計(jì)、定制服務(wù)到持續(xù)研發(fā)一站式AI大模型定制研發(fā)服務(wù)。光啟慧語是一家圍繞大模型全棧開展技術(shù)研發(fā)和產(chǎn)
數(shù)據(jù)質(zhì)量。4. 模型訓(xùn)練：?設(shè)計(jì)調(diào)優(yōu)方案，實(shí)施模型訓(xùn)練，并進(jìn)行模型評(píng)測(cè)。?熟悉盤古大模型工作流和云服務(wù)操作，確保模型效果優(yōu)化。5. 應(yīng)用工程：?提供基于大模型能力的Agent開發(fā)和應(yīng)用對(duì)接服務(wù)。?具備良好的軟件開發(fā)和溝通能力，實(shí)現(xiàn)大模型與應(yīng)用的無縫對(duì)接。6. 模型運(yùn)維： ?提供技
. 模型更新后，將新模型部署至相應(yīng)環(huán)境。 十一、模型評(píng)測(cè)1. 設(shè)計(jì)模型評(píng)測(cè)方案，對(duì)大模型各類指標(biāo)進(jìn)行評(píng)測(cè)。2. 能夠按評(píng)測(cè)標(biāo)準(zhǔn)對(duì)大模型各項(xiàng)能力進(jìn)行打分，輸出大模型評(píng)測(cè)報(bào)告。 十二、Agent開發(fā)1. 基于場(chǎng)景，設(shè)計(jì)并開發(fā)Agent工具。2. 基于langchain等大模型框架，完
天尊大模型AIGC場(chǎng)景解決方案配套服務(wù)是太杉AIGC解決方案的人工服務(wù)，是以AI應(yīng)用解決方案為核心的全棧Maas綜合方案，助力政企客戶靈活部署(可公有可私有部署）。主要用于政府/公安/教育等行業(yè)的數(shù)據(jù)處理、文本處理以及多模態(tài)處理等多場(chǎng)景。天尊大模型AIGC場(chǎng)景解決方案配套服務(wù)是太
出門問問大模型“序列猴子”是一款具備多模態(tài)生成能力的大語言模型，模型以語言為核心的能力體系涵蓋“知識(shí)、對(duì)話、數(shù)學(xué)、邏輯、推理、規(guī)劃”六個(gè)維度，能夠同時(shí)支持文字生成、圖片生成、3D內(nèi)容生成、語言生成和語音識(shí)別等不同任務(wù)。出門問問大模型“序列猴子”是一款具備多模態(tài)生成能力的大語言模型，模
華為云盤古大模型 華為云盤古大模型 AI for Industries 大模型重塑千行百業(yè) AI for Industries 大模型重塑千行百業(yè) 盤古大模型致力于深耕行業(yè)，打造金融、政務(wù)、制造、礦山、氣象、鐵路等領(lǐng)域行業(yè)大模型和能力集，將行業(yè)知識(shí)know-how與大模型能力相結(jié)合
AI賦能智慧城市白皮書 AI賦能智慧城市白皮書 基于AI 技術(shù)的城市治理創(chuàng)新變革，不但在城市可持續(xù)發(fā)展方面發(fā)揮著重要作用，AI 賦能智慧城市助力構(gòu)筑城市智能體，倡導(dǎo)人與自然和諧共生，創(chuàng)新變革舊的生產(chǎn)方式，形成新的生產(chǎn)要素，從多維度各領(lǐng)域促進(jìn)整體數(shù)字化躍遷和升級(jí)，推動(dòng)城市服務(wù)全面升
華為云零信任能力成熟度模型白皮書 華為云零信任能力成熟度模型白皮書 本白皮書將零信任能力成熟度評(píng)估從理論轉(zhuǎn)化為用于指導(dǎo)實(shí)操的具體框架，幫助企業(yè)識(shí)別當(dāng)前零信任的成熟度等級(jí)，并為企業(yè)下一階段零信任能力演進(jìn)的戰(zhàn)略規(guī)劃提供指導(dǎo)。 馬上下載 更多白皮書資源下載 華為云零信任能力成熟度模型白皮書 目錄 1零信任發(fā)展現(xiàn)狀及趨勢(shì)
ModelArts支持本地準(zhǔn)備模型包，編寫模型配置文件和模型推理代碼，將準(zhǔn)備好的模型包上傳至對(duì)象存儲(chǔ)服務(wù)OBS，從OBS導(dǎo)入模型創(chuàng)建為AI應(yīng)用。 制作模型包，則需要符合一定的模型包規(guī)范。模型包里面必需包含“model”文件夾，“model”文件夾下面放置模型文件，模型配置文件，模型推理代碼文件。
最新地址 請(qǐng)點(diǎn)擊右側(cè)按鈕，前往華為云產(chǎn)業(yè)白皮書最新地址 點(diǎn)擊立即前往
ModelArts模型訓(xùn)練 ModelArts模型訓(xùn)練簡(jiǎn)介 ModelArts模型訓(xùn)練，俗稱“建模”，指通過分析手段、方法和技巧對(duì)準(zhǔn)備好的數(shù)據(jù)進(jìn)行探索分析，從中發(fā)現(xiàn)因果關(guān)系、內(nèi)部聯(lián)系和業(yè)務(wù)規(guī)律，為商業(yè)目的提供決策參考。訓(xùn)練模型的結(jié)果通常是一個(gè)或多個(gè)機(jī)器學(xué)習(xí)或深度學(xué)習(xí)模型，模型可以應(yīng)用到新的數(shù)據(jù)中，得到預(yù)測(cè)、評(píng)價(jià)等結(jié)果。
MySQL）和非關(guān)系型數(shù)據(jù)庫GaussDB NoSQL系列兩大云原生數(shù)據(jù)庫新品 華為云CTO張宇昕接受采訪時(shí)表示，華為持續(xù)打造世界級(jí)數(shù)據(jù)庫的決心不變，持續(xù)戰(zhàn)略投入，保障業(yè)務(wù)連續(xù)性和為客戶持續(xù)提供數(shù)據(jù)庫服務(wù)不變。 華為云數(shù)據(jù)庫業(yè)務(wù)總裁蘇光牛正式發(fā)布兩大云原生數(shù)據(jù)庫新品：關(guān)系型數(shù)據(jù)庫GaussDB（for
正確實(shí)施DevSecOps的關(guān)鍵是質(zhì)量效能雙贏 3.2 快軌：基于Q點(diǎn)自動(dòng)檢查的大吞吐量高速上線 3.3 慢軌：基于發(fā)布計(jì)劃自動(dòng)抬桿的內(nèi)建質(zhì)量防護(hù)網(wǎng)快速路 3.4 通過灰度發(fā)布降低全網(wǎng)質(zhì)量風(fēng)險(xiǎn)和問題影響度 04 價(jià)值流表征：通過三層指標(biāo)管理邏輯及模型化實(shí)現(xiàn)業(yè)務(wù)評(píng)估 4.1 通過有效數(shù)據(jù)度量實(shí)現(xiàn)價(jià)值流表征 4
移動(dòng)端下載白皮書請(qǐng)點(diǎn)擊展開詳情 云服務(wù)安全治理白皮書 本白皮書系統(tǒng)闡述了華為云對(duì)云服務(wù)安全治理的理解，并對(duì)“云服務(wù)網(wǎng)絡(luò)安全與合規(guī)標(biāo)準(zhǔn)”（CLOUD SERVICE CYBERSECURITY & COMPLIANCE STANDARD，簡(jiǎn)稱“3CS”）進(jìn)行了詳細(xì)介紹。 馬上下載 更多白皮書資源下載
ai大模型發(fā)展白皮書
應(yīng)用場(chǎng)景
近年來，AI快速發(fā)展并應(yīng)用到很多領(lǐng)域中，AI新產(chǎn)品掀起一波又一波熱潮，AI應(yīng)用場(chǎng)景越來越多，有自動(dòng)駕駛、大模型、AIGC、科學(xué)AI等不同行業(yè)。AI人工智能的實(shí)現(xiàn)需要大量的基礎(chǔ)設(shè)施資源，包括高性能算力，高速存儲(chǔ)和網(wǎng)絡(luò)帶寬等基礎(chǔ)設(shè)施，即“大算力、大存力、大運(yùn)力”的AI基礎(chǔ)大設(shè)施底座，讓算力發(fā)展不要偏斜。
從過去的經(jīng)典AI，到今天人人談?wù)摰拇竽Ｐ?，自?dòng)駕駛，我們看到AI模型的參數(shù)及AI算力規(guī)模呈現(xiàn)出指數(shù)級(jí)的爆發(fā)增長，對(duì)存儲(chǔ)基礎(chǔ)設(shè)施也帶來全新的挑戰(zhàn)。
- 高吞吐的數(shù)據(jù)訪問挑戰(zhàn)：隨著企業(yè)使用 GPU/NPU 越來越多，底層存儲(chǔ)的 IO 已經(jīng)跟不上計(jì)算能力，企業(yè)希望存儲(chǔ)系統(tǒng)能提供高吞吐的數(shù)據(jù)訪問能力，充分發(fā)揮 GPU/NPU 的計(jì)算性能，包括訓(xùn)練數(shù)據(jù)的讀取，以及為了容錯(cuò)做的檢查點(diǎn)（以下簡(jiǎn)稱Checkpoint）保存和加載。訓(xùn)練數(shù)據(jù)的讀取要盡量讀得快，減少計(jì)算對(duì) I/O 的等待，而 Checkpoint主要要求高吞吐、減少訓(xùn)練中斷的時(shí)間。
- 文件接口方式的數(shù)據(jù)共享訪問：由于 AI 架構(gòu)需要使用到大規(guī)模的計(jì)算集群（GPU/NPU服務(wù)器），集群中的服務(wù)器訪問的數(shù)據(jù)來自一個(gè)統(tǒng)一的數(shù)據(jù)源，即一個(gè)共享的存儲(chǔ)空間。這種共享訪問的數(shù)據(jù)有諸多好處，它可以保證不同服務(wù)器上訪問數(shù)據(jù)的一致性，減少不同服務(wù)器上分別保留數(shù)據(jù)帶來的數(shù)據(jù)冗余等。另外以 AI 生態(tài)中非常流行的開源深度學(xué)習(xí)框架PyTorch為例，PyTorch默認(rèn)會(huì)通過文件接口訪問數(shù)據(jù)，AI算法開發(fā)人員也習(xí)慣使用文件接口，因此文件接口是最友好的共享存儲(chǔ)訪問方式。
方案架構(gòu)
針對(duì)AI訓(xùn)練場(chǎng)景中面臨的問題，華為云提供了基于 對(duì)象存儲(chǔ) 服務(wù) OBS +高性能文件服務(wù) SFS Turbo的AI云存儲(chǔ)解決方案，如圖所示，華為云高性能文件服務(wù)SFS Turbo HPC型支持和OBS數(shù)據(jù)聯(lián)動(dòng)，您可以通過SFS Turbo HPC型文件系統(tǒng)來加速對(duì)OBS對(duì)象存儲(chǔ)中的數(shù)據(jù)訪問，并將生成的結(jié)果數(shù)據(jù)異步持久化到OBS對(duì)象存儲(chǔ)中長期低成本保存。
方案優(yōu)勢(shì)
華為云AI云存儲(chǔ)解決方案的主要優(yōu)勢(shì)如下表所示。
|
序號(hào) |
主要優(yōu)勢(shì) |
詳細(xì)描述 |
|---|---|---|
|
1 |
存算分離，資源利用率高 |
GPU/NPU算力和SFS Turbo存儲(chǔ)解耦，各自按需擴(kuò)容，資源利用率提升。 |
|
2 |
SFS Turbo高性能，加速訓(xùn)練過程 |
|
|
3 |
數(shù)據(jù)導(dǎo)入導(dǎo)出異步化，不占用訓(xùn)練任務(wù)時(shí)長，無需部署外部遷移工具 |
|
|
4 |
冷熱數(shù)據(jù)自動(dòng)流動(dòng)，降低存儲(chǔ)成本 |
|
|
5 |
多 AI開發(fā)平臺(tái) 、生態(tài)兼容 |
pytorch、mindspore等主流AI應(yīng)用框架，kubernetes容器引擎、算法開發(fā)場(chǎng)景通過文件語義訪問共享數(shù)據(jù)，無需適配開發(fā)。 |
ai大模型發(fā)展白皮書常見問題
更多常見問題 >>-
盤古大模型致力于深耕行業(yè)，打造金融、政務(wù)、制造、礦山、氣象、鐵路等領(lǐng)域行業(yè)大模型和能力集，將行業(yè)知識(shí)know-how與大模型能力相結(jié)合，重塑千行百業(yè)，成為各組織、企業(yè)、個(gè)人的專家助手。
-
模型轉(zhuǎn)換，即將開源框架的網(wǎng)絡(luò)模型（如Caffe、TensorFlow等），通過ATC（Ascend Tensor Compiler）模型轉(zhuǎn)換工具，將其轉(zhuǎn)換成昇騰AI處理器支持的離線模型。
-
基于AI 技術(shù)的城市治理創(chuàng)新變革，不但在城市可持續(xù)發(fā)展方面發(fā)揮著重要作用，AI 賦能智慧城市助力構(gòu)筑城市智能體，倡導(dǎo)人與自然和諧共生，創(chuàng)新變革舊的生產(chǎn)方式，形成新的生產(chǎn)要素，從多維度各領(lǐng)域促進(jìn)整體數(shù)字化躍遷和升級(jí)，推動(dòng)城市服務(wù)全面升級(jí)，讓城市治理更高效，讓智能城市更智慧，加速城市邁向全場(chǎng)景智慧。
-
本次Serverless應(yīng)用中心上線文生圖應(yīng)用，用戶無需下載源代碼、了解各種安裝部署知識(shí)、安裝復(fù)雜的依賴，通過華為云Serverless應(yīng)用中心即可一鍵創(chuàng)建AI文生圖應(yīng)用，體驗(yàn) “0” 構(gòu)建門檻、“0” 資源閑置并具備極致彈性的Serverless AI繪圖能力。
-
華為云Serverless技術(shù)極大的優(yōu)化了AI應(yīng)用開發(fā)過程，一鍵部署AI應(yīng)用、提升開發(fā)團(tuán)隊(duì)工作效率。讓AI團(tuán)隊(duì)可以更關(guān)注業(yè)務(wù)實(shí)現(xiàn)，而無需關(guān)注底層技術(shù)細(xì)節(jié)。
-
在自然語言處理（NLP）領(lǐng)域中，使用語言模型預(yù)訓(xùn)練方法在多項(xiàng)NLP任務(wù)上都獲得了不錯(cuò)的提升，廣泛受到了各界的關(guān)注。本課程將簡(jiǎn)單介紹一下預(yù)訓(xùn)練的思想，幾個(gè)代表性模型和它們之間的關(guān)系。
ai大模型發(fā)展白皮書教程視頻
最佳實(shí)踐視頻幫助您快速了解搭建流程 了解更多
-
大咖分享，社區(qū)如何助力個(gè)人職業(yè)發(fā)展
精選視頻內(nèi)容，邀您觀看 -
06大規(guī)模并行模型訓(xùn)練
基于Atlas 900 AI集群和深度學(xué)習(xí)訓(xùn)練平臺(tái)進(jìn)行BERT網(wǎng)絡(luò)大規(guī)模并行模型訓(xùn)練。 -
NAIE模型訓(xùn)練服務(wù)演示
以數(shù)據(jù)中心PUE優(yōu)化為例進(jìn)行模型訓(xùn)練服務(wù)和數(shù)據(jù)中心PUE優(yōu)化模型生成服務(wù)操作演示，使開發(fā)者快速熟悉NAIE模型訓(xùn)練服務(wù)和數(shù)據(jù)中心PUE優(yōu)化模型生成服務(wù)。