《電子技術(shù)應(yīng)用》
您所在的位置:首頁(yè) > 人工智能 > 業(yè)界動(dòng)態(tài) > 華為百度阿里云等發(fā)起大模型基礎(chǔ)設(shè)施高質(zhì)量發(fā)展行動(dòng)計(jì)劃

華為百度阿里云等發(fā)起大模型基礎(chǔ)設(shè)施高質(zhì)量發(fā)展行動(dòng)計(jì)劃

2024-11-13
來(lái)源:IT之家

11 月 13 日消息,中國(guó)人工智能產(chǎn)業(yè)聯(lián)盟第十三次全會(huì)于 11 月 12 日在北京召開,,華為數(shù)據(jù)存儲(chǔ)聯(lián)合中國(guó)信通院,、工信部人工智能關(guān)鍵技術(shù)和應(yīng)用評(píng)測(cè)實(shí)驗(yàn)室、工商銀行,、中國(guó)移動(dòng)、中國(guó)聯(lián)通,、百度,、阿里云、騰訊云,、螞蟻集團(tuán)等正式發(fā)起 "大模型基礎(chǔ)設(shè)施高質(zhì)量發(fā)展行動(dòng)計(jì)劃",。

該計(jì)劃以提升大模型基礎(chǔ)設(shè)施的質(zhì)量與效能為目標(biāo),共同加快布局 "高效計(jì)算調(diào)度 + 高性能 AI 存儲(chǔ) + 高通量網(wǎng)絡(luò) + 高效能開發(fā)平臺(tái) + 智能化運(yùn)維平臺(tái)",,助力大模型工程化落地,。

1.jpg

華為閃存存儲(chǔ)領(lǐng)域總裁黃濤表示,人類利用數(shù)據(jù)在 AI 領(lǐng)域取得長(zhǎng)足發(fā)展,,數(shù)智時(shí)代是數(shù)據(jù)的黃金時(shí)代,,隨著數(shù)據(jù)規(guī)模爆炸式增長(zhǎng)、數(shù)據(jù)價(jià)值不斷攀升,,但同時(shí)我們面臨 xPU 與存儲(chǔ)的帶寬不足,、算力集群可用度低,、推理時(shí)延長(zhǎng)等挑戰(zhàn),這對(duì)存儲(chǔ)提出更高要求,。黃濤提出,,具備極致性能、高擴(kuò)展性,、數(shù)據(jù)韌性,、可持續(xù)發(fā)展、新數(shù)據(jù)范式以及數(shù)據(jù)編織能力的新一代 AI 存儲(chǔ)是通往 AI 數(shù)智時(shí)代的必由之路,。

黃濤還稱,,隨著大模型的規(guī)模法則(Scaling Law)不斷演進(jìn),無(wú)論是在進(jìn)行 CKPT 的并行保存與加載,、多模態(tài)數(shù)據(jù)的收集與清洗,、全局?jǐn)?shù)據(jù)的 Shuffle(混洗)與模態(tài)對(duì)齊,還是 AI 算法的調(diào)優(yōu)以及大規(guī)模集群的運(yùn)維診斷跟蹤,,都迫切需要一個(gè)全局對(duì)等共享,、單一命名空間、且具備高性能并行讀寫能力的大型文件系統(tǒng),。這樣的系統(tǒng)能夠避免多文件系統(tǒng)和多集群之間聯(lián)邦式的低效堆疊,,從而顯著簡(jiǎn)化大規(guī)模集群環(huán)境下的數(shù)據(jù)調(diào)度和數(shù)據(jù)管理流程,進(jìn)而持續(xù)提高數(shù)據(jù)供應(yīng)的效率,。


Magazine.Subscription.jpg

本站內(nèi)容除特別聲明的原創(chuàng)文章之外,,轉(zhuǎn)載內(nèi)容只為傳遞更多信息,并不代表本網(wǎng)站贊同其觀點(diǎn),。轉(zhuǎn)載的所有的文章,、圖片、音/視頻文件等資料的版權(quán)歸版權(quán)所有權(quán)人所有,。本站采用的非本站原創(chuàng)文章及圖片等內(nèi)容無(wú)法一一聯(lián)系確認(rèn)版權(quán)者,。如涉及作品內(nèi)容、版權(quán)和其它問(wèn)題,,請(qǐng)及時(shí)通過(guò)電子郵件或電話通知我們,,以便迅速采取適當(dāng)措施,避免給雙方造成不必要的經(jīng)濟(jì)損失,。聯(lián)系電話:010-82306118;郵箱:[email protected],。