C114通信網(wǎng)  |  通信人家園

人工智能
2024/11/13 10:19

華為、百度、阿里云、騰訊云、螞蟻集團(tuán)等發(fā)起“大模型基礎(chǔ)設(shè)施高質(zhì)量發(fā)展行動計(jì)劃”

IT之家  汪淼

中國人工智能產(chǎn)業(yè)聯(lián)盟第十三次全會于 11 月 12 日在北京召開,華為數(shù)據(jù)存儲聯(lián)合中國信通院、工信部人工智能關(guān)鍵技術(shù)和應(yīng)用評測實(shí)驗(yàn)室、工商銀行、中國移動、中國聯(lián)通、百度、阿里云、騰訊云、螞蟻集團(tuán)等正式發(fā)起“大模型基礎(chǔ)設(shè)施高質(zhì)量發(fā)展行動計(jì)劃”。

從大會獲悉,該計(jì)劃以提升大模型基礎(chǔ)設(shè)施的質(zhì)量與效能為目標(biāo),共同加快布局“高效計(jì)算調(diào)度 + 高性能 AI 存儲 + 高通網(wǎng)絡(luò) + 高效能開發(fā)平臺 + 智能化運(yùn)維平臺”,助力大模型工程化落地。

華為閃存存儲領(lǐng)域總裁黃濤表示,人類利用數(shù)據(jù)在 AI 領(lǐng)域取得長足發(fā)展,數(shù)智時代是數(shù)據(jù)的黃金時代,隨著數(shù)據(jù)規(guī)模爆炸式增長、數(shù)據(jù)價值不斷攀升,但同時我們面臨 xPU 與存儲的帶寬不足、算力集群可用度低、推理時延長等挑戰(zhàn),這對存儲提出更高要求。黃濤提出,具備極致性能、高擴(kuò)展性、數(shù)據(jù)韌性、可持續(xù)發(fā)展、新數(shù)據(jù)范式以及數(shù)據(jù)編織能力的新一代 AI 存儲是通往 AI 數(shù)智時代的必由之路。

黃濤還稱,隨著大模型的規(guī)模法則(Scaling Law)不斷演進(jìn),無論是在進(jìn)行 CKPT 的并行保存與加載、多模態(tài)數(shù)據(jù)的收集與清洗、全局?jǐn)?shù)據(jù)的 Shuffle(混洗)與模態(tài)對齊,還是 AI 算法的調(diào)優(yōu)以及大規(guī)模集群的運(yùn)維診斷跟蹤,都迫切需要一個全局對等共享、單一命名空間、且具備高性能并行讀寫能力的大型文件系統(tǒng)。這樣的系統(tǒng)能夠避免多文件系統(tǒng)和多集群之間聯(lián)邦式的低效堆疊,從而顯著簡化大規(guī)模集群環(huán)境下的數(shù)據(jù)調(diào)度和數(shù)據(jù)管理流程,進(jìn)而持續(xù)提高數(shù)據(jù)供應(yīng)的效率。

給作者點(diǎn)贊
0 VS 0
寫得不太好

免責(zé)聲明:本文僅代表作者個人觀點(diǎn),與C114通信網(wǎng)無關(guān)。其原創(chuàng)性以及文中陳述文字和內(nèi)容未經(jīng)本站證實(shí),對本文以及其中全部或者部分內(nèi)容、文字的真實(shí)性、完整性、及時性本站不作任何保證或承諾,請讀者僅作參考,并請自行核實(shí)相關(guān)內(nèi)容。

熱門文章
    最新視頻
    為您推薦

      C114簡介 | 聯(lián)系我們 | 網(wǎng)站地圖 | 手機(jī)版

      Copyright©1999-2024 c114 All Rights Reserved | 滬ICP備12002291號

      C114 通信網(wǎng) 版權(quán)所有 舉報電話:021-54451141