在日趨成熟的AI技術(shù)賦能各類大中小企業(yè)的高質(zhì)量發(fā)展,與此同時(shí),如何做好數(shù)據(jù)存儲(chǔ)也成為巨大的難題。數(shù)據(jù)存儲(chǔ)是保障AI技術(shù)高速運(yùn)行的背后英雄,其技術(shù)面臨著接踵而來的多樣化挑戰(zhàn)。海量數(shù)據(jù)井噴,如何高效處理數(shù)據(jù)存儲(chǔ)成為關(guān)鍵挑戰(zhàn),不僅關(guān)系到專業(yè)技術(shù)領(lǐng)域的生存和發(fā)展,更關(guān)系經(jīng)濟(jì)、社會(huì)的發(fā)展。極道科技(北京)有限公司聯(lián)合創(chuàng)始人、副總經(jīng)理謝鵬,敏銳洞察市場發(fā)展痛點(diǎn),聚焦數(shù)據(jù)存儲(chǔ)這一核心問題,以技術(shù)革新推動(dòng)各個(gè)產(chǎn)業(yè)加速前行。
隨著數(shù)字化轉(zhuǎn)型的深入推進(jìn),數(shù)據(jù)量呈現(xiàn)出爆炸式增長態(tài)勢,這對存儲(chǔ)系統(tǒng)的擴(kuò)展性和容量提出了更為嚴(yán)格的要求。在數(shù)據(jù)安全與隱私保護(hù)方面,數(shù)據(jù)泄露和網(wǎng)絡(luò)攻擊的風(fēng)險(xiǎn)不斷上升,每個(gè)企業(yè)或機(jī)構(gòu)必須確保數(shù)據(jù)的安全性和隱私性,防止敏感信息泄露。此外,數(shù)據(jù)管理具有復(fù)雜性,數(shù)據(jù)類型豐富多元,包括結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)以及非結(jié)構(gòu)化數(shù)據(jù),如何高效管理和利用這些數(shù)據(jù)成為一個(gè)重大難題。對于許多企業(yè)而言,隨著業(yè)務(wù)需求逐漸多樣化,對數(shù)據(jù)訪問速度和系統(tǒng)性能的要求也日益提升,尤其是在實(shí)時(shí)分析和決策支持領(lǐng)域。面對這一系列挑戰(zhàn),傳統(tǒng)的存儲(chǔ)解決方案已難以滿足當(dāng)前的需求。因此,如何在數(shù)據(jù)洪流中確保存儲(chǔ)系統(tǒng)的擴(kuò)展性、安全性、管理效率和性能,成為數(shù)字存儲(chǔ)技術(shù)領(lǐng)域相關(guān)從業(yè)人工亟待解決的關(guān)鍵問題。
針對數(shù)據(jù)存儲(chǔ)技術(shù)面臨的行業(yè)發(fā)展痛點(diǎn),謝鵬帶領(lǐng)團(tuán)隊(duì)積極創(chuàng)新數(shù)據(jù)存儲(chǔ)技術(shù),研發(fā)出一個(gè)個(gè)技術(shù)成果,突破技術(shù)壁壘,幫助企業(yè)解決各種存儲(chǔ)難題。在謝鵬的帶領(lǐng)下,極道公司技術(shù)團(tuán)隊(duì)研究發(fā)表了“極道高可用分布式系統(tǒng)軟件”“極道Alamo分布式文件存儲(chǔ)系統(tǒng)”“極道容器化高性能計(jì)算系統(tǒng)”“極道面向IO能力的分布式計(jì)算調(diào)度系統(tǒng)”等十個(gè)軟件技術(shù)成果,幫助了很多企業(yè)解決了數(shù)據(jù)存儲(chǔ)、管理、計(jì)算調(diào)度等方面的問題。很多用戶,如科研機(jī)構(gòu)、醫(yī)療科研機(jī)構(gòu)、大型科技公司引入極道公司的智能數(shù)據(jù)系統(tǒng)后,謝鵬帶領(lǐng)團(tuán)隊(duì)根據(jù)業(yè)務(wù)需求,為其打造 “存管算” 一體化解決方案,可以讓數(shù)據(jù)的存儲(chǔ)性能提升至兩至三倍以上,有效提升了用戶的業(yè)務(wù)運(yùn)行以及交付能力。同時(shí),他們研發(fā)的存儲(chǔ)技術(shù)可以將各種類型的任務(wù)組合在一起組成高級數(shù)據(jù)流,明顯縮短計(jì)算任務(wù)周期,提升數(shù)據(jù)交付能力,降低了維護(hù)人力物力的投入。
而最近,由謝鵬研發(fā)的“面向計(jì)算密集任務(wù)的存算數(shù)據(jù)分層管理系統(tǒng) V1.0”及“計(jì)算密集系統(tǒng)存算融合數(shù)據(jù)分層優(yōu)化系統(tǒng) V1.0”面市,這兩個(gè)系統(tǒng)通過分層存儲(chǔ)架構(gòu)、智能調(diào)度算法和異構(gòu)資源協(xié)同,解決了計(jì)算密集型場景中數(shù)據(jù)搬運(yùn)耗時(shí)、資源利用率低、運(yùn)維成本高等核心痛點(diǎn)。其技術(shù)價(jià)值不僅體現(xiàn)在性能指標(biāo)的突破,更在于通過數(shù)據(jù)智能重構(gòu)了傳統(tǒng)計(jì)算范式,為精準(zhǔn)醫(yī)療、AI 大模型、工業(yè)仿真等領(lǐng)域提供了可規(guī);涞氐母咝Ы鉀Q方案。
特別在場景適配層面,這兩個(gè)系統(tǒng)可以針對生物信息學(xué)的基因序列分析、類腦融合智算開發(fā)的數(shù)值模擬等差異化需求,提供高度定制化的解決方案。例如,在生物信息學(xué)領(lǐng)域,基因序列分析往往涉及龐大的數(shù)據(jù)集和復(fù)雜的計(jì)算任務(wù),這兩個(gè)系統(tǒng)能夠智能地根據(jù)分析任務(wù)的特點(diǎn),優(yōu)化數(shù)據(jù)存儲(chǔ)和調(diào)度策略,從而顯著提升分析效率和準(zhǔn)確性。而在類腦融合智算開發(fā)的數(shù)值模擬方面,系統(tǒng)則能針對模擬過程中的大規(guī)模數(shù)據(jù)交換和實(shí)時(shí)計(jì)算需求,實(shí)現(xiàn)數(shù)據(jù)的快速處理和高效利用,助力科研人員更快獲得模擬結(jié)果,加速研究進(jìn)程。
謝鵬及其團(tuán)隊(duì)在數(shù)據(jù)存儲(chǔ)領(lǐng)域的持續(xù)創(chuàng)新,為數(shù)字時(shí)代的發(fā)展注入了強(qiáng)勁動(dòng)力。從破解傳統(tǒng)存儲(chǔ)難題到打造 “存管算” 一體化解決方案,再到最新的存算融合系統(tǒng),他以技術(shù)突破回應(yīng)了 AI 時(shí)代對數(shù)據(jù)存儲(chǔ)的迫切需求。這些成果不僅賦能科研、醫(yī)療、AI 大模型等多個(gè)領(lǐng)域高效運(yùn)轉(zhuǎn),更重塑了數(shù)據(jù)管理與計(jì)算的范式。未來,隨著數(shù)據(jù)洪流的持續(xù)奔涌,謝鵬將帶領(lǐng)團(tuán)隊(duì)繼續(xù)深耕技術(shù)創(chuàng)新,為各行業(yè)突破數(shù)據(jù)瓶頸、加速數(shù)字化轉(zhuǎn)型提供更堅(jiān)實(shí)的支撐,助力社會(huì)在數(shù)據(jù)驅(qū)動(dòng)的浪潮中穩(wěn)步前行。(趙詩慧)