近年來,生成式AI逐漸從云端向終端側擴展,讓人們隨時隨地都能體驗各種創(chuàng)新的AI功能。最近,高通在微博上表示,中國移動終端公司研發(fā)的終端小語言模型(CM-3B)成功面向驍龍旗艦移動平臺完成優(yōu)化,成為首個由運營商自研的語言模型在端側應用的案例。該模型專門為高隱私低延遲的 AI 應用而打造,適配部署于旗艦智能手機。
高通是領先的無線連接與移動計算公司,長期推動終端側AI的發(fā)展。早在去年10月,高通就推出了專為生成式AI而精心打造的移動平臺——第三代驍龍8,帶來高性能低功耗的終端側AI推理能力。同時,第三代驍龍8還支持異構計算,綜合運用高通AI引擎上的多樣化處理器,包括CPU、GPU、NPU等,賦能終端側實現(xiàn)豐富的AI用例。
今年10月,高通推出了新一代移動平臺――驍龍8至尊版,首次采用一系列領先技術,包括第二代定制的高通Oryon CPU、高通Adreno GPU和增強的高通Hexagon NPU,實現(xiàn)了性能和能效的大幅提升,可以直接在終端側提供個性化的多模態(tài)生成式AI,支持語音、情境和圖像理解,全面增強從生產(chǎn)力到創(chuàng)意任務等各方面的體驗,并且將用戶隱私保護放在首位。
CM-3B是由中國移動終端公司研發(fā),以中國移動研究院九天端側大模型為基礎打造的終端智能體,以語音助手為應用載體,在意圖識別、中英互譯、文本總結等終端應用方面均達到行業(yè)同參數(shù)規(guī)模領先水平。此次中國移動終端公司與高通技術公司經(jīng)過一系列技術攻關,成功面向第三代驍龍8以及驍龍8至尊版移動平臺進行優(yōu)化,實現(xiàn)更佳運行表現(xiàn),將為廣大用戶帶來豐富的終端側AI體驗,推動終端側生成式AI規(guī)模化擴展。 
