(資料圖)

騰訊新聞《一線》?作者?肖楓?

“科大訊飛和華為在聯(lián)合攻關(guān)算力卡脖子的問題。”在近日舉辦的訊飛星火認知大模型V2.0升級發(fā)布會上，科大訊飛董事長劉慶峰介紹，其與華為聯(lián)合打造的專屬大模型的軟硬件一體化設(shè)備，在單卡算力上對標英偉達的算力芯片A100。此外，劉慶峰表示，還在和華為一道打造面向超大規(guī)模大模型訓(xùn)練的國產(chǎn)算力集群，形成集群化優(yōu)勢。

劉慶峰介紹，大模型的研發(fā)過程，需要可以支撐千億參數(shù)規(guī)模的大模型并行訓(xùn)練的算力和框架，還需要幾千張卡同時連續(xù)運行。基于此，系統(tǒng)架構(gòu)以及并行訓(xùn)練的集群能力成為國內(nèi)大模型研發(fā)的關(guān)鍵。

此次發(fā)布的星火一體機，是科大訊飛與華為在AI算力、大模型的合作落地之一，將面向行業(yè)、企業(yè)客戶，提供基于專用數(shù)據(jù)的自主可控私有化大模型。據(jù)了解，星火一體機基于華為鯤鵬CPU+昇騰GPU，另外聯(lián)合華為存儲和網(wǎng)絡(luò)提供整機柜方案。

科大訊飛表示，星火一體機的訓(xùn)練和推理一體化部署，可用于問答系統(tǒng)、對話生成、知識圖譜構(gòu)建、智能推薦等領(lǐng)域的應(yīng)用，具備大模型預(yù)訓(xùn)練、多模態(tài)理解與生成、多任務(wù)學(xué)習(xí)和遷移等能力。

就在此前的7月份，科大訊飛公布訊飛星火將與昇騰AI聯(lián)合，打造基于中國自主創(chuàng)新的通用智能新底座。一方面，訊飛星火認知大模型基于訓(xùn)練推理一體化設(shè)計，實現(xiàn)大模型稀疏化、低精度量化的技術(shù)突破，能高效適配昇騰AI，加速大模型的行業(yè)落地應(yīng)用和迭代；另一方面，以昇騰AI為核心，軟硬件協(xié)同優(yōu)化，構(gòu)建算力集中、性能優(yōu)越、供給穩(wěn)定、數(shù)據(jù)安全的大模型訓(xùn)練集群。

劉慶峰解釋，華為跟科大訊飛共同在昇騰AI的軟硬件平臺和軟件的支撐工具上，把高算力AI芯片、高性能的算子庫、多卡高速互聯(lián)以及分布式存儲結(jié)合起來，針對人工智能所需要的最重要的算子庫進行甄別和打磨。在此基礎(chǔ)上，架構(gòu)科大訊飛的訓(xùn)練和數(shù)據(jù)閉環(huán)全流程設(shè)計，以及訓(xùn)練和推理一體化設(shè)計的自研大模型訓(xùn)練平臺，中間是支持大規(guī)模的異構(gòu)算力兼容，也支持混合云架構(gòu)易拓展，使得所有產(chǎn)品架構(gòu)在安全可控的平臺上。

目前，訊飛星火大模型擁有130億、650億和1750億3個版本的模型參數(shù)可選。圍繞星火大模型，科大訊飛正在構(gòu)建開發(fā)者生態(tài)，目前有4000多個助手開發(fā)者團隊加入星火平臺。劉慶峰預(yù)測，訊飛星火大模型預(yù)計將于今年10月24日全面超越ChatGPT，明年上半年將正式對標GPT-4。

關(guān)鍵詞：