本報記者 王鏡茹
隨著生成式人工智能技術從“模型訓練”逐步邁向大規(guī)模商業(yè)落地,以訓練為核心的算力消耗,正逐漸轉向以推理為主導的持續(xù)性算力需求。3月17日,英偉達首席執(zhí)行官黃仁勛在GTC大會上表示,AI推理市場拐點已經(jīng)到來,AI從訓練階段全面進入推理與執(zhí)行階段,推理算力需求呈指數(shù)級爆發(fā)。
“隨著生成式人工智能應用規(guī)模擴大,推理算力需求增長速度可能遠超訓練算力。一方面,應用需求爆發(fā),生成式AI與智能體應用加速落地,用戶高頻交互帶來指數(shù)級推理請求;另一方面,專用推理芯片、液冷散熱及光互連等技術持續(xù)突破,顯著提升算力效率與并發(fā)能力,為大規(guī)模部署奠定基礎。”深圳市前海排排網(wǎng)基金銷售有限責任公司研究員張鵬遠對《證券日報》記者表示。
從行業(yè)機構的預測來看,推理算力的重要性正持續(xù)提升。國際數(shù)據(jù)公司(IDC)預測,到2027年,我國推理算力占整體算力的比例將突破70%。中國IDC圈創(chuàng)始人、CEO黃超表示,2026年產(chǎn)業(yè)智能體將進入百花齊放的發(fā)展階段,算力應用正從“訓練主導”轉向“推理驅動”,推理算力需求的爆發(fā)周期即將全面到來。
面對推理算力需求的快速增長,國內(nèi)產(chǎn)業(yè)鏈上下游企業(yè)正加快技術研發(fā)和產(chǎn)品布局。在芯片層面,多家廠商正推出面向推理場景優(yōu)化的芯片。相較于傳統(tǒng)訓練芯片,推理芯片更強調(diào)功耗控制、成本效率以及部署靈活性,因此在云端和邊緣側均具有廣闊應用空間。
以深圳云天勵飛技術股份有限公司(以下簡稱“云天勵飛”)為例,該公司以NPU為核心,在云推理場景的大算力芯片上確定了GPNPU技術路線,并在矩陣、向量單元、存儲層級和有效帶寬利用上深度優(yōu)化,目標是指數(shù)級降低token成本,加速大模型應用的規(guī)?;?、普惠化落地。
2025年,云天勵飛實現(xiàn)營業(yè)收入13.08億元,同比增長42.57%。云天勵飛相關負責人對《證券日報》記者表示:“對于企業(yè)而言,隨著行業(yè)競爭從比訓練規(guī)模逐步轉向比推理效率、比交付成本、比系統(tǒng)賺錢能力,誰能更早把硬件、存儲和軟件協(xié)同做到位,誰就更有機會在推理時代占據(jù)主動。”
在服務器和系統(tǒng)層面,頭部廠商也在持續(xù)推出針對推理場景優(yōu)化的算力平臺。例如,浪潮電子信息產(chǎn)業(yè)股份有限公司推出了元腦R1推理服務器,可實現(xiàn)單機支持16張標準PCIe雙寬卡,單機即可部署DeepSeek-671B模型;推出元腦CPU推理服務器,可快速部署并高效運行DeepSeek-R132B、QwQ-32B等新一代推理模型。
與此同時,算力基礎設施建設也在同步提速。過去,國內(nèi)許多智算中心普遍采用訓推一體的建設模式。3月12日,云天勵飛中標廣東省湛江市AI滲透支撐新質(zhì)生產(chǎn)力基礎設施建設項目,該項目定位為專注推理任務的AI推理集群,主要面向各類行業(yè)應用場景,為國內(nèi)傳統(tǒng)產(chǎn)業(yè)的AI化提供落地樣本。
北京止于至善投資管理有限公司總經(jīng)理何理認為,在這一變革中,高性能推理芯片、HBM及全棧軟件將率先受益算力紅利。推理場景對低延遲、高吞吐和能效要求極高,LPU、ASIC等專用架構將加速替代通用計算單元,HBM4等存儲技術將成為突破帶寬瓶頸的關鍵。同時,算力由數(shù)據(jù)中心向邊緣側下沉,高密度推理機架與先進散熱技術需求提升,疊加模型量化、參數(shù)壓縮等編譯優(yōu)化,將推動產(chǎn)業(yè)從硬件堆疊轉向軟硬協(xié)同。
(編輯 喬川川)
海爾發(fā)布AI全場景方案 周云杰回應用戶需求與技術落地2026-03-14 12:00
| 11:18 | 歸創(chuàng)通橋公布2025年業(yè)績數(shù)據(jù):海外... |
| 11:17 | 2026青島市全生命周期科技金融高質(zhì)... |
| 11:16 | 麥迪科技發(fā)布2025年報 聚焦醫(yī)療主... |
| 09:34 | 原料成本上行 輪胎企業(yè)密集漲價 |
| 09:33 | 推理算力需求激增 產(chǎn)業(yè)鏈企業(yè)加快... |
| 09:33 | 亞朵集團2025年營收同比增長35.1% ... |
| 09:13 | 中新賽克:關于擬變更2026年度審計... |
| 09:08 | 宋城演藝:公司回購的股份將全部用... |
| 09:08 | 天億馬:公司已形成“投資+建設+運... |
| 09:08 | 萬辰集團:公司2025年度歸屬于上市... |
| 09:08 | 萬里揚:目前公司有收到機器人公司... |
| 09:08 | 濰柴動力:公司沒有燃氣輪機和商業(yè)... |
版權所有《證券日報》社有限責任公司
互聯(lián)網(wǎng)新聞信息服務許可證 10120240020增值電信業(yè)務經(jīng)營許可證 京B2-20250455
京公網(wǎng)安備 11010602201377號京ICP備19002521號
證券日報網(wǎng)所載文章、數(shù)據(jù)僅供參考,使用前務請仔細閱讀法律申明,風險自負。
證券日報社電話:010-83251700網(wǎng)站電話:010-83251800 網(wǎng)站傳真:010-83251801電子郵件:xmtzx@zqrb.net
安卓
IOS
掃一掃,加關注
掃一掃,加關注