11月3日,《AI产业参考》发布2026年第31期。最新数据显示,我国AI推理数据量首次超过训练数据量,日均词元调用量超过175万亿,标志AI产业正从“喂模型”全面转入“用模型”的落地阶段。
推理数据量超越训练数据量,意味着大量大模型已进入生产环境被真实业务持续调用,而非停留在训练与评测环节。175万亿的日均词元调用量对应海量的文本生成、代码补全、多模态理解与边缘设备上的实时推理请求;这一结构变化让算力需求重心从“训练集群”向“推理与边缘部署”迁移,也把推理成本、时延与隐私三道关摆上桌面。
从行业格局看,推理是AI价值的兑现环节。把高频、低时延、强隐私的任务放到端侧/边缘执行、复杂任务放云端,正成为主流架构。对算力产业而言,推理数据中心、边缘推理盒与端侧NPU将迎来更持久的增量,训练与推理的占比拐点也重塑了芯片、服务器与边缘硬件的市场格局。
推理重心下沉,正是边缘硬件的机遇。军屹微电子的边缘计算主机AI-BOX-3588、5G-EDGE-3399Pro与K系列边缘智能主板专为端侧推理设计,支持在设备本地运行轻量级模型,减少回传带宽与时延;搭配触控一体机可在工业、商业现场直接落地“模型+交互”应用,把万亿量级的推理需求承接在更贴近数据源头的位置。
来源:http://topic.scol.com.cn/2026/26aicyck/qs/202611/83349900.html(2026-11-03)
