中国 AI 基础设施的核心矛盾,已经从“有没有模型需求”转向“底层系统能否承受推理洪峰”。从 2024 年初到 2026 年 3 月,大模型 token 消耗量从约 1000 亿次上升到约 140 万亿次,接近 1000 倍增长。低成本开源模型、DeepSeek 生态和应用扩散,把推理需求快速推向硬件侧。
真正的瓶颈并不只是芯片设计。中国并不缺懂架构、懂算法、懂芯片图纸的工程师,压力更集中在先进代工产能、良率爬坡和 HBM 高带宽内存。单点能力受限时,突破路线就会转向系统工程:Chiplet、先进封装、前置测试、Prefill/Decode 架构拆分、超级节点、CANN 软件栈、液冷、储能和预制电力模块一起构成新的基础设施地图。
这条路线的难点在于,每个环节单独看都不是满分答案,但放在一起会形成可运行的替代系统。它考验的不只是技术追赶速度,更是产业链组织能力、云厂商真实场景、数据中心交付速度和资本开支耐心。
一、推理需求爆发:Token 洪峰把压力推向硬件
当 token 消耗以近乎爆炸的速度增长,算力需求就不再是抽象指标。每一次输入、检索、推理和输出,都需要底层芯片、内存、网络和电力系统共同承担。约 1000 倍的增长意味着原有基础设施不是简单扩容,而是被迫重构。
推理需求和训练需求不同。训练更像阶段性大工程,推理则是持续在线的流量系统。模型越便宜、应用越普及、调用越频繁,推理侧越容易变成常态化压力。开源模型降低使用门槛后,算力需求会从少数头部实验室扩散到更多云服务、企业应用和个人工具。
这也是中国 AI 基建被迫加速的原因。外部限制使先进 GPU 获取受限,但应用需求并不会等供应链完美后再增长。需求先到,硬件必须用可用条件搭出系统级解法。
把这一层拆开,起点是1000亿次;高点是140万亿次;增长量级是约1000倍。它们共同说明的不是一个孤立结论,而是需求爆发、芯片供给、先进封装、软件生态、电力系统与云厂商架构之间的联动关系:约1000倍Token增长和约80%年复合需求,把AI压力从模型侧推向硬件侧。
反向校验也要同步进行。需求增速需要看本土推理算力;驱动因素需要看应用扩散;传导方向需要看算力承压。只要其中任何一环发生逆转,判断就应当重新估价;若这些条件继续同向强化,整套框架的解释力会明显提高。
二、芯片缺口的本质:设计不是最窄处,制造和内存才是
到 2030 年,中国 AI 芯片需求被估计在约 1400 万颗量级,而本土供应在 2026 年约 200 万颗、2028 年约 500 万颗。需求是千万级,供给仍是几百万级,缺口不是小幅错配,而是系统性压力。
很多讨论把问题简化成芯片设计能力,但真正卡住量产的是晶圆产能和良率。先进逻辑产能即使在未来两三年增加约 15 万到 20 万片,从晶圆变成可用芯片仍要穿过数百道复杂工序。技术迁移早期良率低,昂贵晶圆会有相当部分变成废品。
HBM 是另一条关键约束。AI 芯片不只是会算,还要高速读取和写入海量数据。若内存带宽不足,计算核心再强也会等待数据。本土主要依赖 HBM2e,向 HBM3、HBM3E 过渡受设备、认证和量产节奏限制,这使高带宽内存成为算力系统的供血瓶颈。
把这一层拆开,2030需求是约1400万颗;2026供应是约200万颗;2028供应是约500万颗。它们共同说明的不是一个孤立结论,而是需求爆发、芯片供给、先进封装、软件生态、电力系统与云厂商架构之间的联动关系:2030年需求约1400万颗,本土供应从2026年约200万颗到2028年约500万颗仍有差距。
反向校验也要同步进行。瓶颈一需要看产能和良率;瓶颈二需要看带宽动脉;误区需要看忽略制造现实。只要其中任何一环发生逆转,判断就应当重新估价;若这些条件继续同向强化,整套框架的解释力会明显提高。
三、Chiplet 与先进封装:用系统工程绕开单颗大芯片限制
当单颗大芯片受制于先进制程和良率,Chiplet 成为重要路线。它把一个巨大芯片拆成多个更小、更容易制造的模块,再通过先进封装和高速基板连接起来,让多个模块协同工作。
这个思路的优势在于把难题从单点制造转向系统组合。小芯片的良率更容易控制,封装后可以形成接近大芯片的整体能力。长电科技等封测厂向类似 CoWoS-L 的方向升级,正是为了在高速互联、基板、封装密度和热管理上吃到这条路线的增量。
但 Chiplet 并不是免费午餐。模块之间的通信延迟、封装可靠性、供电、散热和测试都会变得更复杂。它不是绕过物理限制,而是把限制重新分配到封装、测试和系统架构层。
把这一层拆开,路线是Chiplet;目标是系统性能;封装方向是CoWoS-L类。它们共同说明的不是一个孤立结论,而是需求爆发、芯片供给、先进封装、软件生态、电力系统与云厂商架构之间的联动关系:把多个小芯片封装成系统,用先进封装和高速基板逼近大芯片能力。
反向校验也要同步进行。代表环节需要看封测升级;核心壁垒需要看低延迟通信;约束需要看系统复杂。只要其中任何一环发生逆转,判断就应当重新估价;若这些条件继续同向强化,整套框架的解释力会明显提高。
四、测试环节升值:一个坏模块会拖累整个封装系统
Chiplet 架构会显著抬升测试的重要性。单体芯片坏了,只是一颗芯片报废;多个模块封在一起后,只要其中一个关键模块有问题,整个封装系统都可能失效。越是昂贵复杂的封装,越不能等到最后才发现问题。
因此,先测后封、前置筛选、可靠性验证和多维良率管理会从配套动作变成核心控制点。伟测科技等测试环节被重估,背后不是测试设备突然变新,而是产业链必须用测试来降低系统性报废概率。
这条逻辑也说明,AI 芯片产业链价值不会只停留在设计公司。封装、测试、基板、材料和设备都会因为系统复杂度上升而获得更高商业权重。
把这一层拆开,架构变化是多模块;测试时点是先测后封;价值提升是良率筛选。它们共同说明的不是一个孤立结论,而是需求爆发、芯片供给、先进封装、软件生态、电力系统与云厂商架构之间的联动关系:Chiplet让前置测试、良率筛选和可靠性验证从配套环节变成关键环节。
反向校验也要同步进行。代表公司需要看VTEST案例;商业逻辑需要看测试越值钱;风险需要看系统报废。只要其中任何一环发生逆转,判断就应当重新估价;若这些条件继续同向强化,整套框架的解释力会明显提高。
五、架构特化:把推理拆成 Prefill 与 Decode
推理并不是一个单一动作。Prefill 阶段要处理长提示词和上下文输入,Decode 阶段则逐 token 输出结果。两个阶段对计算、内存容量和带宽的需求不同,用同一种全能芯片处理全部任务,可能并不是最优解。
华为 Ascend 950P2 与 950DT 被放在这一思路里理解:采用相近计算核心,但通过不同内存配置分别偏向 Prefill 和 Decode。950P2 更适合长输入处理,950DT 更强调内存容量和带宽,以适配输出阶段。
这条路线体现的是系统效率思维。当前沿芯片供应不足时,不应只追求单卡绝对性能,而要把任务拆开,用专用化配置提高整体吞吐。全能不足,组合来补。
把这一层拆开,Prefill是长输入处理;Decode是逐Token输出;产品思路是950P2/950DT。它们共同说明的不是一个孤立结论,而是需求爆发、芯片供给、先进封装、软件生态、电力系统与云厂商架构之间的联动关系:同一计算核心可通过不同内存配置分别优化长提示输入和逐Token输出。
反向校验也要同步进行。核心资源需要看适配任务;系统收益需要看减少浪费;底层逻辑需要看优化组合。只要其中任何一环发生逆转,判断就应当重新估价;若这些条件继续同向强化,整套框架的解释力会明显提高。
六、超级节点:用高互联集群弥补单卡差距
单卡性能不足时,另一条路线是把系统做大、做密、做稳。超级节点和超级集群的目标,不是简单把许多 GPU 放在一个机房,而是通过高速互联、调度软件、供电和散热,把大量芯片组织成一个更大的计算实体。
华为 CloudMatrix 384、阿里 Pangu AI 128 和中科曙光 ScaleX 都体现了这种方向。ScaleX 被描述为集成超过一万颗 GPU、算力超过 5 EFLOPS,这类数字的意义在于系统级输出,而不是单颗芯片的炫技。
超级节点的难点在互联和调度。卡与卡之间数据传输要快,任务分配要稳,故障隔离要及时,电力和冷却要承受高密度负载。中国 AI 基建的突围,越来越像大型工业系统工程,而不是单个明星芯片的胜利。
把这一层拆开,华为是CloudMatrix 384;阿里是Pangu AI 128;中科曙光是ScaleX。它们共同说明的不是一个孤立结论,而是需求爆发、芯片供给、先进封装、软件生态、电力系统与云厂商架构之间的联动关系:CloudMatrix、Pangu AI和ScaleX代表用万卡互联提升系统级算力的路线。
反向校验也要同步进行。算力规模需要看系统级输出;核心能力需要看不只堆卡;现实意义需要看靠系统取胜。只要其中任何一环发生逆转,判断就应当重新估价;若这些条件继续同向强化,整套框架的解释力会明显提高。
七、软件生态:国产硬件必须跨过 CUDA 护城河
英伟达真正的壁垒不只是硬件性能,更是 CUDA 生态。开发者工具、算子库、框架适配、调试经验和社区资产,共同形成迁移成本。国产芯片若只完成硬件供给,而软件生态无法承接,应用侧仍会迟疑。
CANN 的意义在于连接 PyTorch 等上层框架和 Ascend 硬件,让开发者不必从底层重新适配每一个任务。若工具链持续成熟,并通过更开放的方式降低学习和迁移成本,国产 AI 硬件才可能从“能用”走向“好用”。
软件生态也是云厂商深度参与的原因。阿里、百度、腾讯、字节等拥有海量真实应用场景,既是芯片需求方,也可能成为底层软件和专用芯片架构的共同定义者。算力系统一旦被场景反复打磨,生态就会从替代逻辑走向自我演化。
把这一层拆开,既有护城河是CUDA;国产桥梁是CANN;上层框架是PyTorch。它们共同说明的不是一个孤立结论,而是需求爆发、芯片供给、先进封装、软件生态、电力系统与云厂商架构之间的联动关系:CANN连接上层框架与Ascend硬件,决定硬件替代能否走向系统替代。
反向校验也要同步进行。迁移难点需要看降低改造成本;关键动作需要看扩大生态;终局需要看不止硬件替代。只要其中任何一环发生逆转,判断就应当重新估价;若这些条件继续同向强化,整套框架的解释力会明显提高。
八、能源、液冷与储能:AI 基建扩张重塑电力系统
AI 超级节点把机架功率密度推高,传统风冷难以长期支撑。液冷不再只是可选升级,而是高密度算力基础设施的必备方向。冷却能力不足,芯片无法稳定满载,数据中心投入也无法转化为真实吞吐。
到 2030 年,AI 相关数据中心用电量可能占中国总用电量约 5%,增量 AI 电力需求约 50% 年复合增长。世纪互联被提及的新订单约 70% 与 AI 相关,说明算力需求已经向机房、电网、储能和供电模块持续传导。
宁德时代钠离子 ESS、预制电力模块和 800V 直流架构代表的不是边缘配套,而是算力上线速度。建设传统高压变电站周期长,而预制模块可以更快交付到数据中心现场。AI 基建的竞争,最终会延伸到电力系统、冷却管道和储能调度。
这也改变了产业链研究的视角。只盯几纳米制程,会错过许多真正决定交付节奏的环节;只盯芯片公司,也会低估数据中心、储能、电力设备、液冷和软件调度的价值。约束越多,系统集成能力越重要。
如果本土芯片满足 AI 基础需求的比例从 2025 年约 40% 提升到 2028 年约 80%,这背后一定不是单点突破,而是芯片、内存、封装、软件、数据中心和电力系统共同跑通。中国路线的核心特征,正是以系统工程弥补单点短板。
把这一层拆开,用电占比是约5%;增量需求是约50%CAGR;数据中心是70%新订单。它们共同说明的不是一个孤立结论,而是需求爆发、芯片供给、先进封装、软件生态、电力系统与云厂商架构之间的联动关系:液冷、储能、预制电力模块和800V直流架构成为算力扩张的基础条件。
反向校验也要同步进行。冷却方式需要看高功率密度;储能方向需要看削峰稳压;供电架构需要看快速部署。只要其中任何一环发生逆转,判断就应当重新估价;若这些条件继续同向强化,整套框架的解释力会明显提高。