人类历史上最厉害的压缩技术,不是ZIP或JPEG,而是文字。一个“火”字,就能把燃烧、温度、颜色、危险、能量等复杂的元素浓缩进一个符号。几笔写成,信息密度极高,解码成本···
人类历史上最厉害的压缩技术,不是ZIP或JPEG,而是文字。
一个“火”字,就能把燃烧、温度、颜色、危险、能量等复杂的元素浓缩进一个符号。几笔写成,信息密度极高,解码成本极低。
大模型压缩,本质上在做同一件事:设计一套更高效率的“文字”,用最少的笔画承载最多的知识。
然而,2026年的半导体市场呈现出一种极致的撕裂感。一边是高盛等机构不断调高预期,HBM(高带宽内存)供不应求,DDR5价格持续飙涨,“内存墙”成为算力发展的物理瓶颈;另一边,端侧AI设备受限于功耗与体积,内存规格无法无限膨胀,大模型在终端的落地似乎被一道无形的成本天花板死死压住。
算力在涨,但终端装不下。“旧文字”太占地方了。传统大模型用FP16表示参数,相当于用复杂英文字母写文章,篇幅巨大。产业界迫切需要一套笔画更少、信息密度更高的“新文字”。
5月23日,BitCPM-CANN于华为鲲鹏昇腾开发者大会(KADC 2026)首次亮相,由面壁智能AI Infra负责人、清华大学计算机系高性能所·水木学者博士后李宇轩进行技术分享。

简单来讲,面壁智能全球首次在华为昇腾平台上完成端到端1.58-bit(极致低比特)训练栈,并将规模推至8B级别,相较于相同尺寸的全精度模型,性能几乎无下降。
它向外界释放了一个明确信号:在国产算力底座上,同样能诞生引领世界的训练范式。
那么,这套“新文字”是怎么设计出来的?它将如何改写端侧AI的产业规则?

在探讨面壁智能此次技术突破的意义之前,我们有必要先审视当下端侧AI产业所面临的真实困境。2026年的AI产业,表面上风光无限:大模型正争先恐后从云端向手机、PC、汽车快速下沉,各种“AI Phone”“AI PC”概念层出不穷,仿佛人人都能碰到最强AI。
然而,在这股热潮之下,一场关于生存成本的暗战正在打响。
问题的根源要从我们用来承载AI知识的“文字”说起。
传统大模型用的是一套相当奢侈的“文字系统”。每个参数用FP16表示,相当于每个笔画要占16个格子。一个70亿参数的模型,光“写下来”就需要约14GB内存。加上操作系统和其他应用,16GB的旗舰手机已经写不下了。

这套“旧文字”不光占地方,书写成本还在飙升。高盛的最新预测显示,受AI服务器需求拉动,存储芯片市场正在经历一轮超级周期。HBM供不应求,DDR5等主流内存价格涨幅预期最高被调至280%。对端侧设备厂商而言,这是一道残酷的选择题:要么接受上涨的BOM成本,压缩本就微薄的利润空间;要么削减内存配置,让AI功能沦为“能装不能跑”的营销噱头。
固有的“内存墙”加深了这一困境。冯·诺依曼架构下,计算单元与存储单元在物理上分离,数据需要在两者之间频繁搬运。即便端侧芯片的TOPS数值再高,如果内存带宽无法及时“喂饱”数据,大部分算力都将处于空转状态。
并且,国内AI大模型的训练与部署长期高度依赖NVIDIA CUDA生态。很长一段时间里,许多国产大模型的训练仍需在NVIDIA集群上完成核心验证,再费时费力地迁移至昇腾平台。这种“绕道走”的模式,不仅拉长研发周期、提高试错成本,也让国产算力平台始终难以摆脱追赶者的位置,难以建立真正自主的技术体系。

层层压力叠加下来,今天的端侧 AI,正被困在一个无法破解的不可能三角里:想要更强的模型能力,就要付出更高的硬件成本;想要控制成本、降低功耗,就不得不砍掉模型能力。三者之间几乎没有兼顾的余地。
传统解决方案如模型蒸馏、知识剪枝本质上都是在丢精度换内存,代价是字变得潦草。行业真正需要的是一种笔画更少、信息密度更高的文字系统。而在KADC 2026上亮相的BitCPM-CANN,恰恰切中了这一核心痛点。
发表评论
最近发表
标签列表