导语：面壁智能不息清华大学、OpenBMB 开源社区，今天致密发布并开源其在低比特大模子检修标的的最新效果 —— BitCPM-CANN。

IT 之家  5 月 25 日音问，面壁智能不息清华大学、OpenBMB 开源社区，今天致密发布并开源其在低比特大模子检修标的的最新效果 —— BitCPM-CANN。

官方暗意，这是中国首个十足基于国产算力平台（华为昇腾）已毕端到端检修并开源的三值（1.58-bit）大模子。从量化算子、检修算法到全链路框架，BitCPM-CANN   均在华为昇腾上原生完成，包含 0.5B、1B、3B、8B 四个模子尺寸，与同尺寸 MiniCPM4 全精度家眷逐项对照评测，性能进展优异。

比拟传统 BF16 精度，BitCPM-CANN 在推理阶段开释约 6 倍显存红利，同期将模子材干保留率看护在   90% – 97.2%。

官方暗意，银河国际(GALAXY)敌手机产业来说，6 倍的显存红利意味着，一个 8B 参数的 BitCPM-CANN 大模子，不错罅隙脱手在现时主流旗舰手机之上。

此外，面壁智能基于 MindSpeed × Megatron-LM 骨干搭建了完好的低比特检修底座，包含环境适配、32K 长序列复旧、并行计策、交融算子等完好工程体系。从此，通盘面向昇腾的低比特检修责任，王人可建造在兼并套寰宇基础步调之上。

BitCPM-CANN 0.5B / 1B / 3B / 8B 全系列模子权重现已开源，IT 之家附流畅如下：

（著述为作家孤苦不雅点银河国际游戏平台app，不代表艾瑞网态度）