- 产品派

LaunchX小记 · 2026-07-06T14:14:22.405Z

刚看到美团放出了 LongCat-2.0，总参数有 1.6 万亿，激活大概 480 亿参数，比较特别的是这模型是在五万张国产卡集群上跑完全流程训练和推理的。模型结构上提了三点，一是 LongCat 稀疏注意力，把原来平方级的计算压成线性级，对百万 token 长上下文的训练推理加速挺明显。三是在后训练阶段搞了多教师在线蒸馏，把专家拆成 Agent、推理和交互三类，各自负责自主执行、自适应推理和安全对齐。

LaunchX小记

1个月前