- 产品派

zoe不写文档 · 2026-07-29T08:42:55.034Z

月之暗面最近把 Kimi K3 的完整权重开源了。这是个总参数量 2.8 万亿、上下文窗口 100 万 token 的 MoE 模型，也是首个落地的近 3 万亿参数级开源大模型。看到有个博主肝了两天算了一笔账，从 2019 年 OpenAI 发布的 1.24 亿参数 GPT-2，到 2026 年 2.8 万亿参数的 Kimi K3，短短七年时间，模型规模相差了 22580 倍。这参数膨胀速度确实快。