Kimik2 是月之暗面(Moonshot AI)发布的开源大语言模型,采用 MoE 架构,总参数达到 1 万亿,激活参数 32B。它把重心放在长文本处理和代码生成上,200 万字的上下文窗口意味着整本书、整份代码仓库可以一次性输入分析。作为一款开源大语言模型,它同时放出基础预训练版和指令微调版,科研团队与开发者都能拿到权重自行研究。核心功能覆盖文档问答、多步骤任务规划、多语言内容生成以及编程辅助,适合经常和大体量文本打交道的人。
长文本处理
- 超长上下文:Kimik2 支持 200 万字窗口,长合同、论文、日志可以整篇喂进去,不用反复切段。
- 智能体执行:能自主拆解步骤、规划路径并连续调用工具,而不是只做一问一答的单轮响应。
- 编程辅助:HumanEval 编码通过率 78%,能读懂项目结构、补全函数、排查报错。
- 多语言生成:中英文之外还覆盖多种语言,可用于客服话术、教学材料和创意写作。
开源资源
- 双版本发布:Kimi-K2-Base 适合预训练和二次开发,Kimi-K2-Instruct 可直接用于问答与智能体任务。
- 宽松协议:开源许可对商业使用友好,允许检查、修改并扩展模型能力。
- 量化部署:支持 4-bit 量化,笔记本和企业级服务器都能跑,硬件门槛可控。
- 训练优化:训练阶段采用 MuonClip 优化器,长周期训练过程保持稳定。
从公开数据看,Kimik2 在 GLUE 上得分 92.5、SQuAD 2.0 得分 94.1,编程与推理方面的表现可以对标 Claude 4、GPT-4.1 这类国际一线模型。官网提供了技术文档、示例和使用指南,能帮人快速判断该用哪个版本、怎么部署。手头有大批文档或代码要处理的话,值得先去翻一遍再决定落地方案。
数据统计
相关导航
暂无评论...
