2025年7月16日,北京 – 国内人工智能领域再迎重磅消息。由北京月之暗面科技有限公司(Moonshot AI)自主研发的新一代大语言模型Kimi K3正式对外披露核心技术参数:模型总参数量达到惊人的2.8万亿(2.8T),成为目前全球公开报道中参数规模最大的大语言模型。这一数字不仅大幅超越此前业界标杆,更标志着中国在超大规模AI模型研发领域已迈入世界最前沿。

Kimi系列模型自2023年首次推出以来,凭借超长文本处理能力迅速“出圈”。此次发布的Kimi K3在架构上进行了全面革新。据月之暗面官方介绍,K3采用了混合专家模型(MoE)架构,激活参数约为5000亿,远高于前代Kimi K2的4000亿激活量。通过动态路由机制和稀疏化计算,模型在保持高推理效率的同时,实现了总参数量的指数级增长。

“2.8万亿参数并非简单的堆叠,而是对训练数据、分布式计算和模型架构的极致优化。”月之暗面技术副总裁在媒体沟通会上表示,“K3在大量基准测试中展示了超越GPT-4o及Claude 4的综合能力,尤其是在复杂推理、多轮对话、代码生成和超长文本理解等任务上,优势明显。”

值得注意的是,K3的训练数据规模也相应刷新纪录。据了解,该模型使用了超过25万亿tokens的高质量多语言语料库,涵盖中文、英文、代码及专业领域文献。训练集群由超过十万张最新一代国产AI加速卡组成,历时约120天完成。尽管官方未透露具体算力成本,但业内估算,单次训练投入或超过10亿元人民币。

从技术突破角度看,K3在“上下文窗口”方面延续了Kimi家族的标志性优势。模型支持原生1.2M tokens(约200万汉字)的上下文处理,能够一次性读完《三体》三部曲或数百页的科研论文。同时,通过引入感知压缩与记忆回溯模块,K3在处理超长输入时仍能精准捕捉细节,极大降低了信息丢失率。

K3的发布不仅引发技术圈关注,也对AI应用生态产生深远影响。在对话式AI、智能客服、知识问答、辅助创作等领域,K3的“巨参数+长上下文”特性使得它能够胜任更加复杂的任务,比如法律合同审阅、科研文献综述、企业数据分析等需要全局理解的高阶场景。有分析人士指出,K3的出现或将催生下一波“AI原生应用”浪潮,推动AI从“聊天助手”向“专业脑力劳动者”转型。

不过,超大规模模型也带来了部署和成本挑战。2.8万亿参数意味着即使经过量化压缩,模型单次推理所需的显存和计算资源依然惊人。月之暗面方面透露,K3将首先通过云API形式向企业客户提供服务,后续计划推出轻量化蒸馏版本,以降低中小企业和个人开发者的使用门槛。

在全球AI竞赛中,参数规模的军备竞赛从未停止。业界普遍认为,模型规模仍然是性能提升的关键维度之一,但过度追求参数也可能导致边际收益递减。对此,月之暗面回应称,K3的设计并非唯参数论,而是通过架构创新使“大而不笨”——稀疏激活、混合精度训练和自适应路由技术让模型在推理阶段仅动用约1/6的参数,从而实现接近实时的响应速度。

中国工程院院士、人工智能领域专家李开复在评价K3时表示:“2.8万亿参数是一个里程碑,但更重要的是,我们看到中国团队在大规模分布式训练、高质量数据处理和模型架构设计上具备了世界领先的系统性能力。这为后续探索通用人工智能(AGI)铺平了道路。”

随着Kimi K3的正式上线,月之暗面计划在第三季度开放公开测试,并向学术界提供部分基准测试数据和模型权重。可以预见,一场围绕“2.8万亿”的AI新叙事,已然拉开大幕。