2.8万亿参数KimiK3模型开源！AI新突破，性能提升2.5倍
创始人
2026-07-28 00:53:42
0次
7月27日，月之暗面官方宣布正式开源KimiK3模型，这是首个达到2.8万亿参数规模的开源模型。KimiK3基于KDA混合线性注意力机制和注意力残差技术构建，原生支持视觉理解，并拥有100万token上下文窗口。在过去12个月中的9个月里，Kimi模型保持着开源模型的规模上限。KimiK3进一步扩大了Mixture of Experts的稀疏度，结合StableLatentMoE框架后，模型可以在896个专家中高效激活16个。这些结构性改进让KimiK3相比K2的整体扩展效率提升约2.5倍，能更有效地把算力转化为能力。
KimiK3具备很强的长程编码能力，在极少人工监督的情况下，可以持续完成长时间工程任务，理解和处理大型代码库，并协调使用终端工具。KimiK3也擅长结合软件工程与视觉推理的任务，能够利用截图和视觉反馈，优化游戏开发、前端和CAD等场景。官方还公布了支撑KimiK3训练的三项Infra技术：MoonEP、FlashKDA和AgentEnv，覆盖从高性能通信、高性能算子到分布式RL环境的关键链路。其中FlashKDA此前已开源，MoonEP和AgentEnv则随本次发布正式开源。
相关内容
热门资讯
今夏小龙虾为何“白菜价”？
■7月21日，北京市新发地综合交易大厅水产区，鲜活小龙虾陈列待售。新华社发■《小龙虾品类发展报告20...
广东市场监管部门上线民声热线：...
羊城晚报全媒体记者 吴珊 实习生 邱思哲“都叫凤凰单丛，为何有的茶卖几十元，有的卖上千元？”28日，...
台风夜基层医生进村接诊被埋 众...
■山体滑坡后揭西县上砂镇汤輋村村道堆满淤泥，铲车铲出临时通道。“红霞”雨夜，揭阳救护车进村接诊患儿突...
广告宣传“不存在治不好” 一家...
2026年广州第一批违法广告典型案例公布羊城晚报讯 记者吴珊、通讯员穗市监报道：7月29日，广州市市...
广东万亿元级产业投资机会向全球...
广东新质生产力标杆应用场景对接会在北京举行羊城晚报讯 记者扶贝贝、杭莹报道：7月28日，由广东省发展...
每4元外贸增量就有1元来自广东...
羊城晚报全媒体记者 孙绮曼今年是“十五五”开局之年，广东交出了一份含金量十足的开放答卷。上半年，广东...
广州凭何成为“首发策源地”？
羊城晚报全媒体记者 孙绮曼7月28日，“首发新势力·消费源生态”湾区首发新势力社群成立暨广州市首发经...
广东如何延续游戏产业优势 定义...
羊城晚报全媒体记者 陈旭泽7月30日，《2026中国游戏产业AI发展报告》发布。报告给出了两组颇为醒...
破解“得不到” “不好用” “...
文/羊城晚报全媒体记者 梁怿韬7月30日，记者从广东省地震局召开的全省地震预警服务推进会获悉，广东将...
从“事后补救”到“事前预防” ...
羊城晚报记者 陈卓栋为落实优化营商环境“一号改革工程”，夯实制造业法治根基，今年年初，江门市司法局牵...
穗深城际铁路竹料至新塘南段正式...
羊城晚报讯 记者严艺文、实习生刘紫茵、通讯员穗铁宣报道：7月31日12时，穗深城际铁路（竹料至新塘南...
“不止于闺阁——宋金时期女性的...
羊城晚报讯 记者何文涛报道：7月31日，“不止于闺阁——宋金时期女性的多面人生”在南越王博物院王宫展...
视频丨电动汽车开了5年 电池应...
电动汽车车主可能有这样的疑问：车上的动力电池衰减状态如何？电池到底还能用多久？日前，电动汽车动力电池...
这下，你还说我“土”？
“景德镇手工瓷业遗存”申遗成功千年瓷都再次成为世界关注的焦点景德镇手工制瓷技艺也是国家级非物质文化遗...
跨境流量带火入境经济 “Chi...
上半年，入境外国人达2291.4万人次其中免签入境外国人1781.5万人次同比分别增长20.4%、3...
广东防风应急响应提升为Ⅰ级
鉴于今年第12号台风“红霞”近岸加强，即将以强台风级登陆广东，造成严重风雨影响。根据《广东省防汛防旱...
英歌舞与“熟度社交”碰杯，广州...
7月24日，“2026上下九夏日‘POP啤’音乐嘉年华”在上下九广场开幕，将持续至8月2日。记者现场...
军情时间到丨进军太空 借演试弹...
前不久日本参议院正式通过防卫省法案，将“航空自卫队”正式变更为了“航空宇宙自卫队”，同步设立专职太空...
理想L6现场拆解直播，揭秘24...
8月3日，理想汽车产品线负责人李昕旸透露，公司将于8月4日15:00进行一场特别的直播活动，届时将现...
英特尔锐炫ProB70助力Mi...
今日，英特尔宣布为新一代开源多模态视频模型MiniMaxH3提供Day0首发支持。英特尔锐炫Pro ...