当前位置:

首页 > 硬件相关 > Kimi K3开放日重磅来袭:模型权重等全开放 助力前沿智能加速普及

Kimi K3开放日重磅来袭:模型权重等全开放 助力前沿智能加速普及

月之暗面放了个大招——Kimi K3大模型的权重和技术资源正式开放了,同时还一口气开源了三项支撑模型训练的核心基础设施。说白了,这套动作的目标很明确:让前沿AI技术更快落地,给全球开发者提供一套更高效的模型开发工具链。 先说说Kimi K3本身。作为月之暗面目前最强的语言模型,它采用了混合专家架构(

本文目录

    月之暗面放了个大招——Kimi K3大模型的权重和技术资源正式开放了,同时还一口气开源了三项支撑模型训练的核心基础设施。说白了,这套动作的目标很明确:让前沿AI技术更快落地,给全球开发者提供一套更高效的模型开发工具链。

    先说说Kimi K3本身。作为月之暗面目前最强的语言模型,它采用了混合专家架构(MoE),参数规模达到2.8万亿——比前代Kimi K2.5大了将近3倍。更关键的是,它原生集成了视觉理解能力,能处理长达100万token的上下文窗口。算力优化方面也有突破,研发团队通过创新算法把规模化效率提升了2.5倍。翻译一下:同样的算力条件下,它能产出更高质量的输出。

    技术层面,Kimi K3的架构设计相当有看头。注意力机制上,用3:1的比例混合了KDA和Gated MLA,专门用来高效处理长文本。视觉编码器叫MoonViT-V2,采用next-token prediction方式进行训练,在保持SigLIP基线效果的同时,训练稳定性也上了一个台阶。至于MoE部分,Stable LatentMoE架构通过动态路由机制,从896个专家模块中智能激活16个参与计算,配合SiTU-GLU和Quantile Balancing技术,确保训练过程不跑偏。后训练阶段更是下了血本——在通用推理、智能体和编程三大领域构建了百万级token的强化学习环境,还用近20个专业评测集做了全面验证。

    这次同步开源的三项基础设施技术,构成了模型训练的底层支撑。高性能通信库MoonEP专门为超大规模MoE架构设计,能有效处理专家并行计算中的负载不均衡问题。FlashKDA是Kimi Delta Attention的高性能算子,在英伟达H20芯片上实现了1.72到2.22倍的预填充速度提升。还有与KVCache.ai联合开发的AgentEnv沙箱系统,通过强隔离环境支持大规模智能体训练,具备快速快照、任务分叉这些分布式训练必需的“硬核”功能。

    开发者现在就能拿到Kimi K3的模型权重和完整技术文档,相关代码库也遵循开源协议开放。这次开源覆盖了从模型架构到训练基础设施的全链路技术,等于给行业提供了一套可复用的技术方案——特别适合需要处理超长上下文或复杂多模态任务的场景。

    本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
    作者最新文章
    硬件相关
    相关文章 更多
    Kimi K2.7 Code 有多能打?找 Bug,写 3D 游戏,2000 行代码砍掉 55%
    Kimi K2.7 Code 有多能打?找 Bug,写 3D 游戏,2000 行代码砍掉 55%

    KimiK2.7Code定位于长上下文与Agent工作流,在三个工程任务中表现突出:修复MiniDB项目隐蔽Bug,生成可运行3D滚球游戏,重构Flask遗留项目并减少55%代码量,展现出其在复杂工程协作中的巨大潜力,有效提升代码质量与开发效率。

    月之暗面黄震昕:Kimi不做重交付,FDE难点不在于模型厂商
    月之暗面黄震昕:Kimi不做重交付,FDE难点不在于模型厂商

    月之暗面Kimi专注高性能模型,通过Muon优化器、LinearAttention等技术提升效率,KV-Cache命中率达90%以上以降低成本。不做重交付,依托FDE伙伴完成最后一公里。构建模型、架构、产品三层服务体系,携手亚马逊云科技拓展全球业务。

    月之暗面总裁张予彤透露 Kimi 新模型即将发布
    月之暗面总裁张予彤透露 Kimi 新模型即将发布

    月之暗面总裁张予彤透露,Kimi即将发布新模型。团队仅用美国约1%算力,通过底层基础研究突破和工程效率,打造出开源大模型KimiK2及K2Thinking,部分关键指标超越美国主流闭源模型,并全球首个完整落地Muon优化器及自研线性注意力机制。

    Kimi 发布并开源 K2.5 模型
    Kimi 发布并开源 K2.5 模型

    KimiK2.5模型发布并开源,采用原生多模态架构,支持图文混合输入与思考/非思考模式切换。Agent能力深度融入办公场景,可生成前端代码。首次引入Agent集群机制,最多100个分身协同完成1500步并行推理,任务耗时最高缩短4.5倍。

    Kimi K2.5 低调上线,视觉与工具调用双升级
    Kimi K2.5 低调上线,视觉与工具调用双升级

    KimiK2.5低调上线,默认替换K2模型并开启思考模式与多模态交互。原生集成视觉理解与工具调用,支持图像分析、三维代码生成及分步推演,在编程和逻辑推理任务中表现稳定,已开放API调用。

    Kimi已正式登陆亚马逊云科技Marketplace 触达全球数百万企业客户
    Kimi已正式登陆亚马逊云科技Marketplace 触达全球数百万企业客户

    Kimi正式登陆亚马逊云科技Marketplace,触达全球数百万企业客户,实现一键使用、按量付费,简化采购流程。依托亚马逊云科技全球基础设施,通过AmazonBedrock和SageMaker提供模型服务,降低使用门槛,并联合打造金融、医疗等垂直行业解决方案。

    博导称Kimi创始人杨植麟有很多机会留在美国,但他坚持回国创业
    博导称Kimi创始人杨植麟有很多机会留在美国,但他坚持回国创业

    8月4日,Kimi K3模型发布后蝉联前端开发榜全球第一,月之暗面这家中国AI创企,一下子站到了聚光灯下。创始人杨植麟的导师——卡内基梅隆大学教授Russ Salakhutdinov,今年7月发文透露了一些细节。这位导师的来头不小:他曾是Meta前研究副总裁(多模态LLM、AI智能体),苹果前AI研

    做PPT超好用!Kimi提示词模板给你们整理好了,直接抄
    做PPT超好用!Kimi提示词模板给你们整理好了,直接抄

    利用AI制作PPT可将耗时从数小时缩短至二十多分钟,关键在于明确提示词,包括页数、风格和内容要点。适用于日常常规、临时换文案或时间紧迫的场景,但涉及代码、公式需人工核对,重要会议仍需精细打磨。

    算力紧缺!Kimi宣布:暂停新用户订阅!
    算力紧缺!Kimi宣布:暂停新用户订阅!

    7月19日,月之暗面旗下Kimi因算力紧缺暂停新用户订阅,优先保障已付费用户权益并加速扩容。其2.8万亿参数KimiK3模型发布后用户请求量超预期,单次推理显存大增,暴露算力瓶颈。此举反映大模型行业算力供不应求的结构性矛盾。

    2.8万亿开源模型引爆全球AI!“Kimi时刻” 改写科技估值逻辑丨投资秘籍
    2.8万亿开源模型引爆全球AI!“Kimi时刻” 改写科技估值逻辑丨投资秘籍

    全球首个近2.8万亿参数开源模型KimiK3正式落地,引发“Kimi时刻”,重塑AI行业估值逻辑。A股相关概念股集体上涨,但板块分化明显,其中国产算力等赛道确定性最强,投资者需警惕五大风险。

    查看更多
    精品专题 更多
    装机必备
    装机必备

    正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

    Windows
    Windows

    正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

    PDF教程
    PDF教程

    正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

    Mac软件 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    Aperty macOS版
    Aperty macOS版
    macOS

    Aperty 是 Skylum 推出的 AI 人像修图软件,支持自然肤质修饰、瑕疵处理、面部与身体调整、预设及批量同步。

    WINDOWS 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    PixTV 网页版
    PixTV 网页版
    Windows

    PixTV 是一款在浏览器中使用的 AI 视觉内容创作平台,提供图片、视频、音频、文字生成、AI 分镜、局部重绘、提示词反推和无限画布等工具,适合短剧、漫剧、广告及社交媒体内容制作。