微软开源统一语音识别模型 VibeVoice-ASR,专为长音频设计
微软开源90亿参数的VibeVoice-ASR模型,原生支持长达60分钟连续语音的端到端处理,输出带有说话人标签、时间戳和文本的结构化结果,并支持用户注入领域热词以提升专业术语识别精度。
在语音识别领域,大模型的应用正在从短片段任务向长时音频理解延伸。微软近期开源的 VibeVoice-ASR 模型,便是这一趋势下的一个重要信号。这款参数量达 90 亿的统一模型,主打一个硬实力:一次性处理长达 60 分钟的连续语音流,并且在单次推理中直接输出带有说话人标签、精准时间戳和对应文本的结构化转录结果。更关键的是,它还支持用户灵活注入领域专属热词,对专业术语和上下文敏感词汇的识别精度有明显提升。
这一新模型最直观的价值,在于它如何回应长音频处理中的几个老问题:上下文断裂、说话人混淆、输出格式不清晰。VibeVoice-ASR 给出了一个端到端的系统性方案。
VibeVoice-ASR 的核心能力
- 原生支持最长 60 分钟的端到端音频处理。传统 ASR 模型处理长音频时,往往需要把音频切成数秒短片段,这种做法很容易导致上下文信息和说话人身份的断链。VibeVoice-ASR 原生适配最大 64K token 的音频序列,能完整覆盖一小时的语音,从而保障了跨时段说话人一致性建模和语义连贯性。简单说,它不需要“拼图”就能看完一整段话。
- 可配置的热词引导机制。这个功能很实用。用户可以通过简单的接口传入自定义热词列表,比如企业名称、产品型号、学术概念等。模型在解码阶段会动态强化这些相关词元的概率。在垂直场景下,比如医疗、法律、金融会议等,这一机制对识别精度的提升非常明显。
- 三位一体结构化输出(Who-When-What)。这是 VibeVoice-ASR 在输出维度上的亮点。它将语音识别、声纹区分与时间定位深度融合,同步完成说话人分离、起止时间标注与文本转写。最终输出的结果,清晰可解析,格式就是「谁 在 何时 说了什么」。对于后续的会议纪要生成、访谈整理、内容检索等应用来说,这种结构化的数据非常友好。
模型的整体架构如下:

开源地址
https://www.php.cn/link/c165343f46d5946c6f76c58a5ed0f52c
https://www.php.cn/link/4d0d3acf6bc4d8f28d53f73a2879dc3e
Photoshop 2026 是 Adobe 推出的专业图像处理与视觉设计软件,支持 Windows、macOS 和 iPad 等平台,广泛应用于摄影修图、电商设计、平面海报、数字绘画及视觉合成等创作场景。
Blender 是一款免费开源、跨平台的专业 3D 创作软件,集建模、动画、渲染、视频编辑与视觉合成等功能于一体,广泛应用于影视动画、游戏设计和建筑可视化等领域。软件支持 Cycles 物理渲染器与 Eevee 实时渲染引擎,并提供多边形建模、骨骼绑定、物理模拟等专业工具。Blender 兼容 Windows、macOS 和 Linux 系统,安装包轻巧、运行流畅,依托活跃的全球开发者社区持续更新,是从初学者到专业创作者都值得选择的正版 3D 创作工具。
Photoshop 2026 是 Adobe 推出的专业图像处理与视觉设计软件,支持 Windows、macOS 和 iPad 等平台,广泛应用于摄影修图、电商设计、平面海报、数字绘画及视觉合成等创作场景。
Blender 是一款免费开源、跨平台的专业 3D 创作软件,集建模、动画、渲染、视频编辑与视觉合成等功能于一体,广泛应用于影视动画、游戏设计和建筑可视化等领域。软件支持 Cycles 物理渲染器与 Eevee 实时渲染引擎,并提供多边形建模、骨骼绑定、物理模拟等专业工具。Blender 兼容 Windows、macOS 和 Linux 系统,安装包轻巧、运行流畅,依托活跃的全球开发者社区持续更新,是从初学者到专业创作者都值得选择的正版 3D 创作工具。















