当前位置:

首页 > 业界资讯 > GPT-5史诗级更新之前,OpenAI的“新东西”来了,曝定价百万字符15美元,语音克隆引擎让老外说“有口音的”中文

GPT-5史诗级更新之前,OpenAI的“新东西”来了,曝定价百万字符15美元,语音克隆引擎让老外说“有口音的”中文

撰稿|伊风出品|51CTO技术栈(微信号:blog51cto)OpenAI的最新动作来了!据悉,Altman在采访中透露,在GPT-5史诗级的升级发布之前,OpenAI将在未来几个月发布许多“很酷的新东西”。这一消息让人们对OpenAI的未来充满期待。今天,OpenAI语音引擎首次亮相,效果确实惊艳!更重要的是它的合成效率之高——只需用户上传任何15秒的语音样本,就能生成该语音的合成副本。产品负责人哈里斯说,为语音引擎提供支持的生成式人工智能模型已经隐藏在人们的视线中一段时间了。OpenAI的新动作策略必

本文目录

    撰稿 | 伊风

    出品 | 51CTO技术栈(微信号:blog51cto)

    OpenAI的最新动作来了!据悉,Altman在采访中透露,在GPT-5史诗级的升级发布之前,OpenAI将在未来几个月发布许多“很酷的新东西”。这一消息让人们对OpenAI的未来充满期待。

    今天,OpenAI语音引擎首次亮相,效果确实惊艳!更重要的是它的合成效率之高——只需用户上传任何15秒的语音样本,就能生成该语音的合成副本。

    产品负责人哈里斯说,为语音引擎提供支持的生成式人工智能模型已经隐藏在人们的视线中一段时间了。OpenAI的新动作策略必然让语音识别技术杀回我们的视野。

    虽然算法是突发新闻,但此次更新也是有端倪可循的。一周前,科技博主@Smoke-away就发现OpenAI悄悄地注册了VOICE ENGINE商标。

    GPT-5史诗级更新之前,OpenAI的“新东西”来了,曝定价百万字符15美元,语音克隆引擎让老外说“有口音的”中文图片

    此前,网友也发现过OpenAI新的网站Feather(意为羽毛,详细新闻见链接),但这个神秘项目却迟迟没有下文。

    不过这一次, OpenAI这次的动作确实够快的!

    一、语音引擎要做什么?

    OpenAI在其介绍页展示了几个令人印象深刻的案例。语音引擎的音色克隆效果自然、流畅,在不同语种之间切换时非常真实的保留了音色的特点,大家可以通过听合成的中文音频来更深地体会语音引擎的优秀(手动狗头)。

    1.教育场景-帮助视觉受损者和儿童阅读

    通过语音引擎的合成,能生成了比传统预设声音更为丰富和多样的声音,从而提升需要帮助者的阅读体验。

    GPT-5史诗级更新之前,OpenAI的“新东西”来了,曝定价百万字符15美元,语音克隆引擎让老外说“有口音的”中文通过字幕学习西班牙语

    2.翻译场景-让声音无障碍的流向世界

    制作的博客等声音内容,可以翻译成多种语音进行传播。值得一提的是,用于翻译时,语音引擎会保留原说话者的母语口音:用英语说话者的音频样本生成中文,就会产生带有英语口音的语音,主打一个真实。

    3.为偏远地区提供服务

    科技可以帮助我们与少数语音者进行无障碍沟通。例如案例中使用了语音引擎和 GPT-4 以每位工作人员的主要语言(包括斯瓦希里语或更非正式的语言)进行互动反馈。

    生成的少数语种音频,51CTO技术栈,15秒

    4.让失语者“发声”

    语音引擎还设想为不会说话的人提供帮助。用户可以选择最能代表自己的语音,与他们进行交流。语音引擎还保证对多语种用户来说,每种口语都能保持一致的语音。让那些从未开口的人拥有一种音色,这就是科技的浪漫所在吧。

    二、语音引擎的背后技术

    1.模型训练——不能告知的训练数据

    在接受外媒采访时,被问到模型训练数据的来源,OpenAI产品人员哈里斯变得非常谨慎。他表示,这些数据基于授权信息和公开信息。

    由于训练数据通常涉及大量语音录音,且往往被视为商业秘密,关于训练数据和过程的具体细节往往保密。然而,这也导致了许多知识产权纠纷,例如纽约时报就曾对OpenAI提起诉讼。

    随着技术的成熟,使用侵权素材训练模型的情况正在改善。OpenAI也已与国外Shutterstock、Axel Springer等内容提供商签订协议,并提供了阻止网络爬虫的选项,允许艺术家从其图像生成模型的数据集中撤回作品。

    但现阶段,当科技高管们被问到这个问题,也许只能选择像OpenAI CTO Mira那样,做个“沉默的大多数”。

    2.合成声音——无需微调的技术设计

    令人惊讶的是,语音引擎并未进行微调。这在一定程度上得益于语音引擎独特的模型设计——通过扩散模型来即时生成语音。

    哈里斯说:“我们采用少量音频样本和文本,生成与原始说话者相匹配的真实语音。” “请求完成后,所使用的音频将被删除。”

    该模型通过分析语音数据和待朗读的文本,直接生成匹配的语音输出,无需为每个用户构建个性化模型。尽管语音克隆技术在业界已非新鲜事物,但OpenAI声称其方法能够提供更高质量的语音体验。

    TechCrunch 称在OpenAI的营销文件(现在已经删除)中,Voice Engine 的定价为每百万字符(约 162,500 个单词)15 美元。这意味着大约 18 小时的音频,使得价格略高于每小时 1 美元。这确实比更受欢迎的竞争对手之一 ElevenLabs 的收费便宜——每月 100,000 个字符 11 美元。

    但OpenAI的语音引擎目前还没有提供能调整语音细节的选项,如果初始声音是兴奋的或沮丧的,接下来合成的所有声音都只能保持这个情绪。

    三、AI克隆技术是敌是友?

    尽管OpenAI 让我们看到了语音克隆为“人类谋福利”的可行性,但随着 Deepfakes 的激增,相关技术是否能一直被负责任的使用或许还要打个问号。

    此前,美国科技媒体The Verge曾报道过一次语音合成的诈骗案件。网络诈骗犯利用Deepfake仿制公司高管的语音,合成语音邮件发送至公司员工,对大型公司进行经济诈骗。国内也曾有过类似事件的报道。

    当前的合成语音虽然逼真,但仍然有技术上的漏洞。美国安全咨询公司NISOS使用频谱工具对案件中Deepfake音频进行了分析,发现这段Deepfake语音的频谱图有峰值反复出现且音频不连贯。

    相较于合成音频,真实人声的音高与音调都更为平滑。此外,放大合成音频的音量时,无法监测到该录音的背景噪音,这进一步表明这段音频是经过人为处理的。

    然而,谁能保证随着技术的发展,Deepfake不会走向更深处呢?

    当前,OpenAI尚并未开放语音引擎的访问权限。而是由红队的专家对其风险进行评估,并提出必要措施和减弱风险的策略,以阻止恶意使用。

    哈里斯说,“我们不希望人们混淆合成声音和真实的人类声音。”

    参考链接:

    1.https://openai.com/blog/navigating-the-challenges-and-opportunities-of-synthetic-voices

    2.https://techcrunch.com/2024/03/29/openai-custom-voice-engine-preview/

    3.https://www.thepaper.cn/newsDetail_forward_8488082

    本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系bd@zhengruan.com
    作者最新文章
    业界资讯 OpenAI 中文
    上一篇: 原神湖光铃兰最新高效采集路线图分享
    下一篇: PHP编程思路:理解Modbus TCP通信的原理和机制
    相关文章 更多
    sora使用指南国内使用的具体操作步骤教程
    sora使用指南国内使用的具体操作步骤教程

    本文详细解析Sora在国内的使用现状,指出目前官方未对公众开放注册,提醒用户警惕虚假链接,并提供关注官方动态及替代方案的实用建议。

    OpenAI GPT-6 Astra 自主通关《传送门》:技术原理与实验成本解析
    OpenAI GPT-6 Astra 自主通关《传送门》:技术原理与实验成本解析

    OpenAI GPT-6 Astra 模型通过 MCP 协议与 SourcePauseTool 控制《传送门》游戏,完成 3336 次工具调用并自主通关。实验耗时约 24 小时,API 成本约 571 美元,展示了多模态 AI 在 3D 解谜领域的突破性进展。

    OpenAI:数据中心容量在 2025 年增至 1.9 GW,增长三倍
    OpenAI:数据中心容量在 2025 年增至 1.9 GW,增长三倍

    OpenAI算力总量预计2025年达1.9GW,较2023年增长9.5倍,年经常性收入同步增至200亿美元。推理成本已压至每百万token不到1美元,采取训练性能优先、推理效率优先的双轨策略。未来营收将拓展技术授权与按成效付费模式,并优先研发AIAgent与工作流自动化。

    Transformer之父NoamShazeer离开谷歌加入OpenAI
    Transformer之父NoamShazeer离开谷歌加入OpenAI

    Transformer核心作者NoamShazeer离开谷歌加入OpenAI,担任架构研究负责人。他曾参与创办Character.AI,后因谷歌交易回归,如今再次转投。此举折射出行业对Transformer架构局限性的反思,以及下一代模型架构创新的迫切需求。

    突发!谷歌技术巨牛Noam跳槽OpenAI
    突发!谷歌技术巨牛Noam跳槽OpenAI

    Transformer论文共同一作、谷歌元老级AI专家NoamShazeer再次离开谷歌,加盟OpenAI。他拥有高达35万余次论文引用,近期专利涉及结构化工具调用、神经架构搜索及混合专家模型等关键方向。OpenAI借此补齐构建超级智能体与底层模型架构的核心能力。

    谷歌Transformer之父跳槽OpenAI,沙泽尔究竟在想什么?
    谷歌Transformer之父跳槽OpenAI,沙泽尔究竟在想什么?

    AI传奇人物诺姆·沙泽尔离开谷歌加入OpenAI。作为Transformer架构之父,他因不满谷歌严格的审批流程和“大公司病”,再次出走。选择OpenAI因其快速迭代理念和开放氛围,契合其推动AGI落地的核心诉求。

    Codex兼容国产开源模型!实测DeepSeek接入:门槛还是太高
    Codex兼容国产开源模型!实测DeepSeek接入:门槛还是太高

    OpenAI的Codex工具开放第三方模型接入,但实际门槛高,仅支持ResponsesAPI协议。DeepSeek等国产模型无法直接接入,需通过本地转接桥,响应速度慢于官方模型,但成本极低。此举为国产模型提供成熟Agent容器机会,但OpenAI仍掌握核心标准。

    AI制药迎来标准化评估时代,OpenAI入局催化创新药赛道估值重塑
    AI制药迎来标准化评估时代,OpenAI入局催化创新药赛道估值重塑

    OpenAI发布LifeSciBench基准测试,为AI制药建立标准化评估工具,推动行业规范。港股创新药板块短期承压,但AI制药从概念验证走向产业落地趋势不变,研发效率成核心竞争维度,板块估值有望修复。

    Getty Images与OpenAI达成“展示协议”,股价盘前暴涨141%
    Getty Images与OpenAI达成“展示协议”,股价盘前暴涨141%

    GettyImages与OpenAI签署展示协议,股价盘前暴涨141%,空头回补放大涨幅,市场反应强烈。此次合作标志着双方从对抗转向合作,OpenAI授权版图持续扩张,但公司基本面压力犹存。

    OpenAI发布首款自研芯片:大模型直接参与设计与优化
    OpenAI发布首款自研芯片:大模型直接参与设计与优化

    OpenAI联合博通推出首款自研AI芯片Jalapeño,专为大语言模型推理设计,开发周期仅9个月。芯片采用软硬件协同设计,并用AI优化自身架构,每瓦性能大幅领先业界。计划2026年商用,通过全栈布局降低AI使用门槛。

    查看更多
    精品专题 更多
    装机必备
    装机必备

    正软商城装机必备专区,精选办公、浏览器、安全防护、影音播放、压缩解压、设计创作和系统工具等电脑常用正版软件,帮助用户快速完成新电脑软件配置。

    Windows
    Windows

    正软商城Windows软件专区,汇集适用于Windows电脑的办公、设计、安全防护、影音播放、开发工具和系统优化软件,提供软件介绍、系统要求、正版授权及购买下载服务。

    PDF教程
    PDF教程

    正软商城PDF教程频道提供PDF编辑、转换、合并、拆分、压缩及格式处理方法,同时介绍常用PDF软件和工具的使用技巧。

    Mac软件 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    Aperty macOS版
    Aperty macOS版
    macOS

    Aperty 是 Skylum 推出的 AI 人像修图软件,支持自然肤质修饰、瑕疵处理、面部与身体调整、预设及批量同步。

    WINDOWS 更多
    讯飞智作 网页版
    讯飞智作 网页版
    Windows/ macOS/ Linux

    讯飞智作是一款基于语音合成技术、虚拟人驱动技术与数字人形象声音构建能力的 AI 数字人音视频创作平台。

    火山引擎 网页版
    火山引擎 网页版
    Windows/ macOS/ Linux

    火山引擎是字节跳动旗下企业级云与AI服务平台。聚焦大模型核心能力,依托字节自研豆包多模态大模型,凭借火山方舟一站式平台,提供模型精调、推理部署、智能应用搭建等全链路服务,结合高性能AI算力,助力各行业快速落地大模型数字化与智能化应用。

    PixTV 网页版
    PixTV 网页版
    Windows

    PixTV 是一款在浏览器中使用的 AI 视觉内容创作平台,提供图片、视频、音频、文字生成、AI 分镜、局部重绘、提示词反推和无限画布等工具,适合短剧、漫剧、广告及社交媒体内容制作。