文章详情

AI配音太平淡?Ming-3.0可以交代哪里吃惊、哪里重读

一句话看懂

蚂蚁百灵开源的语音模型让配音能听懂语气起伏和指定位置的笑声,但这些控制分属不同模式,不能当成一组旋钮随意叠着用。

给短视频配旁白或者做有声故事,如果整句话读得毫无波澜,你想让语气在特定词上提一口气,或者带着情绪拐个弯,该怎么交代?

蚂蚁百灵在2026年10月20日开源了Ming-3.0语音系列。这次发布包含三类任务共五款模型,语音识别(ASR)和长录音对话理解(Audio)各管各的事,真正负责解决配音问题的,是里面的语音合成(TTS)模型。

交代“怎么说”,比单纯换个声音更管用

在官方演示站上,Ming-3.0-tts展示的用途是有声故事、短视频旁白和产品助手。它把声音分成了两个不同的问题:一个是声音设计,用文字描述捏出目标音色,或者照着一段参考录音做声音克隆;另一个则是导演模式,用大白话直接交代一句话的情绪起伏、重音和节奏。

在官方给出的中文导演模式演示里,台词是一句问话:“你说这一整座温室,居然只用了三天就建好了?”

输入的导演要求没有写成抽象的参数,而是一段具体要求:“先明显吃惊,随后带着不敢相信的疑问,重读数量词。”

官方示例把吃惊、难以置信和重读数量词写成了表演要求。 · 图片来源:截图自 inclusionAI 官方仓库所链演示站,2026年10月21日

吃惊、难以置信、还要把重音落在那“三天”上,配音的要求被拆解成了具体的表演步骤。把语气变化和重读位置交代清楚,显然比笼统要求一句“读得有感情点”更有针对性。

指定位置的笑声很诱人,但控制模式不能随便叠加

除了用自然语言交代语气,官方演示站还给出了在台词里插标签的用法。比如在句子中间写上 `[Laughter]`,让轻笑出现在指定的词后面,页面上也放了叹息和咳嗽的例子。

标签用来交代声音在台词中的位置;这是官方示例页面。 · 图片来源:截图自 inclusionAI 官方仓库所链演示站,2026年10月21日

能在想笑的地方笑一下,听起来确实很适合讲故事。但看到这些能力,很容易让人产生一种错觉:是不是可以先用文字描述捏一个特定的音色,再写一段导演指令让语气大吃一惊,最后在句尾塞个笑声标签?

官方演示页面明确标出:这些能力使用不同的任务模式,不支持任意组合。

具体来说,写文字去凭空设计声音,就不能同时叠导演指令,也不能加情绪或标签;开了导演模式来控制语气起伏和重音,就不能再叠单独的情绪选项、内置音色或者标签;要在台词里标出笑声,目前走的是参考音色克隆的路子,同样不能和导演模式混用。

这决定了它不是一个调音台,无法把所有功能同时拧开。做视频需要某句话带着指定语气重读,就得走导演模式;需要在特定位置带声咳嗽或轻笑,就得换到标签支持的参考音色上去做。

榜单拿了同音色第一,不等于中文成片全搞定

模型刚发布,评测机构 Artificial Analysis 就在 X 上公布了测试结果:在 Controlled Voice 比较里,Ming-3.0-tts 在开放权重模型中排在第一。

这个成绩有特定的测试范围。所谓的 Controlled Voice,是用同一组 8 个参考音色去对比各家模型的生成表现,而且评测覆盖的分项是美式英语和英式英语。

换到同一个评测方的 Provider Voice 结果上——也就是各家模型拿自己的原生音色去比——Ming 在开放权重模型里的排名就变成了第三。

拿着同一组声音克隆英语句子,它的得分确实靠前;但原生音色比拼又是另一组位次,更不用说中文剧情里的特定语气、重音和方言了。英语克隆的盲听评分,替代不了具体中文台词的成片效果。

它还是开源模型,离一键做视频还有距离

Ming-3.0 目前在官方项目里提供的是模型下载、代码安装和推理说明,是一套面向开发者的开源成果,并不是打开浏览器点一下就能把视频音轨替换完的现成软件。

在 Reddit 的本地模型讨论区(r/LocalLLM)里,关于这个模型的讨论帖下,就有网友跟帖询问有没有 Hugging Face 链接、有没有被接进常用的 audio.cpp 运行库。这位网友关心的是怎么把它装进自己的工具箱里。

如果看到官方公众号提到在线体验,也需要分清入口。在线的 Ling Studio Chat 提供的是用来做音频理解的 Ming-3.0-audio-flash,并不是用来给台词配情绪的导演模式。配音的接口目前是在 Ling Studio 提供给开发者接入。另外官方演示页也特别提示,音色克隆和内置角色音色需要用于合法创作,未经同意不能冒充真人。

对做内容的人来说,Ming-3.0 的官方演示展示了怎样向配音交代“哪里吃惊、哪里重读”的大白话,不需要把语气全指望给一个笼统的风格标签。但怎么选模式、用不用参考录音,需要按对应任务的规则来选;想先了解它能做什么,可以去官方演示站听给定的例子;自己的文案能配成什么样,还要等实际生成后再判断。

出处(6)
  1. Ming-3.0 语音系列官方发布 · inclusionAI
  2. Ming-3.0-tts 官方项目 · inclusionAI
  3. 官方导演模式和标签演示及任务限制 · inclusionAI
  4. 同音色盲听偏好评测结果 · Artificial Analysis
  5. 原生音色盲听偏好评测结果 · Artificial Analysis
  6. Ming-3.0 TTS发布讨论与工具接入疑问 · Reddit 用户

内容有误?告诉我们,核实后会更正,并在这里写明改了什么。

评论

还没有人评论,来写第一条。

发表评论

编辑器加载中…