蚂蚁百灵开源 Ming-3.0 语音系列模型 覆盖语音合成、音频理解与对话、语音识别Ant Group's Ling team open-sources Ming-3.0 speech model family


AI free token/AI免费积分

IT之家 10 月 20 日消息,蚂蚁百灵今日宣布开源 Ming-3.0 语音系列,分别给出语音合成、音频理解与对话、语音识别三个系列,共五款模型。开发者可以按任务挑选,也可以将不同能力组合进自己的工作流。

蚂蚁百灵开源 Ming-3.0 语音系列模型 覆盖语音合成、音频理解与对话、语音识别

蚂蚁百灵开源 Ming-3.0 语音系列模型 覆盖语音合成、音频理解与对话、语音识别

Ming-3.0-tts 系列的 Voice Design 可以用文字描述目标音色,同时也兼容参考音频的音色设定。更具特色的是,创作者可以用导演模式说明台词的表演方式,描述情绪如何变化、哪些词需要重读,以及节奏应如何处理。

在蚂蚁,从阿福 App 的主对话与语音通话,到医生音色克隆、小虎智能办公,Ming-3.0-tts 已进入多类业务。它既可以独立承担配音,也可以与 Ming-3.0-asr-tiny 组合,连接语音输入和回答播报两个环节。

蚂蚁百灵开源 Ming-3.0 语音系列模型 覆盖语音合成、音频理解与对话、语音识别

Ming-3.0-audio-flash / tiny 兼容直接对长音频的转写、总结和观点分析等复杂理解,并开展结构化输出。相对传统的先语音识别逐字稿再分析的过程,能保留对话中的情绪、说话人身份、环境信息等,另外还需要模型对长上下文序列的快速推理。

蚂蚁百灵开源 Ming-3.0 语音系列模型 覆盖语音合成、音频理解与对话、语音识别

MIng-3.0-asr-tiny 借助构建普通话、英文、方言、领域热词等高质量语料,合理控制分布,再结合语言模型基座强大的上下文理解能力,利用候选热词列表、对话上下文信息,为真实业务情形带来语音识别成效的全面提高。

在蚂蚁,Ming-3.0-asr-tiny 已用于阿福医生助手、支付宝搜索、蚁小保实时语音对话和安全核身等情形。

蚂蚁百灵开源 Ming-3.0 语音系列模型 覆盖语音合成、音频理解与对话、语音识别

IT之家附相关链接如下:

在线感受:https://ling.tbox.cn

Ming-3.0-tts-0.5B

Ming-3.0-tts-tiny

Ming-3.0-audio-flash

Ming-3.0-audio-tiny

Ming-3.0-asr-tiny

本文来源:https://www.ithome.com/1/015/117.htm
若有版权问题,请来信告知:13951431913#139.com 或在右方提交评论。

Ant Group's Ling team has open-sourced the Ming-3.0 speech model family, a set of models covering text-to-speech, audio understanding and dialogue, and automatic speech recognition.

Ant Group's Ling team open-sources Ming-3.0 speech model family

The release bundles the three capabilities into one family so that developers can build voice agents that listen, understand and answer within a single stack, instead of stitching together separate ASR, LLM and TTS services.

Ant Group's Ling team open-sources Ming-3.0 speech model family

Speech has become the busiest interface for on-device assistants in China, and open-weight speech models lower the cost of building local voice interaction for smart hardware, in-car systems and customer service deployments.

Ant Group's Ling team open-sources Ming-3.0 speech model familyAnt Group's Ling team open-sources Ming-3.0 speech model familyAnt Group's Ling team open-sources Ming-3.0 speech model family

暂无评论,快来发表第一条评论吧!No comments yet. Be the first!

📮 需求咨询📮 Inquiry