Moshi 是一个多流实时语音生成 Transformer 模型,支持全双工语音对话。其主要特点是同时语音输入和输出(全双工),以及处理复杂对话场景的能力,包括重叠语音、中断和情绪表达等非语言信息。
这意味着它可以同时听和说,旨在解决传统对话系统中的一些问题,例如延迟、非语言信息(例如情绪)丢失以及对话轮流的僵化结构。
全双工通信:传统的对话系统是回合制的(一个人在另一个人开始之前结束讲话)。 Moshi 突破了这一限制,支持全双工通信。这意味着 Moshi 可以在用户说话时生成语音响应,不受回合限制,并且可以处理复杂的对话动态,例如重叠语音、中断和快速反馈。
多流处理:Moshi 通过处理多个音频流来实现同时收听和生成语音。这种多流架构使其能够灵活处理用户和系统之间的语音交互,而不会中断对话的自然流程。
配音神器Pro是一款功能强大的配音软件,提供调整语速、插入停顿、检测敏感词、调节配音角色情感等主要功能,能生成自然逼真的声音。用户输入文本,就能轻松生成多种带有情感的声音。它适合用于影视解说、情感文案创作和自媒体内容制作以及广告、视频、电影、商场等多种场景。