腾讯混元开源同声传译模型Hy-SimulMT,支持中文和英文之间的双向语音翻译。模型可以连续接收讲话内容,边听边翻译,并输出译文和语音,面向会议、演讲、访谈等实时交流场景。
除了翻译内容,Hy-SimulMT还支持实时音色克隆,在生成另一种语言的语音时保留原说话者的声音特征。官方演示包含多人讲话的情况,让听众能够通过不同音色辨认发言者。
腾讯公布的RealSI长音频测试显示,该模型的流式翻译滞后约为3秒,翻译质量评分高于参与对比的其他开源模型,以及五个商业API中的四个。此次开放的资源包括模型权重、推理服务和训练工具;语音输出及音色克隆需配置文本转语音服务,普通用户也可通过腾讯翻译应用体验。





