混元上新同传模型,开源给开发者免费使用
腾讯混元近日发布Hy-SimulMT,一款主打实时同声传译的开源模型,支持中英双向翻译,在技术圈引起了不少关注。
和普通文本翻译不一样,同传最怕滞后,这款模型采用流式翻译架构,不用等整句话说完,持续接收语音、同步输出文字译文,还保留说话人的声音特征,做到音色克隆。
说白了,译出来的声音听起来和原说话人很像,不会像传统翻译那样冒出一个完全陌生的机械音。
官方放出了全套代码和权重,开发者可以自主部署,不用依赖第三方接口。跨境网课、海外直播、小型国际研讨会,都能拿来搭建自用的翻译系统。
不少技术博主实测后提到,日常对话场景表现稳定,语句通顺自然,反应速度也跟得上正常语速。但遇到强口音、密集专业术语时,出错概率会明显上升,更适合通用场景,暂时还替代不了专业人工同传。
近些年国内大厂陆续在语音翻译上发力,很多成果偏向封闭商用,开发者想用就得掏钱调接口。这次腾讯选择直接开源,对独立开发者和小型创业团队很友好,不用承担高额调用费用,也能基于它继续迭代优化。
我觉得这个思路挺对的,先把生态做起来,让更多人用上、改起来,比关起门来自己玩更有长期价值。

