腾讯开源同传模型:边说边翻 3 秒出声,App 里免费用
腾讯把自研同声传译模型 Hy-SimulMT 开源了:中英互译约 3 秒出声,还带实时音色克隆。这篇讲清它和人类译员的对比口径、普通人在哪免费用、开发者怎么自己部署,以及哪些场合仍然离不开真人译员。
听一场英文演讲,等译员把上一句翻完,演讲人已经讲到下下句了。10 月 26 日,腾讯发布并开源了同声传译大模型 Hy-SimulMT,官方给出的实测响应时间约 3 秒,比人类专业译员平均的 4 到 5 秒更短。更实际的是:它在腾讯 Hy 翻译 App 里免费开放体验。
一、发生了什么
据 IT之家 10 月 26 日消息,腾讯混元同声传译大模型 Hy-SimulMT 当天发布并开源。它做的是中英双向的语音到语音实时翻译:音频实时输入,模型边听边译,直接给出译文和语音,还支持实时音色克隆——翻出来的声音能贴近说话人本人的音色和语气。
几个关键点:
- 低时延是主打卖点。官方实测响应时间在 3 秒左右,对照的人类专业译员平均水平是 4-5 秒。
- 官方称,在业界常用的长音频开源评测集 RealSI 上,它的延迟做到了最低,翻译效果达到开源模型里的最佳水平,并超过大多数商业同传 API。
- 为了贴近真实水平,团队收集了软件、医学、制造能源、法律、教育等十个领域的真实中英文音频,覆盖演讲、访谈、会议等场景,并请 6 位人类同传专家(3 位持 CATTI 一级口译证书、3 位持二级)做对照。官方口径是:与专家中单人最高分相比,Hy-SimulMT 翻译质量相当、时延更低。
- 开源渠道包括 GitHub(Tencent-Hunyuan 组织)、HuggingFace 和 ModelScope,开发者可以自行下载部署。
需要说明:以上效果数据均来自官方自测口径,第三方独立评测暂时还没看到。
二、跟你有什么关系
经常看外语直播、网课、发布会的人:打开腾讯 Hy 翻译 App 就能免费用上,不用花钱订阅。体验一下 3 秒级别的同传是什么感觉,比看参数实在。
做跨境会议、访谈的中小团队:以前商用同传 API 按分钟计费,一场两小时的会不是小数目。现在多了一个开源自建选项,成本结构完全不同。
翻译行业从业者:中英日常会议的实时传译,机器已经在速度上占优、质量上追平专家(按官方口径)。但正式场合、法律责任场景、文学性内容,真人译员短期内仍不可替代。
三、怎么用
读到这儿,可以顺路看 Mistral 放出 Le Chonk:代码能打,总分落后 Mistral 开源了万亿参数的 Large 4,绰号 Le Chonk。它在编程任务上追平中国开源模型,综合分却差一截。这篇拆开三张榜单,讲清强在哪、贵在哪、值不值得自部署。- 普通用户最省事的路径:在应用商店下载腾讯 Hy 翻译 App,找到同传功能入口,选中英互译,对准音源即可。目前免费,后续是否收费以官方公告为准。
- 注意音源环境。同传效果对录音质量敏感,会议室里尽量靠近发言人收音,嘈杂环境下准确率会打折。
- 开发者自部署:到 GitHub 搜 Tencent-Hunyuan/Hy-SimulMT,或到 HuggingFace、ModelScope 的腾讯混元合集下载权重。自己部署前先评估显卡和显存,不确定值不值的可以先看站内本地部署的成本分析。
- 重要场合留底。机器同传适合"听懂大概",会议纪要、合同条款这类需要精确表述的内容,事后还是要人工校对或请专业译员出逐字稿。
四、三个别信的说法
"3 秒比人快,所以机器同传比人强。" 快只是维度之一。同传的价值在准确、得体、能处理歧义和文化差异。官方对比里人类专家取的是 6 人中的单人最高分,真实项目里译员还会根据听众背景调整说法,这些机器目前做不到。
"开源了,就是免费随便商用。" 开源不等于无限制使用。下载部署前先读 GitHub 仓库里的许可证和商用条款,确认自己的使用场景是否被允许,别等收到函再补课。
"音色克隆很方便,想克隆谁就克隆谁。" 克隆别人声音涉及人格权问题。这项功能只应用于获得授权的场景,比如翻译你本人或已授权发言人的音频,拿去模仿他人声音有法律风险。
五、一句话结论
同声传译从"按分钟买服务"变成"装个 App 免费用",中英日常场景值得今天就去试;但正式、涉责、高风险的场合,真人译员的位置还稳。
延伸阅读:
信息来源
本文基于公开信息整理,功能与价格以官方公告为准。
本文为编辑整理的行业动态,未附官方原文链接。涉及价格、参数、发布时间的,请以厂商官方页面为准;发现错误可来信指出,会在「本次更新」里注明。
每周一封,只发新教程和可复制模板。不发广告,随时退订。