先说结论
SozAI 会自动从 99 种语言中识别会议录音里说的是哪种语言,并用这种语言写出转写文本和会议纪要。之后你可以在应用或网页上把转写文本和会议纪要翻译成自己的语言,大约需要一分钟,不占用转写分钟数。需要提前考虑的限制是:每段录音只按一种语言转写,所以如果会议中途换了语言,第二种语言的部分可能转写得很差。如果你知道会议会切换语言,请把每种语言的部分分开录。
SozAI 怎么选择语言
这里没有可能设错的语言选项。录音到达我们的服务器后,语音识别会先听一遍,判断是哪种语言,再用这种语言转写整个文件。在网页版里,转写文本上方的菜单会显示它的判断,例如“Original · Polish”。
对使用人数多的语言,识别是可靠的,对其他语言则没那么可靠。在我们公开的准确率测试里,十种语言中有九种的 20 段音频全部识别对了语言。哈萨克语有 5 段(共 20 段)识别错了,被当成阿塞拜疆语,这些音频就按阿塞拜疆语转写了。如果你的会议使用的是使用人数较少的语言,请先打开第一份转写文本检查一下,再决定是否依赖它。
各语言的准确率
下面是该测试的数据:在安静的房间里朗读 200 个短句,每种语言 20 句,按应用实际的方式转写。数值越低越好。有背景噪音、大家互相打断的会议,结果会比这更差,而我们还没有测过真实的会议。
| 语言 | 词错误率 | 字符错误率 |
|---|---|---|
| 西班牙语(拉丁美洲) | 1.8% | 0.5% |
| 德语 | 3.0% | 0.8% |
| 英语(美国) | 3.6% | 1.6% |
| 法语 | 4.9% | 1.5% |
| 俄语 | 5.5% | 1.6% |
| 土耳其语 | 7.6% | 2.0% |
| 葡萄牙语(巴西) | 8.0%(去掉一段被读了两遍的音频为 3.9%) | 5.8% |
| 阿拉伯语(埃及) | 19.6%(忽略元音符号为 12.8%) | 6.9% |
| 日语 | 未按词统计 | 4.8% |
| 哈萨克语 | 50.0% | 26.3% |
其余 89 种语言同样受支持,但不在这次测试范围内。
会中切换语言的会议
这是我们坦率承认的弱点。一段录音只会得到一种语言。如果一场项目会议开头说德语,最后二十分钟转成英语,英语部分就会被一个期待德语的系统转写,结果可能很差。会议纪要又是根据这份有问题的转写文本写出来的。
怎么处理,取决于语言是怎么混用的:
- 分段切换。如果语言只在一两个已知的时间点切换,就在切换处停止录音并重新开始一段。每一段会各自识别语言。
- 一种语言夹杂外来词。一场满是英文产品名的西班牙语会议,仍然是西班牙语会议。不过请检查转写文本里的这些名称;外来词转写得怎样,我们还没有测过。
- 不断交替。有口译的会议,或者每个人逐句用自己的语言发言,是 SozAI 处理得最差的情况。我们不建议用于这种场合,也没有找到能解决它的设置。
得到你的语言的转写文本和会议纪要
会议纪要用会议所用的语言输出,所以用波兰语开的会得到的是波兰语纪要。想读中文或其他语言的版本,会后翻译这段录音即可。在网页版里:
- 在 web.sozai.app 打开这段录音。
- 打开转写文本上方的“Original”菜单,选“Translate into…”。
- 选择一种语言。文字和会议纪要会一起翻译,通常约一分钟,不消耗转写分钟数。
- 在同一个菜单里可以在译文和原文之间切换。如果你是在翻译之后才生成会议纪要,请点“Update”把它们也翻译一下。
iPhone、iPad、Android 和 Mac 应用同样可以翻译转写文本及其会议纪要。
| 录音的各部分 | 输出的语言 | 能否翻译 |
|---|---|---|
| 转写文本 | 说话时用的语言 | 能 |
| 会议纪要(摘要、决定事项、任务) | 会议所用的语言 | 能,与转写文本一起翻译 |
| 说话人姓名 | 你输入什么就是什么 | 不需要 |
| 网页版导出 TXT 或 VTT,以及“Copy the notes” | 当前屏幕上显示的版本 | 能 |
| 网页版导出 SRT 字幕 | 仅原文 | 不能 |
会议纪要的机器翻译,用来了解会上商定了什么就足够了。涉及合同或其他需要签字的内容,请找人工翻译。
怎么录这场会议
换了语言,录音的方式并不会变。在会议室里,用手机应用或笔记本的麦克风(线下会议的会议纪要)。Chrome 或 Edge 里的视频通话,用网页版录下通话所在的标签页(不用机器人的会议纪要)。
Mac 应用的会议模式不一样:它在 Mac 本机转写,语言设置为“Automatic”,除非你自己选了一种。我们的准确率测试没有覆盖它,它也不会自动生成会议纪要,所以如果会议用的是你读不太懂的语言,走我们服务器的录音能给你更多可用的内容。
不适合用 SozAI 的情况
- 每隔几句就在两种语言之间切换的会议,包括有口译的会议。
- 你需要会议进行时的同声传译。SozAI 是在会后翻译录音。
- 你需要对所说内容做经认证的翻译。
- 你的语言在我们的测试里得分很低(目前是哈萨克语),而你自己又无法检查转写文本。
录音存放在我们位于德国的服务器上(Hetzner);语音识别和翻译由我们子处理方名单里列出的合作方完成。关于会议纪要是怎样生成的,更多内容见 AI 会议纪要页面。
答案
常见问题
SozAI 能转写用其他语言开的会吗?
能。它会自动从 99 种语言中识别说话的语言,并用这种语言转写会议。录音前不需要你选择语言。
用其他语言开的会,能得到中文的会议纪要吗?
能。会议纪要先用会议的语言写出来;然后在应用或网页上把这段录音翻译成中文,转写文本和会议纪要会一起翻译。通常大约需要一分钟,不消耗转写分钟数。
SozAI 能处理混用两种语言的会议吗?
处理得不好。每段录音只按一种语言转写,所以第二种语言的部分可能转写得很差。如果语言在已知的时间点改变,就在每次切换处重新开始录一段。
SozAI 支持哪些语言?
转写支持 99 种语言,自动识别。各语言之间的准确率差别很大;我们公布的测试列出了词错误率,从西班牙语的 1.8% 到哈萨克语的 50%,测的是朗读的短句。
可以自己选语言,而不用自动识别吗?
在我们服务器上转写的录音不行:语言总是自动识别。Mac 应用的会议模式在 Mac 本机转写,它有语言设置,除非你更改,否则是“Automatic”。
翻译转写文本要花分钟数吗?
不用。在网页版里,翻译一段录音的文字和会议纪要不消耗转写分钟数。只有转写音频才会用到分钟数,而前 30 分钟免费,仅限一次。
译文能用于正式文件吗?
不能。它是机器翻译,用来了解说了什么、商定了什么就足够。凡是要签字或存档的内容,请找人工翻译。
将下一段录音转换为文字
录音、上传文件或粘贴链接,即可获得转录稿、说话人标注和摘要。
iOS 和 Android 免费使用。转写 YouTube 内容无需账户。