华盛顿大学研发“空间语音翻译”技术:多人同时发言也能精准识别

发布时间:2025-05-25 14:32:35 来源:互联网

本站 5 月 24 日消息,美国华盛顿大学的一项研究提出了一种可穿戴式“空间语音翻译”技术,能够通过双耳耳机在多人交谈环境中实时翻译,并可以保留每位发言者的声音特征与方位感。

据 ITMedia News 昨日报道,借助这项技术,耳机能将每个人的话实时翻译成你的母语,同时保留每个人的声音个性和方向信息,让你清楚分辨谁在说什么。

与现有翻译工具相比,这项技术解决了两大难题:一是支持多人同时发言场景,二是翻译结果不再千篇一律,而是保持每个说话者独特的声音风格与方向。研究结合了音源分离、空间定位、实时翻译与双耳渲染等技术,构建出完整系统。

本站从报道中获悉,研究团队的三大技术突破包括:

    通过将空间细分为多个角度区域,并用神经网络识别每个区域内的潜在发言者,实现准确的音源分离与定位;

    构建可在 Apple 芯片上实时运行的语音翻译模型,能保留说话者的音质与情感;

    开发出双耳渲染方法,让翻译后的语音从原说话者方向传来,增强沉浸感。

    在实际测试中,研究人员使用市售降噪耳机和双耳耳机,在苹果 M2 芯片上完成了从法语、德语、西班牙语到英语的实时翻译。10 名受试者在多种环境下测试后,系统展现出较强的通用性。

    进一步的评估表明,29 名参与者普遍认为,新系统在多人交流场景中的表现优于传统翻译工具,不仅提升了翻译质量,也更易分辨说话者。此外,在空间感知实验中,用户能准确判断翻译语音的方向,与原声几乎无异。

    研究成果:

    • https://doi.org/10.1145/3706598.3713745

本周热门攻略

1
Zoom动物人配人马的虚拟世界探秘:它如何反映现代人对自我表达和自由的追求?

Zoom动物人配人马的虚拟世界探秘:它如何反映现代人对自我表达和自由的追求?

2025/04/07

2
凌晨三点为何选择看免费高清电视剧?最佳剧集推荐与注意事项

凌晨三点为何选择看免费高清电视剧?最佳剧集推荐与注意事项

2025/04/07

3
《深入浅出》电影在线观看:这部电影为何如此震撼人心?

《深入浅出》电影在线观看:这部电影为何如此震撼人心?

2025/04/07

4
1995年版《人猿泰山》中的满天星如何揭示主角情感的冲突与探索?

1995年版《人猿泰山》中的满天星如何揭示主角情感的冲突与探索?

2025/04/07

5
动物人配人马为何成了Zoom用户的新宠?你也想试试吗?

动物人配人马为何成了Zoom用户的新宠?你也想试试吗?

2025/04/07

6
暴躁老妈46集全免费完整版在线观看,带你感受家庭剧的真实与幽默

暴躁老妈46集全免费完整版在线观看,带你感受家庭剧的真实与幽默

2025/04/07

7
微软 GitHub 推出 AI 编程智能体,可自动修复漏洞和优化代码

微软 GitHub 推出 AI 编程智能体,可自动修复漏洞和优化代码

2025/05/20

8
《轮流抵债》在线观看:这部电影值得你观看吗?

《轮流抵债》在线观看:这部电影值得你观看吗?

2025/04/07

9
女人同房高潮后松手能恢复吗?从生理与心理角度解答这个疑问

女人同房高潮后松手能恢复吗?从生理与心理角度解答这个疑问

2025/04/07

10
养父与亲生女儿:一场“生米煮成熟饭”的命运纠葛,背后隐藏着怎样的情感秘密?

养父与亲生女儿:一场“生米煮成熟饭”的命运纠葛,背后隐藏着怎样的情感秘密?

2025/04/07