FaceTime 客户端应用“Navi”通过 SharePlay 添加字幕和实时翻译
随着 Apple 发布支持 SharePlay 的 macOS 12.1，开发人员 Jordi Bruin 刚刚推出了 Navi，这是一款通用应用程序，可帮助听力障碍和其他残疾人士使用字幕和实时翻译轻松进行 FaceTime 通话。
Bruin 最近创建了 Cibo，这是一款 iOS 应用程序，可帮助您在国外旅行时扫描和翻译餐厅菜单，他告诉9to5Mac他是如何创建 Navi 的：
4 月，我参加了一个黑客马拉松，并尝试了 mixToTelephonyUplink API，让静音的人可以通过文本到语音（…）在电话通话中发言。在 WWDC 期间，我观看了 SharePlay 会议并开始想象如何使转录想法再次成为现实。
借助 Navi，FaceTime 客户端可帮助用户：
- FaceTime 通话的即时隐藏式字幕
- 将收到的字幕实时翻译成 20 多种语言
- 体验专门围绕画中画构建
- 在 macOS 上，字幕直接覆盖在视频窗口上
- 字幕通过 Apple 的服务器进行端到端加密
这里有 20 种可供翻译的语言：波兰语、土耳其语、泰语、乌克兰语、德语（奥地利）、法语（瑞士、法国和加拿大）、芬兰语、越南语、意大利语、瑞典语、德语、日语、葡萄牙语（巴西和葡萄牙） 、西班牙语（墨西哥和西班牙）、挪威语、丹麦语、克罗地亚语、中文（繁体和简体）、荷兰语和英语（加拿大、南非、菲律宾和英国）以及阿拉伯语（沙特阿拉伯）。
尽管 Bruin 创建此应用程序是为了帮助有听力障碍和其他妨碍他们轻松参与视频通话的残障人士，但该应用程序也对不会说同一种语言但仍需要实时参与的人有所帮助对话：
SharePlay 为开发人员添加了一个非常简单的 API，用于通过 FaceTime 通话在人与人之间传递信息，所有信息均已加密且延迟极低。（……）！我在 TestFlight 上有 500 多人，但由于测试需要我给他们所有人打电话，我必须找到更好的方法，所以最后，我不得不从不同的设备上自己进行很多次 FaceTime。(…) 当我使用实时翻译功能并且可以与我不会说的语言的人交谈时，我仍然感到震惊。有时真的感觉像一部科幻电影。
考虑到这两个公众，开发商仍然希望继续为听力障碍和其他残疾人士改进 Navi，因为 Navi 刚刚推出：
“我从 TestFlight 上的一些听障用户那里听到它已经非常有帮助，所以首先我想听听他们是否可以添加任何东西来使应用程序更好地满足他们的特定需求。“
要使用 Navi，只需开始 FaceTime 通话，打开 Navi，点击“启用字幕”按钮，邀请 FaceTime 通话中的其他人加入 Navi，然后他们只需要接受 SharePlay 邀请即可。
Navi 可在此处的 App Store 上免费获得。在年底之前，用户可以免费试用字幕功能。到 2022 年，人们将获得五次免费电话，然后他们必须一次性支付 3.99 美元。要使用实时翻译功能，用户需要购买一个包来拨打电话，起价为 5.99 美元，提供 100,000 个字符，根据人们说话的速度，这应该大约需要一个小时的翻译时间。