Article · AI translation
苹果为 Apple Watch 推出的人工智能“音频智能”技术现已开始进行测试版测试,最初在 iOS 27.3 更新中向开发者开放。该技术最早于苹果 9 月的 Surprise and Shine 硬件发布会上公布。它包含 4 项可选择启用的人工智能功能,让 Apple Watch Series 12 用户能够识别重要声音、辨认歌曲、回顾对话内容和记笔记。
声音识别功能将帮助失聪和听力障碍用户通过手表识别警笛、警报或门铃等重要声音;歌曲识别功能则利用苹果的 Shazam 应用,检测背景中播放的音乐,并识别歌名和歌手。
不过,更可能引发争议的是那些会聆听人们对话的功能:Live Rewind 和 Siri Recaps。
鉴于 Meta 的人工智能眼镜及其他人工智能可穿戴设备等人工智能录音设备引发的反弹,苹果试图让这些功能既能为 Apple Watch 用户所用,又能尊重周围人的隐私。
Live Rewind 的设想是让你在没听清时回头查看别人刚说了什么。例如,如果有人口头给你指路,或者在餐厅念出一长串特色菜品,你可以连按两下手表的数码表冠,在表盘上以文字片段查看过去 15 秒内说过的话。你可以只看这段文字,之后不做任何操作,它便会永久消失。你也可以将其保存到随 iOS 27 推出的独立 Siri 应用中,供日后查看;如果你想记住某人的名字,或从节奏很快的演讲中迅速记下一条信息,这可能会有帮助。
苹果表示,如果用户对说过的内容有疑问,还可以点击文字片段下方出现的“询问 Siri”选项,例如询问不理解的技术术语,或服务员提到但自己不熟悉的某种酱汁选项等。
连按两下数码表冠时,手表会发出提示音并显示动画。此举旨在通过手势、声音和视觉显示相结合的方式,向周围的人表明你录下了别人说的话。
如果不保存,这些文字片段将在 30 秒后自动删除。
另一项功能 Siri Recaps 则进一步利用这种环境聆听技术,让 Apple Watch 用户能够为对话记下概要笔记。
苹果强调,该功能不会识别说话者、保存原始音频,也不会提供逐字转录。相反,它会用一个简短的句子和若干要点概述对话,列出关键信息。例如,根据话题不同,这些要点可能包括重要日期或截止日期、价格或付款计划信息,以及其他事实信息。
苹果表示,该功能可用于工作会议、家长与教师面谈、私人训练课程等场合,帮助用户记住需要完成的任务或别人说过的话。本质上,它旨在模拟用户自己随手记笔记的能力,而不加入情绪或语气。
当你双手忙碌,或正专注于倾听而无法自己做笔记时,这项功能可能尤其有用。如果你正戴着耳机听音乐,或正在使用耳机的降噪功能,Siri Recaps 就不会记录对话。
一天结束时,如果启用了这项功能,系统会提示你查看已保存的 Siri Recaps,然后选择是否保存其中的内容,以及要保存哪些。这些记录可以保存到备忘录 App;如果内容比较私密,也可以导出到日记 App。如果你不采取任何操作,这些回顾会在 7 天内自动删除。
早上首次解锁 Apple Watch 时,也会出现提醒,让你查看已录制的 Siri Recaps。
用户可以手动开启 Siri Recaps,也可以设置运行时间,例如只在工作期间生成回顾,或确保夜间绝不运行。即使设置了运行时间,你仍可随时从控制中心关闭回顾功能。
苹果指出,Siri Recaps 在设计上会排除政府颁发的身份识别号码、财务和身份验证数据、某些个人身份标识,以及任何宣扬自我伤害的言语等敏感信息。
Apple Watch Series 12 和 Apple Watch Ultra 4 的 Audio Intelligence 功能依靠苹果硬件、软件和服务的协同工作,包括 S11 芯片、内置麦克风、在 iPhone 上运行的 Apple Intelligence 模型,以及苹果的 Private Cloud Compute。
常开处理器包含安全隔区——一个受到硬件保护、操作系统其他部分无法访问的内存空间——专用音频缓冲区在其中处理原始音频。这样便能处理音频,而任何人,包括苹果,都无法实际访问音频。只有配对的 iPhone 能通过它与手表之间的安全配对机制访问音频。
为实现这一功能,Apple Watch 的 S11 芯片上运行的轻量级 AI 模型会检测佩戴者是否正在参与对话,然后将音频传输到 iPhone 的安全隔区。iPhone 上的设备端处理会将音频转换为精简文本,也就是去掉语气词后的对话文字。随后,这些精简文本会经过加密,发送至苹果的 Private Cloud Compute(PCC),生成对话回顾并传回手机。(回顾及生成回顾时使用的任何摘要随后都会立即从 PCC 删除。)
之后你可以在 iPhone 上查看这些回顾,只有你能访问,苹果无法访问。当回顾在你的多台 Apple 设备之间同步时,也会经过加密。
同样,Apple Watch 会将音频传输到 iPhone 进行处理,以生成 Live Rewind 的 15 秒片段。
苹果表示,这些功能都不应影响手表或手机的电池续航。在向所有人正式开放之前,这些功能之后会先进入公开测试版,接受更广泛的测试。