Apple Watch Audio Intelligence 四项 AI 功能进入开发者测试
Apple Watch’s AI features for rewinding and recapping conversations begin beta testing
Apple 的 Apple Watch Audio Intelligence 功能随 iOS 27.3 更新进入开发者 beta 测试,包括声音识别、歌曲识别、Live Rewind 和 Siri Recaps 四项可选择性开启的功能。
Apple 面向 Apple Watch 的 AI 驱动“Audio Intelligence”技术现已进入 beta 测试阶段,首先面向 iOS 27.3 更新中的开发者开放。该技术于 9 月在公司的 Surprise and Shine 硬件发布会上首次公布。这项技术包含四项可选加入的 AI 功能,让 Apple Watch Series 12 的佩戴者能够检测重要声音、识别歌曲、回顾对话内容以及记录笔记。
声音识别功能将帮助失聪和听障用户通过手表识别警笛、警报或门铃等重要声音,而歌曲识别功能则借助 Apple 的 Shazam 应用检测背景中播放的音乐,并识别出歌名和艺术家。

不过,更具潜在争议性的功能是那些会聆听人类对话的功能:Live Rewind 和 Siri Recaps。
鉴于 Meta 的 AI 眼镜及其他 AI 可穿戴设备等 AI 录音设备曾引发强烈反对,Apple 一直试图开辟一个空间,让这些功能对 Apple Watch 用户有用,同时仍尊重周围人的隐私。
Live Rewind 的理念是让你回溯时间,查看别人刚才说了什么,以免你错过。例如,如果有人在向你口头指路,或在餐厅念一份很长的特色菜清单,你可以连按两下手表的数码表冠,以文本片段的形式在表盘上查看过去 15 秒内的谈话内容。你可以查看这个片段后不作任何操作,它将永久消失;或者也可以将其保存到随 iOS 27 推出的独立 Siri 应用中以便日后查看,这在你试图记住某人的名字,或想从节奏飞快的演示中快速记下笔记时可能会很有用。

Apple 表示,如果用户对谈话中的内容有疑问——比如一个不认识的技术术语,或者服务员提到自己不熟悉的某种酱料选项等——还可以点击显示在文本片段下方的“Ask Siri”选项。
当你连按两下数码表冠时,手表会发出一声提示音并显示一段动画。这是想通过手势、声音和视觉显示的组合,向周围的人表明你录下了刚才的谈话内容。
如果你不保存,这些片段将在 30 秒后自动删除。
另一个功能 Siri Recaps 则将这种环境聆听技术更进一步,让 Apple Watch 用户能够对对话内容做概要式笔记。

重要的是,Apple 表示它不会识别说话者、保存原始音频,也不提供逐字转录。相反,该功能会用一句话和几个要点式的项目符号来总结对话内容。例如,根据话题不同,项目符号可能包含重要日期或截止时间、价格或付款计划信息,以及其他事实信息。
Apple 表示,这项功能可用于工作会议、家长会、私人健身课程,或其他你需要记住要完成的任务或别人所说内容的场景。从本质上讲,它旨在模拟用户自己记笔记的能力——且不会加入情绪或语气。
这可能特别有帮助,尤其是在你无法亲自记录笔记的时候,比如双手忙不过来,或者你正试图专注于当下别人所说的内容。当你用耳机听音乐或使用其降噪功能时,这些摘要不会记录对话。
启用该功能后,一天结束时,系统会提示你查看保存的 Siri Recaps(Siri 摘要),然后选择要保存哪些内容(如果有)。这些笔记可以保存到你的备忘录(Notes)应用中,如果内容较为私人,甚至可以导出到日志(Journal)应用。如果你不做任何操作,摘要将在七天内自动删除。
当你早上第一次解锁 Apple Watch 时,也会出现这条查看已录制 Siri Recaps 的提醒。
用户可以选择手动启用 Siri Recaps,也可以配置一个时间表,例如仅在工作时进行摘要记录,或确保它从不在夜间运行。即使它按时间表运行,你仍可随时从控制中心关闭摘要记录功能。
Apple 指出,Siri Recaps 的设计会排除敏感信息,例如政府分配的身份证件号码、财务和身份验证数据、某些个人身份信息,以及任何可能助长自我伤害的言论。
Apple Watch Series 12 和 Apple Watch Ultra 4 的音频智能(Audio Intelligence)功能依赖于 Apple 的硬件、软件和服务的结合。其中包括 S11 芯片、内置麦克风、在 iPhone 上运行的 Apple Intelligence 模型,以及 Apple 的 Private Cloud Compute。

这款常亮处理器包含一个安全隔区(secure enclave)——一块受硬件保护的内存空间,操作系统的其他部分无法访问——其中有一个专用的音频缓冲区用于处理原始音频。这使得音频能够被处理,而包括 Apple 在内的任何人都无法实际访问它。音频只能通过与手表之间的安全配对机制由配对的 iPhone 访问。
其工作原理是:Apple Watch 上 S11 芯片中的轻量级 AI 模型会检测佩戴者是否正在参与一场对话,然后将音频传输到 iPhone 的安全隔区。iPhone 上的端侧处理将音频转换为精简文本,即去除了填充词的对话文本。随后,这段精简文本会被加密并发送到 Apple 的 Private Cloud Compute(PCC)以生成对话摘要,再回传到手机。(摘要及用于生成摘要的任何归纳内容会立即从 PCC 中删除)。
之后你可以在 iPhone 上访问的摘要只有你自己可以查看,Apple 无法访问。并且在多台 Apple 设备之间同步时,它们都是加密的。
类似地,Apple Watch 会将音频传输到 iPhone 进行处理,以生成 Live Rewind 的 15 秒片段。
苹果表示,这些功能都不会影响你的手表或手机的电池续航。这些功能随后将推送到公开测试版进行更广泛的测试,然后再向所有用户正式发布。
当你通过我们文章中的链接购买时,我们可能会获得少量佣金。这不会影响我们的编辑独立性。
来源: TechCrunch · AI · techcrunch.com