Apple Watch 開始測試對話回溯與摘要 AI 功能

目錄

• 你可能會想知道
• 主題
• 重點整理表
• 後續發展……

你可能會想知道

• Apple Watch 如何協助佩戴者回想剛才聽到的內容，或記住對話的重點？
• Apple 為這些聆聽功能說明了哪些隱私控制與技術防護措施？

主題

Apple 開始為 Audio Intelligence 進行 Beta 測試。這是一系列專為 Apple Watch 設計的人工智慧功能。開發者測試將隨 iOS 27.3 更新啟動，此技術先前於 9 月的 Surprise and Shine 硬體發表會上公布。這些功能初期預計提供給 Apple Watch Series 12 佩戴者使用，而 Apple Watch Ultra 4 也列為相容於底層 Audio Intelligence 系統的機型。Apple 將這系列功能描述為四項選擇性功能：辨識重要聲音、辨識音樂、回顧近期對話，以及從對話建立筆記。

其中兩項功能的用途相對熟悉。聲音辨識旨在協助失聰與聽力不佳的使用者留意警笛、警報和門鈴等聲音。歌曲辨識則透過 Apple 的 Shazam app，辨識背景播放的音樂並提供歌曲名稱與演出者。另兩項功能 Live Rewind 和 Siri Recaps 會聆聽對話，因此更直接引發了關於同意、隱私，以及錄下的語音如何處理等問題。

這些疑慮也是圍繞 AI 錄音產品的更廣泛討論之一，包括 Meta 的 AI 眼鏡及其他 AI 穿戴裝置。Apple 的做法是將這些功能定位為佩戴者可選用的工具，同時加入可見與可聽的提示、檢視步驟及技術防護。核心差異在於：短暫回想近期說過的話，與保存有條理的摘要供日後查看，兩項功能的目的和保留流程各不相同。

Live Rewind：回想近期說過的話

Live Rewind 適用於有人剛說了某些內容，而佩戴者沒有聽清楚的情況。例如，有人可能正在口頭指路，或餐廳員工正在介紹幾道特餐。佩戴者可以按兩下 Apple Watch 的數位錶冠，叫出一段文字摘錄，內容是過去 15 秒內說過的話。摘錄會顯示在錶面上，讓佩戴者能查看資訊，而不必請說話者重複一次。

查看摘錄後，佩戴者可以不儲存，這樣摘錄就會永久消失；也可以將它儲存到隨 iOS 27 一同推出的獨立 Siri app。儲存的摘錄可協助使用者回想某個名字，或保留快節奏簡報中的簡短細節。Apple 也表示，文字下方可能會出現「詢問 Siri」選項。使用者可以選取該選項，詢問摘錄中提到的內容，例如不熟悉的技術術語，或不認識的醬料選項。

這項操作的設計會讓附近的人察覺。按兩下錶冠會觸發提示音和手錶動畫。這些提示搭配手勢，旨在讓他人知道語音正在被擷取以供此功能使用。如果摘錄未儲存，30 秒後便會自動刪除。這種預設的短暫保留方式，與可選擇儲存摘錄以便日後查看不同。

Siri Recaps：將對話轉為精簡筆記

Siri Recaps 採取更全面的方式，從對話中產生概要筆記。Apple 表示，這項功能不會辨識個別說話者、不會保留原始音訊，也不會提供逐字稿，而是產生一個簡短句子和項目符號，摘要列出重要資訊。視對話內容而定，這些要點可能包括日期或期限、價格或付款計畫細節，以及其他事實資訊。

Apple 提及的可能用途包括工作會議、親師會議、個人訓練課程，以及其他使用者可能想記住待辦事項或細節的情境。此功能旨在模仿做筆記的實用效果，而不試圖加入說話者的情緒或語氣。當使用者雙手正忙，或書寫會讓人更難專心聆聽時，這項功能可能很有幫助。

Siri Recaps 在使用時有所限制。佩戴者戴著耳機聽音樂或使用耳機的降噪功能時，這項功能不會錄下對話。使用者可以手動啟用摘要功能，或設定排程，例如只在工作時使用，或避免它在夜間運作。即使已啟用排程，也可以隨時從控制中心關閉摘要功能。

每天結束時，系統會提示使用者檢視已儲存的 Siri Recaps，並選擇要保留哪些摘要（如果有的話）。摘要可以儲存到 Notes app；若內容較為個人，也可以匯出到 Journal app。如果未儲存，摘要會在七天內自行刪除。使用者早上第一次解鎖 Apple Watch 時，也會收到檢視已錄製摘要的提醒。

隱私控制與處理架構

Apple 表示，Siri Recaps 的設計會排除敏感資訊類別，包括政府核發的識別碼、財務與驗證資料、某些個人識別資訊，以及可能鼓勵自我傷害的語言。除了這些內容防護措施，使用者也可以選擇是否啟用、設定排程、關閉功能，以及決定是否保留產生的筆記。

此系統仰賴 Apple 的硬體、軟體與服務。Apple 指出，系統組件包括 S11 晶片、內建麥克風、在 iPhone 上執行的 Apple Intelligence 模型，以及 Apple 的 Private Cloud Compute。常時運作的處理器包含安全隔離區：一個受到硬體保護、無法由作業系統其他部分存取的記憶體空間。專用音訊緩衝區會在這個受保護的空間中處理原始音訊。Apple 表示，這種安排旨在讓音訊能夠被處理，但不會讓任何人（包括 Apple）存取。

在偵測對話時，Apple Watch S11 晶片上的輕量 AI 模型會判斷是否正在進行對話，以及佩戴者是否參與其中。接著，音訊會透過安全配對機制傳送到已配對 iPhone 上的安全隔離區。iPhone 會在裝置上處理音訊，將其轉換為刪除填充詞的精簡文字。這些文字會加密後傳送至 Apple 的 Private Cloud Compute (PCC) 以產生摘要，然後傳回手機。Apple 表示，摘要及用於產生摘要的任何整理內容都會在處理完成後立即從 PCC 刪除。

Apple 進一步表示，iPhone 上的摘要只有使用者本人能存取，Apple 無法存取；在使用者的 Apple 裝置之間同步時，摘要也會加密。Live Rewind 使用類似的傳輸流程：音訊會從 Watch 傳送至 iPhone，以建立 15 秒的摘錄。Apple 表示，這些功能不應影響手錶或手機的電池續航力。以上是該公司對其設計的說明；使用者仍可依不同情境，考量自己對於同意與錄音的期待。

Beta 測試將分階段推出。初期由開發者測試，接著推出公開 Beta 以擴大測試範圍，之後才會向所有使用者正式發布。隨著功能經歷這些階段，其實際表現、控制方式和使用體驗也會逐漸明朗。

重點整理表

後續發展……

隨著 Beta 測試推進，最值得檢視的項目包括短語音摘錄的準確度、產生摘要的品質與中立性，以及使用者是否能輕易看出聆聽功能何時啟用。測試也能釐清這些功能在不同口音、說話方式、嘈雜環境，以及多人交談、聲音重疊時的表現。這些問題很重要，因為精簡的 AI 摘要雖然方便，也可能遺漏背景資訊或錯誤陳述細節。

後續工作應探討明確的錄音提示、清楚的同意流程、易於使用的控制項，以及可靠的檢視或刪除筆記方式。針對裝置端處理和雲端服務防護措施進行獨立評估，或有助於人們更有信心地評估隱私聲明。更廣泛的挑戰，是讓環境式 AI 發揮作用，同時避免附近的人不確定哪些內容正被擷取或保留。

更一般來說，低功耗處理、保護隱私的機器學習，以及易於使用的聲音辨識技術若有所進展，穿戴式科技或能協助人們記憶並獨立生活。公開 Beta 和最終發布將提供機會，讓人們在日常情境中評估這些系統；同時，持續關注準確度、同意與使用者控制仍至關重要。