Apple Intelligence 第二彈|視覺智慧功能上線、加推「影像樂園」、ChatGPT 加持

Apple 正式推出 iOS 18.2、iPadOS 18.2 和 macOS Sequoia 15.2,全新 Apple Intelligence 功能也做了升級,進一步提升 iPhone、iPad 和 Mac 的使用體驗。

蘋果先前在 Apple Intelligence 便已經預告將於 12 月釋出第二波新功能,時間點就是今天(12/11)隨著 iOS 18.2、iPadOS 18.2 和 macOS Sequoia 15.2 更新,使用者可以透過「影像樂園」探索視覺化自我表達的創意新方式、以 Genmoji 打造適合各種情況的完美表情符號,並利用強化的「書寫工具」讓文字更有活力。

以 Apple Intelligence 為基礎,使用者在使用 iPhone 16 或 iPhone 16 Pro 時將可透過「相機控制」運用視覺智慧,快速了解身邊事物。「書寫工具」和 Siri 現已與 ChatGPT 整合,使用者無需切換 App,即可利用 ChatGPT 的廣博知識,空前輕鬆快速地完成任務。

在多國語言支援上,即日起,Apple Intelligence 也開始擴展到澳洲、加拿大、愛爾蘭、紐西蘭、南非和英國的本地化英語,中文、英文 (印度)、英文 (新加坡) 、法文、德文、義大利文、日文、韓文、葡萄牙文、西班牙文和越南文等更多語言支援將在未來一年陸續推出,首批語言支援將隨軟體更新於 2025 年 4 月發佈。

「影像樂園」體驗讓使用者能夠根據主題、服飾、配件和地點等概念輕鬆建立獨特的趣味圖像。使用者可自行新增文字描述,還可依據照片圖庫中的照片打造與家人或朋友面容相似的人物圖像。「影像樂園」可產生多種風格獨特的影像,包括「動畫」和「插畫」,前者是現代風格的 3D 動態圖像,後者則以簡單的圖形、清晰的線條和色塊產生圖像。這一體驗直接整合在「訊息」App、「無邊記」、Keynote 等眾多 App 中。

「影像樂園」也將作為全新獨立 App 推出。

針對 AI 表情方面,只要在文字訊息裡、作為貼圖分享,或「點按回應」的表情符號鍵盤中輸入描述,即可叫出多種選項的 Genmoji。使用者還可利用自己照片圖庫中的圖像,建立與親友面容相似的 Genmoji。個人化 Genmoji 可透過配件進行自訂,比如帽子或墨鏡,還可表現各種主題或活動。

在升級之後,「備忘錄」App 推出「影像魔杖」新工具,使用者可以用「影像魔杖」建立動畫、插畫以及素描風格的圖像。有了「影像魔杖」,使用者只須圍著草圖畫一個圈,即可將之化為精緻的圖像。利用工具面板中的「影像魔杖」,使用者可在筆記中根據已有的文字或視覺資訊快速建立圖像。甚至還可以圈出筆記中的一塊空白區域,「影像魔杖」就能利用裝置端生成式模型分析周圍的手寫或鍵入文字,提取出資訊產生合適的圖像。

「書寫工具」在現有的改寫、校對和摘要基礎上加入新功能,透過新的「Describe Your Change」選項,供使用者具體說明想要做的更改。「Describe Your Change」選項賦予使用者更高的靈活性和控制權,使他們得以讓文字更生動,例如,他們可在簡歷中加入更多展現執行力的動詞,或者將晚宴邀請函改寫成詩歌等。與「書寫工具」的所有功能相同,新的「Describe Your Change」選項在 Apple 全系統中皆可使用,且支援大量第三方 App。

針對 iPhone 16 系列配備的新「相機控制」鍵,現在終於迎來更新,加入先前發表會介紹過的「視覺智慧」,讓用戶快速了解身邊的事物和地點。視覺智慧還可總結和複製文本、翻譯不同語言、辨識手機號碼或電子郵件位址以讓使用者加入聯絡人資訊等。「相機控制」還可讓使用者進行 Google 搜尋,以知道可以在哪裡購買物品,或者利用 ChatGPT 的問題解決技能來分析解釋複雜的圖表,如解讀課堂筆記等。使用者可以掌控何時使用第三方工具,以及共享哪些資訊。

Siri 和「書寫工具」結合 ChatGPT

這次更新後,Apple 在 iOS、iPadOS 和 macOS 中的 Siri 和「書寫工具」體驗中提供 ChatGPT 整合功能,讓使用者無須切換工具,即可運用其專業技術,以及圖像與文件的理解能力。透過 ChatGPT 整合,Siri 可以建議使用者針對某些指令運用 ChatGPT,且 Siri 可以直接提供回應。透過「編寫」功能,使用者可以從全系統的「書寫工具」要求 ChatGPT 針對他們撰寫的題材任何生成內容。他們還可以用 ChatGPT 的圖像生成功能在其書寫內容旁邊增添圖像。

使用者可以選擇是否啟用 ChatGPT 整合,並完全控制何時使用它,以及與 ChatGPT 分享哪些資訊。預設情況下,使用此整合功能不需要 ChatGPT 帳號。當沒有帳號使用 ChatGPT 時,OpenAI 不會儲存指令,也不會用這些資料進行模型訓練。此外,使用者的 IP 位址會被隱藏,以防止他們的會話連結在一起。選擇連結帳號的使用者則須遵守 OpenAI 的資料使用條款。

Apple 預告,更多 Apple Intelligence 功能將於未來幾個月推出,Siri 將變得更加強大,能夠根據使用者的個人情境,提供量身打造的智慧功能。Siri 也將具備畫面感知功能,並能在 Apple 與第三方 App 之內與之間進行上百種新操作。「重要通知」會將最重要的內容顯示在最上方。此外,使用者將能夠在「影像樂園」中以「素描」風格製作圖像。