
iOS 18 is coming next week! Apple to debut the most comprehensive AI features "Reuters"

2024 年被外界定義為蘋果的生成式 AI 功能之年,AI 無疑會成為下週全球開發者大會 WWDC 的焦點。目前能確定的是 Siri 將基於人工智能全面改造,語音備忘錄實時轉換成文字版,對通知、短信、網頁、長篇文檔的 AI 摘要和自動消息回覆,高級照片編輯和特定物體摳除,自定義表情符號等 AI 功能預計都將集體亮相。簡而言之,AI 將全面集成進蘋果應用中。
本文作者:杜玉
來源:硬 AI
蘋果全球開發者大會 WWDC 將由 6 月 10 日美東時間下午 1 點(北京時間 11 日凌晨 1 點)的主旨演講拉開序幕。外界普遍將其定義為蘋果把 AI 功能全面整合進各大硬件操作系統的關鍵時刻。
WWDC 歷來是以軟件為中心的發佈活動,去年推出 Vision Pro 蘋果首款混合現實頭顯設備而成為例外。分析稱,今年蘋果或專注於宣傳軟件功能的 AI 更新來追趕競爭對手,例如將人工智能添加到表情符號 emoji、照片編輯、短信和電子郵件中,而不會宣佈任何真正具有革命性的東西。
預計下週將發佈新一代 iOS 18 手機操作系統和 macOS 15 電腦操作系統的更新,智能手錶、iPad 平板電腦和 Vision Pro 混合現實頭顯的操作系統應該也會融入更多 AI 功能,例如可以在蘋果手錶使用虛擬助手 Siri 在其他設備上播放音樂等。
還有分析稱,iPad 和 iPhone 上的眼動追蹤以及 VisionOS 上的實時字幕功能已經官宣,下週可能聽到更多有關這些與無障礙功能相關的更新以及確切發佈時間。

AI助力 “更智能的 Siri”,但更復雜功能可能明年才推出
在最有可能基於人工智能而大力增強的功能中,首當其衝的便是蘋果虛擬助手 Siri。
據信蘋果正在全面重建一個能夠由大語言模型提供支持的 Siri,這些大語言模型可能會由蘋果自研的端側 AI Ajax LLM 和微軟支持的 OpenAI ChatGPT 技術相結合而成。
但利用人工智能對 Siri 改頭換面的任務規模巨大,可能要到明年某個時候才能全面推出,下週在 iOS 18 最新手機操作系統中可能僅會發佈一個初始版本,擁有一些基本 AI 功能。
例如,Siri處理多步驟任務的能力或推遲到明年發佈,今年 9 月 iOS 18 中的新版 Siri 可能每次只能處理一條語音指令。蘋果最終的計劃是令 Siri 允許用户一次性輸入多個指令,例如利用 AI 總結會議錄音、或智能剪裁修飾完照片後,再馬上用郵件發送給相關人士。
重建後,除了完成多步驟任務的能力,AI 助力下 “更智能的 Siri” 預計還將實現以下功能:
更智能地理解用户需求,利用 AI 分析用户在設備上的操作,並自動啓用由 Siri 控制的功能;
用語音回答用户提問,而不是顯示網絡鏈接,而且聲音聽上去更自然;
為短信提供基於端側大語言模型生成的自動回覆建議,並用 AI 生成自定義表情符號 emoji;
瞭解用户的聯繫人、約會日程、方位等,以便作出更智能的響應;
能將語音備忘錄實時轉寫成文字版,能夠總結通知、短信、網頁、長篇文檔等所有內容;
能夠與其他應用程序交互,例如用户可以要求 “將這篇筆記 Note 移動到我的新主文件夾”,或者打開 Apple News 應用中的特定出版物;
通過語音控制應用程序內的單個功能,例如可以要求 Siri 執行刪除電子郵件、通過電子郵件發送網絡連接,或智能編輯照片等高級操作;
使用人工智能自動確定某項功能在端側 AI 還是雲端服務器處理,更好地保護用户數據隱私。
有分析稱,蘋果將評級新版 Siri 正式進入 AI 時代。

還有兩個 “板上釘釘” 會推出的 AI功能:照片與短信
第二個被眾多媒體確信會發布的 AI 功能是新版照片編輯器。
除了智能剪裁、調整大小、旋轉、翻轉、為照片添加濾鏡之外,AI 還能幫助識別和編輯特定照片元素,例如人像的眼睛、頭髮和衣服,並仿照谷歌 “魔法橡皮擦” 推出 iPhone 版的生成式 AI“清理” 功能,允許用户從照片中刪除不想要的人和物體,而且可能通過語音控制 Siri 即可操作。
此前還有報道稱,蘋果製作了一款名為 Generative Playground(生成式遊樂場)的公司內部應用程序,使用生成式人工智能來創建和編輯圖像,但尚不清楚該功能將如何呈現給終端用户,有可能是集成到 iMessage 短信應用中一起推出。
第三個馬上要被 AI 增強的應用領域據信是 iMessage 短信。
一個突出功能是將生成式 AI 引入表情符號 emoji,可以根據用户發送的短信內容即時創建自定義表情符號。在目前為整體短信創造特效之外,還將支持單個詞彙的動畫特效。

蘋果還將提供被錯過短信的 AI 總結綜述,今年 iPhone 可能支持 RCS 短信,即用 “富通信服務” 來取代 SMS(短信息服務)協議,更方便與安卓手機之間的短信聯繫。RCS 協議將支持許多與 iMessage 相同的功能,包括輸入指示器、高分辨率視頻與圖像等媒體共享,以及端到端加密。
其他 AI功能報道籠統,但趨勢是 AI全面集成進 iPhone應用
其他不太確定是否會馬上發佈,但據稱蘋果也在研發的 AI 功能還包括:
更智能的 Spotlight 搜索,除了令結果更快和更可靠,還能深入挖掘應用程序內的相關內容並匯總,例如用户可以要求 “給我看看我存在手機上的所有奶酪食譜” 等;
Xcode 中的 AI 輔助編程,以及蘋果 Keynote 和 Pages 等生產力應用程序可能獲得生成式 AI 功能;
由人工智能結合智能手錶數據驅動的健康與健身指導,目標是 “激勵用户鍛鍊,改善飲食習慣,幫助睡眠更好”,為用户提供改變生活方式和改善整體健康狀況的建議;
去年底推出的日誌應用(Journal)得到人工智能增強,AI 可用來分析日誌的措辭以檢測用户情緒;
筆記應用(Notes)可由 AI 複述內容、提供摘要,並實時將音頻轉換成文字,還將支持應用內錄音;
數學筆記(Math Notes)可通過識別數學方程式的文本,幫助用户解題和通過 AI 創建圖表,Notes 用户還能選擇在輸入時自動補全數學方程式;
iPhone 端側大語言模型可與日曆應用(Calendar)交互,在撰寫短信回覆時融合待辦事項;
短信、郵件都獲得由端側大語言模型提供的自動回覆建議;
設置功能(Settings)界面改進,以便改善搜索和更好地組織內容結構;
控制中心(control center)和通知(notification)功能都通過 AI 增強;
Apple Music 可能會利用自研人工智能自動生成音樂播放列表,與 Spotify 展開競爭等。
還應關注:四大非 AI更新和新型芯片觸發換機週期
除了即將出盡風頭的 AI 功能之外,iOS 18 操作系統預計還將發佈以下四大新改變,包括主屏幕自定義應用圖標排列、應用圖標設計更改等:
1、將應用程序圖標放置在手機主屏幕的任意位置,而非固定網格對齊,將是 iPhone 歷史上首次。
2、自定義應用圖標設計,將首次允許用户在系統範圍內更改應用程序圖標的顏色,例如可將所有社交媒體 app 圖標設定為藍色,將所有與金融相關 app 的圖標設為綠色。
3、蘋果地圖新增對創建自定義路線的支持,用户可設計特定路線而非依賴地圖應用的推薦。
4、更方便自定義控制中心界面,包括音樂播放器的展示區域和對 HomeKit 智能家居的集成。
此外,下週的 WWDC很可能會提到搭載人工智能的新型芯片,下一代 iPhone 處理器可能會稱為 A18,帶來更好的 AI 性能,與升級版 iPad Pro 平板電腦中採用的新款 M4 芯片保持一致。
蘋果認為,iPhone、iPad 和 Mac 的最新 AI 功能以及 Siri 增強功能將鼓勵用户升級設備,許多端側 AI 功能需要 iPhone 15 Pro 或更高版本才能運行,而 Mac 和 iPad 則至少需要 M1 芯片。
蘋果股價週一漲近 1%,年內重新轉為累漲。


