Apple 的 2024 年全球開發者大會 (WWDC) 被譽為科技公司最大型的活動之一。週一的開幕主題演講幾乎全程聚焦於我們無法停止討論的熱門關鍵字 - 人工智慧 (AI)。
在落後於 OpenAI、Google 和 Microsoft 等主要競爭對手之後,Apple 公布了一系列分布在公司最受歡迎的操作系統中的 AI 功能。雖然 AI 是本次活動的主要焦點,但 Apple 還宣布了今年 iPhone、iPad、Apple Watch、Mac 和 Vision Pro 的軟體升級。
如果您不想看長達兩小時的活動,我們為您整理了 WWDC 上的所有公告。以下是完整的總結。
VisionOS 2
- Apple 公布了其最近發布的 VisionOS 的首次重大升級——VisionOS 2。
- 在 Vision OS 2 中,照片應用得到升級,允許用戶將任何 2D 照片轉換為具有深度的空間照片,這些照片來自手機中的時刻。
- 照片應用中的空間人物功能讓用戶可以一起查看照片,創造更具共享感的體驗。
- VisionOS 2 還支持新的手勢控制,讓用戶更輕鬆地訪問某些設置。例如,用戶可以打開雙手並點擊以到達主屏幕,或轉動手腕以查看電池電量。
- 鏡像 MacOS 到 Vision Pro 的用戶將很快獲得更高的分辨率和更大的尺寸,創造出等同於兩個 4K 顯示器並排的超寬螢幕視圖。
- Vision Pro 還將包括火車支持旅行模式,使您在通勤時更輕鬆地工作。
- Vision Pro 現在將設有訪客用戶選項,允許其他用戶保存其眼睛和手部數據長達 30 天。
- 用戶現在可以個性化其家庭視圖,將應用程式放置在任何他們想要的位置。
- 用戶現在將能夠在 Safari 上使用環境觀看視頻,即使是在 YouTube 和 Netflix 等網站上。
- Apple TV 為 Vision Pro 帶來了多視圖,在觀看體育比賽時特別有用。
- 用戶可以使用 AirPlay 從他們的 iPhone、iPad 或 Mac 投放內容到 Vision Pro。
- Apple 也將從 6 月 28 日開始在更多國家推出 Vision Pro。可以在這裡查看完整列表。
iOS 18
- iPhone 和 iPad 用戶將能夠進一步自定義主屏幕,將應用程式放置在屏幕上的任何位置,而不是通常的固定網格。應用程式圖標顏色也可以自定義,允許用戶將應用程式變成任何顏色,甚至可以與主屏幕匹配。用戶還可以將應用程式圖標更改為深色模式。
- 控制中心進行了多項升級,包括能夠自定義其切換,例如手電筒、屏幕錄製、計算器、自動旋轉、屏幕鏡像等,通過點擊、按住和重新排列。控制中心切換還將設有不同的頁面,完全可自定義的用戶控制,用戶可以在鎖屏底部切換控制。
- Apple 還添加了隱私選項,包括能夠鎖定應用程式,這需要用戶在訪問應用程式之前通過 FaceID 或密碼進行身份驗證。用戶還可以隱藏應用程式,使其從主屏幕消失到應用程式庫的隱藏部分。
- 信息獲得了多項升級。Tapbacks,即允許用戶通過按住信息進行回應的功能,升級為包含不同顏色和表情符號。用戶可以為特定短語或單詞添加文本效果。文本還可以通過粗體、下劃線、斜體和刪除線等格式選項進一步自定義。最後,用戶將能夠定時發送信息。
- iPhone 14 及更新型號將擁有新的衛星信息功能,允許用戶在沒有 Wi-Fi 或蜂窩服務時通過衛星發送信息。
- 郵件應用程式將自動分類電子郵件,這項功能將在今年晚些時候推出。
- 錢包應用程式現在允許用戶將手機互相輕觸來交換 Apple Cash,無需共享電話號碼等個人信息。
- 日記應用程式將顯示更多統計和見解,包括今年的條目數量、日記天數等。
- iPhone 的新遊戲模式旨在幫助玩家優化其遊戲體驗。這包括減少後台活動和使用更具響應性的配件,如控制器。
- 照片應用程式獲得了 Apple 所謂的“有史以來最大的一次重新設計”,具有更清晰的設計、新的亮點輪播,每天更新的亮點,固定收藏夾的能力,以及改進的搜索。
- Safari 應用程式進行了升級,包括關於網頁的關鍵信息。您可以在本文的 MacOS 部分中了解更多關於 Safari 升級的信息。
- 日曆應用程式現在可以從提醒應用程式中提取數據,以提供更無縫的日程概覽。
AirPods
- AirPods Pro 將有語音隔離功能,以提升在嘈雜環境中的通話質量。
- 通過新的Siri 互動功能,用戶現在可以點頭或搖頭回答 Siri 的“是”或“否”。
- Apple 也將發布一個個性化空間音頻 API,供遊戲開發者圍繞 AirPods 的音頻技術進行開發。
tvOS 18
- 當用戶觀看 Apple TV+ 節目或電影時,新的 InSight 功能將包括額外的信息,例如演員名稱和音樂標題。用戶可以輕鬆地將這些音樂標題添加到他們的 Apple Music 播放列表中。當使用 iPhone 作為遙控器時,InSight 資訊也會顯示在智能手機上。
- 增強對話功能已升級,能夠在 Apple TV 4K 上提供更清晰的對話聲音,超越電影或節目中的其他元素,如音樂或背景噪音。
- 字幕經過優化,當語言不匹配其中一個設備時,自動顯示,或當用戶靜音或倒回時顯示。
- Apple 添加了對 21:9 格式的支持,用於在投影機上觀看內容。
- 添加了新的有趣屏幕保護程式,包括肖像、電視和電影以及史努比主題。
- 當在 tvOS 18 上使用 FaceTime 時,用戶現在可以選擇實時字幕(美國和加拿大的英語)。
- tvOS 還將提供重新設計的Apple Fitness+ 體驗,包括新的 For You、Explore 和 Library 空間。
WatchOS 11
- 新的 訓練負荷 允許用戶了解其鍛煉強度對長期表現的影響。
- 新的 Vitals 應用程式將使用戶能快速查看最重要的健康指標,包括心率、呼吸速率、手腕溫度、睡眠時長和血氧濃度。它還將提供背景資訊,以幫助用戶做出更明智的決策。如果出現異常,用戶將收到提醒通知。
- 當用戶在 iPhone 或 iPad 的健康應用程式中記錄懷孕時,Apple Watch 上的週期追蹤應用程式將升級顯示妊娠週數,並允許用戶記錄懷孕期間的症狀。懷孕的用戶還可以設置每月進行心理健康評估的提醒。使用行走穩定性功能,用戶還可以收到關於增加跌倒風險的提醒。
- 用戶還將體驗到更多可自定義的活動環,允許他們在需要休息一天時暫停活動環而不影響獎勵連勝紀錄。
- Apple Fitness+ 升級包含個性化的 For You 標籤、Explore 和 Library 標籤、搜索功能和增強的獎勵。
- 智能堆疊 變得更加智能:它現在可以自動建議需要的 widget,還有其他改進。
- 使用 watchOS,用戶將根據美學、構圖、面部表情等標準從相片庫中獲得錶面的最佳照片選項建議。錶面還可以通過不同的大小、佈局和字體進行自定義。
- Check In 在 Apple Watch 上可用,即使在鍛煉期間,也可以幫助用戶保持安全。翻譯功能也將來到 Apple Watch,讓用戶能夠直接從手腕上翻譯文本。
- 另一個新的互動功能是,雙擊手勢可以用於滾動應用程式。
iPadOS 18
- 此更新將包含重新設計的標籤欄,它浮動在應用程式內容之上。用戶可以自定義它以展示他們最喜愛的應用程式並訪問應用程式中最重要的部分。您還可以長按標籤欄以移動它。標籤欄還會變形成側邊欄以提供更多資訊。
- SharePlay 將允許用戶遠程控制其他人的 iPad 或 iPhone 並共享畫作。
- 在長期期待的發布中,iPad 將首次擁有一個 "計算器應用程式",其界面與目前在 iPhone 上的界面相同。但用戶可以通過新的 Math Notes 體驗使用 Apple Pencil,允許用戶手寫輸入表達式,計算器應用程式將在他們輸入等號後解決這些表達式。
- Notes 中的手寫功能也得到了升級,具有 Smart Script (智能腳本),它會優化用戶的書寫,使其更易讀,同時保持用戶書寫風格的真實性。此功能還可以將複製和粘貼的文本匹配到用戶的手寫風格。打字文本也得到了增強,新增了五種新的高亮顏色,並能在標題或副標題下切換部分。
- iPadOS 18 支持 通過 SharePlay 共享屏幕,以及 iOS 18 中的控制中心自定義、照片應用程式升級、Safari 更新和表情符號 Tapbacks。
MacOS 15 - Sequoia
- Apple 公布了MacOS Sequoia,將包括添加到 iOS 18 和 iPadOS 18 的許多新功能,包括更新的 Safari、照片、信息和新的密碼管理應用程式。
- 新的 iPhone 鏡像功能允許用戶幾乎完全從 Mac 體驗他們的手機。例如,iPhone 通知現在將顯示在 Mac 上,允許用戶與其互動並打開相應的應用程式,即使 iPhone 本身顯示鎖定狀態。
- 窗口平鋪功能使用戶能更有條理地操作。當用戶將窗口拖到屏幕邊緣時,macOS 會自動建議一個平鋪位置。
- 視頻會議也得到升級,新增了背景和預覽體驗,允許用戶在分享之前查看即將分享的內容。此功能適用於流行的視頻會議應用程式,如 FaceTime 和 Zoom。
- AI 概要工具將嵌入 Safari 中,以幫助用戶更高效地處理網頁和文章等內容。Safari 還將幫助用戶發現與他們正在瀏覽的頁面相關的更多有用資訊,例如路線。
- Apple 還推出了新的 Viewer 體驗,為視頻提供類似於文本閱讀器的功能。
Apple Intelligence
- Apple 公布了其新的“個人智能”系統,名為 Apple Intelligence。此發布將生成模型置於 Apple 設備生態系統的核心。
- 使用 Apple Intelligence,您的 iPhone 可以優先處理通知,以確保您在一天中僅在重要時收到通知。
- 此發布包括利用 AI 的寫作工具,包括重寫、校對和摘要功能,這些功能可用於郵件、keynotes、第三方應用程式等。
- 用戶現在可以在照片庫中創建個性化圖像,包括草圖、插圖和動畫。此功能可在信息、應用程式、Freeform、Keynote 和 Pages 中使用。
- Apple Intelligence 可以使用工具並代表您執行任務,例如“顯示所有照片”、“播放播客”或“拉取同事上週與我共享的文件”。
- 由於它基於您的個人信息和上下文,並且可以從您的應用程式中檢索數據並引用屏幕上的內容,Apple Intelligence 被定位為您的個人助理。
- Apple 強調了 Apple Intelligence 中內置的安全和隱私措施,特別是針對設備上的智能處理。Apple 強調其芯片 A17 Pro 及其 M 系列芯片 (M1、M2、M3 和 M4) 的安全性。
- 對於需要在雲端完成的大型任務,Apple 也推出了私有雲計算,通過在專門使用 Apple 矽片創建的服務器上運行來保護用戶的隱私。當用戶提出請求時,Apple Intelligence 首先測試設備上的處理能力,但如果任務需要更多的處理能力,則調用私有雲計算。Apple 重申用戶數據絕不會存儲或出售給外部各方。
- Siri 終於獲得了應有的 AI 改造,首先是新的外觀:點擊時,光線會包圍屏幕邊緣。由於更先進的自然語言處理 (NLP),Siri 現在能夠更好地理解用戶,即使他們口吃。它現在具有對話上下文,記住您剛才說的話並使用它完成下一個任務。用戶還可以向 Siri 輸入請求。由於具有深入的產品知識,Siri 可以回答有關 iPad、iPhone 和 Mac 功能的問題。Siri 還將具有 Apple Intelligence 的屏幕感知,可以根據看到的內容採取行動。語音助手還可以跨應用程式執行操作,包括照片編輯。憑藉對您的個人上下文的訪問,Siri 可以理解並完成新的命令,例如從照片中提取您的駕照信息並將其輸入表單中。Siri 的更新也將來到 iPad 和 Mac。
- Apple Intelligence 也為郵件帶來了新功能,包括重寫,為用戶提供不同版本的草稿內容。建議會在行內顯示,並且校對功能會編輯語法、用詞選擇和句子結構。您還可以使用摘要將文本轉換為要點。智能回覆會識別電子郵件的相關部分,並使用它們幫助撰寫自定義信息。摘要現在將出現在電子郵件的頂部,使瀏覽收件箱更容易。Apple Intelligence 甚至可以幫助優先處理您的電子郵件,將最重要的內容放在收件箱的頂部。
- 全新的聚焦選項:減少打擾。在此設置下,您的手機只會根據您的個人活動和上下文顯示最重要的內容。
- Genmoji 允許用戶根據輸入內容創建AI 生成的表情符號。您還可以根據朋友的照片創建 Genmoji。Genmoji 可以內嵌在信息中使用,甚至用於 Tapbacks。
- 圖像遊樂場允許用戶利用設備上的 AI 從文本提示創建圖像,這些圖像可以輕鬆分享到 iMessage 和其他地方。此功能也在 Keynote、Pages 和 Freeform 中可用,並作為獨立的圖像遊樂場應用程式。
- Notes 應用程式中的圖像魔杖將粗略的草圖轉化為精美的圖像,並且可以直接在工具面板中使用。例如,您可以在 Notes 中圈出一個粗略的草圖,並打開圖像遊樂場將您的塗鴉轉變為完整的圖像。
- Apple Intelligence 還將為照片應用程式升級新的清理工具,以去除不需要的物體。視頻中的搜索允許用戶輕鬆找到特定的內容片段,用戶還可以按需創建回憶,使用文本來編輯和組織照片成為影片。
- 在 Notes 應用程式中,用戶可以錄音並轉錄音頻,Apple Intelligence 將生成文本摘要。此功能也在 Notes 手機應用程式中可用。
- Apple Intelligence 在 iOS 18、iPadOS 18 和 MacOS Sequoia 上免費提供,將於今年夏季僅限英文版試用。
另外我們推測 Apple Intelligence 用 LLM 讀取介面端資訊的功能應該跟日前四月 Apple 推出的 Open Source 專案 Ferret-UI 背後驅動
Apple 與 OpenAI 的合作
- Apple 也確認了與 OpenAI 的合作,將 ChatGPT 與 Siri 集成。在獲得用戶許可的情況下,Siri 可以向 ChatGPT 發出請求以獲取幫助。例如,如果您請求 Siri 協助完成某個任務,但 Siri 認為 ChatGPT 更適合完成該任務,Siri 將建議您使用聊天機器人並轉發您的請求。ChatGPT 的寫作功能也可以在某些寫作任務中利用。
- 用戶可以免費通過此集成訪問 ChatGPT,並且 OpenAI 不會記錄他們的數據。ChatGPT Plus 用戶可以連接其訂閱以訪問更多高級功能,在這種情況下,適用 OpenAI 的數據使用政策。
- ChatGPT 的集成將於今年晚些時候登陸 iOS 18、iPadOS 18 和 MacOS Sequoia。
WWDC 2024總結
Apple 在 2024 年的 WWDC 上展示了一系列令人興奮的新技術和功能,涵蓋從操作系統更新到新硬件設備的廣泛範圍。這些改進不僅提升了用戶體驗,還為開發者提供了更多創新和創作的機會。隨著這些新功能的推出,Apple 的生態系統變得更加強大和全面。無論是用戶還是開發者,都能從中受益,享受更智能、更高效的數字生活。