北京時間 6 月 11 日凌晨 1 點，蘋果 2024 年全球開發者大會（WWDC）正式開幕，這是一場面向開發者的大會。自 1983 年首屆大會舉辦以來，蘋果全球開發者大會一直是蘋果與開發者社區溝通的重要平臺。許多重磅產品和系統更新都選擇在這一盛會上首次亮相，例如 iOS、macOS、watchOS 等操作系統的更新，以及 Siri、Apple Pay 等創新服務的發布。
在過去的幾個月里，幾乎所有其他大型科技公司都全力投入到 AI 競賽中，微軟已經向 OpenAI 及其 ChatGPT 產品投入了 100 億美元。谷歌通過推出 Gemini 來捍衛其在搜索領域的主導地位。亞馬遜向人工智能初創公司 Anthropic 注資 40 億美元。但作為全球最大、最成熟的科技公司之一，蘋果在生成式人工智能領域一直按兵不動。
在蘋果公司 5 月初 的最新財報電話會議上，首席執行官 Tim Cook 表示：“我們認為生成式人工智能 (Generative AI) 對我們的所有產品來說都是一個關鍵機遇，并且相信我們在這方面擁有獨特的優勢。” 他同時提到公司將在“未來幾周內”宣布相關消息。所以大家也非常希望蘋果能在 WWDC 上打出第一張牌。
如今，蘋果也終于不負眾望，開始通過發布一系列重大的人工智能升級計劃闡述他們的人工智能愿景。在今天的主題演講中，庫克首先介紹了蘋果的各種操作系統的更新。
蘋果首先介紹了 Vision Pro 的更新，如今 Vision Pro 有超過 2,000 個原生 App 以及 150 萬個兼容的 iPhone 和 iPad 應用程序。
今天蘋果正式發布了 vision OS 2 。vision OS?2 有個很厲害的功能，可以讓你將 2D 圖像轉換為 3D 空間照片，并可以通過 SharePlay 與其他 Vision Pro 用戶分享這些照片。
vision OS 2 還帶來了一些新的功能，比如新的 UI 集成：該操作系統更新了手勢控制選項，現在你可以張開手并點擊以進入主屏幕，或轉動手腕以查看時間和電池電量。
visionOS 2 引入了新的 frameworks 和 APIs，使開發者更容易創建空間應用程序。通過 Tabletopkit，開發者可以制作在平面上運行的應用程序，同時還新增了 volumetric 和 enterprise APIs。
蘋果介紹他們正與 Blackmagic Design 合作，利用 Blackmagic 相機改進蘋果沉浸式視頻內容。這個創建空間內容的新方法，是 Vision Pro 的一個關鍵賣點。
Vision Pro 將于 6 月 28 日登陸中國、日本和新加坡，并于 7 月 12 日登陸澳大利亞、加拿大、法國、德國和英國。
接下來，蘋果發布了 iOS 18 系統，這一次，蘋果更加注重定制化。蘋果設備的主屏幕看起來比以往更符合用戶自己的風格。用戶能夠更改應用程序圖標的顏色，當啟用暗模式時，圖標可以自動獲得不同的外觀。應用程序也不再需要鎖定在固定的網格中。
此外，蘋果也更加關注隱私問題。用戶現在可以鎖定單個應用程序。即使有人可以訪問你的手機，你也可以鎖定單個應用程序，這樣他們就需要再次解鎖才能訪問該應用程序或其中包含的數據。此外，該應用不會在手機上共享數據，例如在搜索結果中。蘋果還提供了一個隱藏的應用文件夾，用戶可以單獨鎖定它。
這些很多年前就存在于 Android 系統中的功能如今終于在 iOS 18 系統上實現了。
在備受矚目的新品發布會上，蘋果發布了備受期待的 iPadOS 18 操作系統。此次更新帶來了全新設計和諸多實用功能，將進一步提升 iPad 的使用體驗。
蘋果公司全球營銷高級副總裁 Greg Joswiak 介紹了 iPadOS 18 和全新的設計以及新的 Pencil 功能。
其中最值得關注的是數學備忘錄功能，配合新發布的 Apple Pencil，就算書寫很“狂草”，蘋果也能識別出來。同時 iPadOS 18 會先分析你的書寫風格，然后智能腳本將通過理順書寫方式“隨時改進你的書寫”。通過這些改進，該功能允許你使用 Apple Pencil 在屏幕上書寫數學表達式和公式，并自動將其轉換為數字結果。
對于數學愛好者來說，iPadOS 18 中的數學備忘錄功能將是一個巨大的驚喜。此外，數學備忘錄還支持手寫圖形識別，可以根據您的草圖進行計算。
iPadOS 18 的發布讓這場發布會迎來了一個小高潮，因為 iPad 剛剛獲得了有史以來最強大的 Apple 芯片，即 iPad Pro 上的 Apple M4 芯片組。
Apple 還提供了一種更簡單的 iPad 對 iPad 的交互方式，這種方式允許用戶能夠在共享的 iPad 屏幕上繪圖，甚至可以控制其他人的 iPad。
值得注意的是，蘋果也對 MacOS 進行了一些值得關注的升級。最新版本名為 MacOS Sequoia。其中最大的一項就是 ?iPhone 鏡像。現在，通過 MacOS 的 Continuity 功能，用戶可以鏡像 ?iPhone 的屏幕，并直接從 Mac 控制它。
可以鏡像顯示的內容包括圖標、主屏幕、應用程序等。任何應用程序都可以直接從 Mac 打開，用戶的 ?iPhone? 音頻甚至可以傳到 Mac。與此同時 ?iPhone? 可以保持鎖定狀態，因此其他人無法訪問它。用戶甚至可以將項目和文件從 Mac 無縫拖放到 ?iPhone?。
?macOS 15? 還將 ?iPhone? 通知引入 Mac，這些通知會與 Mac 通知一起顯示。此外，macOS 現在會自動調整窗口大小以平鋪并填滿屏幕，從而最大限度地利用屏幕空間。
?macOS 15? 還包含一個新的專用密碼應用程序，可讓用戶管理 Wi-Fi 密碼、應用程序和網站密碼、驗證碼等。密碼可跨設備同步，macOS 使用自動填充功能在密碼應用程序中填充密碼。得益于 iCloud for Windows 應用程序，密碼應用程序也可在 Windows 上使用。
蘋果在介紹完一系列操作系統之后，終于來到了今天的重頭戲階段：該公司宣布將深度集成人工智能到其應用程序和功能中，并將其命名為“Apple Intelligence”。該款個人智能系統將應用于新版本的 iPhone、iPad 和 Mac 操作系統。
蘋果稱這是他們的“一大步”，是一段“新的旅程”！蘋果表示，這項技術將為新工具提供動力，包括可以生成文本和圖像的工具，以及能夠在其一系列應用程序中檢索和分析信息的工具。
“我們很高興開啟 Apple 創新的新篇章。Apple Intelligence 將改變用戶使用我們產品的方式，以及我們的產品能為用戶做些什么，”蘋果公司首席執行官 Tim Cook 表示。“我們獨特的方法將生成式 AI 與用戶的個人背景相結合，提供真正有用的信息。它可以以完全私密和安全的方式訪問這些信息，幫助用戶做對他們來說最重要的事情。這是只有蘋果才能提供的 AI，我們迫不及待地想讓用戶體驗它的功能。”
它的一些功能如下：
上下文驅動的通知：Apple Intelligence 可以識別哪些通知對你的個人上下文很重要；
寫作改進：Apple Intelligence 將在第三方和原生應用程序中引入系統范圍的校對和風格改進，借助 iOS 18、iPadOS 18 和 macOS Sequoia 內置的全新全系統寫作工具，用戶幾乎可以在任何寫作的地方重寫、校對和總結文本，包括郵件、備忘錄、Pages 和第三方應用；
圖片生成：Apple Intelligence 可以根據你的照片庫生成照片，類似于其他一些平臺。有三種風格：素描、插畫和動畫。
跨應用程序任務處理：Apple Intelligence 可以深入研究用戶的應用程序并代表用戶執行任務。
關注個人背景：Apple Intelligence 可以利用關注用戶的全部活動，也可以只關注屏幕上的內容。例如在 Mail 中，隨時查看電子郵件從未如此簡單。通過優先消息功能，收件箱頂部的新部分會顯示最緊急的電子郵件，例如當天的晚餐邀請或登機牌。在收件箱中，用戶無需打開郵件即可查看摘要，而不必預覽每封電子郵件的前幾行。對于長郵件，用戶只需輕點一下即可查看相關詳細信息。智能回復功能會提供快速回復建議，并會識別電子郵件中的問題以確保所有問題都得到解答。
再比如在 Notes 和電話應用中，用戶現在可以錄制、轉錄和總結音頻。通話期間開始錄音時，參與者會自動收到通知，通話結束后，Apple Intelligence 會生成摘要以幫助回憶關鍵點。
私有云計算：Apple Intelligence 將使用 Apple Silicon 的特殊服務器上的基于云的模型來確保用戶數據的私密性和安全性。如果請求需要發送到云服務器，蘋果表示它只會以“加密”安全的方式發送有限的數據。
讓人驚喜的是，蘋果還推出了一款名為 genmoji 的全新自定義表情符號工具。當用戶找不到合適的表情符號來表達自己想要表達的意思時，他們可以使用蘋果的人工智能創建自己的表情符號。用戶還可以創建與朋友一模一樣的 genmoji。用戶可以通過在鍵盤上輸入描述來創建 genmoji。Apple 將創建一些選項供您選擇。
在“消息”界面，當用戶和他人聊天時，Apple Intelligence 甚至能為用戶生成圖像。
“它必須理解你，并扎根于你的個人背景，比如你的日常生活、你的人際關系、你的交流等等。它超越了人工智能。它是個人智能，”庫克說。“這就是 Apple Intelligence。”
高級副總裁 Craig Federighi 補充道：“Apple 智能以用戶的個人數據和環境為基礎。”該功能將有效地建立在用戶輸入日歷和地圖等應用程序的所有個人數據之上。
該系統建立在大型語言和智能模型之上。蘋果稱，大部分處理都是在本地完成的，采用最新版本的 Apple 芯片。Federighi 還稱：“這些模型中的許多都完全在設備上運行。”
蘋果表示，隱私是蘋果的首要任務。蘋果將 Apple Intelligence 描述為“功能強大”的大型語言和“擴散模型”的集合，以及一個跨應用程序工作的“設備內語義索引”，用于識別數據并將其提供給模型。
其中許多模型將在設備上運行。對于那些需要存儲在云端的模型，蘋果稱有能力讓用戶控制存儲在云端的數據類型以及訪問方式，并表示：“我們希望將 iPhone 的隱私和安全延伸到云端。”
2011 年，蘋果推出了語音助手 Siri，并發布了一系列引人注目的廣告，展示了 Siri 的便捷功能。在一個廣告中，用戶詢問她的手機能否送來番茄湯；另一位用戶則在出租車后座上調整他的日程安排。這些廣告展示了提醒、天氣、鬧鐘等功能，強調了 Siri 作為一個有用且始終陪伴的助手，可以解決你的一切需求。不需要應用程序或點擊，只需開口問問就行。
蘋果高管 Phil Schiller 稱 Siri 是革命性的功能，可以滿足用戶各種需求。“幾十年來，技術專家一直在向我們展示這樣的夢想：你可以與技術對話，它會為我們做事，”他說，“但這從未成為現實！”他說，我們真正想要的只是以任何方式與設備對話并獲得信息和幫助。
然而，在過去的 13 年里，雖然蘋果一直對 Siri 做小的改進，但實際效果從未能達成最初的預期。對于大多數人來說，Siri 實用性低，用戶體驗不佳，導致 Siri 未能充分發揮其潛力的一個原因是“底層技術不夠好”。如果你用過 Siri，你就會知道它經常會聽錯名字、誤解命令。但這正是大模型能起到作用的地方：雖然大模型并不完美，但與我們之前擁有的相比有了很大的改進。
如今，Siri 進行了全面的革新。Siri 的聯合創始人 Kittlaus 表示，由于對 AI 技術的高度重視，今年可能是 Siri 的重要一年，因為公司計劃將智能 AI 功能融入 iPhone 中。他說：“Siri 多年來一直停滯不前，但我完全預見到它即將迎來復興。”
在今天的 WWDC 上，我們首次見到了真正的 Siri — — 或者至少是更接近真正的 Siri，蘋果稱“今年標志著 Siri 新時代的開始。”
Siri 現在更加自然、相關性更強、更個性化，并且有了新的外觀，包括一個改版的圖標。助手會以環繞設備屏幕邊緣的發光效果彈出。蘋果首先演示了通過 Siri 詢問加利福利亞的天氣，然后讓其安排自己的日程，Siri 能處理語音中的口誤并更好地理解上下文，這些操作顯示出 Siri 有了更強的智能。
實際上，新版 Siri 可以執行 100 多項操作。例如，讓 Siri 在照片應用中顯示你的特定照片或回憶，或者在郵件應用中的電子郵件中查找預期的送貨詳細信息。Siri 還能夠執行一些復雜任務，比如如果朋友發送了他們的地址，你可以對 Siri 說“將此地址添加到聯系人卡片中”，它會幫你完成這項操作。
第三方開發者還可以利用這些新功能，通過新的“應用意向框架（app intents framework）”來利用 Apple Intelligence，使某些操作與 Siri 兼容。
另一個重大變化是 Siri 將不再僅是語音激活的助手。蘋果正在添加“Type to Siri”功能，使其更接近其他生成式人工智能聊天機器人的體驗。
Siri 還將能夠在應用程序內及跨應用程序執行操作。你可以讓 Siri “讓這張照片更突出”，然后“將這張照片添加到另一個應用程序中”。這得益于新的 App Intents API，它允許開發者讓 Siri 在他們的應用程序中執行操作，并且升級后的 Siri 對個人上下文的感知也包括消息、日歷事件、文件和照片。
這些功能相當強大。蘋果給出的例子是，Siri 可以找到你駕照的照片，提取你的身份證號碼，并將其輸入到網頁表單中。
蘋果并未具體說明所有新版 Siri 功能的上線時間，但表示新版智能助理將適用于 iPhone、iPad 和 Mac 設備。改進后的 Siri 是蘋果進軍“個人智能”領域的一部分，蒂姆·庫克 (Tim Cook) 將其描述為公司邁出的“下一步”。
正如預期的那樣，蘋果還宣布與 OpenAI 合作，將 ChatGPT 大模型中的 GPT-4o 引入 Siri 等產品。用戶無需注冊賬戶或付費即可使用該產品（不過，他們仍然可以升級到高級版）。
該功能將于今年晚些時候在 iOS、iPadOS 和 macOS 上推出。蘋果公司表示，它還將與其他第三方 LLM 集成，但沒有提供太多細節。谷歌的 Gemini 似乎很可能位居榜首。
奧特曼這次沒有像微軟 Build 大會那樣作為壓軸嘉賓登臺，雖然在發布會開始的時候，已經有人看到奧特曼出現在 WWDC 發布會現場。
其實在發布會之前，就有外媒報道，蘋果正在就 iPhone 集成聊天機器人功能，加緊與 OpenAI 的談判。發布會結束后，奧特曼發了一條推文，表示很高興蘋果將在今年晚些時候把 ChatGPT 集成進去。
這次發布會的亮點非常多，還有網友特地畫圖進行總結：
蘋果分析師 Gene Munster 表示，這是蘋果這 17 年來最重要的一次發布會，“今天對于蘋果來說，比發布 Apple Store、iPad、Apple Watch、Apple TV 和 Vision Pro 更重要。”
通過將人工智能嵌入到自己的應用程序（例如 Apple Maps、iMovie 和 iPhoto），這也意味著 Apple 的整個生態系統將發生變化。一些分析師預計 Apple 將發布工具，供品牌開發商和應用程序制造商創造新的體驗。
文章來源：InfoQ
