2024年WWDC蘋果推出了一系列軟體更新。首先iOS 18重新設計了照片App，並且支援隱藏App、黑暗模式以外的更多個人化設定等。而在macOS方面，macOS 15名稱定為「Sequoia」，本次較大的改變是能夠在Mac裝置螢幕上鏡射遠端的iPhone，不只能接收iOS的訊息，還能夠使用App與回覆訊息。除此之外，蘋果宣布將導入「Apple Intelligence」，以及iPadOS終於導入計算機、watchOS新增訓練模式等，將提升旗下各項裝置的使用體驗，滿足用戶的需求。
iOS 18照片App重新設計、隱藏單一App、黑暗模式以外更多顏色
照往例WWDC開發者大會都會推出新版的iOS作業系統iOS 18，iOS 18最重要的亮點是「照片」App的全新設計，滿版樣貌真的相當吸引人，並從各種角度幫你拍攝的照片整理分類，包括分類、日氣、人員、旅行等特色。
全新設計的照片App
▲滿版全新設計的「照片」App絕對是本次iOS 18亮點所在。
▲連某天（例如今天）也可以是群組照片的一種角度。
▲可以選擇不同成員為1個群組，照片App會自動將這些人的照片合成同個群組。
▲新的照片App也將旅行獨立出來。
▲照片App提供各種群組照片的角度，使用者則可以選擇最喜歡的群組照片。
全新的控制中心
系統面這次控制中心也給使用者更多的彈性，使用者可以增減更多的功能設定。螢幕鎖畫面上的App按鈕現在也開放API，使用者未來可以切換喜歡的App快捷鍵。另外iOS 18還能將單一App鎖住或隱藏起來，不想讓他人知道的怪怪App都可以隱藏。
不喜歡iPhone上面App圖示太過五花八門的話，這次Apple除了黑暗模式外推出了更多的可調整顏色的模式，可以將所有的App圖示改成墨綠色或螢光黃。
▲新的控制中心可以做更多功能捷徑按鈕的調整。
▲某個安裝的App不想讓人知道，都可以隱藏起來。
訊息App可以在遭遇困難時透過衛星訊號傳訊
訊息App一直是iOS更新的重點所在，使用者現在可以給訊息按讚等更多emoji圖案，更棒的是還可以設定訊息發送時間。不過這次訊息App最重要的功能是，遇到緊急求救SOS的時候，可以透過衛星訊號發訊息求救，透過衛星傳送訊息的功能讓使用者可以在無行動網路或Wi-Fi連線時，以iMessage和SMS收發文字、表情符號和「點按回應」。對於遇到山難的緊急狀況來說確實是非常重要的功能。
▲透過衛星訊號傳訊是這次訊息App最大更新重點。
iPhone之間可以轉錢
錢包App這次的更新也相當重要，使用者之間可以透過Apple Pay轉錢了，但不知道台灣這邊可不可以使用才是。
▲可以透過iPhone彼此轉錢的話真的超方便。
▲轉錢目前透過Apple Pay，可能是商家和消費者之間使用，並不確定個人和個人之間可否使用。
macOS 15 Sequoia能無線鏡射iPhone、Mac可遠端用iPhone收訊息通知
在macOS部分，蘋果預計近期更新的版本稱為macOS 15 Sequoia，這次較大的改變是能夠在Mac裝置螢幕上鏡射遠端的iPhone，不只能接收iOS的訊息，還能夠使用App、回覆訊息，就是在Mac螢幕上使用你的iPhone，就算iPhone不在手邊或是畫面鎖定都能使用。
鏡射iPhone畫面同步接收訊息操作手機
macOS 15新增iPhone mirroring功能，讓你能夠透過無線方式鏡射手機畫面到你的Mac裝置上。除了完全鏡射出你的iPhone外，同時還能接收iOS的訊息，並且可以透過Mac來操作螢幕的鏡射iPhone。可操作的功能包括使用App、回覆訊息等，就算手機不在身邊也能透過無線鏡射不中斷你現在的工作，而不用去拿你的手機。
此外，macOS 15在功能方面也提供了部分的更新，首先是視訊會議的時候，你能夠使用去背功能，將背景替換成自己的照片。另外Keychain鑰匙圈功能新增Password服務，能夠統一管理所有裝置儲存的密碼，像是Wi-Fi密碼、App密碼、網站帳戶與密碼等重要資訊，並讓你跨平台操作甚至包括跨到Windows使用。
在Safari與遊戲方面，當你用Safari瀏覽網頁的時候，可以利用AI整理網頁重點資訊，甚至整理成目錄讓你閱讀。最後遊戲方面，Mac上增加了不少Windows已經玩過的遊戲，像是控制、幻獸帕魯、瓦爾海姆，壓軸的則是Ubisoft的刺客教條暗影者，未來都能在Mac上玩到這些遊戲。
▲macOS 15在跨裝置的使用上越來越頻繁，這次最大的更新是提供了iPhone鏡射功能。
▲此功能稱為iPhone mirroring，即使iPhone不在身邊也能遠端使用它。
▲開啟後螢幕上會完整顯示你的iPhone，包括App、桌布、通知等資訊。
▲你甚至能夠用Mac來遠端操作iPhone使用特定App。
▲遠端鏡射的時候，iPhone可鎖定螢幕。
▲使用Facetime等功能視訊會議的時候，背景常常是個麻煩。
▲你只要選擇Background功能，就能把自己的背景換成你要的圖片。
▲Password功能可以記錄密碼並跨平台使用。
▲刺客教條：暗影者也將登上Mac。
▲雖然在Windows上都是老面孔，但Mac上多了遊戲可以玩還是值得鼓勵。
▲macOS將迎來macOS 15 Sequoia版本，重點更新如上。
iPadOS 18終於有計算機 AI提供手寫計算與個人化手寫筆記
本次蘋果在WWDC宣布即將推出的iPadOS 18所具備的新功能，當然由於iPadOS與iOS系出同源，iPadOS 18將獲得iOS 18所宣布的多項功能，如桌面客製化、全新設計的控制中心與全新的自動分類圖庫，此外也自大螢幕的Apple TV介面獲得靈感，採用稱為Tab Bar的浮動選單設計；不過更重要的是iPadOS 18利用機器學習方式擴展Apple Pencil的使用體驗，現在iPadOS 18不僅具備計算機，還支援文字辨識的Math Notes，以及可依據個人書寫習慣的Smart Script增強手寫筆記體驗。
▲iPadOS 18將具備與iOS 18相同的桌面客製化、新控制中心介面與新圖庫功能
歷經14年 蘋果為iPad提供原生計算機app，發揮大螢幕特色
▲歷經14年iPadOS終於原生整合計算機App。
▲當然畫面更大也具備更豐富的計算機功能。
▲iPad版計算機活用大螢幕特色配置更多功能。
iPad在推出歷經14年後，蘋果終於為iPadOS增加原生的計算機app，用戶終於不再需要下載第三方的計算機app；同時iPadOS的計算機也發揮大螢幕的優點，具備比iPhone更豐富的計算功能，也包括單位計算。
結合Apple Pencil的Math Notes
▲Math Notes是專屬於iPadOS計算機的新功能。
▲結合Apple Pencil進行書寫計算，同時可支援複雜的算式。
▲可以認知內容後進行計算。
▲還可以計算物理算式、產生圖表。
不過最重要的是蘋果進一步結合機器學習與iPad支援Apple Pencil的特性，提供稱為Math Notes的計算機延伸應用，Math Notes支援手寫與圖像的辨識，可依據手寫的算式產生計算結果，同時還能在算式中根據計算資訊產生圖表。
結合機器學習書寫習慣學習技術Smart Script
▲Smart Script可學習Apple Pencil的書寫字體、用字習慣等個人化內容。
▲可以將書寫的文字字體調整成接近用戶平常書寫習慣。
▲可以將語氣調整成用戶習慣，以及以用戶慣用手寫字形修正錯字。
作為提供手寫辨識的關鍵是稱為Smart Script的機器學習技術，透過基於隱私的方式將使用者的書寫軌跡、用字遣詞的風格進行學習，在書寫時可以修正與平常習慣明顯不同的書寫字體，同時也可以將文字語氣修正成更像是用戶平常的習慣，當然還可修正筆誤，使筆記看起來更統一、容易閱讀。這些功能除了可在iPad的計算機使用，也同樣可在筆記的App使用。
蘋果人工智慧就叫Apple Intelligence，以Private Cloud Compute模式確保隱私攜手OpenAI串接GPT-4o
一如先前傳聞，蘋果在WWDC宣布蘋果全平台作業系統的人工智慧品牌Apple Intelligence，縮寫成AI，算是簡單暴力的命名方式；未來Apple Intelligence將作為蘋果所有與人工智慧有關的應用統稱，並於語言、圖像、操作與個人化內容4大領域呈現；Apple Intelligence將可在A17 Pro、M1、M2、M3與M4等Apple Silicon執行，並透過稱為Private Cloud Compute的主機與雲端的混合模式執行。
此外iOS 18、iPadOS 18與macOS 15預計在2024年末提供免費且免OpenAI帳號的ChatGPT-4o功能服務，Siri屆時亦可選擇連接到ChatGPT-4o。
▲Apple Intelligence將應用在語言、圖像、操作與個人化內容4大領域。
▲Apple Intelligence將可在5款高階Apple Silicon執行。
Apple Intelligence將自2024年夏季起提供開發者預覽，並在iOS 18、iPadOS 18與macOS 15正式推出後成為系統的一部分。
透過混合雲模式兼具算力與個人隱私
▲為了不涉及個人隱私與資料安全，Apple Intelligence是透過主機與雲端混合運算模式執行。
▲混合運算的意義在於保護隱私資料的同時分散算力。
Apple Intelligence的執行模式是透過稱為Private Cloud Compute的方式執行，此模式是考量到隱私與運算量的混合運算模式，蘋果強調透過Apple Silicon的安全區塊與本機機器學習執行具隱密性的內容，並將與隱私無關的資料透過雲端方式執行，能確保資料安全與AI的體驗。
透過大型語言模型理解語言與文字
▲透過大型語言模型，Apple Intelligence可理解自然方式的文字與語言。
▲在郵件中可將內容改寫的更流暢，或是幫內容調整語氣。
▲可以幫撰寫的內容產生摘要，也同樣可將一大串內容的郵件整理成摘要。
▲在筆記與電話應用程式能夠將通話內容轉錄並產生摘要。
▲包括郵件與通知都可透過語言理解顯示優先內容。
Apple Intelligence透過結合大型語言模型，為使用者的各種文字應用提供增強，舉凡郵件、筆記、通知與第三方程式都可受益；透過稱為Rewrite的功能，Apple Intelligence可理解整串文字的內容後，依據使用者的需求，從將內容透過校正錯字、調整先後順序與語句使之變得容易閱讀，或是根據不同的目的以不同的語氣改寫，從與好友的幽默玩笑到求職信的正式內容都能夠進行改寫；此外針對長串的內容也具備摘要功能，包括幫自己撰寫的內容，或是對方寄來長串的電子郵件等，可透過整理成段落、重點、表格等方式幫助理解。
此外在電子郵件與通知也能透過理解文字進行優先權的排列，例如活動邀請、登機通知等訊息會優先於比較無關的內容之上；另外未來郵件內容的預覽方式也不再是出現前言而是內容的摘要，亦可幫助用戶釐清哪些內容是需要盡速處理，此外除了可將長文的信件進行摘要外，針對可快速回答的內容也會透過智慧回覆計算提供回應的建議。這部分的功能與Google在Gmail的服務相當類似。
透過生成式AI的Image Playground與Genmoji
▲Image Playground可透過生成式AI以描述產生個人化圖像。
▲Image Playground可依據風格、物件與情境產生圖像。
▲可發揮想像力描述產生適合不同情境的圖像。
▲Image Wand是將Image Playground整合到Apple Pencil調色盤工具的功能。
▲只要能使用Apple Pencil的地方即可透過Image Wand串接Image Playground。
現在火紅的生成式AI應用之一就是圖像生成，蘋果的Apple Intelligence當然也不會錯過這個話題性應用；蘋果推出稱為Image Playground的功能，此項功能就如同當前的圖象式生成式AI一樣，可以根據敘述產生圖像，或以用戶裝置中的照片為藍本加上描述變成一張AI圖像，這些圖像不僅可應用在訊息，同時還可根據訊息中的對話內容在產生圖像時提供建議。此外蘋果也將提供Image Playground API供第三方串接，同時Notes、Keynote、Freeform、Pages等也同樣可串接到Image Playground，同時Image Playground也透過Image Wand整合到Apple Pencil調色盤工具，可將草稿透過生成式AI進行增強。
▲結合生成式AI與Emoji所以稱為Genmoji。
▲Genmoji可將敘述產生原創的Emoji。
▲Genmoji可產生五花八門的個性化Emoji。
Genmoji簡言之就是生成式AI與Emoji的結合，透過描述方式產生全新的Emoji，如此一來能夠根據情境產生更符合情境的Emoji，可直接貼在訊息內，或是做為回覆他人對話的表情分享給他人。
蘋果版魔術橡皮擦稱為Clean Up，相簿結合AI聰明分類並使圖影能產生連結
▲Clean Up就是結合生成式AI的魔術橡皮擦。
▲相簿可透過自然語言搜尋。
▲影片也同樣可透過自然語言搜尋。
▲透過AI分類使相簿內容可產生新的連結方式。
▲Memorise是依據用戶描述找到關聯的照片與影片後添加音樂產生一段回顧短片。
蘋果相簿的新功能也很類似於Google在Google Photos提供的AI增強功能，在圖像編修方面增添稱為Clean Up的魔術橡皮擦，特色也是抹除不必要的圖片元素並透過AI填補抹除的區塊；此外透過基於大型語言模型理解自然語言，使相簿的照片與圖片可透過描述進行搜尋，同時還可依照描述所找到的照片與圖片透過稱為Memories的功能產生加入音樂的精選影片。
Siri將獲得AI升級理解力與更具個人化、後續將可串接ChatGPT
▲Siri將以在邊框添加彩色光帶的方式呈現，不會占用畫面中心。
▲Siri將藉Apple Intelligence理解自然語言與更為個人化。
▲Siri將能混合語音與文字。
▲蘋果將開放SiriKit供第三方串接。
Siri在進入Apple Intelligence世代後也獲得昇華，不僅只是從現行會占用畫面的圖像改為邊框的彩色光帶，未來Siri不僅能理解更複雜的自然語言，且回答也會有更好的關聯性，同時也會依據用戶的習慣產生更個人化的互動方式；且Siri將不再僅限於語音，也能支援文字互動，蘋果的說法是用戶可在不同場合使用，不過筆者個人認為是蘋果不再把Siri視為「語音助理」，而是類似Google當前Gemini的角色，只是蘋果並未重新為服務命名，而Google即便推出Gemini後仍保留語音助理Google Assistant(Google助理)。此外，蘋果將釋出SiriKit工具供第三方應用程式串接到Siri。
▲Siri提供應用程式操作指南、感知螢幕內容並進行互動。
▲現在動口就可完成圖像編修、生成式AI增強與發送圖片。
新版的Siri具備螢幕內容感知功能，能夠幫助用戶回答裝置、應用程式的使用指南，或是在收到包含地址或郵件的訊息後建議把這些資訊加入聯絡人資訊，或是可以透過口述使Siri編修圖片、將圖片重新使用生成式AI增強最後發送給朋友；此外Siri也將變得更個人化，例如當朋友在訊息或信件中推薦餐廳，使用者不需從不同應用程式搜尋，Siri可幫助使用者從過往的資料找到對方推薦的餐廳。
先與OpenAI合作串接ChatGPT-4o，但允諾未來也會串接更多AI
▲一如預期OpenAI是蘋果Apple Intelligence合作夥伴，Siri將可串接ChatGPT-4o。
▲基於個人隱私，若要串接到外部的ChatGPT服務會先詢問用戶是否允許。
▲來自ChatGPT的功能都會看到ChatGPT的商標。
先前就傳出蘋果將與OpenAI合作，將ChatGPT整合到iOS 18、iPadOS 18與macOS 15並供用戶無須OpenAI帳號免費使用，此外蘋果預期將ChatGPT-4o先導入Siri，用戶可在Siri選擇是否把問題或文件提供給ChatGPT-4o；蘋果在作業系統的寫作工具也將透過ChatGPT增強內容寫作體驗，以及使用ChatGPT工具產生不同風格的圖像。另外除了免費版的ChatGPT-4o，若為ChatGPT訂閱用戶，還可使用進階付費功能。
watchOS 11新增訓練模式、整合身體數值以及各種好用的錶面插件
watchOS 11的更新重點還是放在健康的功能上，新增的訓練模式使用者可以調整簡易訓練或者是強化訓練模式。
而手戴Apple Watch最重要的是會自動偵測身體的血氧濃度、心率、睡眠時間和呼吸速率等指標，現在watchOS 11會以一週為單位顯示這些數值的上下起伏，並每週整理報表回報目前的數值狀態。
▲心跳等Apple Watch會自動測量的數值，都會以圖表的方式回報使用者一週的狀態。
▲也會做統整報告回報使用者哪些數值異常。
錶面上watchOS 11可以安裝更多有用的插件，例如翻譯插件，按一下就可以進行語音翻譯非常方便。Uber插件也很有用，到站就可以會直接在錶面上通知不用再看手機。蘋果開放插件的開發模組，希望開發者們趕快為自己的App做出好用的錶面插件。
▲翻譯的錶面插件在旅行的時候很好用，只要按一下說想要翻譯的句子，就可以立即翻出來講給對方聽。
▲Uber到達的插件也很好用，非常期待Uber Eats的插件也趕緊推出。
最後watchOS 11也和照片App連通，透過機器學習的方式幫使用者找到最適合標面的照片，還提供各種不同的設計風格，就是要讓你的手錶照片最有設計感。
▲watchOS 11透過機器學習的方式，找到照片App中最適合錶面的相片提供使用者更換。
AirPods Pro可過濾背景聲音、Apple TV即時查詢電影資訊
今年WWDC蘋果更新了AirPods、Apple TV功能，並且將之合併為「Audio & Home」單元。於AirPods方面，蘋果宣布AirPods Pro將迎來系統更新，例如未來用戶將可透過點頭、搖頭回應Siri，不需要語音操控，此外AirPods Pro將支援背景音消除功能，讓說話聲可以更加清楚。而在Apple TV方面，蘋果宣布Apple TV將提供「InSight」功能即時顯示電影演員、音樂等相關資訊，還有Apple TV將支援21:9的螢幕比例，更符合投影幕或電影需求。
AirPods Pro背景雜音自動消除 支援點頭、搖頭操作手勢
為了要提供用戶更方便的操作過程，本次AirPods Pro將支援點頭、搖頭的操作方法，用戶甚至不需要語音回應，只要點頭或是搖頭即可回應Siri，或者是決定是否要接聽電話。此外，AirPods Pro未來也將引入語音隔離功能，用戶在使用時耳機會自動消除例如風聲、施工噪音等背景雜音，加強語音音量，提升通話品質。
▲AirPods Pro將可透過點頭、搖頭進行回覆，並且提供背景雜音消除功能。
Apple TV 即時顯示電影資訊、支援21:9螢幕比例
用戶在觀賞電影時可能會想要知道電影資訊，例如演員、歌曲名稱等，未來以上資訊將可在Apple TV中找到。Apple TV的「InSight」功能將可在螢幕上即時顯示Apple TV+上電影節目的演員角色、音樂等相關訊息，另外用戶也可以快速查看音樂資訊並且添加至Apple Music播放清單中。
而在播放方面， Apple TV的新一代系統tvOS 18將支援投影機螢幕的21:9播放尺寸，讓觀眾在使用投影幕或是電影螢幕時可以有更好的觀影體驗。最後則是tvOS 18的新螢幕保護程序，包括史努比、相片等，提供螢幕暫時休息時更豐富的選擇。
▲tvOS 18的「InSight」功能，用戶將可即時查看Apple TV+上電影節目的相關資訊。
▲tvOS 18將支援21:9的螢幕格式。
▲tvOS 18將提供更多樣化的螢幕保護程式，例如史努比。
visionOS 2登場 平面照立體化、更簡單的手勢操作、旅行模式
在WWDC蘋果首先宣布了Apple TV+即將有更多節目播出，緊接著介紹Apple Vision Pro系統visionOS升級。雖然Apple Vision Pro上市時間不長，不過蘋果宣布新一代系統visionOS 2登場，將提供平面照片立體化、旅行模式、更寬的螢幕視野、更方便的操作手勢等，未來iPhone用戶也將可以用手機拍攝Apple Vision Pro的影像。
平面照片立體化、操作手勢更直覺
本次WWDC蘋果首先介紹visionOS更新。例如未來用戶將可以使用Apple Vision Pro欣賞照片，系統將支援平面照片立體化功能，透過計算讓原本平面的照片可以在Apple Vision Pro中呈現立體的效果。
另外，visionOS 2將支援更簡便的操作手勢。例如用戶將可透過翻轉手掌、抬手點擊等方式呼叫主選單或是系統電池電量、時鐘等小工具。
▲透過Apple Vision Pro用戶可以享受截然不同的觀影體驗。
▲本次WWDC蘋果宣布visionOS更新。
▲透過系統運算，可以將平面照片在Apple Vision Pro中呈現立體的效果。
▲用戶將可透過更直覺的點按、翻掌等手勢進行操作。
支援旅行模式、更寬的螢幕視野
提升Apple Vision Pro的使用體驗，visionOS 2將支援旅行模式，用戶將可在火車、飛機上使用，同時享有更加沉浸的觀影效果。另外，visionOS 2將提供用戶更寬廣的螢幕視野，讓用戶不再侷限在實體螢幕的長寬限制，達到環繞螢幕的效果。
▲透過Apple Vision Pro，用戶將可體驗到無邊界的環繞螢幕。
▲visionOS 2將支援旅行模式，用戶在飛機、火車等大眾運輸上的觀影體驗將有所提升。
中國、日本、新加坡等地上市
未來用戶將可使用部分iPhone錄製影片並且在Apple Vision Pro上欣賞。最後蘋果宣布Apple Vision Pro預計將於8個國家上市，包括6月28日在中國、日本、新加坡推出，7月12日在澳洲、加拿大、法國、德國、英國推出。
▲未來iPhone將可支援Apple Vision Pro影片錄製。
▲Apple Vision Pro將於8個國家上市。
