Windows 11 版本 24H2 中已確認的 AI 功能

• 微軟將在 Windows 11 24H2 中引進多種新的裝置端 AI 功能。
• 突出顯示的功能包括 Windows Recall、Windows Studio 效果、即時字幕、自動超解析度、語音清晰度、語音焦點、Click to Do、Paint 應用程式中的 Cocreator 以及照片應用程式中的 Restyle Image。
• 此外，Windows 11 版 Copilot 也將增強。

自 10 月 1 日起，Windows 11 24H2（2024 更新）已針對符合條件的裝置推出，儘管它最初缺乏預期的 AI 功能。 Microsoft 正在投入時間來確保這些功能為部署做好充分準備。儘管如此，最初的人工智慧產品的細節已經披露，首先是 Windows Copilot 運行時的整合。

此作業系統的改進版本將引入專為Copilot+ PC 設計的多項獨特AI 功能，包括Windows Recall、Windows Studio 效果、即時字幕（包括即時翻譯）、自動超解析度、語音清晰度、Click to Do、語音焦點、Cocreator在「畫圖」應用程式中，以及在「照片」應用程式中重新設定影像樣式。

這些創新源自於新的“Windows Copilot Runtime”，這是一個系統元件，整合了 40 多個直接在裝置上運行的 AI 模型，為其功能提供必要的基礎設施。

這也有助於開發人員透過Windows Copilot 庫中提供的新 API 將 AI 功能嵌入到他們的應用程式中。

Windows 11 版本 24H2 中的 AI 功能

以下是 2024 年及以後 Windows 預計將具備的 AI 功能摘要。

Windows 召回

Windows Recall 可作為背景照相記憶體，自動擷取您在電腦上的活動快照。該功能利用多個本地運行的人工智慧模型，使所有內容（無論是文字還是圖像）都可以使用自然語言進行搜尋。

這項創新的 Recall 功能僅在 Copilot+ PC 上可用，該 PC 必須配備相容的硬件，包括支援 NPU 的處理器、16GB RAM 和 256GB SSD 儲存。

在初始開箱即用體驗 (OOBE) 期間，使用者可以啟動或停用此功能，並可透過「設定」應用程式或群組原則進行其他控制。

Windows 工作室效果

Windows Studio Effects 包含一套功能，利用 AI 透過神經處理單元 (NPU) 增強視訊通話和音訊品質。

目前主要有五種效果，包括自動取景、背景模糊、目光接觸、語音對焦和創意濾鏡。

• 自動取景：即使在移動時，這也能讓您保持在相機視圖的中心。
• 背景模糊：在視訊通話期間模糊背景，以增加隱私或隱藏雜亂，具有「標準模糊」和「肖像模糊」功能。
• 眼神接觸：調整您的外觀以確保眼神接觸被察覺，有「標準」和「提詞器」模式可供選擇。
• 語音焦點：最大限度地減少背景噪音，在通話期間獲得更清晰的音訊。有兩種變體，一種利用 NPU，另一種僅依賴軟體。

雖然 Studio Effects 已在 Windows 11 中存在一段時間，但 Microsoft 打算透過專門針對 Copilot+ PC 的 24H2 版本來擴大其可用性。

帶翻譯的即時字幕

Windows 11 中已有的即時字幕功能正在升級以包含即時翻譯。該工具旨在幫助每個人，特別是有聽力障礙的人，透過自動轉錄來理解音訊內容。

升級後的功能可將視訊或語音通話中的音訊即時翻譯成您的母語，無論來源為何——無論是來自 YouTube 還是其他平台。只要 NPU 支持，它就能將 40 多種語言翻譯成英語，而無需網路連線。

值得注意的是，此功能已從簡單的轉錄轉變為即時音訊翻譯。

語音清晰度

語音清晰度功能使用人工智慧來消除背景噪音、消除迴聲並減少視訊或語音通話以及錄音期間的混響。

此功能還可透過提供更清晰的通訊而使線上遊戲受益。應用程式可以啟用“深度噪音抑制”以獲得最佳音訊品質。 Voice Clarity 在具有配備 NPU 的相容硬體的支援應用程式上自動運行，無需手動啟動。

點選執行

如果您熟悉 Android 上的“Circle to Search”或 Chrome 中的“Google Lens”，那麼“Click to Do”會有類似的感覺。它採用人工智慧來識別和解釋螢幕內容，提供各種可操作的任務。

要使用它，請按住“Windows”鍵，同時按一下螢幕以開啟顯示不同操作選項的覆蓋選單。此外，頂部還有一個搜尋框，與 Windows Recall 整合。

增強的 Windows 搜尋

雖然沒有正式命名，但 Windows 搜尋功能將透過人工智慧功能進行改進。此增強功能允許使用者直接在檔案總管、設定應用程式和工作列中對應用程式、檔案和設定執行自然語言搜索，而不僅僅是依賴關鍵字。

自動超解析度

自動超解析度 (SR) 利用 AI 技術增強遊戲解析度和視覺質量，在最大化幀速率的同時帶來更流暢、更有效率的遊戲體驗。從本質上講，它利用人工智慧來升級遊戲，從而提高圖形和效能。

此功能與 Nvidia 的 DLSS、AMD 的 FidelityFX 超解析度 (FSR) 和英特爾的 Xe 超級取樣 (XeSS) 類似，所有這些都利用 AI 來增強遊戲視覺效果。

作為該計劃的一部分，微軟與 Nvidia、AMD 和英特爾合作開發了「DirectSR」API ，以將 SR 簡化到未來的遊戲中。

然而，此功能將專門迎合配備最新 Qualcomm Snapdragon X Elite 處理器的 Copilot+ PC，並且僅限於特定數量的遊戲。

繪畫中的 Cocreator 和生成式填充和擦除

微軟在 Paint 應用程式中引入了一項新的Cocreator功能，該功能可以掃描您的繪圖而不是生成 AI 圖像。此功能將幫助您完善、編輯和發展您的藝術概念。

此功能採用基於擴散的演算法，以最少的努力產生高品質的圖像，並提供設定來自訂創作是更文字化還是更具表現力。

需要澄清的是，Cocreator 是 Copilot+ PC 所獨有的，不應與「Image Creator」混淆，「Image Creator」是一種利用雲端資源將文字提示轉換為視覺效果的人工智慧功能。

生成填充

在「畫圖」中，「填滿」功能允許使用者選擇圖像的特定區域並產生新元素以根據文字提示增強該部分。此功能最初將在配備最新高通處理器的 Copilot+ PC 上使用。

生成擦除

畫圖應用程式還將引入「擦除」功能，使用戶能夠使用人工智慧選擇和消除圖像的部分，類似於行動裝置上可用的功能。

預計此功能將在所有設備上推出，包括缺乏人工智慧支援的設備。

重新設計影像、影像建立器和照片中的超解析度

照片應用程式將納入新的「重新設計影像」功能，旨在透過人工智慧和裝置的 NPU，利用先進的影像生成和編輯技術來改變照片的風格。

此功能允許使用者選擇影像來改變其風格，就像在行動應用程式上應用濾鏡一樣。使用者也可以輸入文字提示來建立新的背景。

影像創作者

照片應用程式將具有與「畫圖」中相同的「圖像創建器」工具，允許使用者根據簡單的文字提示創建人工智慧生成的圖像。與 Paint 版本不同，此功能並非 Copilot+ PC 獨有，因為它使用 DALL-E 語言模型在雲端中運行。

超解析度

超解析度功能將使用戶能夠透過 AI 升級影像，該功能僅在 Copilot+ PC 上提供。它將利用 NPU 將影像增強和銳化至原始解析度的八倍。

微軟也承諾照片中的超解析度功能可以讓舊的低品質影像恢復生機。

Windows 11 版 Copilot 更新

儘管 Copilot 成為 Windows 11 的功能已經有一段時間了，但 24H2 版本將引入更新。該應用程式將作為標準應用程式運行，可以從工作列固定或刪除，允許使用者像任何其他應用程式一樣調整大小和移動它（它也可在 Windows 11 23H2 上使用）。

該應用程式實際上是在 Windows 11 上作為 Web 應用程式安裝的 Web 版本。此外，介面已更新，類似於 OpenAI ChatGPT Web 體驗。

此外，Copilot 現在將整合到「設定」應用程式中。用戶將在設定中找到“副駕駛建議”，而不是召喚聊天機器人的明確按鈕。例如，在「系統」部分中，使用者可能會看到有關解決音訊問題、啟動節能設定或串流傳輸到無線顯示器的有用建議。

在檔案總管中，微軟的目標是在 Copilot 的幫助下簡化使用者任務，允許將滑鼠懸停在映像上並點擊 Copilot 按鈕時適用於映像的操作。

此外，Copilot也將成為通知功能的一部分。當收到Toast通知時，它會提出與特定場景相關的建議。例如，如果電子郵件包含 PowerPoint 附件，Copilot 可能會建議總結其內容。

這種整合將允許用戶與 Copilot 共享螢幕，以在各種任務期間獲得幫助。

開發人員還將開始將人工智慧功能整合到他們的應用程式中，這表明人工智慧功能將在未來的作業系統更新中更廣泛地整合。

Copilot 的最新變化是在最近的 Surface 發布會上首次推出的，但此後，有關 Copilot 建議的更多細節尚未披露。

結論

Windows 11 的 2024 年更新現已推出，其中包含新功能和增強功能，但尚未包含 AI 功能。微軟計劃在 10 月的某個時候透過 Windows Insider 計畫開始測試這些 AI 功能，包括具有增強安全功能的 Windows Recall，預計將於 2024 年 11 月進行更廣泛的推廣。

Copilot+ PC 是專為人工智慧應用而設計的新型智慧型電腦。最初的產品陣容採用高通 Snapdragon X 系列處理器以及整合 NPU，支援廣泛的 AI 功能，同時確保全天的電池效能。這些機器至少配備 16GB RAM 和 256GB 儲存空間。英特爾和 AMD 的新產品預計還將包括帶有 NPU 的處理器，以促進這些先進的人工智慧體驗。

2024 年 10 月 8 日更新：本文已進行修訂，以提供準確且最新的內容。

來源