Windows 11 AI 功能已在 24H2 版本中確認

Windows 11 AI 功能已在 24H2 版本中確認
  • 微軟確認 Windows 11 24H2 至少有七項新的裝置端 AI 功能。
  • 這些功能包括 Windows Recall、Windows Studio Effects、即時字幕、超解析度、語音清晰度、Paint 應用程式的 Cocreator 以及照片應用程式的 Restyle Image。
  • 這是 Windows 11 版 Copilot 的各種變更的補充。

Windows 11 24H2(2024 更新)將引入大量新功能,其中重點在於人工智慧。在本指南中,我將深入探討這些以人工智慧為中心的功能,強調它們的重要性以及它們如何增強您的體驗。

在這個新版本的作業系統中,您可以期待至少七項將在裝置上運行的新人工智慧功能,包括Windows Recall、Windows Studio Effects、Live Captions(即時翻譯)、Super Resolution、Voice Clarity、Cocreator for畫圖應用程式和照片應用程式的重新設計圖像樣式。 (這些功能是 Copilot+ PC 獨有的。)

這些新功能的實現得益於新的“Windows Copilot Runtime”,這是 Windows 11 上的系統元件,整合了 40 多個在電腦上本地運行的 AI 模型,並提供了維護它們的基礎設施。

這也允許開發人員透過Windows Copilot 庫使用新的 API 將他們的應用程式與 AI 功能整合。

此外,Windows 11 2024更新也將針對Copilot聊天機器人AI推出各種重大變更和新功能。

Windows 11 24H2 版本的 AI 功能

以下是人工智慧支援的新功能的概述。

Windows 召回

Windows Recall(或Recall)是一項新功能,它可作為在背景執行的照相記憶體,為您在電腦上執行的所有操作拍攝快照。該功能使用在設備上本地運行的多個人工智慧模型,分析並使得每一條內容都可以使用自然語言進行搜索,無論是文字還是圖像。

呼叫應用程式 UI
召回應用程式 UI / 圖片:Microsoft

Recall 功能是 Copilot+ PC 的獨特功能,因為它需要配備 NPU、16GB RAM 和 256GB SSD 的最新 Qualcomm Snapdragon X 系列處理器。

您可以選擇從開箱即用體驗 (OOBE) 中開啟或關閉該功能,但也可以從「設定」應用程式或群組原則中手動啟用或停用「呼叫」。

Windows 工作室效果

Windows Studio Effects(或Studio Effects)是使用 AI 的功能組合,透過神經處理單元 (NPU) 增強視訊通話和音訊品質。

快速設定工作室效果
快速設定 Studio 效果(來源:Microsoft)

目前主要有四種效果,包括自動取景、背景模糊、目光接觸、語音對焦、人像光、創意濾鏡、目光接觸提詞器。

  • 自動取景:即使您四處走動,也能讓您保持在相機視圖的中心。
  • 背景模糊:通話期間模糊背景,提供更多隱私或隱藏雜亂。
  • 目光接觸:由於您在通話期間可能會看著螢幕,因此此功能會讓您看起來與其他人保持目光接觸。
  • 語音對焦:此效果可減少麥克風的背景噪音,讓您在通話時的聲音更加清晰。

值得注意的是,Studio Effects 成為 Windows 11 的一部分已有一段時間了,但從版本 24H2 開始,微軟計劃在 Copilot+ PC 上更廣泛地提供這些功能。

帶翻譯的即時字幕

儘管 Windows 11 提供即時字幕功能已經有一段時間了,但現在它正在更新為即時翻譯。即時字幕是一項旨在幫助所有人(包括有聽力問題的人)透過自動轉錄來理解音訊的功能。

使用 AI 進行即時字幕翻譯 / 圖片:Microsoft
使用 AI 進行即時字幕翻譯 / 圖片:Microsoft

作為作業系統中人工智慧整合的一部分,該功能還可以將視訊或純語音通話轉換為您的母語,包括您從 YouTube 或其他來源觀看的影片。從技術上講,該功能現在能夠即時翻譯通過電腦的任何音訊。

音訊可以是即時的,也可以是從任何應用程式或影片中預先錄製的。即使沒有網路連接,該功能也可以將 40 多種語言翻譯成英語,因為它需要 NPU 才能運作。

語音清晰度

在 Windows 11 上,語音清晰度是一項人工智慧支援的功能,可消除背景噪音、消除迴聲,並減少視訊或純語音通話或錄製音訊時的即時混響。

此外,這項功能也將有利於具有線上交流功能的PC遊戲。應用程式可以為純語音或通用音訊內容切換「深度雜訊抑制」。語音清晰度確保線上會議語音清晰,線上溝通更順暢。

Voice Clarity 可自動在支援的應用程式和支援的硬體(包括 NPU)上運作。您不會找到顯示“開啟語音清晰度”的選項。

自動超解析度

自動超解析度 (SR) 是一項使用 AI 來提高遊戲解析度和視覺品質的功能,可提供更流暢、更有效率的跨硬體體驗,包括更好的幀速率。換句話說,超解析度利用 AI 來提升遊戲品質並提高幀速率和影像品質。

自動超解析度
自動超解析度 / 圖:Mauro Huculak

此功能類似於 Nvidia 的 DLSS、AMD 的 FidelityFX 超解析度 (FSR) 和英特爾的 Xe 超級取樣 (XeSS),後者也使用 AI 來升級遊戲。

作為此功能的一部分,微軟還與 Nvidia、AMD 和英特爾合作創建了「DirectSR」API,將 SR 整合到下一代遊戲中。

微軟將專門為配備最新 Qualcomm Snapdragon X Elite 處理器的 Copilot+ PC 提供此功能,並且僅適用於部分遊戲。

油漆共同創作者

在 Paint 應用程式中,微軟還添加了一個新的Cocreator功能,該功能可以掃描您的繪圖,而不是為您創建AI 圖像,並幫助您創建新的藝術作品,您可以根據自己的想法進行完善、編輯和發展。

油漆共同創作者
繪畫/圖像共同創作者:微軟

此功能使用基於擴散的演算法以最小的努力產生高品質的圖像。

Cocreator 甚至包括一個設置,可以使繪圖更加文字化或更具表現力。

Cocreator 是 Copilot+ PC 獨有的人工智慧功能,但不應與「Image Creator」混淆,「Image Creator」也是利用雲端將文字提示轉換為圖像的人工智慧功能。

重新設計照片影像

在「照片」應用程式中,作為 Windows 11 24H2 的一部分且為 Copilot+ PC 所獨有,微軟添加了新的「重新設計圖像」功能,該應用程式將AI 與設備的NPU 結合使用,透過圖像生成和照片編輯技術來改變照片的風格。

照片重新設計影像
照片重新設計圖片/圖片:Microsoft

使用該功能,您可以選擇一張圖片,然後可以用新的樣式轉換圖像,類似於在手機上使用濾鏡。您甚至可以使用文字提示來建立新背景。

照片應用程式還獲得了與畫圖應用程式相同的「圖像創建器」功能,該功能允許您使用單一文字提示創建人工智慧圖像。此功能並非 Copilot+ PC 獨有,因為該過程使用 DALL-E 語言模型透過 Copilot 在雲端進行,因此不需要 NPU。

適用於 Windows 11 的副駕駛

儘管 Copilot 在 Windows 11 上可用已有一段時間,但從版本 24H2 開始,微軟將做出一些更改。例如,在這個新版本中,Copilot 成為一個傳統應用程序,您可以從任務欄固定或取消固定。您還可以像任何其他應用程式一樣調整其大小和移動它。

新的副駕​​駛應用程式
新的 Copilot 應用程式 / 圖片:Mauro Huculak

該應用程式實際上是在 Windows 11 上作為 Web 應用程式安裝的 Copilot 的 Web 版本。此外,介面也進行了更新,採用了類似於網路上 OpenAI ChatGPT 體驗的新設計。

此外,微軟計劃很快用 OpenAI GPT-4o(或 GPT-4 Omni)更新 Copilot,這是一種新的強大語言模型,可以理解和處理不同格式的信息,例如文字、圖像甚至音訊。

Copilot 也將進入「設定」應用程式。但是,您不會獲得召喚聊天機器人的按鈕。相反,您會在設定中找到“副駕駛建議”。例如,如果您位於「系統」部分,您可能會看到一系列解決音訊問題、開啟節能功能或將螢幕投射到無線顯示器的建議。

帶有副駕駛建議的設置
副駕駛建議的設定 / 圖片:Microsoft

在檔案總管上,微軟計劃引入 Copilot 來幫助您以更少的步驟完成工作。例如,如果您在「圖庫」標籤中,則可以將滑鼠懸停在圖片上,然後按一下「副駕駛」按鈕將顯示可套用於該影像檔案的不同操作。

文件資源管理器和 Copilot 建議
附有 Copilot 建議的檔案總管/圖片:Microsoft

此外,Copilot 也將加入通知功能。當您收到 Toast 通知時,Copilot 將出現並提供在該特定情況下執行的建議。例如,如果您收到一封帶有 PowerPoint 附件的電子郵件,聊天機器人可能會建議總結內容。

帶有副駕駛建議的通知
副駕駛建議的通知/圖片:Microsoft

在 Windows 11 上,這也意味著您將能夠與 Copilot 共享螢幕,以便在您所做的任何事情時獲得幫助。

還需要指出的是,開發人員現在將開始將人工智慧整合到他們的應用程式中,這意味著從下一版本的作業系統開始,我們將開始看到更多具有人工智慧功能的應用程式。

把事情包起來

該作業系統將從 6 月 18 日開始針對 Copilot+ PC 接收新功能更新,其中包含一些新功能,而功能更新的最終版本則計劃於 9 月或 10 月向所有人推出。一旦新版本可供所有人使用,微軟將推出 Copilot+ PC 的其餘功能和變更。

https://www.youtube.com/watch?v=o0RSLOuhRzQ

Copilot+ PC 是一種具有 AI 功能的新型電腦。第一波設備將採用具有整合 NPU 的高通 Snapdragon X 系列處理器,幾乎可以處理任何人工智慧功能,並提供真正的全天電池續航時間。這些設備至少配備 16GB 記憶體和 256GB 儲存空間。未來,預計英特爾和 AMD 將發布帶有 NPU 的處理器來處理這些新體驗。

其中一些新的 Copilot+ 電腦包括Surface Pro(第 11 版)、Surface Laptop(第7 版)、Acer Swift 14 AI、HP Omnibook X、HP EliteBook Ultra G1q、Lenovo Yoga Slim 7x、Samsung Galaxy Book4 Edge 系列、ASUS Vivobook S 15,以及 Dell 筆記型電腦,如 XPS 13、Inspiron 14、Inspiron 14 Plus、Latitude 5455 和 Latitude 7455。

發佈留言

發佈留言必須填寫的電子郵件地址不會公開。 必填欄位標示為 *