버전 24H2에서 확인된 Windows 11 AI 기능

• Microsoft는 Windows 11 24H2에 대해 최소 7개의 새로운 온디바이스 AI 기능을 확인했습니다.
• 이러한 기능에는 Windows Recall, Windows Studio 효과, 라이브 캡션, 초고해상도, 음성 선명도, Paint 앱용 Cocreator, 사진 앱용 Restyle Image가 포함됩니다.
• 이는 Windows 11용 Copilot에 적용되는 다양한 변경 사항에 추가되는 사항입니다.

Windows 11 24H2(2024 업데이트)는 AI에 중점을 두고 수많은 새로운 기능을 도입할 예정입니다. 이 가이드에서는 이러한 AI 중심 기능에 대해 자세히 알아보고 그 중요성과 사용자 경험을 어떻게 향상시키는지 강조하겠습니다.

이 새 버전의 운영 체제에서는 Windows Recall, Windows Studio 효과, 라이브 캡션(실시간 번역), 초고해상도, 음성 선명도, Cocreator for Cocreator를 포함하여 장치에서 실행될 최소 7개의 새로운 AI 기능을 기대할 수 있습니다. 그림판 앱과 사진 앱의 이미지 스타일 변경. (이러한 기능은 Copilot+ PC에만 적용됩니다.)

새로운 기능은 컴퓨터에서 로컬로 실행되는 40개 이상의 AI 모델을 통합하고 이를 유지 관리하기 위한 인프라를 제공하는 Windows 11의 시스템 구성 요소인 새로운 “Windows Copilot Runtime” 덕분에 가능합니다.

또한 이를 통해 개발자는 Windows Copilot Library를 통해 새로운 API를 사용하여 앱을 AI 기능과 통합할 수 있습니다 .

또한 Windows 11 2024 업데이트에서는 Copilot 챗봇 AI에 대한 다양한 중요한 변경 사항과 새로운 기능도 출시될 예정입니다.

버전 24H2용 Windows 11 AI 기능

AI가 제공하는 새로운 기능에 대한 개요는 다음과 같습니다.

윈도우 리콜

Windows Recall(또는 Recall)은 백그라운드에서 실행되어 컴퓨터에서 수행하는 모든 작업의 ​​스냅샷을 찍는 사진 메모리 역할을 하는 새로운 기능입니다. 이 기능은 장치에서 로컬로 작동하는 여러 AI 모델을 사용하여 텍스트이든 이미지이든 자연어를 사용하여 모든 콘텐츠를 분석하고 검색 가능하게 만듭니다.

리콜 기능은 NPU, 16GB RAM, 256GB SSD를 갖춘 최신 Qualcomm Snapdragon X 시리즈 프로세서가 필요하기 때문에 Copilot+ PC 전용 기능입니다.

OOBE(첫 실행 경험)에서 이 기능을 켜거나 끌 수 있지만 설정 앱 또는 그룹 정책에서 수동으로 회수를 활성화하거나 비활성화할 수 있습니다.

Windows 스튜디오 효과

Windows Studio 효과(또는 Studio 효과 )는 AI를 사용하여 NPU(신경 처리 장치)를 통해 화상 통화 및 오디오 품질을 향상시키는 기능의 조합입니다.

현재 자동 프레이밍, 배경 흐림, 눈맞춤, 음성 초점, 인물 조명, 크리에이티브 필터, 눈맞춤 텔레프롬프터 등 4가지 주요 효과가 있습니다.

• 자동 프레이밍: 주변을 돌아다니는 경우에도 카메라 뷰의 중앙에 유지됩니다.
• 배경 흐림: 통화 중에 배경을 흐리게 하여 개인 정보 보호를 강화하거나 잡동사니를 숨깁니다.
• 눈맞춤: 통화 중에 화면을 보고 있을 수 있으므로 이 기능을 사용하면 다른 사람과 눈을 맞추고 있는 것처럼 보입니다.
• 음성 초점: 이 효과는 마이크의 배경 소음을 줄여 통화 중에 음성을 더 선명하게 만듭니다.

Studio Effects는 한동안 Windows 11의 일부였지만 버전 24H2부터 Microsoft는 이러한 기능을 Copilot+ PC에서 더 광범위하게 사용할 수 있도록 할 계획입니다.

번역이 포함된 실시간 캡션

Windows 11에는 한동안 라이브 캡션 기능이 있었지만 이제는 라이브 번역으로 업데이트되고 있습니다. 실시간 자막은 청각 문제가 있는 사람을 포함한 모든 사람이 자동 텍스트 변환을 통해 오디오를 이해할 수 있도록 설계된 기능입니다.

운영 체제의 AI 통합의 일부로 이 기능은 YouTube 또는 기타 소스에서 시청하는 비디오를 포함하여 비디오 또는 음성 전용 통화의 변환을 모국어로 번역할 수도 있습니다. 기술적으로 이 기능은 이제 컴퓨터를 통과하는 모든 오디오를 실시간으로 번역할 수 있습니다.

오디오는 모든 앱이나 비디오에서 실시간으로 녹음되거나 사전 녹음될 수 있습니다. 이 기능은 NPU가 필요하기 때문에 인터넷 연결 없이도 40개 이상의 언어를 영어로 번역할 수 있습니다.

음성 선명도

Windows 11에서 Voice Clarity는 영상이나 음성 전용 통화 또는 오디오 녹음 시 배경 소음을 제거하고, 에코를 취소하고, 실시간 반향을 줄이는 AI 기반 기능입니다.

또한 이 기능은 온라인 커뮤니케이션이 가능한 PC 게임에도 도움이 될 것입니다. 앱은 음성 전용 또는 일반 오디오 콘텐츠에 대해 ‘심층 소음 억제’를 전환할 수 있습니다. Voice Clarity는 온라인 회의에서 명확한 목소리를 보장하고 온라인 커뮤니케이션을 원활하게 해줍니다.

Voice Clarity는 NPU가 포함된 지원 하드웨어가 있는 지원 애플리케이션에서 자동으로 작동합니다. Voice Clarity를 ​​켜라는 옵션을 찾을 수 없습니다.

자동 초해상도

자동 초해상도(SR)는 AI를 사용하여 게임 해상도와 시각적 품질을 향상시켜 더 나은 프레임 속도를 포함하여 하드웨어 전반에 걸쳐 확장되는 보다 부드럽고 효율적인 경험을 제공하는 기능입니다. 즉, 슈퍼 해상도는 AI를 사용하여 게임을 향상시키고 프레임 속도와 이미지 품질을 향상시킵니다.

이 기능은 Nvidia의 DLSS, AMD의 FidelityFX Super Resolution(FSR), Intel의 Xe Super Sampling(XeSS)과 유사하며 AI를 사용하여 게임을 향상시킵니다.

이 기능의 일환으로 Microsoft는 Nvidia, AMD 및 Intel과 협력하여 “DirectSR” API를 만들어 SR을 차세대 게임에 통합했습니다.

Microsoft는 최신 Qualcomm Snapdragon X Elite 프로세서가 탑재된 Copilot+ PC에 이 기능을 독점적으로 제공할 예정이며, 일부 게임에서만 사용할 수 있습니다.

페인트 공동 창작자

또한 Microsoft는 그림판 앱에 AI 이미지를 만드는 대신 그림을 스캔하고 아이디어를 구체화하고 편집하고 발전시킬 수 있는 새로운 작품을 만드는 데 도움이 되는 새로운 Cocreator 기능을 추가하고 있습니다.

이 기능은 확산 기반 알고리즘을 사용하여 최소한의 노력으로 고품질 이미지를 생성합니다.

Cocreator에는 그림을 더욱 문자 그대로 또는 더욱 표현력 있게 만드는 설정도 포함되어 있습니다.

Cocreator는 Copilot+ PC 전용 AI 기능이지만 클라우드를 사용하여 텍스트 프롬프트를 이미지로 변환하는 AI 기능인 “Image Creator”와 혼동해서는 안 됩니다.

사진용 이미지 스타일 변경

Windows 11 24H2의 일부이자 Copilot+ PC 전용인 사진 앱에서 Microsoft는 장치의 NPU와 AI를 사용하여 이미지 생성 및 사진 편집 기술을 사용하여 사진 스타일을 변경하는 새로운 “리스타일 이미지”를 추가하고 있습니다.

이 기능을 사용하면 사진을 선택한 다음 휴대폰에서 필터를 사용하는 것과 유사하게 이미지를 새로운 스타일로 변환할 수 있습니다. 텍스트 프롬프트를 사용하여 새 배경을 만들 수도 있습니다.

사진 앱에는 그림판 앱과 동일한 “이미지 생성기” 기능이 포함되어 있어 단일 텍스트 프롬프트로 AI 이미지를 만들 수 있습니다. 이 기능은 DALL-E 언어 모델을 사용하는 Copilot을 사용하여 클라우드에서 프로세스가 발생하므로 NPU가 필요하지 않기 때문에 Copilot+ PC에만 적용되는 것이 아닙니다.

Windows 11용 부조종사

Copilot은 한동안 Windows 11에서 사용할 수 있었지만 버전 24H2부터 Microsoft는 몇 가지 변경 사항을 적용할 예정입니다. 예를 들어, 이 새 버전에서는 Copilot이 작업 표시줄에 고정하거나 고정 해제할 수 있는 기존 앱이 됩니다. 다른 앱처럼 크기를 조정하고 이동할 수도 있습니다.

해당 앱은 실제로 Windows 11에 웹앱으로 설치된 Copilot의 웹 버전입니다. 이전과 동일하게 작동하지만 차이점은 더 이상 시스템 설정을 변경할 수 없다는 점입니다. 또한 인터페이스는 웹에서의 OpenAI ChatGPT 경험과 유사한 새로운 디자인으로 업데이트되었습니다.

또한 Microsoft는 텍스트, 이미지, 오디오 등 다양한 형식의 정보를 이해하고 처리하는 새롭고 강력한 언어 모델인 OpenAI GPT-4o(또는 GPT-4 Omni)로 Copilot을 곧 업데이트할 계획입니다.

Copilot은 설정 앱에도 제공됩니다. 하지만 챗봇을 소환하는 버튼은 제공되지 않습니다. 대신 설정에서 “Copilot 제안”을 찾을 수 있습니다. 예를 들어 시스템 섹션에 있는 경우 오디오 문제 해결, 에너지 절약 기능 켜기, 화면을 무선 디스플레이로 전송하기 위한 제안 모음을 볼 수 있습니다.

Microsoft는 파일 탐색기에서 더 적은 단계로 작업을 완료할 수 있도록 Copilot을 도입할 계획입니다. 예를 들어, 갤러리 탭에 있는 경우 사진 위에 마우스를 놓고 Copilot 버튼을 클릭하면 이미지 파일에 적용할 수 있는 다양한 작업이 표시됩니다.

또한 Copilot도 알림에 제공됩니다. 토스트 알림을 받으면 Copilot이 해당 특정 사례에 수행할 제안과 함께 표시됩니다. 예를 들어 PowerPoint 첨부 파일이 포함된 이메일을 받으면 챗봇이 콘텐츠 요약을 제안할 수 있습니다.

Windows 11에서는 이는 Copilot과 화면을 공유하여 수행 중인 모든 작업에 대한 지원을 받을 수 있음을 의미합니다.

이제 개발자들이 AI를 앱에 통합하기 시작할 것이라는 점을 지적하는 것도 중요합니다. 즉, 다음 버전의 운영 체제부터 AI 기능을 갖춘 더 많은 앱을 보게 될 것이라는 의미입니다.

마무리

운영 체제는 6월 18일부터 Copilot+ PC에 대해 일부 새로운 기능이 포함된 새로운 기능 업데이트를 받게 되며, 기능 업데이트의 최종 버전은 9월 또는 10월에 모든 사용자에게 출시될 예정입니다. 모든 사람이 새 버전을 사용할 수 있게 되면 Microsoft는 Copilot+ PC에 대한 나머지 기능과 변경 사항을 출시할 것입니다.

https://www.youtube.com/watch?v=o0RSLOuhRzQ

Copilot+ PC는 AI 기능을 갖춘 새로운 범주의 컴퓨터입니다. 첫 번째 장치에는 NPU가 통합된 Qualcomm Snapdragon X 시리즈 프로세서가 탑재되어 거의 모든 AI 기능을 처리하고 하루 종일 지속되는 배터리 수명을 제공합니다. 이러한 장치에는 최소 16GB의 메모리와 256GB의 저장 공간이 제공됩니다. 앞으로 Intel과 AMD는 이러한 새로운 경험을 처리하기 위해 NPU가 탑재된 프로세서를 출시할 것으로 예상됩니다.

이러한 새로운 Copilot+ PC 에는 Surface Pro(11판), Surface Laptop(7판), Acer Swift 14 AI, HP Omnibook X, HP EliteBook Ultra G1q, Lenovo Yoga Slim 7x, Samsung Galaxy Book4 Edge 시리즈, ASUS Vivobook S 가 포함 됩니다. 15 및 XPS 13, Inspiron 14, Inspiron 14 Plus, Latitude 5455 및 Latitude 7455와 같은 Dell 노트북이 있습니다.