Microsoft는 사용자가 비디오 콘텐츠를 시청하는 동안 사람, 개체 등의 요소와 상호 작용하기를 원합니다.

Microsoft는 최근 사람들이 비디오 콘텐츠를 시청하는 동안 사람이나 사물과 같은 요소를 정확하게 감지, 식별 및 상호 작용할 수 있도록 하는 기술을 설명하는 특허를 출원했습니다.

비디오 정보에서 개체의 눈에 띄는 부분 감지(Detecting Prominence of Objects in Video Information) 라는 특허는 이 기술이 척추에 전율을 보내는 시스템에서 대화형 쇼핑뿐만 아니라 추적 및 식별을 촉진하는 데 어떻게 사용되는지 자세히 설명합니다.

여기 에서 전체 내용을 읽을 수 있는 특허 기술은 다음과 같이 작동합니다.

• 기계를 사용해 영상에 등장하는 사람들을 찾아 팔로우하는 영상 처리 시스템이 있습니다.
• 그런 다음 시스템은 각 사람이 비디오에서 얼마나 중요한지에 따라 점수를 부여하여 점수 목록을 만듭니다.
• 한 사람의 점수는 그 사람이 시청자의 관심을 얼마나 끌 수 있는지를 보여줍니다. 예를 들어, 사람의 점수는 부분적으로 해당 사람이 동영상에 얼마나 많이 나타나는지 보여줍니다.
• 시스템은 각 개인에게 특정한 정보를 기반으로 점수를 제공합니다. 시스템은 특정 개인에게 속한 기능을 추가하여 이러한 정보를 만듭니다.

이 기술은 다양한 응용 분야에 사용될 수 있습니다. 아래 이미지에서 볼 수 있듯이 영화 속 캐릭터가 입고 있는 스웨터와 같은 특정 제품을 추적하여 사용자가 이를 효과적으로 식별하고 나중에 사용할 수 있도록 정보를 저장하는 데 사용할 수 있습니다.

그러나 데이터베이스에 액세스하고 유사한 얼굴을 검색하여 공적인 사람이든 개인이든 사람을 정확하게 감지하고 식별하는 데에도 사용할 수 있습니다.

얼굴 인식 구성 요소는 영상 정보에 등장하는 인물의 얼굴을 인식하여 그 사람의 신원을 판별합니다. 예를 들어, 일부 구현에서, 얼굴 검출 구성요소는 비디오 정보에 나타나는 개인이 이전에 유명인이나 정치인과 같은 공인으로 식별되었는지 여부를 결정합니다.

이 도구의 가장 으스스한 측면 중 하나는 오디오와 비디오 콘텐츠를 활용하여 비디오 피사체가 표현하는 감정 지도를 구성함으로써 각 얼굴의 감정을 포착하는 능력입니다.

감정 검출 구성요소는 오디오 정보에 이러한 감정을 나타내는 미리 결정된 사운드가 포함되어 있는지 여부를 결정하여 관심 감정을 탐지합니다.

따라서 이 기술은 기업과 회사에서 일반 사용자, 심지어 경찰서까지 다양한 당사자가 비디오 콘텐츠에 제품과 사람을 배치하고 나중에 동일한 기술을 사용하여 해당 제품과 사람을 감지하고 식별하는 데 사용될 수 있습니다. .

Microsoft는 Teams 회의를 초현실적으로 만드는 기술을 설명하는 특허를 포함하여 많은 특허를 출원했지만 빛을 보는 사람은 많지 않습니다.

그러나 비디오 스트리밍 플랫폼이 자리를 잡고 비디오 콘텐츠가 TikTok, Instagram 및 기타 플랫폼과 같은 미디어의 지배적인 형태이기 때문에 이와 같은 기술은 확실히 게임 체인저가 될 것이며 우리의 방식에 혁명을 일으킬 수 있습니다. 비디오 콘텐츠를 소비합니다.

그러나 그것은 매우 으스스합니다.