Adobe의 VideoGigaGAN 프로젝트로 흐릿한 비디오 HD를 만들 수 있습니다.

알아야 할 사항

• Adobe는 흐릿한 비디오를 HD처럼 보이게 만들 수 있는 VideoGigaGAN이라는 새로운 VSR(비디오 초해상도) 방법을 개발하고 있습니다.
• VideoGigaGAN은 흐릿함, 깜박임 또는 기타 AI 아티팩트 없이 비디오를 원래 해상도의 최대 8배까지 확장할 수 있습니다.
• VideoGigaGAN은 아직 개발 중이며 Adobe가 언제 대중에게 공개할지는 알 수 없습니다.

Adobe 직원들은 곧 비디오를 원래 해상도의 최대 8배까지 업스케일링할 수 있는 생성적 AI 모델을 개발했습니다. VideoGigaGAN이라는 제목의 Adobe는 최근 발표된 논문에서 이 모델이 AI 아티팩트를 도입하고 업스케일링 시도에서 많은 흐릿함을 초래하는 경향이 있는 과거의 전통적인 비디오 초해상도(VSR) 접근 방식보다 훨씬 우수하다고 주장합니다 .

생성적 AI의 장점 덕분에 Adobe의 VideoGigaGAN은 “시간적 일관성을 유지하면서 빈도가 높은 세부 정보로 비디오를 업샘플링합니다.” 궁극적으로 새로운 방법은 더욱 세밀한 디테일로 결과를 생성합니다. 이는 비디오의 충실도가 훨씬 높고 아티팩트가 훨씬 적다는 것을 의미합니다.

그러나 우리의 말을 그대로 받아들이지 마십시오. 다음은 Adobe의 새로운 VSR 방법의 기능을 보여주는 몇 가지 샘플입니다.

과거의 VSR 방법은 이미지를 개선하는 데 유용한 것으로 입증되었지만 그 성공이 비디오로 동일한 방식으로 해석되지는 않았습니다. 다른 업스케일링 방법은 업샘플링으로 인해 발생하는 깜박임 및 기타 AI 이상 현상을 줄이려고 노력하지만 세부 사항을 희생하는 방식으로만 이를 수행합니다.

이것이 GAN(Generative Adversarial Networks)이 진정으로 빛을 발하는 곳입니다. VideoGigaGAN은 비디오 왜곡을 효과적으로 제거(또는 거의 보이지 않을 때까지 줄임)할 뿐만 아니라 원래 해상도의 최대 8배까지 확장할 수 있는 고품질 비디오를 생성합니다.

VideoGigaGAN Github 웹사이트 에서 더 많은 업샘플링 전후 비교를 확인할 수 있습니다 .

지난해 어도비의 MAX 행사에서도 확산 기반 AI 업샘플링 기술을 사용해 영상과 GIF의 품질을 향상시키는 유사한 프로젝트를 엿볼 수 있었다. 그러나 VideoGigaGAN은 완전히 다른 짐승입니다.

VideoGigaGAN은 아직 개발 중이고 샘플은 미리 보기일 뿐이므로 Adobe가 일반 사용자에게 제공할지 여부는 알 수 없습니다. 그럼에도 불구하고 샘플만 보면 이 기술은 마케팅하기에 충분히 가치가 있으며 향후 Adobe Premiere Pro를 통해 제공될 수도 있습니다. 우리는 흐릿한 비디오의 품질 개선에 관심이 있는 모든 사람들을 위해 직접 시도해 보고 검토하고 싶습니다.