하이퍼커넥트, AI기반 얼굴 재현 영상 기술 공개 [start-up] 글로벌 영상 기술 기업 하이퍼커넥트가 사진 한 장만으로 실제같이 움직이는 얼굴 영상을 만들 수 있는 기술을 구현했다고 6일 밝혔다.
A는 기존 연구결과를 활용한 얼굴 재현, B는 하이퍼커넥트가 발표한 마리오네트 기술을 활용한 얼굴 재현.
이 기술을 소개한 「MarioNETte: Few-shot Face Reenactment Preserving Identity of Unseen Targets」 논문은 미국 인공지능 학회 AAAI(American Association for the Artificial Intelligence)에도 채택됐다. 해당 기술은 내년 2월 뉴욕에서 열리는 AAAI 2020 학회에서 선보일 예정이다.
하이퍼커넥트 AI랩이 최근 발표한 마리오네트(MarioNETte)는 재현하고자 하는 얼굴 사진 한 장(타깃)만 있으면 움직임을 부여하는 얼굴(드라이버)을 그대로 따라 하는 영상을 만들 수 있는 안면 재현 기술이다.
기존 안면 재현 기술은 재현하고자 하는 얼굴이 움직임을 부여하는 얼굴의 영향을 받아 변형되는 한계가 있었다. 고품질의 재현 영상을 만들려면 타깃의 얼굴과 윤곽이 비슷한 얼굴만을 드라이버로 사용하거나, 각 타깃의 얼굴에 맞춰 딥러닝 모델을 추가적으로 학습시키는 등의 과정을 거쳐야 하는 탓에 기술 상용화가 어려웠다...