로봇신문사
> 기획·테크 > 미래기술
하이퍼커넥트, 사진 한 장으로 얼굴 재현 영상 만드는 AI 기술 공개영상통화·게임·AR 등 다양한 분야에서 다양한 활용 가능
폰트키우기 폰트줄이기 프린트하기 메일보내기 신고하기
승인 2019.12.09  03:11:11
트위터 페이스북 구글+ 밴드
▲ 하이퍼커넥트가 사진 한 장만으로 얼굴 재현 영상 만드는 AI 기술을 공개했다. 사진은 MarioNETte를 통한 얼굴 재현 결과

글로벌 영상 기술 기업 하이퍼커넥트(대표 안상일)가 사진 한 장만으로 실제같이 움직이는 얼굴 영상을 만들 수 있는 기술을 구현했다고 밝혔다.

이 기술을 소개한 ‘MarioNETte: Few-shot Face Reenactment Preserving Identity of Unseen Targets’ 논문은 인공지능 분야 최고 권위 학회인 미국 인공지능 학회 ‘AAAI(American Association for the Artificial Intelligence)’에도 채택되어 2020년 2월 뉴욕에서 열리는 AAAI 2020 학회에서 기술을 선보이게 된다.

하이퍼커넥트 AI랩이 최근 발표한 ‘마리오네트(MarioNETte)’는 재현하고자 하는 얼굴 사진 한 장(타깃)만 있으면 움직임을 부여하는 얼굴(드라이버)을 그대로 따라 하는 영상을 만들 수 있는 안면 재현(face reenactment) 기술이다.

기존 안면 재현 기술은 재현하고자 하는 얼굴이 움직임을 부여하는 얼굴의 영향을 받아 변형되는 한계가 있었다. 고품질의 재현 영상을 만들려면 타깃의 얼굴과 윤곽이 비슷한 얼굴만을 드라이버로 사용하거나 각 타깃의 얼굴에 맞춰 딥러닝 모델을 추가적으로 학습시키는 등의 과정을 거쳐야 하는 탓에 기술 상용화가 어려웠다.

하이퍼커넥트는 이 문제를 해결하기 위해 딥러닝 모델이 드라이버의 얼굴에서 필요한 부분의 정보에만 집중할 수 있는 구조(image attention block)를 도입했다. 또한 얼굴에서 정체성(identity)을 나타내는 정보와 표정 및 움직임을 나타내는 정보를 분리해 재현하고자 하는 얼굴에 드라이버의 표정 및 움직임 정보만 입히는 기술(landmark transformer)을 고안했다. 이를 통해 재현하고자 하는 얼굴과 움직임을 부여하는 얼굴의 형태가 전혀 다른 경우에도 타깃의 사진 한 장만 있으면 후보정 없이 실시간으로 현실감 있는 얼굴 재현 영상을 만드는 것이 가능해졌다.

하이퍼커넥트는 앞서 10월에 열린 국제 컴퓨터 비전 학회(ICCV 2019)에서 이 기술을 시연해 국내외 딥러닝 전문가들로부터 호평을 받은 바 있으며 앞으로 이 기술을 모바일 서비스에 바로 적용할 수 있는 수준까지 끌어올린다는 계획이다. 얼굴 재현 기술이 영상 통화, 게임, AR 등 다양한 분야에 활용될 수 있는 만큼 아자르, 하쿠나 라이브와 같은 하이퍼커넥트의 기존 서비스 개선은 물론 신규 서비스 개발에도 시너지 효과가 있을 것으로 기대된다.

하이퍼커넥트 AI랩을 총괄하는 하성주 디렉터는 “기존 안면 재현 기술 연구는 구동 시간이 오래 걸리고 데이터가 많이 필요한 모델을 개발해 영상 품질을 높이거나 모델의 속도를 높이기 위해 영상 품질 손실을 감수하는 방향으로 이뤄져 왔다. AI랩의 이번 연구는 영상 품질과 구현 속도를 동시에 높일 수 있는 획기적인 접근법을 제시해 얼굴 재현 기술의 상용화 가능성을 열었다는 데 의의가 있다”며 “앞으로도 새로운 사람을 만나는 경험을 혁신할 수 있는 다양한 기술을 개발해 연결을 통해 사회적·문화적 가치를 만들어 간다는 하이퍼커넥트의 목표 실현에 기여하겠다”고 말했다.

조규남  ceo@irobotnews.com
조규남의 다른기사 보기  
폰트키우기 폰트줄이기 프린트하기 메일보내기 신고하기
트위터 페이스북 구글+ 밴드 뒤로가기 위로가기
인기기사
1
[창간 7주년 기획]로봇R&D현장을 가다 ② 한국생산기술연구원 융합기술연구소 로봇응용연구부문
2
NASA, 내년 2월 화성서 활약할 자율 드론 공개
3
부천산업진흥원, 부천시 중동에 주차로봇 테스트 베드 구축
4
[ICROS 2020]LG전자 인공지능 및 로봇기술 현황 및 전략
5
드론 실증도시 본격 착수… 국토부, 7월 한 달간 집중점검 실시
6
[ICROS 2020]도심 자율주행을 위한 좋은 '경로 계획' 기술
7
미디어젠, 에듀테크 시장 출사표
8
[ICROS 2020]필드로봇 포럼(국방로봇 현황과 미래)
9
[ICROS 2020]사흘간 일정으로 2일 속초에서 개막
10
소프트뱅크, 상업용 자율주행 청소로봇 1만대 판매 돌파...세계 1위
이 기사에 대한 댓글 이야기 (0)
자동등록방지용 코드를 입력하세요!   
확인
- 200자까지 쓰실 수 있습니다. (현재 0 byte / 최대 400byte)
- 욕설등 인신공격성 글은 삭제 합니다. [운영원칙]
이 기사에 대한 댓글 이야기 (0)
로봇신문 소개기사제보광고문의불편신고개인정보취급방침이메일무단수집거부청소년보호정책    *국제표준간행물번호 ISSN 2636-0381 *본지는 인터넷신문위원회 자율심의 준수 서약사입니다
08298) 서울 구로구 공원로 41(구로동, 현대파크빌 427호)  |  대표전화 : 02)867-6200  |  팩스 : 02)867-6203
등록번호 : 서울 아 02659  |  등록일자 : 2013.5.21  |  발행인·편집인 : 조규남  |  청소년보호책임자 : 박경일
Copyright © 2013 로봇신문사. All rights reserved. mail to editor@irobotnews.com