사진 단 한 장 입력해 3D 캐릭터 움직이는 AI 개발

UNIST, 형태 왜곡 없이 동작 구현

애니메이션 제작 진입 장벽 낮춰

주경돈(왼쪽부터) 울산과학기술원(UNIST) 교수, 김진혁 연구원(제1저자), 방재훈 연구원, 서승현 연구원. 사진제공=UNIST

사진 속 2D 캐릭터의 동작을 화면 속 3D 캐릭터가 그대로 따라 움직일 수 있게 만드는 인공지능(AI) 기술이 개발됐다.

울산과학기술원(UNIST)은 주경돈 인공지능대학원 교수팀이 3D 캐릭터 자세를 형태 왜곡 없이 바꿔주는 AI 기술인 디폼스플랫을 개발했다고 25일 밝혔다.



디폼스플랫은 사진 한 장만 입력해주면 형태 왜곡 없이 3D 캐릭터의 자세를 사진 속 자세와 똑같이 움직이게 바꿔준다. 기존에는 3D 캐릭터를 만화나 게임처럼 움직이게 하려면 데이터 문제로 인해 팔, 다리 등이 움직일 때 엿가락처럼 휘어지는 형태 왜곡이 발생하기 쉬웠다.

연구팀은 3D 캐릭터를 구성하는 점들과 2D 사진 속 픽셀을 연결해 사진에 담긴 자세 정보를 3D 캐릭터로 전달하는 기술을 활용했다. 자세 변형 시 함께 움직여야 하는 단단한 부위를 스스로 찾아 그룹으로 묶어내는 기술도 쓰였다. 덕분에 로봇이나 인형의 형태가 찌그러지지 않고 자연스럽게 움직일 수 있게 됐다.

주경돈 교수는 “기존 기술은 사진 한 장만을 입력데이터로 활용해 3D 물체를 움직이려 하면 형태가 심각하게 훼손되는 한계가 있었다”며 “개발된 AI는 물체의 구조적 특성을 고려해 스스로 뼈대 역할을 하는 영역을 구분하고 움직임을 생성하는 기술로 전문 인력과 고가의 장비에 의존하던 메타버스·게임·애니메이션 등 3D 콘텐츠 제작 분야의 진입 장벽을 낮출 수 있을 것으로 기대된다”고 말했다.