뉴스
2023년 3월 22일
새로운 메타휴먼 애니메이터 기능: 메타휴먼에 손쉽게 사용할 수 있는 고퀄리티 퍼포먼스 캡처
새로운 메타휴먼 기능 세트가 곧 출시된다는 기쁜 소식을 전합니다.
메타휴먼 애니메이터를 활용하면 iPhone이나 스테레오 헬멧 장착 카메라(Helmet-Mounted Camera, HMC)로 캡처한 모든 페이셜 연기를 메타휴먼 캐릭터에 고퀄리티 애니메이션으로 재현할 수 있습니다. 배우의 연기에 담긴 개성, 사실성, 충실도를 그대로 캡처하고, 모든 디테일과 뉘앙스를 메타휴먼으로 전송하여 언리얼 엔진에서 생생하게 구현할 수 있습니다.
메타휴먼 애니메이터를 활용하면 iPhone이나 스테레오 헬멧 장착 카메라(Helmet-Mounted Camera, HMC)로 캡처한 모든 페이셜 연기를 메타휴먼 캐릭터에 고퀄리티 애니메이션으로 재현할 수 있습니다. 배우의 연기에 담긴 개성, 사실성, 충실도를 그대로 캡처하고, 모든 디테일과 뉘앙스를 메타휴먼으로 전송하여 언리얼 엔진에서 생생하게 구현할 수 있습니다.
포토리얼한 디지털 휴먼이 사실적인 퍼포먼스를 보이려면 고퀄리티의 애니메이션이 필요하지만, 이를 제작하는 데 필요한 전문 지식과 시간은 아무리 숙련된 크리에이터라 할지라도 도전적인 일이었습니다. 기존 퍼포먼스 캡처 솔루션으로는 배우의 연기에 담긴 모든 뉘앙스를 캐릭터에 충실히 재현하기가 상당히 어렵습니다. 매우 사실적인 애니메이션을 제작하려면, 숙련된 애니메이터라도 일반적으로 시간이 많이 소요되고 결과물을 힘들게 조정해야 하는 경우가 많습니다.
이제 힘든 작업에서 벗어나세요!
몇 달 안에 출시될 예정인 메타휴먼 애니메이터를 사용하면 AAA 게임 개발사와 할리우드 영화 제작자들이 원하는 고퀄리티의 페이셜 애니메이션을 제작할 수 있으며, 인디 스튜디오나 취미로 즐기는 분들도 쉽게 사용하실 수 있습니다. iPhone과 평범한 삼각대만 있으면 애니메이터가 아니더라도 관객과 감정적인 공감대를 형성할 수 있는 사실적인 메타휴먼 애니메이션을 제작할 수 있습니다.
메타휴먼 애니메이터는 테크노프롭스(Technoprops) 등 모든 전문 버티컬 스테레오 HMC 캡처 솔루션과도 연동되어 더욱 높은 퀄리티의 결과물을 얻을 수 있습니다. 또한, 바디 캡처를 위한 모션 캡처 시스템이 있는 경우, 메타휴먼 애니메이터의 타임코드 지원으로 표정 연기 애니메이션을 바디 모션 캡처 및 오디오와 쉽게 결합하여 완벽한 캐릭터 퍼포먼스를 구현할 수 있습니다. 심지어 오디오를 사용하여 실감나는 혀 애니메이션을 제작할 수도 있습니다.
어떻게 작동할까요?
핵심은 배우 얼굴의 고유한 해부학적 특성과 이를 타깃 캐릭터와 어떻게 연관시켜야 하는지를 이해하는 시스템에 있습니다. 메타휴먼 애니메이터는 모든 메타휴먼과 동일한 토폴로지를 가지고 동일한 표준 릭을 공유하는 메시인 연기자의 메타휴먼 아이덴티티를 생성하는 것부터 시작합니다.
메시 투 메타휴먼을 사용해 본 적이 있다면 해당 프로세스의 일부가 3D 스캔 또는 스컬프팅으로부터 메타휴먼 아이덴티티를 생성한다는 것을 알고 계실 것입니다. 메타휴먼 애니메이터는 소량의 캡처 영상으로 메타휴먼 아이덴티티를 생성할 수 있는 기술을 기반으로 합니다. 이 프로세스는 몇 분 밖에 걸리지 않으며 각 배우당 한 번만 수행하면 됩니다.
이 단계가 완료되면, 메타휴먼 아이덴티티는 메타휴먼의 페이셜 릭의 위치를 추적하고 솔브하여 퍼포먼스를 해석하는 데 사용됩니다. 그 결과, 배우와 메타휴먼의 이목구비가 달라도 미묘한 표정을 메타휴먼 타깃 캐릭터에 정확하게 재현할 수 있습니다. 언리얼 엔진에서는 연기의 진행 상황을 시각적으로 확인하고, 애니메이션이 적용된 메타휴먼 아이덴티티와 배우의 영상을 프레임별로 비교할 수 있습니다.
또 다른 장점은 애니메이션 데이터가 깔끔하고, 컨트롤 커브가 의미론적으로 정확합니다. 즉, 마치 애니메이터가 만든 것처럼 페이셜 릭이 있을 것으로 예상되는 위치에 있으므로, 예술적인 목적에 따라 필요한 경우 쉽게 조정할 수 있다는 점입니다.
에픽게임즈는 처음부터 메타휴먼 아이덴티티를 사용했기 때문에 나중에 메타휴먼을 변경하거나 다른 메타휴먼에 애니메이션을 사용하고자 할 때에도 오늘 만든 애니메이션은 계속 작동될 것이므로 안심하고 사용할 수 있습니다.
메타휴먼 애니메이터의 프로세스 기능은 언리얼 엔진용 메타휴먼 플러그인에 포함될 예정이며, 언리얼 엔진과 마찬가지로 무료로 다운로드할 수 있습니다. iPhone의 경우, 메타휴먼 애니메이터는 iPhone 11 이상에서 작동하며, 무료 iOS Live Link Face 앱도 필요합니다. 이 워크플로를 지원하기 위해 몇 가지 추가 캡처 모드가 업데이트될 예정입니다.
빨리 시작하고 싶으신가요? 아래 뉴스레터를 구독하시면 메타휴먼 애니메이터가 출시될 때 알려드리겠습니다.