사람의 움직임으로 네 발 동물을 조종하는 생성형 모션 기술 Two2Four
Two2Four는 일반적인 사람 모션을 걷기·달리기·점프·앉기 같은 네 발 동물 동작으로 변환하고 머리와 개별 다리까지 제어하는 생성형 퍼피티어링 기술입니다.
논문 Two2Four: Generative Quadruped Puppeteering from Human Motion
연구 DisneyResearch|Studios · ETH Zurich
공개 2026-07-30
일반적인 사람 모션을 4족 동물 동작으로 변환
Two2Four는 사람이 수행한 평범한 움직임을 입력받아 자연스럽고 제어 가능한 네 발 동물 애니메이션을 생성하는 연구입니다. 기존에는 동물 행동을 정교하게 흉내 내는 전문 배우를 모션 캡처하거나 복잡한 제어 장치로 사람 동작을 리타기팅해야 했는데, 두 방식 모두 제작 난도가 높고 실제 동물의 미묘한 움직임을 재현하기 어렵습니다.
연구진은 네 발 동물 모션 데이터만으로 학습한 2단계 생성형 확산 모델을 사용했습니다. 구조화된 조건 입력과 인페인팅 전략을 통해 사람의 의도를 동물의 신체 구조에 맞는 동작으로 바꾸며 걷기와 달리기, 점프, 앉기, 눕기 등 다양한 행동을 처리합니다.
전체 동작을 자동으로 변환하는 것에 더해 머리 방향이나 특정 다리를 개별적으로 조종할 수 있습니다. 이를 통해 애니메이터는 사람의 직관적인 움직임을 큰 틀의 퍼포먼스로 사용하면서 필요한 신체 부위만 세밀하게 수정할 수 있습니다.
실험에서는 기존 리타기팅 방법보다 동작의 사실성과 제어 가능성이 개선됐다고 보고했습니다. Fatemeh Zargarbashi, Zehong Qiu, Dhruv Agrawal, Stelian Coros, Robert W. Sumner, Martin Guay, Jakob Buhmann이 참여했으며 가상 제작과 캐릭터 애니메이션 도구를 목표로 합니다.