Wan-Animate-2: 실시간 캐릭터 애니메이션 모델이 디지털 아바타 한계를 넘다

알리바바 Wan 기반 Wan-Animate-2가 실시간 캐릭터 애니메이션의 새 기준을 제시했어요.

알리바바의 오픈소스 영상 모델 Wan을 기반으로 개발된 Wan-Animate-2가 2026년 8월 7일 arXiv에 공개됐어요. 이 모델은 기존 캐릭터 애니메이션의 세 가지 주요 문제, 즉 명시적 모션 표현의 추출 오류, 암묵적 모션 특징의 압축 손실, 인-컨텍스트 학습의 과도한 연산 비용을 한 번에 해결한 엔드-투-엔드 프레임워크예요. 중간 모션 추출기를 완전히 제거하고 새로 설계된 Diffusion Transformer 안에서 직접 구동 영상을 처리해 정체성 드리프트 없이 높은 모션 충실도를 달성했어요.

특히 주목할 점은 경량화 버전 Wan-Animate-2-Lite로, 3단계 학습 패러다임을 통해 추론 지연을 실시간 기준 이하로 낮췄어요. 라이브 스트리밍과 디지털 아바타 인터랙션에 바로 쓸 수 있는 수준으로, 기존 오프라인 합성 전용 시스템과 달리 게임 NPC와 버추얼 캐릭터 파이프라인 전반에 실질적인 변화를 가져올 것으로 기대돼요. 논문 공개와 함께 Wan-Animate-2-Base 모델 웨이트도 공개 예정이에요.

원문: arXiv (cs.CV)