CineMobile: 모바일 기기에서 정지 이미지를 영화적 카메라 무빙 영상으로 변환
상하이교통대 연구팀이 스마트폰에서 이미지 한 장을 불릿타임·달리 줌 등 영화적 카메라 이동 영상으로 변환하는 'CineMobile'을 공개했어요.
상하이교통대 연구팀이 스마트폰 등 온디바이스 환경에서 이미지 한 장을 불릿타임·달리 줌·슬로우 모션 같은 영화적 카메라 이동 영상으로 변환하는 'CineMobile'을 공개했어요. 구조적 깊이 프루닝, 확산 증류·강화학습 결합, 하이브리드 양자화(1GB 이하 압축)의 세 가지 최적화를 통해 14B 파라미터 교사 모델 대비 40배 빠른 속도를 달성했어요. 4단계 디노이징 생성기로 압축됐으며, 피드포워드 네트워크에 4비트, 나머지 부분에 8비트 가중치를 적용해 모델 크기를 1GB 이하로 줄였어요.
MediaTek Dimensity 8400 칩에서 49프레임 480p 영상을 약 20초 만에 생성하며, 피크 메모리는 1.8GB에 불과해요. VBench 평가에서 불릿타임 88.35점, 달리 줌 89.30점, 슬로우 모션 88.05점을 기록해 교사 모델과 거의 동등한 품질을 유지했어요. Kling·Hailuo·Vidu 등 상용 모델과의 비교에서도 카메라 제어 정밀도에서 우수한 성능을 보여줬어요. 고가 GPU 없이 모바일 환경에서도 영화적 카메라 이펙트를 구현할 수 있어, 소규모 게임 개발팀의 트레일러·컷씬 프리프로덕션 비용 절감에 큰 도움이 될 것 같아요.