스크립트와 콘티 계획으로 만화를 애니메이션화하는 에이전트형 프레임워크 Manga2Animate

Manga2Animate는 크리에이터 역할과 리뷰 역할의 에이전트를 짝지은 멀티 에이전트 프레임워크로, 만화 컷으로부터 애니메이션 스크립트와 시각적 콘티를 만들어 원작에 대한 충실성과 일관성을 높인다. 기존 방식은 만화를 텍스트 중심으로 다루거나 페이지를 영상 생성 모델에 직접 입력하기 때문에 캐릭터와 화풍이 사라지거나 이야기 구조를 잘못 이해하는 문제가 있다고 한다. 논문은 사용자 연구와 폭넓은 실험을 통해 최첨단 기법보다 원작에 충실하고 컷 사이의 일관성이 높은 애니메이션을 생성했다고 보고했다.