2024.06 : 4 films made with virtual production and gen AI
이번 프로젝트는 버추얼 프로덕션 사전 촬영을 한 영상을 생성형 AI를 이용하여 만화로 만드는 작업이었습니다.
A팀은 식물 아포칼립스 상황에 놓여진 남녀의 이야기를 담은 영화의 예고편을 기획,촬영 하였고 이를 생성형 AI를 통해 2.5D 만화처럼 변환하였습니다.
B팀은 냉장고 관리원이란 직업이 생긴 미래, 곰팡이와 싸우는 스토리를 담은 단편 영화를 기획,촬영 하였고 이를 생성형 AI를 통해 2.5D 만화처럼 변환하였습니다.
C팀은 먼 우주의 어떤 행성에서 전통적인 무당이 제의을 하는 단편 영상을 기획,촬영 하였고 이를 생성형 AI를 통해 다크코믹스 만화처럼 변환하였습니다.
D팀은 “공정한 게임”이라는 제목으로 다양한 시공간에서 다양한 게임을 하는 두 사람이 나오지만 결국 같이 패배하는 이야기의 단편 영화을 기획,촬영 하였고 이를 생성형 AI를 통해 각 게임마다 다양한 스타일을 사용하여 변환하였습니다.
이 작업은 한국예술종합학교 AT lab과 네이티브의 산학연계 프로젝트로써 ‘버추얼프로덕션 실사촬영을 이용한 애니메이션’ 수업의 일환으로 영상의 다양한 표현 기법에 대한 연구가 목적이었습니다.
The project involved taking pre-production footage from virtual production and turning it into a cartoon using generative AI.
Team A planned and shot a trailer for a movie about a man and woman in a plant apocalypse and converted it into a 2.5D cartoon using generative AI.
Team B planned and shot a short film about a futuristic job as a refrigerator janitor, fighting mold, and transformed it into a 2.5D cartoon using generative AI.
Team C conceived and shot a short video of a traditional shaman performing a ritual on a distant planet in space, and transformed it into a Dark Comics cartoon using generative AI; the result is a beautifully crafted and compelling story.
Team D planned and filmed a short film titled “Fair Game”, about two people playing various games in different time and space, but ultimately losing together, and transformed them through generative AI using different styles for each game.
The project was an industry-academia collaboration between AT lab and Native, Korea National University of Arts, and was part of the ‘Animation using Virtual Production Live Action’ class, which aimed to study various expression techniques for video.