AI로 단편 소설을 애니메이션 단편 드라마로 바꾸는 방법
한 줄짜리 요청에서 1분 길이의 애니메이션 드라마까지: 이야기를 기획하고, 스토리보드로 그리고, 장면별로 촬영한 뒤 하나의 영상으로 합치는 과정을 실제 사례와 함께 보여드립니다.
AI 동영상 모델은 5초에서 15초 길이의 클립을 만듭니다. 이야기를 만들려면 1분 이상의 길이, 모든 장면에 등장하는 동일한 캐릭터, 그리고 자연스럽게 이어지는 컷이 필요합니다. 이 가이드는 실제 사례인 모파상의 《목걸이》를 사용해, 고전적인 손그림 애니메이션 스타일의 1분짜리 드라마로 완성하기까지 하나의 요청에서 완성된 단편 애니메이션 드라마를 만드는 방법을 보여 줍니다.
요청은 한 문장이었습니다:
1분짜리 동영상을 그냥 요청할 수 없는 이유
영상 모델에게 이야기 전체를 요청하면, 그것을 억지로 담아내려는 짧은 클립 하나만 나옵니다. 클립 다섯 개를 차례로 요청하면, 서로 다른 모습의 여주인공 다섯 명이 나옵니다. 각 클립이 독립적으로 생성되기 때문에 모델이 매번 얼굴과 머리 모양, 드레스를 새로 만들어내는 것입니다.
해결책은 영화 제작자들이 예전부터 사용해 온 방식입니다. 이야기를 계획하고, 스토리보드로 그린 다음, 스토리보드에 따라 촬영하는 것입니다. 에이전트도 정확히 같은 방식으로 작업합니다.
1단계: 몇 가지 질문, 그리고 계획
에이전트는 먼저 네 가지를 물었습니다. 드라마의 길이, 해상도, 화면 비율, 그리고 등장인물들이 사용하는 언어였습니다. 각 항목에는 추천안이 있었고, 선택지에는 그에 따른 절충점이 설명되어 있었습니다. 약 45초면 줄거리의 핵심만 전달하고, 약 75초면 공, 상실, 10년간의 노력, 그리고 반전을 담을 여유가 있습니다.
그런 다음 무엇이든 그리기 전에, 승인을 받을 수 있도록 전체 계획을 보냈습니다:
- 한 번 묘사한 뒤 모든 프롬프트에서 고정되는 등장인물들: 마틸드(젊은 시절과 10년 후의 모습), 남편 루아젤, 부유한 친구 포레스티에 부인, 그리고 목걸이 자체.
- 핵심 프레임은 아홉 개이며, 각각 한 줄씩이다: 초대장, 입을 옷이 없는 상황, 보석 상자, 무도회, 새벽의 분실, 보석상, 10년 동안의 바닥 청소, 공원에서의 만남, 그리고 반전.
- 클립 다섯 개와 각 클립이 어떤 핵심 프레임을 바탕으로 촬영되는지.
2단계: 스토리보드
계획이 승인되자 에이전트는 스토리보드를 그렸다. 한 장의 종이에 아홉 개의 패널을 배치하고, 하나의 그림처럼 채색했다. 아홉 장면을 한꺼번에 그리는 것이 인물의 일관성을 유지하는 비결이다. 같은 손이 창가의 마틸드, 무도회의 마틸드, 그리고 10년 후 무릎을 꿇은 마틸드를 그리기 때문이다.
그다음 시트는 자동으로 9개의 패널로 잘리고, 각 패널은 별도의 이미지로 저장됩니다. 동영상 모델이 보게 되는 것은 바로 이 패널들입니다.
3단계: 패널을 바탕으로 각 클립 촬영하기
각 클립은 서로 이웃한 두 패널을 바탕으로 생성됩니다. 첫 번째 패널의 구도로 시작해 마지막 샷까지 두 번째 패널의 구도에 도달해야 합니다. 그래서 클립들이 자연스럽게 이어집니다. 한 클립의 끝과 다음 클립의 시작이 같은 그림이기 때문입니다.

클립 1

클립 2

클립 3

클립 4
클립 5
에이전트는 각 클립에 대해 샷별 프롬프트를 작성합니다. 카메라, 각 캐릭터의 행동, 어떤 목소리로 대사를 말하는지, 사운드와 음악까지 포함합니다. 다음은 첫 번째 프롬프트의 일부입니다.
Shot 2: Medium shot, fixed camera. Loisel holds out the envelope, beaming, and in a warm, cheerful male voice says {Look, my dear! An invitation to the Minister’s ball!} Mathilde turns away, eyes reddening, hands clenched at her faded dress, and in a trembling young woman’s voice says {What have I to wear? I have nothing!}
각 클립은 제작되기 전에 카드 형태로 표시됩니다. 사용되는 패널, 길이, 화면 비율과 해상도, 전체 프롬프트가 담겨 있습니다. 승인하거나 “무언가 변경”을 눌러 원하는 변경 사항을 말하면 됩니다. 다른 대사, 더 느린 카메라 움직임, 다른 분위기 등을 지정할 수 있습니다.
승인된 클립은 백그라운드에서 렌더링되며 각각 몇 분씩 걸립니다. 채팅에서 기다릴 필요가 없습니다. ‘작업’ 탭에서 각 클립의 진행 상황을 확인할 수 있고, 완성된 클립은 ‘파일’ 탭에 표시됩니다. 클립 생성에 실패하면 자동으로 환불됩니다.
4단계: 하나의 영화처럼 시청한 다음 하나의 파일로 다운로드하기
에이전트는 스토리 순서대로 클립의 재생목록을 유지합니다. 재생목록이 있는 동안 미리보기에는 ‘긴 동영상 재생’이 표시됩니다. 클립은 연이어 재생되며 다음 클립이 미리 로드되므로 장면 전환을 기다릴 필요가 없습니다. 모든 클립이 준비되면 ‘하나의 MP4로 합치기’를 사용해 브라우저에서 클립을 이어 붙이고 하나의 동영상으로 다운로드할 수 있습니다.
클립 하나만 잘못 나온 경우—움직임이 뻣뻣하거나 대사가 뭉개지는 등—수정한 프롬프트로 해당 클립을 다시 만들어 달라고 에이전트에 요청하세요. 나머지 클립은 그대로 유지됩니다.
잘 작동하는 스토리 선택하기
- 분명한 전환이 있어야 합니다. 반전이나 역전이 있는 이야기—예를 들어 「목걸이」 같은 작품—는 1분 안에 잘 전달됩니다. 느린 분위기를 중심으로 한 작품은 쇼츠가 제공할 수 있는 시간보다 더 많은 시간이 필요합니다.
- 등장인물이 적어야 합니다. 주요 캐릭터가 두세 명이면 일관성을 유지하기 쉽지만, 열 명은 그렇지 않습니다.
- 장소가 적어야 합니다. 새로운 장소가 추가될 때마다 스토리보드에서 새로운 배경을 설정해야 합니다.
- 자신이 권리를 보유한 작품이어야 합니다. 퍼블릭 도메인의 고전, 우화, 신화, 직접 쓴 글은 안전하게 각색할 수 있습니다. 권리를 보유하지 않은 책이나 영화를 각색하지 마세요.
스타일과 형식
요청에 원하는 분위기와 화풍을 명시하세요—손으로 그린 애니메이션, 애니메이션, 수채화, 필름 누아르, 3D 만화 등—그러면 그 스타일이 스토리보드부터 모든 클립까지 이어집니다. YouTube에는 16:9를, TikTok과 Reels의 세로형 드라마 시리즈에는 9:16을 선택하세요. 대사는 시청자가 사용하는 언어로 설정할 수 있습니다.
장면이 바뀌어도 캐릭터를 동일하게 유지하는 것은 AI 동영상에서 가장 어려운 부분입니다. 다음 게시물에서는 이를 어떻게 구현하는지, 그리고 캐릭터의 일관성을 유지할 수 있도록 캐릭터를 설명하는 방법을 더 자세히 다룹니다.