
AI가 혼자 단편 영화를 찍으면 — 각본부터 편집까지 맥북 한 대로 5분짜리를 만들어 봤다
영화와 소설에서 AI가 실제로 어디에 쓰였는지 모으고, 5분짜리 단편을 AI에게 통째로 맡겨 봤다. 넷플릭스는 올해 약 300편에 생성형 AI를 썼다고 했지만, 대부분 예산 밖에 있던 군중·배경 샷을 채우는 후반작업이었다. 「국내 첫 AI 장편」 두 편의 관객은 각각 600~700명대였다. 소설에서는 문장 품질로 AI가 사람을 따라잡는 연구가 나오지만, 독자는 여전히 누가 썼는지에 값을 매긴다. 맥북 한 대로 돌린 실험에서 각본은 54초 만에 나왔다. 장비 한계를 알려 주자 AI 감독은 대사 26줄을 전부 화면 밖으로 옮긴 59컷 촬영 대본을 짰다. 얼굴은 규칙으로, 목소리는 설명으로 캐스팅했고 음악 세 곡에 26분이 걸렸다. 컷 한 장에 2분 남짓이라 완성본 대신 장면 넷을 GIF로 실었다. 각본은 딸깍이 되지만 화면은 아직 아니다.

영화와 소설은 「AI가 끝까지 못 들어올 자리」로 자주 꼽힌다. 그런데 넷플릭스는 올해 약 300편에 생성형 AI를 썼다고 했고, 한국 극장에는 「AI 장편」이 걸렸다. 아쿠타가와상 수상작에는 ChatGPT 문장이 들어갔다.
그래서 두 가지를 해 봤다. 먼저 영화와 소설에서 AI가 실제로 어디에 들어갔고 어디서 막혔는지 사례를 모았다. 그다음 5분짜리 단편 영화를 AI에게 통째로 맡겼다. 각본가, 감독, 캐스팅, 촬영, 녹음, 작곡, 편집까지 전부다.
무엇을 하려 했나
- 영화와 소설처럼 「사람의 창의력」이 핵심이라는 분야에서 AI가 실제로 어디에 쓰였는지 사례를 모은다. 회사가 밝힌 숫자와 실제 관객 숫자를 같이 본다.
- 영화 만드는 단계(영화학 연구, 시나리오, 기획, 연출, 촬영, 편집, 소리, 배급)마다 AI가 어디까지 왔는지 정리한다.
- 직접 해 본다. 5분짜리 단편 한 편을 각본부터 편집까지 AI가 혼자 만들게 한다. 사람은 장비만 켜고 손대지 않는다. 장비는 맥북 한 대(M4 Max, 메모리 48 GB)와 공개 모델뿐이다.
영화: 어디에 들어갔나
큰 스튜디오: 「예산 밖에 있던 샷」을 채운다
넷플릭스는 2025년 7월 실적 발표에서 아르헨티나 드라마 「엘 에테르나우타」의 건물 붕괴 장면이 생성형 AI로 만든 첫 최종 화면이라고 밝혔다. 테드 사란도스 공동 CEO는 기존 VFX보다 10배 빨랐고, 원래 방식이었다면 그 예산으로는 못 찍었을 장면이라고 말했다. 1년 뒤인 2026년 7월에는 올해 약 300편이 생성형 AI를 썼고 대부분 후반작업이라고 했다. 미국 작품 「The American Experiment」에는 AI로 보강한 화면이 17분 들어갔고, 「두 배 빠르고 절반 비용」이었다고 한다. 둘 다 회사가 밝힌 숫자다. 같은 자리에서 사란도스는 「위대한 걸 만드는 건 위대한 예술가이고 AI가 그걸 바꾸지는 않는다」고 선을 그었다.
아마존의 성경 드라마 「House of David」는 시즌 1에서 VFX 샷 850개 중 73개를 생성형 AI로 만들었고, 시즌 2에서는 350개 넘게 썼다. 제작자 존 어윈은 「예산상 이렇게밖에 못 찍었다」고 했다.
두 사례의 공통점은 무엇을 찍을지는 이미 정해져 있었다는 것이다. 군중, 전투, 무너지는 건물, 넓은 배경처럼 각본에 있었지만 돈이 모자라 빠질 뻔한 샷을 AI가 채웠다.
이미 찍은 연기를 고친다
- 「에브리씽 에브리웨어 올 앳 원스」(2022)는 VFX의 80%를 아티스트 다섯 명이 처리했다. 돌 장면에서는 Runway의 로토스코핑 도구로 며칠 걸릴 배경 분리를 몇 분에 끝냈다.
- 「폴(Fall)」(2022)은 Flawless의 TrueSync로 욕설 30여 개를 입 모양까지 바꿔 R등급을 PG-13으로 낮췄다. 재촬영 대신 약 2주가 걸렸다.
- 스웨덴 영화 「UFO Sweden」은 같은 회사의 「비주얼 더빙」으로 원래 배우들이 영어로 말하는 판을 만들어 2025년 미국 극장 100여 곳에 걸었다. 리뷰에는 「가끔 이음매가 보인다」는 평이 붙었다.
- 「히어」(2024)는 톰 행크스와 로빈 라이트의 젊은 얼굴을 촬영 현장 모니터에서 실시간으로 보여 줬다(Metaphysic Live). 4K 납품본은 후반에 아티스트가 다시 손봤다.
- 피터 잭슨 팀이 다큐 「겟 백」을 위해 만든 음원 분리 기술(MAL)은 비틀스의 「Now and Then」(2023)에서 존 레넌의 목소리를 피아노에서 떼어 냈다.
이 줄의 일은 원본이 있다. 배우가 이미 연기했고, AI는 그 연기를 옮기거나 다듬는다.
같은 기술도 늦게 알려지면 문제가 된다
「브루탈리스트」의 편집자는 2025년 1월, 오스카 경쟁 한가운데서 Respeecher로 배우들의 헝가리어 대사 모음과 자음을 다듬었다고 밝혔다. 감독 브레이디 코벳은 「영어 대사는 손대지 않았고 연기는 배우 것」이라고 해명해야 했다. 「에밀리아 페레즈」도 같은 회사 기술로 주연 배우의 노래 음역을 보강했다는 사실이 같은 시기에 다시 주목받았다. 기술보다 언제, 누구에게 알렸느냐가 논란의 중심이었다.
AI가 주인공인 영화들
여기서부터는 사정이 다르다.
- shy kids의 Sora 단편 「Air Head」(2024)는 생성한 클립 대 실제로 쓴 클립이 약 300 대 1이었다고 한다. 주인공 머리 색이 컷마다 바뀌어 After Effects로 다시 칠했다.
- 구글 딥마인드와 대런 아로노프스키의 Primordial Soup가 만든 8분 단편 「ANCESTRA」(2025)는 실사와 Veo 생성 장면을 섞었고, 구글은 제작진이 200명 넘었다고 밝혔다.
- OpenAI가 지원한 애니메이션 장편 「Critterz」는 예산 3천만 달러 미만, 제작 약 9개월로 2026년 칸 초연을 목표로 했다. 그런데 OpenAI가 2026년 3월 Sora 종료를 발표했고(앱 4월, API 9월 종료), 칸 공식 초연은 이뤄지지 않았다. 칸 이후 일정은 확인하지 못했다.
- 한국에서는 강윤성 감독의 「중간계」(2025년 10월, CGV)가 크리처 18종과 도시 붕괴 장면을 AI로 만들었다. 보통 1년 걸릴 후반작업을 약 한 달 반에 끝냈다고 한다. 2026년 5월 「국내 첫 AI 장편」을 내건 두 편 「아이엠 포포」와 「한복 입은 남자」는 약 2주 만에 내려갔고, 누적 관객은 각각 600~700명대였다. 9월에 소개된 로봇 SF 「스틸레이」는 제작비 10억 원 미만 중 AI 토큰 비용만 5억 원이 넘었고, 도구 가격이 오르고 라이선스가 바뀌어 일정이 흔들렸다고 한다.
만드는 사람은 빠르게 늘었다. 부천국제판타스틱영화제 AI 영화 부문 출품작은 2024년 114편, 2025년 350편, 2026년 576편이었다. Runway의 AI 영화제는 첫해 약 300편에서 2025년 약 6,000편이 됐다. 영화진흥위원회는 2026년에 AI 영화 제작지원(장편 8편, 단편 30편 내외)을 새로 열었다. 그래도 극장 관객 600명대라는 숫자는 만들기 쉬워진 것과 보러 오는 것은 다른 문제라는 걸 보여 준다. Critterz와 스틸레이는 하나를 더 보여 준다. 남의 도구에 기대 만들면, 그 도구가 사라지거나 값이 오를 때 작품도 멈춘다.
소설: 문장은 따라잡혔는데
- 2024년 1월 아쿠타가와상을 받은 구단 리의 「도쿄도 동정탑」은 작가가 시상 회견에서 약 5%는 ChatGPT 문장을 그대로 썼다고 밝혔다. 이듬해 그는 광고회사 제안으로 95%를 AI로 쓴 단편을 문예지에 실었다.
- 중국 칭화대 선양 교수는 AI와 66번 대화하며 약 3시간 만에 쓴 과학소설로 2023년 장쑤성 청소년 과학소설 대회 2등상을 받았다. 심사위원 여섯 명 중 셋이 추천했는데, AI 작품인지 몰랐다.
- 미국 SF 잡지 Clarkesworld는 2023년 2월 20일 동안 AI 투고 500건을 걸러 내다가 투고 창구를 잠시 닫았다. 아마존 전자책 출판(KDP)은 그해 AI 사용 고지를 의무로 바꾸고 한 사람이 하루에 올릴 수 있는 책을 3권으로 묶었다.
품질을 잰 연구들은 엇갈린다.
| 연구 | 무엇을 비교했나 | 결과 |
|---|---|---|
| Pron vs Prompt (2024) | GPT-4 대 아르헨티나 작가 파트리시오 프론, 각자 제목 30개로 단편 | 비평가 평가 5,400건, 모든 항목에서 프론 우세. GPT-4는 프론이 준 제목으로 쓸 때 더 창의적이었다 |
| Porter·Machery (2024) | AI 시 대 셰익스피어 등 유명 시인 | 일반 독자 1,634명 정답률 46.6%(우연보다 낮음). AI 시를 더 좋다고 했지만 「AI가 썼다」고 알려 주면 점수가 내려갔다 |
| Chakrabarty 외 (2025) | 수상 작가 50명 문체 흉내 | 프롬프트만 쓴 AI는 문예창작 석사(MFA) 독자에게 크게 밀렸다. 그 작가의 전작으로 미세조정하면 MFA 독자도 AI 쪽을 골랐다. 작가 한 명에 약 81달러, AI 탐지기는 3%만 잡았다 |
| 빌라노바대 (2026) | ChatGPT 단편 대 사람 단편 | 독자는 AI 단편을 더 높게 쳤다. 그러나 「사람이 썼다」고 믿을 때 점수가 가장 높았다 |
정리하면 이렇다. 문장 하나하나는 AI가 사람을 따라잡거나 넘기도 한다. 그런데 무엇을 쓸지(제목)를 사람이 줄 때 AI가 더 잘 쓰고, 독자는 여전히 누가 썼는지에 값을 매긴다.
영화 만드는 단계마다 AI는 어디까지 왔나
| 단계 | AI가 하는 일 | 예 | 사람이 쥔 것 |
|---|---|---|---|
| 영화학 연구 | 샷 길이·색·구도를 수천 편 단위로 잰다 | Cinemetrics(샷 길이 데이터베이스), 커팅 연구팀의 할리우드 150편 분석 | 무엇을 물을지 |
| 기획·투자 | 대본으로 흥행을 점친다 | 워너브러더스×Cinelytic(2020), Largo.ai(자사 주장 정확도 86%) | 만들지 말지 |
| 시나리오 | 초고·변주·요약·커버리지 | 대형 언어 모델 전반 | 무엇을 왜 쓸지, 크레딧(WGA: AI 산출물은 「원작」이 아니다) |
| 프리비즈·콘티 | 장면 그림, 움직이는 콘티 | Runway, Wonder Studio(오토데스크 인수, 배우를 CG 캐릭터로 자동 교체) | 고르기 |
| 연출·배우 | 젊게 만들기, 입 모양 바꾸기, 디지털 대역 | 「히어」, 「폴」, 「UFO Sweden」 | 원래 연기와 동의 |
| 촬영·조명 | 찍은 뒤 조명 다시 치기, 빠진 샷 보충 | Beeble SwitchLight, 넷플릭스가 2026년 3월 인수한 InterPositive(그 작품의 촬영 원본으로 학습) | 무엇을 프레임에 넣을지 |
| 편집 | 컷 늘리기, 대사 찾기, 거친 편집 | Premiere Pro Generative Extend(영상 2초·배경음 10초 연장, 대사는 안 늘린다) | 리듬과 순서 |
| VFX | 로토스코핑, 군중·배경 확장 | 「에브리씽…」, 「엘 에테르나우타」, 「House of David」 | 300개 중 1개 고르기 |
| 소리 | 대사 분리, 목소리 보정, 더빙 | 「겟 백」 MAL, Respeecher | 고지 |
| 배급·마케팅 | 시청자마다 다른 썸네일 | 넷플릭스 아트워크 개인화 | — |
표를 세로로 읽으면 AI가 맡은 칸은 대부분 정답이 화면 밖에 이미 있는 일이다. 찍었어야 할 장면, 지우고 싶은 욕설, 떼어 내고 싶은 목소리처럼 사람이 정한 목표가 있고, AI는 그걸 싸고 빠르게 채운다.
규칙은 사람 자리를 못 박는 쪽으로
- 작가: 미국작가조합(WGA)은 2023년 148일 파업 끝에 「AI는 작가가 아니고, AI 산출물은 원작이 아니다」를 계약에 넣었다. 2026년 새 협약(찬성 90.38%)도 이 조항을 지켰지만, 각본을 AI 학습에 쓴 대가를 받는 데는 이르지 못했다.
- 배우: SAG-AFTRA는 2025년 9월 「AI 배우」 틸리 노우드가 화제가 되자 「배우가 아니다, 동의·보상 없이 배우들의 연기로 학습된 캐릭터」라고 성명을 냈다. 2026년 새 협약(찬성 91.42%)은 합성 배우를 쓰려면 「상당한 추가 가치」를 입증하게 했다. 틸리 노우드는 그 사이 장편 주연이 발표됐다.
- 시상식: 아카데미는 2025년 4월 「생성형 AI 사용은 후보 가능성을 돕지도 해치지도 않는다, 다만 사람이 창작의 중심이었는지 본다」는 규정을 넣었다.
- 저작권: 미국 저작권청은 2025년 1월 「프롬프트만으로는 저작자가 될 만큼 통제했다고 볼 수 없다」고 정리했다. 2026년 3월 연방대법원은 「저작자는 사람」이라는 Thaler 사건 판결을 그대로 뒀다. 한국 저작권위원회 안내서도 사람이 창작적으로 기여한 부분만 등록된다고 적었다. 학습 재료 쪽에서는 Anthropic이 해적판 책을 내려받은 일로 작가들과 15억 달러에 합의했고, 2026년 7월 최종 승인됐다(작품당 약 3천 달러).
법과 계약이 보호하는 건 사람이 고르고 배열한 부분이다. 이 연재가 하는 「딸깍」으로 나온 결과물 자체는 아무도 보호해 주지 않는다는 뜻이기도 하다.
직접 해 보기: AI 혼자 5분 단편
위 사례들의 공통점은 사람이 정한 목표를 AI가 채웠다는 것이었다. 그럼 목표까지 AI에게 맡기면 어떻게 될까. 규칙은 이렇게 정했다.
- 사람은 장비를 켜고 순서대로 돌리기만 한다. 그림이나 목소리를 고르거나 다시 뽑지 않는다.
- 고르기가 필요한 자리는 미리 정한 규칙으로 고른다(예: 얼굴 후보 중 얼굴이 가장 크게 잡힌 것).
- 장비는 맥북 한 대(M4 Max, 48 GB)와 내려받아 쓰는 공개 모델이다. 각본과 감독은 Claude가 맡았다.
| 역할 | 맡은 모델 |
|---|---|
| 각본·감독(컷 목록) | Claude |
| 촬영(컷마다 그림 한 장) | Flux.1-dev(8비트 양자화) |
| 같은 얼굴 유지 | PuLID-Flux |
| 카메라 움직임 | Depth Anything V2 깊이로 만든 시차 효과 |
| 사람 없는 움직임(비, 와이퍼, 불빛) | Wan 2.2 TI2V 5B |
| 목소리 캐스팅·녹음 | Qwen3-TTS(VoiceDesign으로 목소리 설계, Base로 복제) |
| 음악 | MusicGen-medium |
| 효과음 | 코드로 합성(잡음 필터링) |
| 편집 | 파이썬 + ffmpeg, 컷 목록대로 |
1. 각본: 54초
먼저 아무 제약 없이 「5분 안팎의 한국어 단편 각본, 장르와 소재는 자유」만 주었다. 54초 만에 2,637자짜리 각본이 나왔다. 제목은 「화요일의 정거장」이다.
18년째 772번 막차를 모는 50대 기사 오정순에게는 매주 화요일 밤 같은 노인이 탄다. 노인은 이십 년 전에 사라진 방직공장 앞에 세워 달라고 한다. 아내가 잔업을 마치고 나올 시간이라고. 정순은 아무것도 묻지 않고 공사장 펜스 앞에 버스를 세우고, 노인의 아들에게 미리 문자를 보낸다. 마른 하늘에서 비가 떨어지고, 노인은 우산을 편다. 아무도 없는 옆자리 쪽으로 기울여서. 실습 사흘째인 수습 기사 민재는 그날 밤 노선도에 정류장 하나를 손으로 적어 넣는다.
씬 다섯 개, 인물 넷이다. 복선(마른 하늘에 든 장우산), 설명하지 않는 인물(정순이 문자를 보내는 장면을 민재가 보는 것으로 사정을 알린다), 마지막에 바뀌는 사람(규정을 외우던 민재가 노선도에 손글씨를 적는다)이 다 들어 있다. 단편 각본의 교과서적인 구조다. 교과서적이라는 말은 칭찬이자 한계다. 어디서 본 듯한 따뜻함이 있고, 놀라운 장면은 없다.
2. 제작 회의: 장비 목록을 주자 대사가 전부 화면 밖으로 나갔다
다음에는 같은 모델에게 감독을 맡겼다. 이번에는 이 맥북 장비로 실제로 할 수 있는 것과 없는 것을 적어 줬다. 모두 이전 회차들에서 직접 잰 한계다.
- 한 컷에 고정할 수 있는 얼굴은 한 명뿐이다(PuLID).
- 사람을 영상 모델로 움직이면 손과 얼굴이 무너진다. 그래서 인물 컷은 카메라만 움직인다.
- 립싱크가 안 된다. 화면 속 인물이 입을 움직여 말할 수 없다.
- 그림 모델은 한글을 못 쓴다.
- Wan으로 움직일 수 있는 컷은 12개까지다(한 컷에 5분 넘게 걸린다).
400초 뒤 촬영 대본과 컷 목록이 나왔다. 59컷, 292.5초(4분 52초)다. 함께 나온 「제작 회의록」이 흥미로웠다.
- 대사 26줄이 전부 화면 밖으로 나갔다. 말하는 사람 대신 듣는 사람의 얼굴, 말하는 사람의 손, 뒷모습, 백미러에 비친 눈(입은 프레임 밖) 위에 대사를 깔았다. 「오늘 화요일이지?」는 원래 지문 「백미러에서 눈을 떼지 않고」를 그대로 그림으로 옮긴 백미러 속 눈 클로즈업 위로 갔다.
- 두 사람이 눈을 마주치는 장면이 사라졌다. 아들이 기사에게 고개를 숙이는 컷은 기사를 앞쪽에 뒷모습으로 세우고 아들 얼굴만 고정했다.
- 움직임을 소리로 바꿨다. 우산을 펴는 동작은 반쯤 펴진 순간의 정지 그림이 됐다. 마지막 사이드미러 컷은 거울 속에 작은 사람이 둘 있어 Wan을 쓰지 않고, 빗소리와 엔진 소리로 움직임을 대신하기로 했다.
- 글씨는 전부 편집에서 얹는다. 정류장 이름, 휴대폰 문자, 공사장 광고, 노선도 손글씨 등 일곱 군데다.
- 「구름 한 점 없는 하늘」을 버렸다. 밤하늘은 그림으로 구분이 안 된다고 보고 「물기 하나 없는 앞유리」로 바꿨다.
- 「…정문이 여기였는데」 다음에 노인의 얼굴을 대사 없이 4.5초 보여 주는 컷을 넣으며 이렇게 적었다. 「침묵으로 받는 편이 원작보다 더 오래 남는다고 판단했다.」
현업 감독들이 예산과 일정 때문에 하는 일과 똑같다. 못 찍는 장면을 「찍은 셈 치는」 방법을 찾는 일이다. 다만 여기서는 모든 대사가 화면 밖에서 들리는 영화가 됐다. 이건 연출이라기보다 장비가 정한 형식이다.
3. 캐스팅: 얼굴은 규칙으로, 목소리는 설명으로
인물 넷의 얼굴은 컷 목록에 적힌 외모 묘사로 세 장씩 그렸다. 「머리와 어깨까지」라고 적었는데도 79세 노인과 48세 아들은 세 장 모두 전신으로 그려졌다. 얼굴 폭은 86~96픽셀이었고, 기사와 수습 기사는 168~199픽셀이었다. 얼굴 인식(InsightFace)으로 얼굴이 가장 크고 또렷한 후보를 고른 뒤 얼굴 둘레만 잘라 기준 얼굴로 썼다. 12장에 37분이 걸렸다(같은 시간에 음악도 만들고 있어 GPU를 나눠 썼다).
목소리는 Qwen3-TTS의 VoiceDesign 모델로 만들었다. 「50대 중반 여성, 낮고 차분한 중저음, 살짝 쉰 기운」처럼 감독이 적은 설명을 넣으면 그런 목소리로 한 문장을 읽는다. 그 녹음을 기준 삼아 대사 26줄을 같은 목소리로 복제했다. 기준 녹음 넷에 102초, 대사 26줄(92.6초 분량)에 381초가 걸렸다.
여기서 하나를 포기했다. 감정 지시(「작게, 속삭이며」)는 목소리를 설계할 때만 들어가고, 복제 단계는 지시를 받지 않는다. 줄마다 설계 모델로 읽히면 감정은 살지만 같은 사람 목소리라는 보장이 없다. 이 영화에서는 목소리가 바뀌는 쪽이 더 큰 사고라고 보고 감정을 버렸다.
대사 26줄을 받아쓰기 모델(Whisper large-v3)로 다시 들어 봤다. 21줄은 글자가 그대로 맞았다(문장부호·띄어쓰기 제외). 나머지 다섯 줄 중 셋은 받아쓰기 쪽 표기 차이다. 「이십 년」이 「20년」으로, 「이 차」가 「2차」로, 「개문」이 「계문」으로 적혔다. 「다음 주부턴 네가 세워 드려」는 「내가」로 적혔다. 요즘 한국어 발음에서 「네」와 「내」는 거의 구분되지 않는다. 그런데 이 줄은 영화의 마지막 대사이고, 주어가 바뀌면 뜻이 뒤집힌다. 사람 배우라면 「니가」로 바꿔 읽었을 자리다. 귀로 들어도 틀린 건 「거 봐요」가 「커 봐요」로 들린 한 줄이다.
4. 음악: 26분
곡 세 개(차고지 46초, 비 내리는 펜스 앞 60초, 마지막 38초)를 MusicGen으로 만들었다. 한 번에 30초까지만 나와서 뒤 10초를 다시 넣어 이어 붙였다. 세 곡에 1,563초가 걸렸다. 첫 곡은 50초 지점에서 소리가 갑자기 18 dB 커졌다. 이어 붙인 뒷부분이 앞과 다른 곡처럼 시작한 것이다. 이 곡은 46초에서 잘라 쓰기 때문에 영화에는 들어가지 않는다.
5. 촬영: 컷 한 장에 2분 남짓
컷 59개를 1344×576(2.33:1) 그림으로 한 장씩 그린다. 인물 컷 24개는 PuLID로 얼굴을 고정한다. 장당 약 2분에서 2분 반이 걸려 전부 그리는 데 2시간 남짓 걸린다. 그다음 Wan 컷 12개에 1시간쯤, 시차 효과와 편집에 30분쯤이 더 든다.

첫 컷들을 보면 질감은 영화에 가깝다. 형광등 아래 차고지, 버스 계기판에 붙은 메모지, 안개 낀 정류장의 초록 버스는 조명 감독이 신경 쓴 것처럼 나온다.
문제는 연기다. 얼굴을 고정한 정순 컷 셋이 모두 카메라를 정면으로 보고 웃는다. 지시는 각각 「백미러를 닦으며 거울을 본다」, 「백미러에 비친 눈만, 입은 프레임 밖」, 「운전석의 옆모습, 입은 보이지 않게」였다. 특히 「백미러 속 눈」 컷은 감독이 립싱크를 피하려고 입을 화면 밖으로 뺀 자리였다. 그런데 그림에는 입까지 다 나온 얼굴이 정면으로 들어갔다. 이 컷 위로 「오늘 화요일이지?」가 흐르면 입을 다문 사람이 말하는 것처럼 보인다. 제작 회의에서 피해 간 문제가 촬영 단계에서 그대로 돌아온 것이다. 얼굴 고정(PuLID)은 기준 얼굴을 증명사진처럼 정면으로 끌어당기고, 그림 모델은 인물 사진을 「카메라를 보는 사진」으로 배웠다. 연출 지시보다 그 습관이 더 세다.
「글씨를 넣지 말라」는 지시도 버스 앞문 너머 간판에서 깨졌다. 글자처럼 생긴 깨진 무늬가 들어갔다. 차고지에 서 있는 빈 버스 안에는 승객들이 앉아 있었다.
사람 스태프가 있었다면 여기서 다시 찍는다. 이번 실험은 규칙상 다시 뽑지 않는다. 그래서 완성본에도 이 컷들이 그대로 들어간다.

완성본 5분은 통째로 싣지 않고, 장면 넷을 GIF로 옮긴다. GIF라 소리는 빠졌고, 대사는 영화와 같은 자리에 자막으로 얹었다.

첫 컷이다. 사람이 안 나오는 컷 12개는 Wan 2.2로 움직였다. 3~4초짜리 한 컷에 3~5분(185~299초)이 걸렸다. 버스가 다가오고 안개가 흐르는 움직임은 자연스럽다.

Wan이 늘 맞지는 않았다. 이 컷의 지시는 「카메라는 고정, 빗물이 흐르고 와이퍼가 좌우로 쓸기 시작한다」였다. 그런데 와이퍼는 끝까지 움직이지 않는다. 대신 멈춰 있어야 할 버스가 앞으로 나가고, 주차된 앞차도 달린다. 오른쪽 가장자리에는 주황색 얼룩이 번진다. 그림 속 빗길을 「달리는 차 안에서 본 풍경」으로 읽은 것이다. 사람이 없는 컷도 무엇이 움직여야 하는지는 모델이 정한다.

위에서 말한 그 컷이다. 감독은 입을 화면 밖으로 빼라고 했는데, 기사는 정면을 보고 입을 다문 채 웃는다. 그 위로 「오늘 화요일이지?」가 흐른다. 인물 컷은 이렇게 카메라만 천천히 밀고 들어가는 시차 효과로 움직였다. 사람이 움직이지 않으니 무너지지는 않는데, 그 대신 연기도 없다.

마지막 컷이다. 감독은 거울 속 작은 두 사람 때문에 이 컷을 Wan으로 움직이지 않고, 빗소리와 엔진 소리에 움직임을 맡겼다. 소리가 빠진 GIF로 보면 정지 사진에 가깝다. 이 영화에서 소리가 얼마나 많은 일을 했는지가 여기서 드러난다.
어디서 틀렸나
- 설치 하나가 막혔다. 처음에는 음악 모델로 ACE-Step 1.5를 쓰려 했다. 그런데 외부 저장소의 설치 스크립트를 실행하는 단계가 이 작업 환경의 보안 규칙에 걸렸다. 우회하지 않고 이미 깔려 있던 라이브러리(transformers)로 쓸 수 있는 MusicGen으로 바꿨다. MusicGen 가중치는 비상업 라이선스(CC BY-NC 4.0)다.
- 얼굴 후보 프롬프트가 지켜지지 않았다. 「머리와 어깨까지」가 나이 든 인물 둘에서는 전신이 됐다. 의상 묘사에 구두와 바지가 들어 있었던 탓으로 본다. 얼굴만 잘라 쓰는 단계를 뒤늦게 넣었다.
- 음악 이어 붙이기에서 소리가 튀었다(위 4번).
- 시간 계산을 처음에 낙관했다. 그림 한 장에 「수십 초~2분」으로 적힌 예전 기록을 믿었는데, 얼굴 고정과 넓은 화면을 넣으니 2분이 넘었다. 그래서 완성본이 이 글의 발행보다 늦어졌다.
그래서 딸깍이 되나
각본은 딸깍이 된다. 54초 만에 나온 각본은 구조가 단단하고 고칠 데가 적었다. 제작 회의도 된다. 장비의 한계를 알려 주자 스스로 장면을 바꾸고, 왜 바꿨는지 회의록으로 남겼다. 사람 감독이 같은 일을 하면 하루는 걸린다.
화면은 아직 딸깍이 안 된다. 이번 실험에서 가장 큰 결정은 감독이 아니라 장비가 내렸다. 립싱크가 안 되니 대사가 전부 화면 밖으로 나갔고, 사람을 움직일 수 없으니 카메라만 움직였다. 「Air Head」의 300 대 1이 말해 주듯, 현업에서는 그 사이를 사람이 고르고 고친다. 이번 실험은 그 사람을 뺐다. 그래서 무엇이 빠지는지가 그대로 보인다.
앞의 사례들과 겹쳐 보면 선이 하나 보인다. AI는 이미 정한 것을 채우는 일(각본 형식, 컷 목록, 배경, 소리)에서는 사람보다 빠르다. 무엇을 보여 줄지 고르는 일, 특히 사람의 얼굴과 몸이 연기하는 순간은 아직 사람 몫이다. 법과 계약이 사람 자리로 못 박는 곳도 바로 거기다.
못 하는 것
- 5분 전체는 싣지 않았다. 장면 넷만 소리 없는 GIF로 옮겼다. 처음 발행 때는 렌더링이 끝나지 않아 GIF를 다음 날 덧붙였다.
- 관객 평가가 없다. 사람이 만든 같은 각본의 영화와 나란히 보여 주고 고르게 하는 실험은 하지 않았다.
- 한 번만 돌렸다. 같은 요청으로 각본을 다시 받으면 다른 이야기가 나온다. 이번 각본이 평균인지 운이 좋았던 것인지는 모른다.
- 상업용 도구는 쓰지 않았다. Veo, Kling, Runway 같은 유료 영상 모델은 인물 움직임과 립싱크가 이 실험의 공개 모델보다 낫다. 이 결과는 「맥북 한 대와 공개 모델」의 결과다.
- 라이선스: Flux.1-dev와 MusicGen 가중치는 비상업 라이선스라, 이 영화를 상업적으로 쓰려면 모델을 바꿔야 한다. 영화 속 인물은 모두 가상 인물이다.
재미있게 읽었다면 꼭 의견을 달아달라.
출처
- 넷플릭스: Vice(2025-07-16, 「엘 에테르나우타」 10배), IBC(2026-07, 2026년 약 300편·17분), TheWrap(2026-03-05, InterPositive 인수)
- 「House of David」: WIRED 보도(2025)
- 「에브리씽 에브리웨어 올 앳 원스」: fxguide 인터뷰
- 「폴」: AV Club·PetaPixel(2022-08) / 「UFO Sweden」(「Watch the Skies」): Paste(2025-05-09)
- 「히어」: The Hollywood Reporter(2024-10) / 「브루탈리스트」: IndieWire(2025-01)
- 「Air Head」: fxguide 인터뷰(notebookcheck 요약, 2024-04) / 「ANCESTRA」: Science & Film(2025-06)
- 「Critterz」: AV Club(2025-09), Bloomberg 경유 보도(2026-05-22) / Sora 종료: MacRumors(2026-03-24)
- 「중간계」: 헤럴드경제·경향신문(2025-10) / 국내 AI 장편 관객: 테크42(2026-08-18) / 「스틸레이」: 머니투데이(2026-09-08)
- BIFAN AI 부문: 한경·한교·데일리안(2024~2026) / Runway AI Film Festival: aiff.runwayml.com, AP(2025-06) / 영진위 AI 영화 제작지원: 헤럴드경제(2026-02)
- 구단 리: Smithsonian(2024-01) / 선양: Locus(2024-01) / Clarkesworld: NPR(2023-02-24) / KDP: Authors Guild(2023-09-18)
- 연구: Pron vs Prompt arXiv 2407.01119, Porter·Machery Scientific Reports(2024), Chakrabarty 외 arXiv 2510.13939, 빌라노바대(Judgment and Decision Making, 2026-08 보도)
- 영화학: Cutting·DeLong·Nothelfer(2010, Psychological Science), Cinemetrics / Cinelytic: The Hollywood Reporter(2020-01) / Wonder Dynamics 인수: CG Channel(2024-05) / Generative Extend: TV Technology(2025-04)
- 규칙: WGA·SAG-AFTRA 2026 비준(Screen Daily), SAG-AFTRA 틸리 노우드 성명(Variety, 2025-09-30), 아카데미 규정(PetaPixel, 2025-04-23), 미국 저작권청 AI 보고서 Part 2(2025-01-29), Thaler 상고 기각(Mayer Brown, 2026-03), 한국저작권위원회 「생성형 AI 활용 저작물의 저작권 등록 안내서」(2025-06), Bartz v. Anthropic 최종 승인(JURIST, 2026-07)
- 실험 모델: Flux.1-dev, PuLID-Flux, Wan 2.2, Depth Anything V2, Qwen3-TTS, MusicGen
- 각본, 컷 목록, 그림, 목소리, 음악, 그래프는 모두 이 글의 실험으로 만들었다