AI로 5천만 달러 영화 퀄리티? 클로드-제미니 옴니 스나이퍼 장면 재현!

AI로 영화 장면 만들기: 제미니 맨 저격 장면 따라잡기

이 영상은 윌 스미스 영화 '제미니 맨'에 나오는 멋진 저격 장면을 보고 영감을 받아 만든 AI 영화 장면 제작 과정을 담고 있어. 똑같이 베끼는 게 아니라, 그 느낌을 살려서 나만의 방식으로 재해석한 거지. 어떻게 만들었는지 한번 볼까?

1단계: 준비물 챙기기

• 장소: 스위스 알프스! 푸릇푸릇하고 생기 넘치는 초록색 풍경을 원했어. 보통 보는 회색 바위 산 말고 말이지.
• 기차: 스위스의 유명한 기차인 '베르니나 익스프레스'를 등장시켰어. 비주얼이 딱 좋았거든.
• 캐릭터: 내가 직접 암살자로 등장했지.
• 무기: 영화 '랜드 오브 배드'에 나온 러셀 크로우가 쓴 것과 똑같은 바렛 저격총을 골랐어. 검은색으로 칠했는데, 내 복장이랑도 잘 맞고 초록색 배경이랑 대비돼서 멋있었거든.

이 모든 걸 합쳐보니 딱 원하는 느낌이 나오더라고!

2단계: AI에게 아이디어 주기 (프롬프트 작성)

머릿속에 있던 장면을 AI에게 설명했어. 내가 사용한 프롬프트는 이거야.

"스위스의 외딴 절벽에 숨어 있는 고도로 훈련된 암살자가 베르니나 철도를 내려다보고 있다. 국제 무기 거래상이 파노라마 열차를 타고 가고 있지만, 자신이 비밀 작전의 표적이 되었다는 사실을 모른다. 열차가 푸른 알프스 계곡을 따라 구불구불 이어지는 동안 긴장감이 고조되다가, 암살자가 총을 쏘아 목표물을 제거한다. 최대의 영화적 효과를 위해 히트 직후 즉시 컷."

AI가 이걸 거의 15개의 장면으로 나눠줬어.

3단계: AI만 믿으면 안 돼! (스토리보드 작업)

AI가 15개 장면으로 나눠준 게 끝이 아니야. AI 프롬프트는 시작일 뿐, 모든 걸 해주진 않아.

핵심은 이거야: AI 영상 생성 모델에 그냥 글만 넣으면, 여러 장면에서 일관된 각도나 네가 생각한 이미지를 제대로 만들어내지 못해. 그래서 작업 순서를 바꿔야 해.

먼저 이미지를 만들고, 그다음에 영상을 만드는 거지. 할리우드 감독들이 스토리보드를 왜 쓰겠어? 스케치 아티스트를 고용하는 이유가 바로 이거야. 영상 만들기 전에 정지된 이미지를 만드는 게 정말 중요해.

4단계: 캐릭터 만들기

영상을 만들기 전에 먼저 AI 모델 안에 내 캐릭터를 만들었어. '암살자'라고 이름 붙였지. (이 캐릭터 만드는 방법은 따로 영상으로도 만들었으니 나중에 참고해봐!)

5단계: 이미지 생성 (AI와 씨름하기)

캐릭터를 만들고 나서는 AI가 나눠준 첫 번째 장면 프롬프트를 사용해서 이미지를 만들기 시작했어. 이때 '나노 바나나 프로'라는 AI 모델을 썼는데, '나노 바나나 2'보다 나한테는 더 잘 맞았어.

가장 효과적이었던 방법은 이거야: 새로운 이미지를 만들 때마다, 이전에 만들었던 이미지와 내 캐릭터 정보를 같이 넣어주는 거야. 이렇게 하면 색감, 캐릭터, 장소의 일관성을 유지하는 데 훨씬 도움이 돼. 완벽하진 않지만, 대부분의 경우 원하는 결과에 가깝게 만들 수 있어.

AI가 준 프롬프트들을 이런 식으로 15개 이미지 모두 만들었어. 솔직히 말하면, AI 프롬프트가 처음부터 완벽하진 않았어. 스토리가 내가 원하는 대로 딱 이어지지 않을 때도 있었지. 하지만 장소나 구도 같은 중요한 참고점은 충분히 제공해줬기 때문에 그걸 바탕으로 수정해 나갈 수 있었어. 프롬프트를 짧게 줄이거나, 내용을 바꾸거나, 장면마다 조절하는 거지. 이게 바로 감독이 하는 일이야.

결국 내가 원하는 대로 스토리를 담은 이미지 세트를 완성했지.

6단계: 초록색 알프스 되살리기

15개 이미지를 다 만들었는데도 만족스럽지 않았어. 알프스가 너무 바위투성이 회색으로 보였거든. 처음에 원했던 푸릇푸릇한 초록색으로 바꾸고 싶었지.

그래서 모든 이미지에 '나노 바나나 프로'를 사용해서 "바위투성이 알프스를 풍성하고 생기 넘치는 초록색 산으로 바꿔줘"라는 프롬프트를 다시 넣었어. 이렇게 하니까 모든 이미지가 훨씬 깔끔하고 대비도 살아나면서 생동감 넘치는 느낌으로 바뀌었지.

7단계: 이미지에서 영상으로 (AI 영상 생성)

모든 이미지가 마음에 들게 완성되면, 그걸 다운로드해서 순서대로 번호를 매기고 PDF로 만들었어. 그리고 이 이미지 시퀀스를 AI에게 다시 보여줬지.

중요한 점: 이미지 프롬프트와 영상 프롬프트는 완전히 달라. 정지된 이미지를 어떻게 만들지 설명하는 것과, 카메라 움직임, 장면 애니메이션, 모션 등을 만드는 건 완전히 다른 언어거든.

그래서 AI에게 각 장면마다 이미지를 영상으로 바꿔주는 프롬프트를 따로 만들게 했어. 그리고 이미지를 AI에 넣고 각 클립 길이를 6~10초 정도로 설정했지. 편집할 때 충분한 시간을 확보하기 위해서야.

8단계: AI 영상 생성의 어려움 (검열과의 싸움)

이제부터가 진짜 어려웠어. AI가 만들어준 영상 프롬프트를 하나씩 AI에 넣고 영상을 만들기 시작했는데, 문제가 생겼지.

AI 모델이 폭력적이거나 총격, 범죄와 관련된 내용이 조금이라도 감지되면 바로 차단해버리는 거야. 이게 계속 반복됐어. 정말 번거로운 일이었지.

그래서 모든 프롬프트를 다시 수정했어. 좀 더 안전하고 부드러운 표현, 액션 자체보다는 분위기와 촬영 기법에 초점을 맞춘 중립적인 표현으로 바꿨지. 그렇게 해서 거의 모든 장면을 만들 수 있었어.

9단계: 마지막 장면, 다른 AI에게 맡기다

그런데 마지막 장면, 즉 목표물이 제거되고 기차 좌석에 피가 튀고 유리가 깨지는 장면은 아무리 프롬프트를 바꿔도 AI가 만들어주지 못했어.

그래서 다른 AI 도구인 '어도비 파이어플라이'의 '클링 3.0' 모델을 사용했어. 이 모델은 내가 원했던 장면을 정확하게 만들어줬지.

10단계: 편집과 사운드, 색감 입히기

모든 클립을 만들고 나면, '어도비 프리미어 프로'로 가져와서 편집을 시작했어.

필요 없는 부분, 어색한 순간들을 다 잘라내고 스토리에 필요한 부분만 남겼지. 대부분의 클립에는 이미 효과음이 포함되어 있었어. (AI가 자동으로 소리를 만들어주거든.)

그다음에는 클립 사이에 전환 효과를 넣어서 소리가 갑자기 끊기지 않도록 부드럽게 연결했어.

그리고 이제 음악과 사운드 디자인을 더해서 영화 같은 느낌을 살릴 차례야. 원래 있던 소리 위에 직접 만든 효과음, 드론, 충격음, 라이저, 붐 등을 추가해서 더 완성도 높은 결과물을 만들었지. (이 효과음들을 원하면 댓글로 알려줘!)

마지막으로 색 보정을 했어. 각 장면의 색감을 통일감 있게 만들고, 대비와 밝기를 조절해서 전체 시퀀스가 하나처럼 보이도록 다듬었어.

이렇게 해서 AI로 영화 장면을 만드는 모든 과정이 끝났어!