AI 영상이 어색할 때 프롬프트보다 장면을 먼저 나누는 법

AI 영상 도구에 “카페에서 일하던 사람이 노트북을 닫고 밖으로 나가 친구를 만난다”라고 한 번에 입력하면 처음 몇 초는 그럴듯해도 손이 바뀌거나 배경이 튀는 일이 생깁니다. 하고 싶은 이야기는 한 문장이지만 영상 안에서는 장소, 행동, 인물 방향이 계속 바뀌기 때문입니다.

영화를 찍을 때도 긴 이야기를 한 번에 촬영하지 않습니다. 짧은 장면을 여러 번 찍고 편집으로 연결합니다. AI 영상도 같은 관점으로 접근하면 실패한 전체 영상을 버리는 대신 문제가 있는 장면 하나만 다시 만들 수 있습니다.

문장보다 먼저 장면표를 쓴다

장면은 카메라가 끊기기 전까지 이어지는 한 덩어리라고 생각하면 쉽습니다. 처음에는 한 장면에 장소 하나, 주인공 하나, 중요한 행동 하나만 둡니다. 카메라 움직임도 하나부터 시작합니다.

예를 들어 15초짜리 카페 소개 영상을 만든다면 이렇게 나눌 수 있습니다.

1장면 0~4초: 창가의 커피잔, 카메라는 천천히 가까워짐
2장면 4~9초: 바리스타가 잔을 테이블에 놓음, 카메라 고정
3장면 9~15초: 손님이 잔을 들고 창밖을 봄, 옆모습 중간 크기

이 표에는 대사나 멋진 수식어가 아직 없습니다. 먼저 관객이 무엇을 보고, 피사체가 무엇을 하며, 카메라가 어떻게 움직이는지만 정합니다. Adobe의 안내도 장면 크기, 인물, 행동, 장소, 분위기를 구체적으로 설명하고 카메라 움직임을 분명히 하도록 권합니다.

이미지로 시작할 때는 움직임에 집중한다

이미지 투 비디오는 한 장의 이미지를 첫 화면으로 삼아 움직임을 만드는 방식입니다. Adobe의 안내처럼 시작과 끝의 기준 이미지, 화면 크기와 카메라 움직임을 나눠 정하면 긴 설명 하나에 모든 결정을 맡기지 않을 수 있습니다. 프롬프트는 화면에 있는 것을 반복하기보다 무엇이 어떻게 움직이는지 분명히 쓰는 편이 좋습니다.

“따뜻한 카페, 예쁜 잔, 멋진 바리스타”보다 “바리스타가 잔을 천천히 내려놓고, 김이 위로 흐르며, 카메라는 움직이지 않는다”가 움직임을 더 분명히 전달합니다. 한 번에 빠른 손동작과 줌, 회전, 배경 변화까지 요구하면 무엇 때문에 결과가 깨졌는지 찾기 어렵습니다.

기준 이미지는 완벽한 첫 프레임이어야 한다

입력 이미지의 흐릿한 손가락이나 비뚤어진 컵은 영상에서 더 눈에 띌 수 있습니다. 생성 전에 이미지를 원본 크기로 열어 얼굴, 손, 글자, 제품 모양, 배경의 반복 무늬를 확인합니다. 화면 비율도 최종 영상과 맞춰야 자동 자르기로 중요한 부분이 사라지지 않습니다.

인물이 여러 장면에 반복된다면 옷, 머리, 소품, 주조명을 적은 짧은 기준표를 둡니다. 매번 설명을 조금씩 바꾸기보다 같은 기준 이미지를 출발점으로 쓰고, 장면마다 행동만 바꾸는 편이 연결하기 쉽습니다. 그래도 모델이 장면 사이의 동일 인물을 완벽히 보장한다고 가정하지는 않습니다.

프롬프트에는 보이는 행동을 쓴다

“희망차게 성공한다”처럼 추상적인 말은 사람마다 다른 화면을 떠올립니다. “작은 상자를 열고 미소 짓는다”처럼 카메라에 보이는 행동으로 바꿉니다. 카메라 표현도 “역동적”보다는 “눈높이 중간 화면, 천천히 오른쪽으로 이동”처럼 적습니다.

처음 입력은 다음 네 줄이면 충분합니다.

• 화면 크기와 카메라 위치
• 주인공 또는 중심 사물
• 한 가지 행동과 속도
• 배경 움직임 또는 카메라 움직임 한 가지

결과가 나쁘면 형용사를 계속 더하지 말고 가장 큰 문제 하나만 고칩니다. 손이 무너지면 손동작을 단순하게 하고, 배경이 출렁이면 카메라를 고정하며, 인물이 너무 작으면 화면 크기를 중간이나 가까운 화면으로 바꿉니다.

연결은 생성 도구가 아니라 편집에서 완성한다

각 클립이 좋아도 바로 이어 붙이면 밝기와 시선 방향, 움직임 속도가 달라 튈 수 있습니다. 1장면 끝에서 인물이 오른쪽을 보고 있는데 2장면에서 갑자기 왼쪽을 보면 같은 공간처럼 느끼기 어렵습니다. 장면표에 인물 방향과 시작·끝 동작을 한 줄씩 더 적으면 이런 문제를 줄일 수 있습니다.

짧게 겹치는 부분을 잘라내고, 소리와 자막은 최종 편집에서 넣습니다. 생성 영상 안에 정확한 문장을 만들게 하면 읽을 수 없는 글자가 생기기 쉬우므로, 간판이나 가격처럼 중요한 글자는 별도 그래픽으로 올립니다. 음악과 이미지, 인물의 사용 권한도 최종 공개 전에 확인합니다.

결과는 예쁜지보다 오류 위치로 본다

클립을 작은 화면으로만 보지 말고 한 번은 전체 화면과 느린 재생으로 확인합니다. 다음 항목을 장면별로 체크합니다.

1. 인물의 얼굴과 손, 제품 모양이 갑자기 바뀌지 않는가
2. 요청하지 않은 글자나 로고, 워터마크가 생기지 않았는가
3. 카메라와 피사체가 동시에 과하게 움직이지 않는가
4. 시작과 끝 프레임이 다음 장면에 자연스럽게 연결되는가
5. 세로와 가로 최종 화면에서 중심 피사체가 잘리지 않는가
6. 공개할 음악과 사진, 인물 자료의 권한을 확인했는가

문제가 세 개라면 세 가지를 한꺼번에 넣어 다시 생성하지 않습니다. 가장 눈에 띄는 하나를 정해 장면 길이, 움직임, 기준 이미지 중 하나만 바꾸고 전후를 비교합니다.

오늘 만들 수 있는 여섯 초 연습

책상 위 머그컵처럼 형태가 단순한 사물 하나를 찍습니다. 흔들리지 않고 초점이 맞으며 글자나 상표가 없는 사진을 고릅니다. “카메라는 천천히 가까워지고, 컵에서 김이 부드럽게 올라온다. 다른 물체는 움직이지 않는다”처럼 움직임만 적어 짧은 클립을 만듭니다.

첫 결과에서 카메라 이동, 김, 컵 모양 가운데 하나만 골라 평가합니다. 실패했다면 그 한 항목만 고쳐 두 번째 결과를 만듭니다. 이 작은 비교를 해보면 긴 프롬프트를 외우는 것보다 장면을 통제하고 수정하는 감각을 더 빨리 익힐 수 있습니다.