AI 동영상의 깜빡임과 모핑: 샷 도중 얼굴이 변하는 이유

클립이 재생되고, 2초 동안은 완벽해요. 그러다 재킷이 네이비에서 검정으로 바뀌고, 벽에 걸린 로고가 다른 로고로 재배열되고, 4초쯤 되면 캐릭터의 얼굴이 어딘가 닮은 친척의 얼굴이 돼요. 실패한 건 없어요. 이게 시간적 불안정성이고, 기술적으로는 성공한 렌더를 결국 쓸 수 없게 만드는 가장 흔한 이유예요.

모델은 자기가 만든 영상을 지켜보지 않아요

동영상 엔진은 앞선 프레임과 프롬프트를 조건으로 프레임을 생성해요. 하지만 씬에 대한 기록을 계속 들고 있지는 않아요. 이 재킷은 네이비다라거나 이 사람은 3초 전과 같은 사람이다라고 적어 둔 변수는 어디에도 없어요. 프레임 간 일관성은 모델이 이어 그리기를 잘해서 나타나는 결과일 뿐, 모델이 지켜 주는 보장이 아니에요.

그래서 흔들리는 게 기본이고, 일관성은 애써 얻어 내는 결과예요. 깜빡임을 줄이는 방법은 모두 모델이 헤맬 수 있는 구간을 줄이거나, 모델이 출발하는 지점을 고정하는 식으로 작동해요.

가장 먼저 무너지는 곳

불안정성은 고르게 나타나지 않아요. 늘 같은 대상을 같은 순서로 공격하기 때문에 미리 예측할 수 있어요.

• 작은 얼굴. 화면의 10분의 1을 차지하는 얼굴은 주의도 10분의 1만 받고, 몇 프레임마다 다르게 재구성돼요.
• 손과 손가락. 스틸 이미지에서 망가지는 것과 같은 이유에, 움직임까지 더해져요.
• 인쇄된 글자와 로고. 지금 나와 있는 어떤 엔진도 샷 내내 글자를 읽을 수 있게 유지하지 못해요. 글자가 재배열돼요. 화면 속 글자는 무조건 뭉개진다고 생각하세요.
• 무늬 있는 원단. 줄무늬, 체크, 프린트는 끊임없이 새로 그려져요. 무지 옷이 헤링본 코트보다 훨씬 안정적이에요.
• 군중과 조연 캐릭터. 모델이 집중하지 않는 인물은 배경에서 마음대로 모핑돼요.
• 요동치는 배경: 나뭇잎, 비, 물, 불, 연기. 엔진에게는 이것들이 움직임으로 보여서, 매 프레임 기꺼이 새로 만들어 내요.

모핑이 보인다면 프롬프트를 건드리기 전에 이 목록부터 확인하세요. 깜빡임 불만의 절반은 무늬 셔츠나 벽에 걸린 간판 때문이에요.

실제로 줄여 주는 것

효과가 큰 순서대로 다섯 가지예요.

더 짧게 렌더링하세요. 흔들림은 누적되기 때문에 5초 클립은 10초 클립보다 헤맬 여지가 적어요. 10초에서 모핑되는 샷도 5초로 줄이면 버티는 경우가 많아요. 깔끔한 5초 클립 두 개를 이어 붙인 편이 흔들리는 10초 하나보다 보기에도 나아요.

프레임에서 시작하세요. 이미지 투 비디오는 첫 프레임을 고정해요. 모델이 피사체를 지어냈다가 기억하지 못하는 대신, 확정된 승인 이미지에서 출발하게 되죠. 가장 효과가 큰 단일 레버이고, 작업 흐름도 간단해요. 스틸을 렌더링하고, 확인한 다음, 라이브러리에서 그 이미지의 동영상으로 만들기를 누르세요.

배경을 단순하게 하세요. 벽, 하늘, 얕은 심도. 흐리게 날려 버린 것은 요동칠 수 없어요. 프롬프트의 "f/1.4"가 여기서 실제로 해 주는 일이 바로 이거예요.

피사체는 하나만. 두 사람은 한 사람보다 두 배 이상 어려워요. 엔진의 주의가 나뉘고, 엔진이 보고 있지 않은 쪽이 일그러져요.

카메라 무빙은 하나만, 천천히. 빠른 무빙은 새로운 형태를 계속 드러내고, 새로운 형태는 곧 지어낸 형태예요. 느린 푸시 인이 가장 안정적으로 찍을 수 있는 샷이에요.

다섯 가지를 모두 반영해서 바로 붙여 넣을 수 있는 프롬프트예요.

무늬 없는 회색 스웨터를 입은 남자가 아무것도 없는 식탁에 앉아 창문 쪽을 올려다보며 가만히 있다. 미디엄 샷에서 천천히 푸시 인, 왼쪽에서 들어오는 부드러운 창가 빛, 뒤로는 무늬 없는 벽, 얕은 심도, 조용하고 차분한 분위기.

무지 원단, 피사체 하나, 동작 하나, 느린 무빙 하나, 그리고 배경에는 새로 지어낼 게 하나도 없어요.

시드는 비교를 공정하게 만들 뿐, 클립을 안정시키지 않아요

Seedance 엔진 세 개는 모두 시드를 지원해요. 같은 프롬프트에 같은 시드를 쓰면 같은 테이크가 나와요. 이걸 안정성 기능으로 오해하기 쉽지만, 아니에요.

시드는 샷 안의 모핑을 줄이지 않아요. 샷을 재현 가능하게 만들 뿐이에요. 덕분에 단어 하나를 바꿨을 때, 눈앞의 차이가 운이 아니라 그 단어에서 왔다는 걸 확신할 수 있어요. 깜빡임의 원인을 진단할 때는 엄청나게 유용하지만, 해결책으로는 쓸모가 없어요. 기억해 둘 만한 실무 포인트가 하나 있어요. 시드를 고정한 채 테이크 네 개를 한 번에 돌리면 똑같은 클립 네 개가 나와요. 그러니 다양한 결과를 원할 때는 시드를 해제하세요. 더 자세한 내용은 시드와 리믹스 작업 흐름에 있어요.

루프, 리빌, 트랜지션처럼 특정 지점에서 끝나야 하는 샷이라면, Seedance 계열은 첫 프레임과 마지막 프레임 한 쌍을 받아 그 사이를 보간할 수도 있어요. 양 끝을 모두 고정하는 것이 여기서 클립을 가장 강하게 제약하는 방법이고, 제약이 강할수록 안정적이에요.

소용없는 것

일관성에 관한 형용사. "일관된 얼굴, 모핑 없음, 안정적, 자연스럽게 이어지는"은 결과물에 대한 말이지 그림에 대한 말이 아니에요. 모델에는 이런 말을 처리할 장치가 없고, 오히려 실제로 화면을 움직이는 단어들의 힘을 흐려요.

대부분 엔진에서의 네거티브 프롬프트. 입력란이 어디서나 받아들여지기 때문에 분명히 말해 둘게요. 동영상 네거티브 프롬프트는 Kling 2.5 Turbo에서만 기본으로 지원돼요. Motion One, Seedance 엔진, Hailuo, Veo에서는 API가 받기는 하지만 엔진에 닿기 전에 조용히 버려져요. 동영상에서 "no distorted faces"(일그러진 얼굴 없음)가 효과를 내길 원한다면 Kling을 써야 해요.

더 높은 해상도. 1080p는 모핑을 더 선명하게 렌더링할 뿐이에요. 그게 전부예요.

시퀀스 전체에서 룩 유지하기

샷 안의 안정성이 한 가지 문제라면, 열두 개의 샷 내내 캐릭터를 알아볼 수 있게 유지하는 건 또 다른 문제이고, 답도 달라요. 레퍼런스 사진을 넣은 캐릭터를 모든 씬에서 다시 써서, 각 클립이 같은 문장이 아니라 같은 얼굴에서 시작하게 하는 거예요. 이 부분은 AI 동영상에서 일관된 캐릭터 만들기에서 제대로 다뤄요.

두 방법은 함께 쓸 때 잘 맞아요. 캐릭터로 정체성을 고정하고, 이미지 투 비디오로 시작 프레임을 고정하고, 클립을 짧게 유지한 다음 이어 붙이세요. 안정적으로 보이는 영상은 대부분 한 번에 렌더링된 게 아니라 이렇게 조립된 거예요.

동영상 스튜디오를 열고 모핑되던 샷을 시작 프레임과 함께 절반 길이로 다시 시도해 보세요.

자주 묻는 질문

클립 중간에 옷 색이 바뀌는 이유는 뭔가요?

엔진 안에 색을 저장해 두는 곳이 없기 때문이에요. 프레임마다 새로 예측하는데, 무늬가 있거나 색조가 애매한 옷이 가장 빨리 변해요. 무지에 대비가 뚜렷한 옷이 줄무늬나 프린트보다 샷을 훨씬 잘 버텨요. 레퍼런스 프레임에서 시작하면 첫 프레임에서 색이 고정되는 효과도 있어요.

시드를 쓰면 동영상 모핑이 멈추나요?

아니요. 시드는 테이크를 재현할 수 있게 해서 두 버전을 공정하게 비교하게 해 주지만, 그 테이크 안의 프레임끼리 더 일관되게 만들지는 않아요. 진단 도구이고, Seedance 엔진에서만 지원돼요. 실제로 흔들림을 줄이는 건 더 짧은 클립과 시작 프레임이에요.

AI 클립에서 글자나 로고를 읽을 수 있게 유지할 수 있나요?

여기 있는 어떤 엔진에서도 안정적으로는 안 돼요. 글자는 프레임마다 재구성되면서 재배열되기 때문에, 타이틀, 로고, 로어 서드는 프롬프트로 요청하지 말고 렌더링 후 편집 프로그램에서 넣을 계획을 세우세요. 대신 샷 안에 그 자리를 비워 두세요.

네거티브 프롬프트가 동영상에서 아무 효과가 없는 이유는 뭔가요?

Kling 2.5 Turbo에서만 기본 제어 기능으로 작동하기 때문이에요. 다른 동영상 엔진은 입력란을 받기만 하고 무시해서, 입력한 내용이 모델에 전혀 닿지 않아요. 샷을 Kling으로 옮기거나, 더 짧은 클립, 피사체 하나, 더 단순한 배경에 공을 들이세요.