AI 영상에서 캐릭터를 일관되게 유지하는 방법은 하나로 모입니다. 캐릭터마다 레퍼런스를 저장해 두고, 말로 다시 설명하는 대신 모든 생성에 그 레퍼런스를 넣는 것입니다. 2026년 기준으로 이것은 설정 하나가 아니라 작업 흐름입니다. 레퍼런스 세트, 의상과 목소리 고정, 모델별 사용법, 드리프트 점검이 한 묶음으로 움직입니다. 레퍼런스를 한 번 제대로 만들어 두면 같은 얼굴, 체형, 의상이 첫 샷부터 마지막 회차까지 이어집니다.
같은 인물이 계속 나오는 콘텐츠에 특히 잘 맞습니다. 유튜브 쇼츠나 릴스에 연재하는 AI 숏드라마, 브랜드 캐릭터 시리즈가 그 예입니다.
크리에이터를 위한 실무 가이드입니다. 시즌 전체를 돌리는 스튜디오 관점과 사례는 에피소드 캐릭터 일관성을 참고하세요.
설명보다 레퍼런스가 나은 이유
“30대 여성, 짙은 머리, 빨간 코트” 같은 글 설명은 말로 정하지 못한 부분을 모델에 맡깁니다. 그래서 생성할 때마다 얼굴이 새로 뽑힙니다. 레퍼런스 이미지는 글이 잡지 못하는 부분을 고정하고, 모델은 그것을 결과까지 가져갑니다. 학습시키는 것은 없습니다. 저장한 레퍼런스를 매 생성에 넣을 뿐입니다. 원리는 이것이 전부입니다. 아래 단계는 모두 레퍼런스를 강하게 만들고 한결같이 쓰는 방법입니다.
1단계. 레퍼런스 세트 만들기
캐릭터를 여러 각도에서 보여 주는 이미지를 소량 만드세요. 또렷한 정면, 3/4 측면, 옆모습, 그리고 시리즈에서 쓰는 의상과 조명의 컷 두세 장이면 됩니다. 이름을 붙여 레퍼런스로 저장하면 프롬프트 창에서 이름으로 불러올 수 있습니다. 한 장보다 세트가 낫습니다. 운 좋게 나온 한 프레임이 아니라, 여러 면에서 본 캐릭터의 구조를 모델에 주기 때문입니다.
2단계. 의상과 외형 고정하기
캐릭터의 기본 의상을 정해 레퍼런스에 적어 두세요. 장면에서 일부러 바꾸지 않는 한 “주인공”은 늘 같은 코트, 머리, 색감으로 나와야 합니다. 드리프트는 보통 가장자리에서 시작합니다. 옷깃, 헤어스타일, 액세서리가 그렇습니다. 고정이 촘촘할수록 흔들릴 여지가 줄어듭니다.
3단계. 모델에 연결하기
모델마다 레퍼런스를 받아들이는 방식이 다릅니다. 숏드라마 한 편에도 보통 모델이 둘 이상 쓰입니다.
모델별 사용법
| 모델 | 레퍼런스 활용 방식 | 잘 맞는 용도 |
|---|---|---|
| Kling (3.0 / O3) | 참조 이미지를 받아 움직이는 샷에서도 캐릭터의 외형을 유지합니다 | 캐릭터가 움직이면서도 같은 인물로 보여야 하는 대사와 액션 샷 |
| Nano Banana | 스틸과 플레이트에서 이미지 투 이미지로 캐릭터를 단단히 붙잡습니다 | 나중에 움직일 캐스팅 프레임과 레퍼런스 플레이트 |
| Seedance | reference-to-video 작업에서 참조 입력을 받고, 편집과 연장도 지원합니다 | 생성한 장면을 다시 캐스팅하지 않고 고치거나 늘릴 때 |
핵심은 이기는 모델 하나를 찾는 것이 아닙니다. 같은 저장 레퍼런스를 모든 모델에 넣어서, 엔진을 오가도 캐릭터가 살아남게 하는 것입니다. 샷마다 어떤 엔진을 쓸지는 마이크로드라마용 최고의 AI 모델에서 다룹니다.
4단계. 목소리도 고정하기
캐릭터는 얼굴과 목소리로 이루어집니다. 캐릭터마다 저장된 목소리를 하나씩 정해 시리즈의 모든 대사에 다시 쓰세요. 그러면 주인공이 1화에서도 60화에서도 같은 목소리로 말합니다. 얼굴이 일관돼도 목소리가 흔들리면 몰입이 깨집니다.
5단계. 공개 전에 드리프트 점검하기
일관성은 직접 확인해야 비로소 일관성입니다. 생성과 편집 사이에 짧은 검수 단계를 두세요.
- 새 샷의 캐릭터를 레퍼런스 세트와 비교하세요. 썸네일이 아니라 읽을 수 있는 크기로 봅니다.
- 가장자리를 살피세요. 옷깃, 헤어라인, 액세서리, 정확한 의상에서 드리프트가 시작됩니다.
- 드리프트가 생긴 샷은 편집에서 “고치지” 말고 버리고 다시 생성하세요. 레퍼런스를 붙여 다시 뽑는 편이 눈에 띄는 연속성 오류보다 훨씬 저렴합니다.
6단계. 워크플로우로 저장하기
레퍼런스, 고정 항목, 검수 단계가 잘 돌아가면 그 순서를 재사용 가능한 워크플로우로 저장하세요. 다음 캐릭터와 다음 에피소드는 처음부터 만드는 일이 아니라, 복제해서 바꾸는 일이 됩니다. 이 모든 작업의 바탕이 되는 기획 문서가 시리즈 바이블입니다.
자주 묻는 질문
캐릭터별로 레퍼런스 세트를 저장하세요. 의상과 목소리는 하나로 고정하고, 시즌 내내 모든 생성에 그 레퍼런스를 붙입니다. 일관성은 캐릭터를 매번 새로 설명하지 않고 같은 저장 레퍼런스를 재사용하는 데서 나옵니다. 샷이 나가기 전에 드리프트를 잡는 검수가 이를 받쳐 줍니다. 학습시키는 것은 없고, 레퍼런스가 매 생성에 입력될 뿐입니다.
샷 프롬프트와 함께 캐릭터의 레퍼런스 이미지를 넣으세요. 글로 설명하는 대신 이미지로 외형을 잡으면 움직이는 샷에서도 모습이 유지됩니다. 캐릭터가 움직이면서도 같은 사람으로 보여야 하는 대사와 액션 샷에 강합니다. 다른 모델에도 같은 저장 레퍼런스를 쓰면 엔진을 오가도 캐릭터가 유지됩니다.
권하지 않습니다. 레퍼런스는 직접 만든 캐릭터나 사용 권한이 확인된 이미지로 만드세요. 실존 인물의 얼굴은 본인 동의 없이 쓰면 초상권 문제가 생길 수 있습니다. 시리즈를 오래 이어 갈수록, 처음부터 권리가 깨끗한 캐릭터가 안전합니다.
한 장보다 작은 세트가 낫습니다. 또렷한 정면, 3/4 측면, 옆모습, 시리즈의 의상과 조명에서 찍은 컷 두세 장이면 대개 충분합니다. 모델이 볼 수 없는 면을 추측하지 않도록 여러 각도의 구조를 주는 것이 목적입니다. 특정 장면이 중요하다면 그 장면의 정확한 의상으로 레퍼런스를 하나 더 추가하세요.
고정해야 유지됩니다. 캐릭터마다 저장된 목소리를 하나씩 정해 시리즈의 모든 대사에 재사용하세요. 시각 레퍼런스를 재사용하는 것과 같은 방식입니다. 얼굴이 일관돼도 테이크마다 목소리가 달라지면 몰입이 깨집니다. 목소리도 캐릭터 레퍼런스의 일부로 다루세요.