AI 캐릭터 일관성 유지: 이미지와 영상에서 같은 얼굴을 지키는 방법

10분만 써 보면 누구나 마주치는 문제

글자 하나 다르지 않은 같은 프롬프트가 생성할 때마다 다른 캐릭터를 만들어 냅니다. 이것은 모델의 정상적인 작동 방식이며, 해결책은 더 좋은 텍스트가 아니라 레퍼런스 이미지입니다.

프로젝트의 주인공을 생성합니다. 완벽합니다. 서른 살, 짧게 자른 붉은 머리, 색 바랜 데님 재킷. 옆모습을 보려고 한 번 더 생성합니다. 그런데 놀랍게도 머리는 갈색이 되었고, 재킷은 사라졌고, 얼굴은 전혀 딴사람입니다. 프롬프트는 글자 하나 다르지 않은데 캐릭터는 다른 사람입니다.

이것은 Imaginode의 버그도, 다른 어떤 도구의 버그도 아닙니다. 현재 모든 이미지 모델의 정상적인 작동 방식입니다. 그리고 그 이유를 이해하지 못하는 한, 기적을 바라며 재생성을 반복하느라 몇 시간과 수십 크레딧을 낭비하게 됩니다. 이 글은 원인을 설명한 다음, 웹툰, 연재 포스트, 영화 제작 현장에서 실제로 통하는 진짜 해결책을 알려 드립니다.

솔직한 스포일러: 해결책은 더 좋은 프롬프트가 아닙니다. 캐릭터를 말로 설명하는 대신 레퍼런스 이미지로 모델에게 직접 보여 주는 것입니다. Imaginode에서는 레퍼런스 노드가 그 역할을 하며, 마스터 포트레이트부터 초록색 @멘션까지 단계별로, 각 단계의 정확한 크레딧 비용과 함께 하나씩 만들어 보겠습니다.

얼굴이 바뀌는 이유: 랜덤 노이즈

매 생성은 서로 다른 랜덤 노이즈에서 출발하고, 모델은 이전 이미지를 전혀 기억하지 못합니다. 프롬프트는 사람의 한 범주를 묘사할 뿐이고, 모델은 매번 그 범주에서 새로운 사람을 뽑아 옵니다.

이미지 모델은 캐릭터를 머릿속에 담아 두고 그리는 일러스트레이터처럼 작동하지 않습니다. 매 생성은 무작위로 뽑힌 노이즈 이미지, 즉 뒤죽박죽 픽셀 덩어리에서 시작하고, 모델은 프롬프트에 기대어 그 노이즈를 점차 걷어 냅니다. 서로 다른 두 노이즈는 서로 다른 두 출발점이고, 결과적으로 서로 다른 두 얼굴이 됩니다.

프롬프트는 사람의 한 범주를 묘사할 뿐입니다. "데님 재킷을 입은 서른 살의 붉은 머리 여성"에 해당하는 얼굴은 수백만 가지입니다. 모델은 매번 그 설명에 맞는 얼굴 하나를 뽑아 옵니다. 같은 얼굴을 두 번 고를 이유는 어디에도 없기 때문에, 절대 같은 얼굴을 고르지 않습니다.

나쁜 소식이 하나 더 있습니다. 모델에게는 기억이 전혀 없습니다. 12번째 생성은 앞선 11번의 생성에 대해 아무것도 모릅니다. 모델은 당신의 주인공을 "기억"하지 못합니다. 애초에 만난 적도 없으니까요. 생성 버튼을 누를 때마다 새로운 노이즈와 함께, 아무런 공유 기억 없이 완전히 처음부터 다시 시작합니다.

초정밀 프롬프트로는 절대 충분하지 않은 이유

언어는 얼굴의 수천 가지 미세 비율을 담기에 너무 빈약합니다. 400단어로 머리색과 재킷은 고정할 수 있어도 이목구비는 절대 고정되지 않고, 단어를 하나 더할 때마다 다른 곳의 주의력을 잃습니다.

누구나 처음에는 같은 반응을 보입니다. 더 자세히 묘사하는 것이죠. 코 모양, 눈 사이 간격, 왼쪽으로 흘러내리는 앞머리까지 400단어. 머리색이나 옷처럼 쉬운 요소의 안정성은 조금 나아집니다. 하지만 얼굴은 여전히 계속 바뀝니다.

이유는 답답하지만 논리적입니다. 언어는 얼굴을 묘사하기에 너무 빈약합니다. 가장 친한 친구의 얼굴을 글로 묘사한 다음, 그 친구를 한 번도 본 적 없는 화가에게 그 글을 건네 보세요. 그럴듯한 초상화는 나오겠지만 닮은 초상화는 절대 나오지 않습니다. 사람의 얼굴은 어떤 어휘로도 담을 수 없는 수천 가지 미세 비율로 이루어져 있습니다.

게다가 프롬프트가 길어질수록 모델은 서로 충돌하는 지시 사이에서 타협해야 합니다. 어느 지점을 넘어서면 얼굴에 단어 하나를 더할 때마다 장면, 조명, 동작에 쏟을 주의력을 잃습니다. 원하던 생동감 있는 이미지 대신 뻣뻣하게 굳은 초상화를 얻게 됩니다.

진짜 해결책: 설명하지 말고 보여 주기

생성에 레퍼런스 이미지를 첨부하세요. 긴 프롬프트가 다섯 번에 한 번 닮은꼴을 내놓는 동안, 좋은 사진 세 장은 거의 매번 알아볼 수 있는 캐릭터를 내놓습니다.

현실에서 화가라면 사진을 한 장 달라고 할 것입니다. 최신 모델들은 정확히 같은 일을 할 수 있습니다. 생성에 레퍼런스 이미지를 한 장 이상 첨부하면, 모델은 텍스트를 해석하는 대신 그 이미지를 직접적인 시각 자료로 사용합니다.

차이는 극적입니다. 400단어짜리 프롬프트가 다섯 번에 한 번 어설픈 닮은꼴을 내놓는 동안, 좋은 레퍼런스 사진 세 장은 거의 매번 알아볼 수 있는 캐릭터를 내놓습니다. 마법이 아닙니다. 모델이 비율을 지어내는 대신 실제 비율을 베끼기 때문입니다.

다만 주의할 점이 있습니다. 모든 모델이 이 기능을 지원하는 것은 아닙니다. Imaginode에서는 선택한 모델이 레퍼런스를 지원하지 않으면 노드에 레퍼런스 포트가 아예 나타나지 않습니다. 포트가 보이지 않는다면 숨겨진 설정을 찾지 말고 모델을 바꾸세요. 숨겨진 설정 같은 것은 없습니다.

레퍼런스 노드, 단계별로

레퍼런스 노드는 이름, 설명, 사진을 하나로 묶습니다. 한 번 만들면 프로젝트의 모든 이미지 노드와 비디오 노드가 재사용할 수 있고, 저장은 자동입니다.

Imaginode 캔버스에 레퍼런스 노드를 추가하세요. 노드에는 세 가지 필드가 있습니다. 먼저 이름: "레아", "안개 선장", 무엇이든 좋지만 짧을수록 좋습니다. 다음은 설명: 프롬프트에 주입될 텍스트로, 아래에서 다시 다룹니다. 마지막으로 사진: 캐릭터의 가장 좋은 이미지들을 끌어다 놓으세요.

이 노드는 프로젝트 어디서나 재사용할 수 있습니다. 한 번 만들어 두면 캔버스의 모든 이미지 노드와 비디오 노드가 여기에 연결할 수 있습니다. 이것이 바로 노드 캔버스의 핵심 논리입니다. 캐릭터는 스무 개의 프롬프트에 복사해 넣어야 하는 문단이 아니라, 한곳에 놓아 둔 블록이 됩니다.

일상 작업을 완전히 바꿔 놓는 실용적인 디테일 하나: 저장은 자동이며, 각 노드는 최근 12개 생성 기록을 보관합니다. 캐릭터의 7번째 버전이 딱 맞는 버전이었다면, 그 버전은 여전히 그 자리에서 레퍼런스 노드에 들어갈 준비를 하고 있습니다.

초록색 @멘션, 캐릭터를 소환하는 방법

아무 프롬프트에서나 @와 이름을 입력하세요. 설명이 주입되고 사진이 자동으로 레퍼런스로 전송되며, 매직 완드는 프롬프트를 다시 쓸 때도 멘션을 보존합니다.

레퍼런스 노드를 만들었다면, 아무 프롬프트에서나 @와 이름을 입력해 캐릭터를 소환할 수 있습니다. 멘션은 텍스트 안에서 초록색으로 표시되는데, 노드와 제대로 연결되었다는 신호입니다. 이제 짧고 자연스러운 프롬프트를 쓰면 됩니다. "@레아가 비 내리는 야시장을 걸어간다, 와이드 숏" 같은 식으로요.

생성 시 Imaginode는 두 가지를 자동으로 처리합니다. 노드의 설명을 프롬프트에 주입하고, 편집 호환 모델을 사용하는 경우 사진들을 레퍼런스 이미지로 첨부합니다. 복사할 것도, 다시 업로드할 것도 없습니다. 멘션 하나면 충분합니다.

반가운 보너스: 이미지와 비디오 프롬프트를 Kimi를 통해 풍부한 영어로 다시 써 주는 매직 완드(1크레딧)는 @멘션을 보존합니다. 캐릭터와의 연결을 끊지 않고도 프롬프트를 다듬을 수 있다는 뜻입니다. 생성 한 번에 6크레딧이 드는 상황에서 불쾌한 돌발 상황을 막아 주는, 바로 그런 종류의 디테일입니다.

어떤 이미지 모델이 캐릭터를 유지할 줄 아는가

5크레딧의 Seedream 5 Lite가 레퍼런스의 챔피언이고, 2크레딧의 GPT Image Mini는 반복 작업용이며, 6크레딧의 Flux Kontext는 캐릭터를 건드리지 않고 배경만 편집합니다.

이미지 쪽에서 Imaginode의 레퍼런스 챔피언은 Seedream 5 Lite입니다. 생성당 5크레딧, 약 0.05유로입니다. 반복 등장하는 캐릭터라면 기본으로 선택할 모델입니다. 이미지를 받아들이고, 이 가격대의 다른 모델이 따라오지 못하는 충실도로 얼굴을 재현합니다.

필요에 따라 두 가지 대안이 있습니다. 2크레딧의 GPT Image Mini도 레퍼런스를 지원합니다. 크레딧을 축내지 않으면서 포즈와 구도를 반복 실험하기에 완벽합니다. 그리고 6크레딧의 Flux Kontext는 다른 역할을 맡습니다. 기존 이미지를 편집하는 것이죠. "배경을 해변으로 바꿔 줘"라고 하면 배경이 바뀌는 동안 캐릭터는 그대로 유지됩니다.

반대로 1크레딧의 Flux Schnell이나 3크레딧의 Imagen 4 Fast는 훌륭한 만능형이지만, 시리즈 주인공의 얼굴 일관성은 기대하지 마세요. 올바른 습관은 이렇습니다. 저렴한 모델로 구도의 초안을 잡은 다음, 최종 이미지는 @멘션과 함께 Seedream 5 Lite로 전환하는 것입니다.

마스터 포트레이트 기법

먼저 중립 배경과 또렷한 조명 아래에서 캐릭터 혼자 있는 초상화를 만드세요. 4~5회 시도, 즉 24~30크레딧이면 이후 모든 이미지의 주춧돌이 완성됩니다.

고전적인 실수: 캐릭터가 이미 상황 속에 있는 이미지, 화면에서 작게 보이거나 역광이거나 뒷모습인 이미지를 레퍼런스로 쓰는 것입니다. 그러면 모델은 얼굴만큼이나 배경까지 학습해 버립니다. 올바른 방법은 먼저 마스터 포트레이트를 만드는 것입니다. 중립 배경, 또렷한 조명 아래 캐릭터 혼자 있는 초상화 말이죠.

구체적으로는 이미지 노드를 열고 6크레딧의 Imagen 4 같은 포토리얼 모델을 선택한 다음, 캐릭터만 묘사하세요. "상반신 초상, 30세 여성, 짧은 붉은 머리, 색 바랜 데님 재킷, 무지 회색 배경, 정면의 부드러운 조명" 같은 식으로요. 바로 그 얼굴이 나올 때까지 다시 생성하세요. 4~5회 시도, 즉 24~30크레딧, 0.30유로가 채 안 되는 비용입니다.

이 초상화가 레퍼런스 노드의 주춧돌이 됩니다. 이후의 모든 이미지가 여기서 나옵니다. 10분의 투자로 이후 몇 시간의 복권 놀이를 아끼는 셈이고, 재생성을 많이 하는 것이 진정으로 정당화되는 유일한 단계이기도 합니다.

레퍼런스 사진의 각도를 다양하게

정면, 사분면, 옆모습, 전신의 네 장이면 충분한 경우가 많습니다. 평범한 8장보다 흠잡을 데 없는 4장이 낫습니다. 잘못된 레퍼런스 한 장이 이후의 모든 생성을 오염시키니까요.

정면 초상화 한 장은 좋은 출발점이지만, 모델은 캐릭터를 한 각도로만 알게 됩니다. 옆모습을 요청하면 코, 턱, 귀를 즉석에서 지어냅니다. 캐릭터를 3차원으로 고정하려면 여러 시점을 보여 줘야 합니다.

잘 통하는 조합은 이렇습니다. 정면 초상 한 장, 사분면(3/4) 각도 한 장, 옆모습 한 장, 그리고 실루엣과 복장을 위한 전신 샷 한 장. 네 장이면 충분한 경우가 많습니다. 이 사진들을 만들려면 레퍼런스를 지원하는 모델로 마스터 포트레이트에서 다시 출발해 "같은 인물, 옆모습, 같은 회색 배경"을 요청하세요. 노드에 추가하기 전에 결과물을 하나하나 확인하세요.

이 단계에서는 다른 어느 단계보다 깐깐해지세요. 턱이 살짝 다르거나 귀가 어설픈, 조금 잘못된 레퍼런스 사진 한 장이 이후의 모든 생성을 소리 없이 오염시킵니다. 그리고 당신은 엉뚱한 곳, 즉 프롬프트에서 원인을 찾게 됩니다. 평범한 8장보다 흠잡을 데 없는 4장이 낫습니다. Seedream 5 Lite로 한 장에 5크레딧이니, 미심쩍은 사진을 다시 만드는 데 드는 비용은 0.05유로입니다. 타협하지 마세요.

설명은 연속성 계약서처럼 쓰세요

설명에는 모든 장면에서 살아남아야 하는 것만 쓰세요. 흉터, 재킷, 손목시계 같은 것들이죠. 정체성은 노드에 살고, 장면은 프롬프트에 삽니다.

레퍼런스 노드의 설명 필드는 장식이 아닙니다. @멘션이 등장하는 모든 프롬프트에 주입됩니다. 따라서 모든 장면에서 살아남아야 하는 것만 써야 하고, 그 외에는 아무것도 쓰지 말아야 합니다. 오래 지속되는 특징들: 왼쪽 눈썹의 흉터, 색 바랜 데님 재킷, 오른쪽 손목의 시계, 구부정한 걸음걸이.

장면마다 바뀌는 것은 넣지 마세요. 설명에 "카페에서 미소 짓는"이라고 쓰면, 캐릭터는 폭풍우 장면 한가운데서도 카페에서 미소 짓게 됩니다. 설명은 정체성을 묘사하고, 프롬프트는 장면을 묘사합니다. 이 역할 분리가 시스템을 견고하게 만드는 핵심입니다.

영화 촬영 현장에서 이 작업에는 이름이 있습니다. 콘티뉴이티 스크립트, 즉 연속성 기록이죠. 화려하다고 생각하는 사람은 없지만, 배우가 두 컷 사이에 셔츠를 갈아입는 사고를 막아 주는 것이 바로 이것이라는 데는 모두가 동의합니다. 레퍼런스 노드가 정확히 그 역할을 합니다.

영상 쪽은: 모델별 정확한 최대치

Seedance 2.0과 MiniMax H3는 레퍼런스 9장을, Grok은 5장, Kling V3와 Veo 3.1 Fast는 각각 3장을 받습니다. 가장 믿을 만한 기법은 여전히 완벽한 이미지를 영상 시작점에 연결하는 것입니다.

영상은 이미지와 같은 문제를 더 심하게 겪습니다. 초 단위로 흘러가며 변하는 얼굴은 즉시 눈에 띄니까요. 다행히 Imaginode의 여러 비디오 모델이 레퍼런스 이미지를 지원하며, 최대치는 제각각입니다. Seedance 2.0과 2.0 Fast는 9장, Seedance 2.5는 그보다 더 많이 받습니다. MiniMax H3도 9장, Grok Imagine Video는 5장, Kling V3와 Veo 3.1 Fast는 각각 3장입니다.

비디오 노드는 모델에 따라 별도의 입력도 제공합니다. 시작 이미지, 그리고 모델이 지원하는 경우 종료 이미지죠. 사실 가장 믿을 만한 기법이 바로 이것입니다. 먼저 Seedream 5 Lite로 캐릭터의 완벽한 이미지를 생성한 다음, 그것을 영상의 시작 이미지로 연결하는 것입니다. 움직임이 이미 정확한 얼굴에서 출발하게 되니까요.

성공률에 대해 솔직해집시다. AI 영상은 레퍼런스가 있든 없든 서너 번에 한 번꼴로 실패합니다. 팔다리가 물체를 통과하거나, 시선이 엉뚱한 곳으로 향하거나 하는 식이죠. 이 손실을 예산에 미리 반영하세요. Kling 2.5 Turbo로 5초에 26크레딧, Seedance 2.0 Fast 720p로 48크레딧이니, 완성된 장면 하나의 실제 비용은 표시 가격의 두 배쯤 됩니다. 기술적 실패는 자동으로 환불됩니다.

실전 사례: 여섯 컷짜리 미니 웹툰

마스터 포트레이트, 보조 각도, 재생성을 포함한 여섯 컷까지: 안정된 캐릭터로 완성한 미니 웹툰의 총비용은 약 105크레딧, 즉 1.05유로입니다.

현실적인 예를 들어 봅시다. 양봉가 루나를 주인공으로 한 인스타그램용 여섯 컷 미니 웹툰입니다. 1단계, 중립 배경의 마스터 포트레이트: Imagen 4로 5회 시도, 30크레딧. 2단계, 보조 각도인 사분면, 옆모습, 전신: Seedream 5 Lite로 약 6회 생성, 30크레딧. 이제 레퍼런스 노드 "@루나"가 준비되었습니다.

3단계, 여섯 컷. 프롬프트는 짧게 유지됩니다. "@루나가 해 뜰 무렵 벌통을 연다, 하이 앵글" 같은 식이죠. 5크레딧의 Seedream 5 Lite로, 두 번에 한 번 재생성한다고 치면 여섯 컷에 약 45크레딧이 듭니다. 프로젝트 총비용: 약 105크레딧, 즉 1.05유로입니다. 안정된 캐릭터가 등장하는 비주얼 여섯 장짜리 시리즈치고 이보다 나은 가성비는 찾기 어렵습니다.

같은 노드가 다음 주에는 2화에 쓰이고, 그다음에는 루나가 카메라에 인사하는 5초짜리 영상에 쓰입니다. 한 명의 캐릭터를 한 번만 정의하고 어디서나 활용하는 것이죠. 가상 UGC 크리에이터가 카메라를 정면으로 보며 15초짜리 영상을 버텨 내는 것도 같은 원리입니다. 이미지 하나하나가 백지에서 다시 시작하는 도구들과 비교할 때, 노드 방식의 논리가 진가를 발휘하는 지점이 바로 여기입니다.

함정 1번: 서로 모순되는 레퍼런스

캐릭터의 서로 다른 버전에서 나온 사진들은 흐리멍덩한 평균치를 만듭니다. 생성 결과가 모두 얼추 괜찮은데 서로 똑같지는 않다면, 프롬프트가 아니라 노드를 정리하세요.

가장 흔한 함정: 캐릭터의 서로 다른 버전에서 나온 사진들을 레퍼런스 노드에 뒤섞는 것입니다. 두 장은 헤어스타일이 미묘하게 다르고, 세 번째 장은 재킷이 더 어둡습니다. 서로 모순되는 자료에 충실하라는 요구를 받은 모델은 셋 중 어느 것과도 닮지 않은 흐리멍덩한 평균치를 내놓습니다.

증상은 알아보기 쉽습니다. 생성 결과가 하나같이 "얼추 괜찮은데" 서로 똑같은 것은 하나도 없는 상태죠. 이런 일이 생기면 프롬프트는 건드리지 마세요. 레퍼런스 노드를 열고 사진들을 나란히 놓고 보면서 어긋나는 것들을 가차 없이 제거하세요. 마스터 포트레이트를 유일한 진실의 원천으로 삼아 다시 출발하세요.

간단한 규칙: 추가하는 모든 사진은 다른 사진들과 정확히 같은 문장으로 묘사될 수 있어야 합니다. "이건 흉터가 생기기 전 모습이에요"라고 말해야 하는 사진이라면 그 노드에 있을 자격이 없습니다. 그 버전의 캐릭터를 위해서는 두 번째 레퍼런스 노드를 따로 만드세요.

함정 2번: 거의 똑같은 사진 여덟 장

똑같은 예시가 너무 많으면 얼굴 대신 포즈가 고정됩니다. 다양한 사진 네 장이 같은 정면 초상의 복제본 여덟 장을 언제나 이깁니다.

정반대의 함정도 존재합니다. 같은 표정, 같은 조명, 같은 배경의 정면 초상 여덟 장. 모델은 그 모든 것이 캐릭터의 시그니처라고 결론 내립니다. 각도도, 굳은 미소도, 조명까지도요. 그 결과 다른 것을 요청하면 모델이 저항합니다. 전력 질주하는 장면에서조차 캐릭터가 정면으로 카메라를 바라보게 되는 것이죠.

레퍼런스 버전의 과적합이라고 할 수 있습니다. 똑같은 예시가 너무 많으면 얼굴 대신 포즈가 고정됩니다. 대책은 각도에 관한 조언과 같습니다. 이미지는 적게, 대신 다양하게. 정면, 사분면, 옆모습, 실루엣을 아우르는 사진 네 장이 같은 초상의 복제본 여덟 장을 언제나 이깁니다.

Seedance 2.0이나 MiniMax H3처럼 레퍼런스를 9장까지 받는 비디오 모델에서는 모든 슬롯을 채우고 싶은 유혹이 강해집니다. 참으세요. 각 이미지가 새로운 정보, 즉 새로운 각도, 복장, 표정을 더할 때만 채우세요. 그렇지 않다면 좋은 이미지 3장이 중복된 9장보다 낫습니다.

오늘 당장 시작하는 방법

30분짜리 세션 하나면 충분합니다. 마스터 포트레이트, 레퍼런스 노드, @멘션으로 만드는 첫 장면까지, 부가세 별도 13유로 스타터 플랜의 900크레딧 중 15%도 안 되는 비용입니다.

실행 계획은 30분짜리 세션 하나에 담깁니다. 이미지 노드를 만들고, 중립 배경의 마스터 포트레이트를 생성하세요. 시도에 30크레딧쯤 잡으면 됩니다. 레퍼런스 노드를 만들고, 캐릭터의 이름을 짓고, 오래갈 설명 세 문장을 쓰고, 초상화와 보조 각도들을 추가하세요. 그런 다음 @멘션과 Seedream 5 Lite로 첫 장면을 테스트하세요.

이 모든 것을 직접 연결하고 싶지 않다면, Imaginode의 어시스턴트가 메시지당 1크레딧으로 전체 워크플로를 클릭 한 번에 구성해 줍니다. "반복 등장하는 캐릭터가 있는 포스트 시리즈"라고 설명하면 이미지, 레퍼런스, 비디오 노드가 이미 연결된 상태로 놓입니다. 사진을 채우고 프롬프트를 다듬기만 하면 됩니다.

월 900크레딧을 주는 부가세 별도 13유로의 스타터 플랜이라면, 이 전체 세션은 요금제의 15%도 소비하지 않습니다. 그리고 모든 것이 브라우저 안에서 이루어지고 생성은 서버에서 돌아갑니다. 설치할 것도, 갖춰야 할 그래픽카드도 없습니다. 거실 노트북으로 보내는 점심시간이면 충분합니다.

캐릭터가 안정되었다면, 다음 과제는 그 캐릭터를 제대로 연출하는 것입니다. 구도, 렌즈, 카메라 무빙 말이죠. 그것이 바로 카메라 노드의 주제이고, 여기에 글 한 편을 통째로 바쳤습니다. "AI 카메라 연출하기"입니다. 이제 주인공에게는 흔들리지 않는 얼굴이 생겼습니다. 남은 일은 제대로 된 숏을 선사하는 것입니다.