AI로 캐릭터 애니메이션을 만들 때, 프롬프트에 꼭 들어가야 하는 것들
캐릭터가 컷마다 다른 얼굴로 나오는 이유는 대부분 프롬프트에 색과 무늬만 적혀 있기 때문입니다. 「로디와 친구들」 100화를 만들며 알아낸 여덟 가지를 점검표로 정리했습니다.
AI로 캐릭터 애니메이션을 만들 때, 프롬프트에 꼭 들어가야 하는 것들
캐릭터가 매번 다른 얼굴로 나오던 이유 — 「로디와 친구들」 100화를 만들며 알아낸 여덟 가지
로디가 축 쳐진 나무늘보로 나왔습니다
새벽에 3화 영상을 열어봤습니다. 「로디와 친구들」의 주인공 로디가 카페 키오스크 앞에서 당황하는 이야기입니다.
첫 장면부터 멈췄습니다. 로디가 로디가 아니었습니다.
얼굴은 맞았습니다. 크림색 얼굴에 눈가 갈색 반점, 배에 큰 크림색 무늬까지 그대로였습니다. 그런데 몸이 길쭉했습니다. 색은 허옇고, 팔이 축 늘어져 있고, 발톱까지 났습니다. 저희가 아는 로디는 머리가 크고 몸이 짧고 통통한 캐릭터인데, 화면 속 그 아이는 도감에 나오는 진짜 나무늘보였습니다.

참조 그림을 넣었는데도 이렇게 나왔습니다. 캐릭터 설명에 몸 비율이 빠져 있었습니다.
색과 무늬만 적고, 몸이 어떻게 생겼는지는 적지 않았습니다
원인을 찾는 데 한참 걸렸습니다. 분명 캐릭터 설명을 넣었기 때문입니다. "크림색 얼굴, 눈가 갈색 반점, 큰 크림색 배."
그 설명에는 색과 무늬만 있었습니다. 몸이 몇 등신인지, 다리가 긴지 짧은지, 표면이 매끈한지 보송한지는 한 글자도 없었습니다. 적지 않은 것은 AI가 매번 새로 정합니다. 그래서 컷마다 달라졌습니다.
같은 문제로 고생하시는 분이 많을 것 같아, 「로디와 친구들」을 만들면서 하나씩 알아낸 것을 정리해 둡니다. 도구가 무엇이든 — 미드저니든 나노바나나든 구글 플로우든 — 원리는 같습니다.
1. 몸 비율을 숫자로 적습니다
"귀여운 나무늘보"로는 부족합니다. 몇 등신인지를 못 박아야 합니다.
저희는 이렇게 바꿨습니다. "머리가 크고 몸이 짧은 2등신. 다리는 아주 짧고 뭉툭하게. 허리 없이 콩 모양 몸통. 절대 키 크거나 날씬하게 그리지 말 것." 하지 말아야 할 것까지 같이 적는 편이 효과가 있었습니다.

비율을 문장으로 못 박은 뒤에 나온 컷입니다.
2. 질감을 따로 적습니다
동물 캐릭터를 만들면 AI는 털을 그리려고 합니다. 그런데 털이 나는 순간 인형이 아니라 진짜 동물이 됩니다. 캐릭터 느낌이 크게 달라집니다.
"매끈한 무광 점토 표면. 털 없음. 보송한 질감 없음. 머리카락 가닥 없음." 이 한 줄로 해결됐습니다. 반대로 털 인형 느낌을 원하신다면 그것도 적어야 합니다. 적지 않으면 매번 달라집니다.
3. 모자·안경은 "항상"이라고 씁니다
미로는 주황색 벙거지 모자를 쓴 갈매기입니다. 그런데 자꾸 벗었습니다. 특히 역광이나 실루엣 장면에서 모자가 통째로 사라졌습니다.
"모자를 쓴다"라고만 적었던 것이 문제였습니다. 그것은 상태 설명이지 규칙이 아니기 때문입니다. "항상 쓴다. 실루엣이나 역광에서도 벗지 않는다"로 바꾸니 그때부터 지켜졌습니다.

왼쪽처럼 액세서리는 조용히 사라집니다. 캐릭터를 알아보지 못하게 되는 원인이 대부분 여기에 있습니다.
4. 몇 명이 나오는지 세어서 적습니다
어떤 컷에서는 갈매기가 두 마리로 늘어났습니다. 단체 사진 장면에서는 모르는 새가 여러 마리 섞여 들어왔습니다.
인원을 적지 않으면 AI가 구도에 맞춰 알아서 채웁니다. "이 그림에는 정확히 둘. A 하나, B 하나. 다른 등장인물 없음." 이렇게 숫자로 못 박으면 정리됩니다.
5. 반복해서 나오는 물건도 기준 그림을 만듭니다
이것은 저희가 가장 늦게 알아낸 부분입니다. 3화는 키오스크가 사실상 주인공인데, 여섯 장면의 키오스크가 전부 다르게 생겼습니다. 나무 프레임, 회색 몸통, 갈색 기둥, 받침이 있는 것과 없는 것.
캐릭터가 아니라 소품이라서 신경을 쓰지 않았던 것입니다. 반복해서 나오는 물건도 캐릭터와 똑같이 정본이 필요합니다. 가장 잘 나온 컷에서 키오스크만 잘라 기준 그림을 만들고 매번 참조로 같이 넣었더니, 여덟 컷이 같은 키오스크가 됐습니다.

같은 회차 안의 키오스크 여섯 개입니다. 화면에 영어까지 떠 있습니다.
6. 화면 속 글자는 아이콘으로 바꿉니다
키오스크나 휴대폰 화면이 나오는 장면에서 AI는 글자를 그려 넣습니다. 그런데 그 글자가 대부분 영어이고, 철자가 틀리거나 뭉개진 채로 나옵니다.
어르신 수업에 쓰는 영상이라면 그대로 두면 안 됩니다. "화면에는 글자를 넣지 말 것. 커피잔·빵 같은 그림 기호로만 표시할 것." 이렇게 적으면 훨씬 깔끔하고, 자막으로 설명하는 편이 전달도 잘 됩니다.
7. 영상 프롬프트는 그림 프롬프트와 따로 씁니다
그림이 잘 나왔다고 끝이 아닙니다. 그림을 움직이는 영상으로 만드는 단계에서 캐릭터가 또 변합니다. 저희는 로디의 입이 두 개가 된 컷을 만났습니다. 선으로 된 입 하나, 이빨이 보이는 입 하나가 위아래로 나란히 있었습니다.
그림용 설명과 영상용 설명은 따로 관리해야 합니다. 영상 쪽에는 이런 문장이 필요합니다. "눈 둘, 코 하나, 입 하나. 두 번째 입을 절대 그리지 말 것." "등장인물 수를 늘리지 말 것." "김은 컵에서만 올라온다."
8. 검수는 크게 놓고 봅니다
마지막이 가장 중요합니다. 작은 화면에 여러 컷을 늘어놓고 훑으면 전부 괜찮아 보입니다. 모자 색도, 얼굴형도, 몸 비율도 작게 보면 보이지 않습니다.
저희는 그렇게 확인했다가 두 번이나 다시 만들었습니다. 한 컷씩 큰 화면에 띄우고, 옆에 공식 캐릭터 그림을 나란히 놓고 비교하는 것 말고는 방법이 없었습니다.
정리 — 프롬프트 점검표
새 컷을 만들기 전에 이 여덟 가지가 문장으로 들어가 있는지 확인합니다
몸 비율 — 몇 등신인지, 다리 길이, 허리 유무
표면 질감 — 매끈한지 보송한지, 털 유무
액세서리 — "항상" 착용, 실루엣에서도
등장 수 — 정확히 몇 명, 다른 인물 없음
반복 소품 — 기준 그림을 만들어 참조로 첨부
화면 속 글자 — 넣지 말고 그림 기호로
영상용 문장 — 입 하나, 인원 고정
검수 — 한 컷씩 크게, 공식 그림과 나란히
여섯 편을 만들었고, 아직 94편이 남았습니다
「로디와 친구들」은 100화를 목표로 만들고 있습니다. 지금 완성된 것은 여섯 편입니다. 숫자만 보면 한참 멀었습니다.
그래도 위의 여덟 가지는 다음 편부터 겪지 않아도 되는 일이라서, 여섯 편이 그냥 여섯 편은 아니라고 생각하고 있습니다. 캐릭터를 만들어 콘텐츠를 준비하시는 분이라면, 첫 편을 시작하기 전에 이 목록을 한 번 훑어보시면 시간을 많이 아끼실 것입니다.
혹시 이 여덟 가지 말고도 "이건 꼭 적어야 하더라" 하는 것이 있으시면 알려주십시오. 저희도 계속 배우는 중입니다.
그럼 로디와 친구들을 만나러 스마택트 유튜브로 가볼까요? ^^