캐릭터마다 안정된 목소리를 먼저 만든다

막히는 장면부터 시작

AI 숏드라마 여러 인물 대화에서 제일 무서운 건 목소리가 한 번만 흔들려도 캐릭터가 바로 흩어진다는 거다. 주인공 첫 마디는 스물다섯 살 같은데, 다음 마디는 내레이션 같고, 컷만 바뀌면 캐릭터가 무너지고, 악역은 입도 안 움직이는데 말하고 있다. 자리까지 이미 엉켜 있는데 목소리까지 섞이면 끝이다. 영상 컷, 더빙 배정, 편집 점검을 ArcLoop의 같은 제작 흐름에 넣지 않으면, 결국 뽑기만 하다가 다시 녹음하게 된다.

2026년 모델 경쟁에서 음성은 새로운 분수령이 되었습니다. 최신 세대 비디오 모델은 음성과 영상을 한 번에 생성하기 시작했고, "책 읽는 듯한 더빙"에 대한 시청자의 관용은 바닥까지 내려갔습니다. 영상은 다시 뽑을 수 있지만 목소리가 무너지면 시청자는 바로 넘겨버립니다. 그래서 회차를 넘나드는 목소리 일관성은 후처리가 아니라 제작 규칙으로 다룰 가치가 있습니다.

다중 캐릭터 더빙은 콘티 단계에서 미리 잡아둬야 한다. 완성 후에 소리만 붙이는 작업이 아니다. 먼저 창작 공간에서 보이스 시트를 만들고, AI 숏드라마 가이드으로 대사와 샷을 연결하고, 캐릭터 자산 라이브러리에서 누가 말하는지, 누가 반응하는지, 누가 잠깐 멈추는지 확인한다. 그래야 완주 템포, 감정 전환, 캐릭터 IP의 기억점이 목소리 때문에 깨지지 않는다.

원리

다중 캐릭터 더빙은 "역할마다 다른 목소리를 붙이면 끝"이 아니다. 숏드라마의 목소리는 인물의 위치, 관계, 템포, 감정까지 떠안는다. 보는 사람은 목소리의 속도, 멈춤, 압박감, 말버릇, 감정이 튀는 순간을 기억한다. 이게 회차를 넘어 같지 않으면, 다른 사람처럼 들린다.

보이스 시트는 비주얼 자산과 세트로 가져가야 한다. 캐릭터 시트로 인물과 말투의 공기를 정하고, 3면도로 정면·측면·후면을 고정하고, 4면도로 비스듬한 각도와 돌아보는 장면을 안정시키고, 캐릭터 자산 시트로 확정 비주얼, 표정, 의상, 소품, 색을 한 장에서 본다. 캐릭터 자산 라이브러리에는 그 위에 보이스 시트도 넣는다. 콘티는 누가 어떤 배치에서 말하는지 정하고, 더빙 규격은 어떻게 말하는지 정하고, 편집은 립싱크, 멈춤, 리액션을 맞춘다.

흐름은 기획→대본→콘티→영상→더빙→편집이다. 많은 사람이 더빙을 마지막에 놓고 나서야 "대사가 너무 길다", "립싱크가 안 맞는다", "감정 단계가 없다"는 걸 발견한다. 더 나은 방식은 반대다. 콘티 단계에서 더빙 조건을 적고, 다중 캐릭터 더빙 템플릿을 AI 숏드라마 콘티와 완성 흐름에 연결하는 거다.

나누는 법

1. 먼저 캐릭터마다 보이스 설계표를 만든다. 항목은 나이 느낌, 음색, 속도, 볼륨, 감정 상한, 멈춤 습관, 말버릇, 금지 사항이다. 금지 사항에는 "아나운서처럼 읽지 않기", "기계처럼 읽지 않기", "너무 애교스럽게 하지 않기"를 넣는다.

2. 대사를 다시 쓴다. 숏드라마 대사는 글처럼 쓰면 안 되고, 진짜 입으로 나오는 말처럼 써야 한다. 한 줄에는 의도 하나만 넣는 게 기본이다. 추궁, 숨기기, 협박, 떠보기, 되받아치기. 15초 안의 대사는 특히 짧아야 하고, 30초를 넘는 대사는 작은 주고받기로 쪼개서 리액션 샷과 침묵을 연결점으로 써야 한다.

3. 콘티에 말하는 사람과 배치를 적는다. 여러 인물 대화는 소리만의 문제가 아니라 화면의 문제이기도 하다. 누가 누구를 보는지, 누가 끊는지, 누가 잠깐 멈추는지에 따라 더빙 템포가 달라진다.

4. 캐릭터별로 트랙을 나눠 만든다. 대사를 한 줄 오디오에 다 섞지 말고 분리해 둔다. 그래야 멈춤 수정, 볼륨 조정, 회차를 넘는 재사용이 쉽다.

5. 립싱크와 편집을 맞춘다. 먼저 대사 템포를 자연스럽게 하고 그다음 입 모양을 맞춘다. 필요하면 대사를 짧게 자른다. 원문을 살린다고 화면을 질질 끌지 말 것. 립싱크가 무너지면 무작정 뽑기만 하지 말고, 먼저 대사가 너무 긴지, 배치가 불분명한지, 말하는 사람을 잘못 찍었는지부터 본 다음 재더빙인지 샷 교체인지 결정한다.

6. 회차를 넘는 목소리 점검을 만든다. 각 회차를 내보내기 전에 같은 캐릭터의 목소리가 어려졌는지, 기계처럼 됐는지, 평평해졌는지, 감정이 튀지 않는지 확인한다. 목소리가 흔들리면 상업용 연재의 따라가기 편함도, 캐릭터 IP의 기억도 같이 무너진다.

7. 목소리 문제는 대본으로 되돌려 써야 한다. 어떤 캐릭터가 늘 내레이션처럼 들리면, 보통 대사에 상대가 없다. 여러 인물 대화가 매번 겹치면 콘티에 멈춤이 부족하다. 음성만 고치지 말고, 대본과 콘티에 끊기, 침묵, 낮게 말하기, 감정 누르기, 갑자기 목소리 올리기 같은 연기 정보를 다시 적는다. 다음 회차에서 재사용되는 건 거기다. 매번 편집으로 임시방편만 쓰면 안 된다.

바로 쓸 수 있는 프롬프트 / 스펙 예시

예시 1: 보이스 설계표

AI 숏드라마 캐릭터용 다중 캐릭터 보이스 설계표를 만들어 주세요. 항목은 캐릭터명, 역할, 나이 느낌, 음색, 속도, 멈춤 습관, 감정 범위, 말투, 감정이 터지는 방식, 금지 사항, 회차를 넘는 고정 규칙입니다. 대사는 사람이 말하는 느낌으로 만들고, AI가 교과서를 읽는 것 같은 느낌은 피해주세요. 보이스 설계표는 캐릭터 자산 라이브러리와 연결해서, 기획→대본→콘티→영상→더빙→편집 흐름에서 쓰겠습니다. 상업 메모로는 어떤 목소리가 시리즈의 기억점에 맞는지, 어떤 목소리가 캐릭터 IP 재사용에 맞는지도 적어 주세요.

예시 2: 여러 인물 대화 더빙 스펙

아래 AI 숏드라마의 여러 인물 대화에 대해 더빙 스펙을 만들어 주세요. 주인공 林知夏: 낮은 목소리, 절제된 톤, 속도는 조금 느리게, 추궁할 때는 문장 끝을 조인다. 남자 조연 周衡: 겉으로는 온화하지만 찔릴 때는 멈춤이 많아진다. 악역 陈总: 압박감이 강하고 속도는 안정적이며, 고함치지 않는다. 캐릭터별로 트랙을 나눠서 대사, 감정, 멈춤, 강조, 립싱크 주의점을 출력해 주세요. 회차를 넘어도 목소리가 같게 들려야 하고, 같은 캐릭터가 다른 성우로 바뀐 것처럼 들리면 안 됩니다. 편집 메모로 끊기, 침묵, 리액션 샷도 표시해 주세요.

예시 3: 목소리 일관성 점검

3회차 분량의 AI 숏드라마에서 다중 캐릭터 더빙이 일관적인지 점검해 주세요. 확인 항목은 같은 캐릭터의 음색이 안정적인지, 속도가 안정적인지, 감정 강도가 적절한지, 대사가 자연스러운지, 교과서 읽기처럼 들리지 않는지, 여러 인물 대화에 끊기와 멈춤이 있는지, 립싱크가 맞는지, 배치와 맞는지입니다. 출력은 통과, 소리만 수정 가능, 재녹음 필요, 이 3가지로 나눠 주세요. 상업 판단으로는 어떤 목소리가 시리즈의 기억점이 되는지, 어떤 목소리가 따라가기 편함에 영향을 주는지도 봐 주세요.

자주 터지는 문제와 고치는 법

첫 번째 문제는 모든 캐릭터가 내레이터처럼 들리는 거다. 고치는 방법은 음색만 고르는 게 아니라, 캐릭터별 역할과 감정 경계를 쓰는 것이다.

두 번째 문제는 대사가 너무 글말체인 거다. 고치는 방법은 구어체로 바꾸고 짧게 자르며, 멈춤과 끊기를 남기는 거다. 숏드라마 대사는 실제 배우가 입 밖으로 꺼낼 수 있어야 한다.

세 번째 문제는 회차가 넘어가면 목소리가 바뀌는 거다. 고치는 방법은 보이스 설계표와 샘플 음성 메모를 저장하고, 매 회차 같은 규칙으로 만드는 것이다.

네 번째 문제는 더빙할 때 배치를 안 보는 거다. 고치는 방법은 콘티, 배치, 립싱크, 더빙을 같이 보는 것이다. 멀리 있는 캐릭터와 가까이 있는 캐릭터가 같은 볼륨이면 이상하다.

다섯 번째 문제는 상업화에서 목소리를 가볍게 보는 거다. 안정된 목소리는 캐릭터 기억을 강화하고, 연재, 모음, 캐릭터 IP 운영을 받쳐 준다.

여섯 번째 문제는 최종 음원만 남기고 목소리 규칙을 남기지 않는 거다. 고치는 방법은 통과한 샘플 음성, 속도, 멈춤, 금지 사항을 캐릭터 자산 라이브러리로 되돌려 넣는 것이다. 상업 연재에서 제일 곤란한 건 "지난번 느낌이 안 떠오른다"는 거다. 목소리 규칙이 그걸 다시 찾는 가장 빠른 길이다.

FAQ

다중 캐릭터 더빙은 각 캐릭터를 따로 만들어야 하나요?

주인공, 악역, 자주 나오는 조연은 필요하다. 엑스트라는 간단히 해도 되지만, 주인공 목소리와 섞이면 안 된다.

AI 대사가 교과서 읽기처럼 들릴 때, 제일 먼저 고칠 건 뭐예요?

먼저 대사와 멈춤을 고친다. 대부분은 음색이 문제가 아니라, 문장이 너무 글말체이거나, 상대가 없거나, 감정 지시가 비어 있어서 생긴다.

목소리 일관성과 화면 일관성 중 뭐가 더 중요한가요?

둘 다 중요하다. 얼굴은 안정적인데 목소리가 다른 사람 같으면, 그 캐릭터는 아직 성립하지 않은 것이다. 목소리 시트는 캐릭터 자산 라이브러리와 같이 관리해야 한다.