말하는 디지털 휴먼은 어떻게 만들까? 디지털 휴먼 내레이션 영상 제작법: NadouPro 캐릭터 영상 제작 전 과정 해설

가상 캐릭터가 카메라를 바라보며 입을 열어 말하게 하려면 예전에는 모션 캡처 스튜디오, 전문 성우, 후반 합성이 필요했습니다. 이제 AI 도구는 그 진입 장벽을 프롬프트 하나만큼 낮췄습니다. 캐릭터 이미지 한 장과 대사 한 단락만 있으면 캐릭터가 화면에 등장해 설명하는 영상을 만들 수 있습니다. 이 글에서는 이런 ‘캐릭터 설명 영상’의 도구 선택 기준과 NadouPro에서의 전체 제작 과정을 살펴봅니다.

먼저 구분하기: 필요한 것은 설명 영상인가, 실시간 대화형 AI Agent인가

시장에서 자주 한데 묶여 이야기되지만, 실제로는 두 가지가 있습니다. 하나는 캐릭터 설명 영상입니다. 디지털 캐릭터가 화면에 등장해 대사를 말하고, 게시와 확산이 가능한 완성 영상을 만들어냅니다. 다른 하나는 실시간 대화형 AI Agent입니다. 사용자의 말을 이해하고 즉시 응답할 수 있으며, 본질적으로는 고객 응대 또는 동반자형 제품입니다.

콘텐츠 확산을 하려면 필요한 것은 전자입니다. 어떤 도구가 설명 영상 제작에 적합한지는 네 가지 기준만 보면 충분합니다.

첫째, 캐릭터 이미지의 제어 가능성입니다. 이미지 한 장에서 출발해 캐릭터를 맞춤 설정할 수 있는지, 여러 이미지에서 캐릭터 일관성을 유지할 수 있는지가 그 캐릭터를 장기 자산으로 반복 활용할 수 있는지를 결정합니다.

둘째, 음성과 대사의 표현력입니다. 실제 녹음을 업로드할 수 있는지, 아니면 텍스트 음성 변환으로 더빙을 생성하는지, 음색이 자연스러운지, 감정 표현이 충분한지가 영상의 시청감을 직접 좌우합니다.

셋째, 연기 디테일입니다. 캐릭터가 말할 때 표정, 시선, 손짓이 자연스러운지, 동작과 음성이 동기화되는지는 ‘쓸 수 있는 영상’과 ‘볼 만한 영상’을 가르는 기준입니다.

넷째, 완성본 워크플로입니다. 캐릭터 이미지에서 최종 완성본까지 몇 단계가 필요한지, 하나의 환경 안에서 끝낼 수 있는지, 여러 회차의 콘텐츠를 대량으로 만들 수 있는지를 봐야 합니다.

NadouPro에서의 전체 제작 과정

NadouPro는 전 과정 영화·영상 제작 플랫폼이며, 캐릭터 설명 영상은 하나의 캔버스 안에서 완성할 수 있습니다. 전체 과정은 네 단계입니다. 캐릭터 이미지 만들기, 음성 정하기, 연기 생성하기, 완성본 합성하기입니다.

1단계: 캐릭터 이미지 만들기

캔버스에서 새 Image node를 만들고 Text to Image로 캐릭터 이미지를 생성합니다. 이 단계의 프롬프트에는 세 가지 정보를 충분히 써야 합니다. 얼굴 특징, 의상 스타일, 장면 분위기입니다.

30세 전후의 중국어 여성 앵커 이미지, 단정한 짧은 머리, 베이지색 니트 착용, 배경은 따뜻한 톤의 서재, 부드러운 자연광, 상반신 구도, 얼굴이 선명하게 카메라를 향함

완성 영상의 품질에 직접 영향을 주는 몇 가지 디테일은 다음과 같습니다.

• 구도에 연기 공간을 남깁니다. 상반신 또는 7부신 구도를 사용해 캐릭터의 손짓과 신체 동작이 들어갈 여지를 남기세요. 극단적인 클로즈업은 연기 폭을 제한합니다.

• 얼굴 방향을 분명하게 합니다. 캐릭터의 얼굴이 카메라를 정면으로 보거나 살짝 비스듬히 향하고, 이목구비가 가려지지 않아야 이후 생성되는 연기가 자연스럽습니다.

• 이미지와 콘텐츠를 맞춥니다. 지식 정보를 설명하는 캐릭터와 뷰티 제품을 리뷰하는 캐릭터는 스타일과 분위기가 달라야 합니다. 이 단계에서 명확히 정해두면 이후의 많은 재작업을 줄일 수 있습니다.

여러 회차 영상에서 캐릭터 일관성을 유지해야 한다면 Multi-Grid 기능으로 Character Face 3-View, Character Body 3-View 또는 캐릭터 프로필 이미지를 생성해 캐릭터의 정면, 측면, 전신 설정을 한 번에 고정하세요. 이후 각 회차 영상은 이 설정 이미지를 바탕으로 시작하면 됩니다.

2단계: 음성 정하기

캔버스에서 새 Audio node를 만들고 Voice Dubbing 모드를 선택합니다. Voice Dubbing과 Voice Conversion이 하나로 결합되어 있어 감정 표현이 자연스럽습니다.

두 가지 방식이 있습니다.

텍스트 음성 변환: 대사 텍스트를 직접 입력하고, 음색 라이브러리에서 캐릭터 분위기에 맞는 음색을 고릅니다. 음색 라이브러리 입구는 에셋 메뉴 아래에 있습니다. 여러 음색을 들어본 뒤 선택하고, 이후 모든 회차에서 같은 음색을 사용해 캐릭터의 음성 식별성을 유지하는 것이 좋습니다.

실제 녹음 업로드: 자신의 목소리나 전문 성우의 녹음을 쓰고 싶다면 녹음 파일을 업로드하면 됩니다. 영상은 이 실제 음성을 기준으로 연기를 생성합니다.

대사 자체도 중요합니다. 먼저 대사를 직접 한 번 읽어보세요. 읽을 때 어색한 부분은 고치고, 쉼표와 마침표로 캐릭터가 숨을 쉬고 멈출 여지를 주세요. 말의 속도와 감정은 설명에 명확히 쓰면 됩니다. 예를 들어 “친구에게 공유하듯 밝은 말투”처럼 적을 수 있습니다.

3단계: 연기 생성하기

캔버스로 돌아가 새 Video node를 만들고, 1단계의 캐릭터 이미지를 참조 이미지로 사용한 뒤, 음성과 화면을 동기화하는 비디오 모델을 선택하고 프롬프트에 캐릭터의 연기를 묘사합니다.

연기 묘사는 단순하게 시작하세요. 따뜻한 미소, 가끔 카메라 바라보기, 가벼운 손짓 정도면 됩니다. 모든 디테일을 한꺼번에 쌓아 넣으면 오히려 연기가 산만해지기 쉽습니다. 일반적인 장면을 예로 들면 사용할 수 있는 연기 묘사는 다음과 같습니다.

캐릭터가 카메라를 바라보며 설명하고, 표정은 친근하고 자연스러우며, 가끔 미소를 짓고 고개를 끄덕이고, 가벼운 손짓으로 표현을 보조하며, 카메라는 안정적이고 상반신 샷

Video node는 First/Last Frame, Multi-reference, Motion Control 등의 모드도 지원합니다. 실제 사람이 말하는 시범 영상이 있다면 Motion Control 모드를 사용해 캐릭터가 시범 영상의 동작 리듬에 맞춰 연기하도록 할 수 있습니다. 같은 캐릭터가 다른 장면이나 다른 의상으로 등장해야 한다면 Multi-reference 모드에서 캐릭터 이미지와 새로운 장면 이미지를 함께 모델에 입력하세요.

생성 후에는 소리와 함께 전체를 한 번 확인하고, 세 가지를 중점적으로 점검합니다. 발음이 또렷한지, 멈춤이 자연스러운지, 표정과 손짓이 대사 리듬에 맞는지입니다. 만족스럽지 않다면 연기 묘사를 조정하거나 참조 이미지를 다른 버전으로 바꿔 다시 생성하세요.

4단계: 완성본 합성하기

여러 회차의 콘텐츠이거나 오프닝과 엔딩을 추가해야 한다면 소재를 Clip으로 가져와 소재 연결과 영상 편집을 마친 뒤, 온라인 미리보기로 확인하고 내보내면 됩니다.

캐릭터를 장기 자산으로 만들기

설명 영상 한 편을 한 번 만드는 것은 어렵지 않습니다. 어려운 것은 이를 지속적으로 업데이트되는 코너로 만드는 일입니다. 세 가지를 권합니다.

캐릭터 설정을 고정하세요. 캐릭터의 이미지 설정, 선택한 음색, 자주 쓰는 연기 묘사를 하나의 캐릭터 파일로 정리하세요. 매 회차 제작을 그 파일에서 출발해야 시청자가 이 캐릭터를 알아볼 수 있습니다.

제작 과정을 재사용하세요. 캐릭터 설명 영상은 매 회차 흐름이 완전히 같습니다. 캔버스 안에 노드 구조를 저장해두고, 매번 대사와 연기 묘사만 바꾸면 제작 속도가 점점 빨라집니다.

같은 캐릭터를 여러 장면에 재사용하세요. 캐릭터 이미지를 고정한 뒤 배경, 의상, 샷 크기를 바꾸면 서로 다른 주제의 시리즈 콘텐츠를 만들 수 있습니다. 하나의 캐릭터가 전체 콘텐츠 매트릭스를 지탱할 수 있습니다.

자주 묻는 질문

Q: 인물 사진 한 장만 있어도 화면에 등장해 말하는 영상을 만들 수 있나요?
가능합니다. 사진을 캐릭터 이미지 참조로 Video node에 넣고, Voice Dubbing으로 생성한 오디오와 함께 음성·화면 동기화 모델로 연기를 생성하면 됩니다. 사진은 얼굴이 선명하고 가려진 부분이 없으며, 구도에 연기 공간이 남아 있어야 합니다.

Q: 제 목소리를 사용할 수 있나요?
가능합니다. Voice Dubbing은 실제 녹음 업로드를 지원하며, 영상은 제공한 녹음을 기준으로 연기를 생성합니다. 타인의 목소리를 무단으로 복제하지 않습니다. 타인의 목소리를 사용하기 전에는 반드시 권한을 확보하세요.

Q: 캐릭터 이미지를 처음부터 독창적으로 만들 수 있나요?
가능합니다. Image node의 Text to Image로 독창적인 캐릭터를 만들고, Multi-Grid 기능으로 3-View와 프로필 이미지를 생성해 설정을 고정하면 이후 회차에서 캐릭터 외형이 흔들리는 것을 피할 수 있습니다.

Q: 같은 캐릭터를 여러 영상에 사용할 수 있나요?
가능합니다. 바로 그것이 권장하는 방식입니다. 캐릭터 설정 이미지와 음색 선택을 잘 보관해 매 회차 재사용하면, 캐릭터는 지속적으로 운영할 수 있는 콘텐츠 자산이 됩니다.

Q: 연기가 계속 딱딱해 보이면 어떻게 하나요?
먼저 연기 묘사를 단순화해 한 번에 한두 가지 동작 요구만 남기세요. 그다음 참조 이미지의 구도가 너무 좁은지 확인하세요. 그래도 이상적이지 않다면 카메라 블로킹이 더 안정적인 모델로 다시 시도하거나, Motion Control 모드로 모델에 실제 사람의 시범 영상을 제공하세요.

더 많은 기능은 NadouPro에서 체험해보세요: NadouPro

이 콘텐츠에는 AI 생성 정보가 포함되어 있으며 오류가 있을 수 있습니다. 직접 확인해 주세요.