Nodaro 문서
문서노드 레퍼런스모델템플릿AI 에이전트(MCP)개발자셀프 호스팅리서치비교
동영상

립싱크

인물 사진이 오디오 트랙을 말하게 하거나, 기존 동영상의 입 모양을 새 음성에 다시 맞춰 더빙하세요. Kling Avatar, OmniHuman, Seedance 등을 지원합니다.

립싱크 노드는 얼굴이 오디오 트랙을 말하게 합니다. 인물 사진과 보이스 트랙을 주면 토킹 헤드 동영상을 만듭니다. 동영상과 새 오디오를 주면 동영상 속 입 모양을 새 음성에 다시 맞춰 클립을 더빙합니다. 모델을 고르면 노드가 그 모델에 필요한 입력을 보여 줍니다.

사용 시기

  • 사진 한 장으로 만드는 토킹 헤드. 예를 들어 보이스오버가 있는 AI 생성 캐릭터입니다.
  • 제품 데모용 대변인 동영상.
  • 동영상의 더빙 버전. 번역된 음성을 화자의 입 모양에 다시 맞춥니다.
  • 프롬프트로 연출하는 연기. 예를 들어 OmniHuman 1.5로 마이크에 대고 노래하는 장면입니다.

스크립트에서 보이스와 자막까지 갖춘 아바타 동영상 전체를 만들려면 AI 아바타를 사용하세요.

빠른 시작

노드 추가

캔버스에서 Tab을 누르고 동영상 › 애니메이션 및 연기 › 립싱크를 선택하세요.

모델 선택

설정 패널을 열고 공급자에서 모델을 고르세요. 그러면 노드가 그 모델에 필요한 입력인 인물 사진, 원본 동영상 또는 둘 다를 보여 줍니다.

얼굴과 보이스 연결

이미지를 인물 사진에, 또는 동영상을 원본 동영상에 연결하고, 텍스트 음성 변환 같은 오디오 노드를 오디오에 연결하세요.

실행

실행을 클릭하세요. 립싱크된 동영상이 노드에 나타납니다.

인물 사진오디오이미지 생성정면을 향한 인물 사진텍스트말할 대사텍스트 음성 변환ElevenLabs v3립싱크Kling Avatar Pro
인물 사진과 생성한 보이스 대사가 토킹 헤드 동영상이 됩니다.

인물 사진 또는 동영상

연결하는 것노드가 만드는 것모델
인물 사진과 오디오정지 이미지로 만든 새 토킹 헤드 동영상입니다.Kling Avatar, Kling Avatar Pro, InfiniTalk, OmniHuman 1.5, Seedance 2, Seedance 2 Fast, Seedance 2 Mini, Seedance 2.5, SadTalker
원본 동영상과 오디오입 모양을 새 오디오에 다시 맞춘 같은 동영상입니다.Volcengine Lip Sync, Sync Lipsync v3, Lipsync 2 Pro, HeyGen Lipsync Precision, LatentSync, Video-Retalking
둘 중 하나와 오디오Wav2Lip은 인물 사진이나 동영상을 받습니다.Wav2Lip

입력

입력연결할 수 있는 노드설명
오디오오디오 노드음성이나 보이스오버입니다. 모든 모델에 필수입니다.
인물 사진이미지 노드인물 사진 모델용의 얼굴이 선명한 사진입니다.
원본 동영상동영상 노드더빙 모델용의 더빙할 클립입니다.

출력인 동영상은 립싱크된 동영상의 URL입니다. 노드가 여러 개 연결되어 있으면 노드 카드에서 사용할 이미지, 동영상, 오디오를 고를 수 있습니다.

설정

설정설명
공급자립싱크 모델입니다. 기본값은 Kling Avatar입니다.
해상도Kling Avatar, Kling Avatar Pro, InfiniTalk, Seedance 모델에서는 480p 또는 720p이며 기본값은 720p입니다. Seedance 2는 1080p도 제공합니다. OmniHuman 1.5는 720p 또는 1080p이며 기본값은 1080p입니다.
모션 프롬프트(선택 사항)같은 모델에서 머리와 표정의 움직임을 정합니다. 예를 들어 “살짝 고개 끄덕이기”나 “풍부한 눈썹 표정”입니다. OmniHuman 1.5에서는 연기 전체를 연출합니다.
앞뒤 텍스트모션 프롬프트 앞뒤에 항상 붙는 텍스트입니다. 프롬프트 앞뒤 텍스트를 참고하세요.

모델별 설정

모델설정
OmniHuman 1.5모션 프롬프트가 연기를 연출합니다. 예를 들어 “마이크에 대고 자신 있게 노래하기”입니다. 빠른 모드는 품질을 조금 낮추는 대신 속도를 높입니다. 시드는 결과를 반복할 수 있게 합니다. -1은 무작위입니다. 사람, 반려동물, 애니메이션 캐릭터를 어떤 화면 비율로든 움직입니다.
HeyGen Lipsync Precision동적 길이(켜짐)는 출력 길이를 새 오디오에 맞춥니다. 음악 트랙 제거(꺼짐)는 원본 동영상에서 배경 음악을 없앱니다. 음성 향상(꺼짐)은 음성을 더 또렷하게 합니다.
Lipsync 2 Pro동기화 모드는 오디오와 동영상의 길이가 다를 때의 처리를 정합니다. 루프(기본값), 바운스, 잘라내기, 무음, 리매핑 중에서 고릅니다. 0~1의 온도는 립싱크의 표현력을 정하며 기본값은 0.5입니다. 활성 화자 감지는 말하고 있는 사람에게 맞춰 싱크합니다.
Sync Lipsync v3동기화 모드(기본값은 잘라내기)와 활성 화자 감지가 있습니다. 두 사람 이상이 나오는 동영상에서는 활성 화자 감지를 켜세요. 표현력은 모델이 스스로 조절합니다.
Volcengine Lip Sync모드: 정면을 보는 화자 1명이면 더 빠른 라이트를, 화자가 여럿인 복잡한 장면이면 베이직을 고르세요. 보컬 분리(노이즈 제거)는 오디오에서 노이즈를 없앱니다. 장면 감지 + 화자 식별(베이직 전용)은 장면 전환과 말하는 사람을 찾습니다. 오디오가 더 길면 동영상 반복(라이트 전용, 기본적으로 켜짐)과 역방향 루프(핑퐁)는 동영상보다 긴 오디오를 처리합니다. 템플릿 시작 시간(초)은 동영상의 어느 지점부터 입 모양이 따라가기 시작할지 정합니다. 출력은 오디오만큼 깁니다. 더 긴 동영상은 잘리고, 더 짧은 동영상은 반복됩니다.

Seedance 모델은 8개가 넘는 언어에서 음소 단위의 네이티브 립싱크를 합니다. 동영상 생성처럼 작동하며, 오디오는 레퍼런스 오디오로 보냅니다.

모델

모델개발사모드크레딧세부 정보
MiniMax H3MiniMax이미지로 동영상 만들기, 텍스트로 동영상 만들기253부터프리미엄 멀티모달 등급인 MiniMax H3입니다. 시작·종료 프레임과 이미지/동영상/오디오 레퍼런스, 네이티브 오디오를 지원하고, 2K(기본값) 또는 768P로 출력하며, 길이는 4~15초이고 초 단위로 요금이 매겨집니다.
Kling Avatar StandardKuaishou립싱크308정지된 인물 사진을 구동 오디오에 맞춰 립싱크합니다. 표준 품질입니다.
Kling Avatar ProKuaishou립싱크616프리미엄 립싱크입니다. 입 모양과 타이밍이 더 정확합니다.
Seedance 2Bytedance이미지로 동영상 만들기, 텍스트로 동영상 만들기253부터Seedance 2는 네이티브 오디오를 지원하는 프리미엄 등급입니다. 해상도별로 초 단위 요금이 매겨집니다.
Seedance 2 FastBytedance이미지로 동영상 만들기, 텍스트로 동영상 만들기198부터더 저렴하고 빠른 Seedance 2 등급입니다.
Seedance 2 MiniBytedance이미지로 동영상 만들기, 텍스트로 동영상 만들기132부터저가형 Seedance 2 등급입니다. 480p/720p만 지원하며 해상도별로 초 단위 요금이 매겨집니다.
Seedance 2.5Bytedance이미지로 동영상 만들기, 텍스트로 동영상 만들기374부터Seedance 2.5는 한 샷에 최대 30초, 네이티브 오디오, 폭넓은 멀티모달 레퍼런스를 지원합니다. 해상도는 480p/720p/1080p입니다.
OmniHuman 1.5Bytedance립싱크1,122부터정지 이미지와 오디오로 프롬프트에 따라 말하는 아바타를 만드는 프리미엄 모델입니다. 720p/1080p, 최대 60초를 지원합니다. 사람, 반려동물, 애니메이션 캐릭터에 쓸 수 있습니다.
InfiniTalkInfiniTalk립싱크121부터정지 이미지로 오디오에 맞춰 말하는 토킹 헤드를 만듭니다. 480p/720p를 지원합니다.
Sync Lipsync v3Sync립싱크1,100부터기존 영상을 더빙합니다. 새 오디오 트랙에 맞춰 입 모양을 다시 맞춥니다. 동영상을 입력으로 받으며 초 단위로 요금이 매겨집니다.
Volcengine Lip SyncVolcengine립싱크330부터동영상을 입력받아 동영상으로 출력하는 AI 더빙입니다. 새 보컬 트랙에 맞춰 입 모양을 다시 맞춥니다. 기본 모드에서는 여러 화자(장면 감지와 화자 식별)를 지원합니다. 동영상을 입력으로 받으며 초 단위로 요금이 매겨집니다.

공급자 목록에는 더빙용 HeyGen Lipsync Precision과 Lipsync 2 Pro도 있습니다. 노래에 가장 좋은 LatentSync, 가장 빠르고 저렴한 Wav2Lip, 얼굴 보정이 내장된 Video-Retalking, 그리고 SadTalker도 있습니다. MiniMax H3(minimax-h3)는 공급자 목록이 아니라 API에서 사용할 수 있습니다.

오디오 길이

모델최대 오디오 길이
Kling Avatar, Kling Avatar Pro5분
Volcengine Lip Sync5분
HeyGen Lipsync Precision, Lipsync 2 Pro, Sync Lipsync v35분, 예약 한도로서
OmniHuman 1.560초
InfiniTalk15초
Seedance 2 Fast클립당 15.2초
Seedance 2.5클립당 30초

Kling Avatar, InfiniTalk, OmniHuman 1.5, Volcengine Lip Sync에서는 한도보다 긴 오디오가 실행 전에 잘립니다. HeyGen Lipsync Precision, Lipsync 2 Pro, Sync Lipsync v3에서 5분은 잘라 내는 한도가 아니라 크레딧 예약 한도입니다. 더 긴 클립은 5분 구간으로 예약됩니다. Kling Avatar와 Volcengine Lip Sync의 긴 실행은 수십 분이 걸릴 수 있으며, 편집기는 최대 약 1시간까지 기다립니다.

크레딧

대부분의 모델은 1초 단위로 청구하며, 다음 길이 구간으로 올림합니다. 오디오를 연결하면 노드가 그 길이를 재므로 노드의 크레딧 칩이 갱신됩니다. 길이를 알 수 없으면 5분 구간이 예약됩니다. 실제 비용을 넘는 크레딧은 동영상이 준비되면 환불됩니다.

모델15초30초1분2분5분
Kling Avatar (720p)3306601,3202,6406,600
Kling Avatar Pro (1080p)6601,3202,6405,28013,200
OmniHuman 1.51,1222,2334,455——
Volcengine Lip Sync3306601,3202,6406,600
HeyGen Lipsync Precision5611,1112,2114,41111,011
Lipsync 2 Pro6931,3752,7505,50013,739
Sync Lipsync v31,1002,2004,4008,80022,000
  • OmniHuman 1.5는 오디오를 최대 60초까지 받으므로 15초, 30초, 1분 구간만 적용됩니다. 해상도는 가격을 바꾸지 않습니다.
  • InfiniTalk는 실행당 고정 가격입니다. 480p에서 121크레딧, 720p에서 462크레딧입니다.
  • Seedance 모델은 동영상 생성과 같은 방식으로 초당 가격이 매겨집니다.

팁

  • 선명하고 정면을 보는 인물 사진을 쓰세요. 해상도보다 얼굴 품질이 더 중요합니다. 흐린 4K 사진보다 선명한 720p 사진이 더 잘 됩니다.
  • 오디오를 먼저 정리하세요. 음악이나 노이즈가 없는 음성이 가장 잘 맞습니다. 음성 추출로 목소리만 분리하세요.
  • 작은 움직임을 더하세요. “살짝 고개 끄덕이기” 같은 모션 프롬프트가 사실감을 더합니다.
  • 여러 언어로 더빙하세요. 더빙이나 새 보이스오버로 음성을 번역한 다음, 더빙 모델로 입 모양을 다시 맞추세요.
  • 짧은 클립은 저렴합니다. 초당 가격이므로 짧은 대사는 비용이 적게 듭니다. 오디오를 연결한 뒤 크레딧 칩을 확인하세요.

API에서 사용

API, SDK 또는 MCP에서 Sync Lipsync v3나 Volcengine Lip Sync를 호출할 때는 출력 길이를 초 단위로 나타내는 audioDurationSec를 전달하세요. 이 값이 없으면 실행은 환불 없이 5분 구간으로 청구됩니다. Sync Lipsync v3는 22,000크레딧, Volcengine Lip Sync는 6,600크레딧입니다. 편집기는 오디오 길이를 대신 잽니다. 단일 노드 실행을 참고하세요.

자주 묻는 질문

립싱크 노드에는 무엇이 필요한가요?

말소리가 담긴 오디오 트랙과, 모델에 따라 인물 사진 이미지나 동영상이 필요합니다. 인물 사진 모델은 새 토킹 헤드 동영상을 만듭니다. Sync Lipsync v3와 Volcengine Lip Sync 같은 더빙 모델은 기존 동영상의 입 모양을 새 오디오에 다시 맞춥니다.

어떤 립싱크 모델을 골라야 하나요?

Kling Avatar Pro는 인물 사진에서 가장 좋은 입 모양을 만듭니다. InfiniTalk는 해상도를 조절할 수 있습니다. OmniHuman 1.5는 모션 프롬프트를 따르며 사람, 반려동물, 애니메이션 캐릭터를 움직입니다. 기존 동영상을 더빙하려면 Volcengine Lip Sync가 가장 저렴한 최신 선택지이며, 여러 화자를 처리하는 유일한 모델입니다.

립싱크는 크레딧이 얼마나 드나요?

대부분의 모델은 오디오 1초 단위로 청구하며, 15초, 30초, 1분, 2분, 5분의 길이 구간으로 올림합니다. 예를 들어 Kling Avatar는 15초에 330크레딧, Volcengine Lip Sync는 1분에 1,320크레딧이 듭니다. InfiniTalk는 실행당 고정 가격입니다.

오디오는 얼마나 길 수 있나요?

대부분의 모델에서 최대 5분입니다. InfiniTalk는 15초, OmniHuman 1.5는 60초까지 받으며, 이 모델들에서는 더 긴 오디오가 잘립니다.

텍스트로 토킹 헤드를 만들려면 어떻게 하나요?

텍스트 음성 변환 노드를 오디오 입력에, 인물 사진을 인물 사진 입력에 연결하세요. 그러면 보이스 트랙이 입 모양을 움직입니다.

최종 업데이트

목차