공지: GPT Image 2.6 Flare 및 Sunburst 출시 기념 한정 20% 할인, 지금 체험하기
HiAPI
omnihuman-2.0 详情页 Hero 宽幅图:左侧柔光留白,右侧玻璃胶片带与虹彩声波光缆,暖奶油底配冰蓝珊瑚色,名字以发光蚀刻字呈现。

ByteDance

OmniHuman 2.0

omnihuman-2.0

바이트댄스의 2세대 디지털 휴먼 비디오 모델로, 인물 또는 캐릭터 이미지 한 장과 음성 또는 노래 한 곡을 넣으면 입모양, 표정, 신체 동작이 오디오와 동기화된 공연 영상을 생성할 수 있습니다. 한 번의 연속 샷은 최대 5분까지 가능하며, 프롬프트를 추가해 동작과 카메라 무빙을 제어할 수 있습니다

omnihuman-2.0

omnihuman-2.0 사용해 보기

입력

작품 갤러리

모든 작품 보기

출력

video
파라미터를 입력하고 생성하면 결과가 여기에 표시됩니다.

가격

omnihuman-2.0 per second

단가 $0.100

포지셔닝 소개

이 모델은 오디오 기반 디지털 휴먼 영상 생성 모델로, 실제 인물 또는 일러스트 캐릭터 이미지 한 장과 음성 또는 노래 한 구간을 입력받아 오디오와 동기화된 퍼포먼스 영상을 출력합니다. 영상 길이는 오디오를 따르며, 화면은 원본 이미지의 가로세로 비율을 유지합니다. 선택적으로 프롬프트를 사용해 장면, 표정, 제스처, 카메라 움직임을 설명할 수 있습니다. 캐릭터 구술, 노래, 대화 장면이 필요한 개발자와 콘텐츠 크리에이터가 소셜 미디어 숏폼 영상, 마케팅 앰버서더, 디지털 휴먼 애플리케이션의 캐릭터 출연 소재로 활용하기에 적합합니다.

핵심 하이라이트

  • 오디오 기반 입모양 및 표정 동기화——음성과 노래의 리듬과 어조에 맞춰 입모양, 표정, 신체 동작을 생성하며, 영상 길이는 오디오와 일치합니다.
  • 이미지에서 영상으로, 원본 비율 유지——캐릭터 이미지를 업로드하면 퍼포먼스 영상이 생성되며, 결과물은 이미지의 가로세로 비율을 그대로 사용해 기존 레이아웃에 바로 삽입할 수 있습니다.
  • 프롬프트로 퍼포먼스와 카메라 워크 제어——선택적 프롬프트로 장면, 표정, 제스처, 느린 푸시인 등의 카메라 효과를 설명할 수 있습니다.
  • 단일 오디오로 수 분 분량의 퍼포먼스 커버——구동 오디오는 4~300초를 지원하며, 결과물은 오디오를 따라 이어져 연속된 구술이나 노래 구간에 적합합니다.

기능 설명

이미지와 오디오로 캐릭터 영상 생성: 캐릭터 이미지와 구동 오디오를 제공하면 해당 캐릭터의 퍼포먼스 영상을 생성하며, 이미지는 실제 인물 또는 일러스트 캐릭터를 지원하고 출력 화면은 원본 이미지의 가로세로 비율을 유지합니다.

입모양 동기화 퍼포먼스: 영상은 구동 음성 또는 노래를 리듬으로 삼아 대응하는 입모양과 얼굴 표정을 생성하며, 내레이션, 대사, 노래 유형 소재에 적합하고 영상 길이는 오디오와 일치합니다.

프롬프트로 퍼포먼스와 카메라 제어: 선택적 프롬프트는 최대 300자까지 가능하며, 장면, 표정, 제스처, 카메라 움직임을 설명하는 데 사용됩니다.

오디오 길이 범위: 구동 오디오는 mp3 또는 wav여야 하며, 길이는 4~300초이고 15MB를 초과할 수 없습니다. 결과물 길이는 이에 대응하므로 긴 연속 퍼포먼스를 계획하기에 편리합니다.

이미지 규격 범위: 캐릭터 이미지는 jpeg, png 또는 webp를 지원하며 10MB를 초과할 수 없고, 가로세로 비율은 0.4~2.5, 각 변은 300~6000픽셀입니다.

적용 시나리오

  • 소셜 미디어 구술 영상 크리에이터——진행자 인물 사진과 설명 오디오를 업로드해 캐릭터 구술 영상을 생성하고, 소셜 플랫폼의 숏폼 영상 게시와 계정 일상 업데이트에 바로 사용합니다.
  • 가상 콘서트 및 음악 퍼포먼스——가수 또는 가상 캐릭터 이미지에 노래 오디오를 결합해 캐릭터의 노래 화면을 제작하고, 음악 콘텐츠의 퍼포먼스 소재로 활용합니다.
  • 마케팅 앰버서더 숏필름——브랜드 이미지 이미지에 홍보 문구 더빙을 조합해 앰버서더나 진행자가 출연하는 숏필름을 생성하고, 광고 및 이벤트 페이지 전시에 사용합니다.
  • 디지털 휴먼 애플리케이션 개발자——API에 연동해 캐릭터 이미지와 오디오를 일괄 제출하고, 영상 제작 애플리케이션에 디지털 휴먼 출연 클립을 제공해 재촬영이나 대사 장면 생성에 활용합니다.

제한 사항 및 선택 가이드

구동 오디오는 필수 입력이며, 영상 내용은 오디오에 의해 구동되고 캐릭터 이미지도 함께 제공해야 합니다. 입력 오디오 길이는 4~300초여야 하며, 4초 미만인 작업은 실패하고 전액 환불됩니다. 캐릭터 이미지는 형식과 크기 요구 사항을 충족해야 하며, 가로세로 비율은 0.4~2.5, 각 변은 300~6000픽셀입니다. 프롬프트는 선택 사항이며 최대 300자입니다.

  • 새 모델 OmniHuman 2.0 출시: 인물 사진 한 장과 오디오 한 개로 최대 5분 분량의 말하는 영상 생성

자주 묻는 질문

모든 질문 보기 →
  • 이미지 한 장과 오디오 한 개만 주면 영상이 나오나요?

    네, 이 모델의 입력은 인물 이미지 한 장과 구동 오디오 한 개이며, 필수 항목은 image_url과 audio_url뿐입니다. 이미지는 jpeg, png, webp를 지원하고 단일 파일 10MB 이하, 가로세로 비율 0.4~2.5, 각 변 300~6000픽셀이어야 합니다. 오디오는 mp3, wav를 지원하며 길이 4~300초, 15MB 이하여야 합니다. 영상 내용은 오디오에 의해 구동되고 길이는 오디오와 동일하며, 완성된 영상은 이미지의 가로세로 비율을 유지합니다.

  • 디지털 휴먼 영상을 얼마나 길게 생성할 수 있나요?

    단일 연속 샷은 최대 5분이며, 이에 대응하는 오디오 상한은 300초로, 분할拼接이 필요하지 않습니다. 오디오 최소 길이는 4초이며, 4초 미만인 작업은 실패하고 전액 환불됩니다. 긴 구간의 연속 연기를 원할 때는 전체 내레이션이나 대사를 하나의 오디오로 제출하는 것이 분할 생성 후 이어 붙이는 것보다 간편하고, 연결 지점에서의 입 모양과 표정 급변 문제도 덜 발생합니다.

  • 출력 해상도는 얼마인가요, 1080p로 만들 수 있나요?

    이 모델에는 해상도 파라미터가 없어서 1080p를 지정할 수 없습니다. 결과물의 화면 비율과 해상도는 입력한 인물 이미지를 따르며, 예를 들어 960×960 인물 이미지는 960×960 영상이 됩니다. 세로형, 가로형 소재 모두 바로 사용할 수 있습니다. 결과물을 더 선명하게 만들고 싶다면 선명하고 구도가 깔끔한 인물 이미지와 깨끗한 오디오를 사용하세요.

  • 내레이션, 노래, 대화를 각각 다른 모델로 나눠 써야 하나요?

    아니요, 동일한 모델이 내레이션, 노래, 대화 세 가지 오디오를 모두 커버하며 별도의 노래 모드는 없습니다. 입 모양, 얼굴 표정, 신체 동작은 오디오의 억양, 리듬, 감정, 의미에 맞춰 동기화되어 변화하며, 오디오 유형을 바꾸려면 오디오 자체만 교체하면 됩니다. 이것이 초기에 입 모양 정렬만 하던 도구와 비교했을 때 표현력에서 나타나는 주요 차이점입니다.

동일 유형