Aviso: GPT Image 2.6 Flare y Sunburst ya están disponibles con un 20 % de descuento por tiempo limitado, pruébalo ahora
HiAPI
omnihuman-2.0 详情页 Hero 宽幅图:左侧柔光留白,右侧玻璃胶片带与虹彩声波光缆,暖奶油底配冰蓝珊瑚色,名字以发光蚀刻字呈现。

ByteDance

OmniHuman 2.0

omnihuman-2.0

Modelo de video de avatar digital de segunda generación de ByteDance: con una sola imagen de una persona o personaje y una pista de voz o canto, genera un video de actuación en el que la sincronización labial, las expresiones faciales y los movimientos corporales acompañan al audio; el plano continuo más largo por generación es de 5 minutos y se pueden añadir prompts para controlar las acciones y el movimiento de cámara

omnihuman-2.0

Probar omnihuman-2.0

Entrada

Salida

video
Rellena los parámetros y genera: los resultados aparecerán aquí.

Precios

omnihuman-2.0 per second

Precio unitario $0.100

Descripción general

Este es un modelo de generación de vídeo de personajes digitales impulsado por audio: recibe una imagen de una persona real o de un personaje ilustrado y una pista de voz o canto, y produce un vídeo de actuación sincronizado con el audio. La duración del vídeo sigue al audio y la imagen mantiene la relación de aspecto de la imagen original; opcionalmente se puede usar un prompt para describir la escena, las expresiones, los gestos y el movimiento de cámara. Está pensado para desarrolladores y creadores de contenido que necesitan tomas de personajes hablando a cámara, cantando o dialogando, y se emplea en vídeos cortos para redes sociales, en la imagen de marca publicitaria y en material de actuación de personajes para aplicaciones de humanos digitales.

Aspectos destacados

  • Sincronización de labios y expresiones impulsada por audio: genera labios, expresiones y movimientos corporales acordes con el ritmo y el tono de la voz y del canto, y la duración del vídeo coincide con la del audio.
  • De imagen a vídeo manteniendo la proporción original: basta con subir una imagen del personaje para generar un vídeo de actuación; el resultado conserva la relación de aspecto de la imagen, lo que facilita insertarlo directamente en maquetas existentes.
  • Control de la actuación y del movimiento de cámara mediante prompt: un prompt opcional permite describir la escena, las expresiones, los gestos y efectos de cámara como un lento acercamiento.
  • Un solo audio cubre varios minutos de actuación: el audio de entrada admite de 4 a 300 segundos, y el vídeo puede prolongarse según el audio, lo que resulta idóneo para fragmentos continuos de locución o canto.

Capacidades

Generación de vídeo de personaje a partir de imagen y audio: con una imagen del personaje y un audio de entrada se genera un vídeo en el que ese personaje actúa; la imagen puede ser de una persona real o de un personaje ilustrado, y la salida conserva la relación de aspecto de la imagen original.

Actuación con sincronización labial: el vídeo genera los labios y las expresiones faciales correspondientes al ritmo de la voz o del canto de entrada, adecuado para material de narración, diálogo y canto, y la duración del vídeo coincide con la del audio.

Control de la actuación y de la cámara mediante prompt: el prompt opcional admite hasta 300 caracteres y sirve para describir la escena, las expresiones, los gestos y el movimiento de cámara.

Rango de duración del audio: el audio de entrada debe ser mp3 o wav, con una duración de 4 a 300 segundos y no superior a 15 MB; la duración del vídeo se corresponde con la del audio, lo que facilita planificar actuaciones continuas extensas.

Rango de especificaciones de la imagen: la imagen del personaje admite jpeg, png o webp, no supera los 10 MB, tiene una relación de aspecto entre 0,4 y 2,5 y entre 300 y 6000 píxeles por lado.

Casos de uso

  • Creadores de vídeos de locución para redes sociales: suben un retrato del presentador y un audio explicativo, generan un vídeo del personaje hablando a cámara y lo usan directamente para publicar vídeos cortos en plataformas sociales y actualizar la cuenta a diario.
  • Actuaciones musicales y de canto virtual: con imágenes de cantantes o de avatares virtuales junto con el audio de una canción, se producen imágenes del personaje cantando como material de actuación para contenidos musicales.
  • Vídeos cortos de embajadores de marca: con una imagen de la imagen de marca y la locución de un texto promocional, se generan vídeos cortos del embajador o presentador en pantalla para mostrarlos en anuncios y páginas de campañas.
  • Desarrolladores de aplicaciones de humanos digitales: integran la interfaz para enviar por lotes imágenes de personajes y audios, y ofrecen a las aplicaciones de creación de vídeo fragmentos de humanos digitales en pantalla para generar tomas de recurso o de diálogo.

Limitaciones y recomendaciones de selección

El audio de entrada es obligatorio: el contenido del vídeo se rige por el audio y además hay que proporcionar la imagen del personaje; la duración del audio de entrada debe estar entre 4 y 300 segundos, y las tareas de menos de 4 segundos fallan y se reembolsan íntegramente. La imagen del personaje debe cumplir los requisitos de formato y tamaño: relación de aspecto entre 0,4 y 2,5 y entre 300 y 6000 píxeles por lado. El prompt es opcional y admite un máximo de 300 caracteres.

  • Nuevo modelo OmniHuman 2.0 disponible: un retrato y un audio para generar un vídeo de una persona hablando de hasta 5 minutos

Preguntas frecuentes

Ver todas las preguntas →
  • ¿Basta con una sola imagen y una pista de audio para generar un video?

    Sí, la entrada de este modelo es una imagen de una persona más una pista de audio de conducción; los únicos campos obligatorios son image_url y audio_url. La imagen admite jpeg, png y webp, con un máximo de 10 MB por archivo, una relación de aspecto entre 0.4 y 2.5, y entre 300 y 6000 píxeles por lado; el audio admite mp3 y wav, con una duración de 4 a 300 segundos y un máximo de 15 MB. El contenido del video se genera a partir del audio, su duración coincide con la del audio y el resultado final conserva la relación de aspecto de la imagen.

  • ¿Qué duración puede tener el vídeo de humano digital que se puede generar?

    La duración máxima de un plano continuo es de 5 minutos, lo que corresponde a un límite de audio de 300 segundos, sin necesidad de dividir y empalmar segmentos. La duración mínima del audio es de 4 segundos; las tareas con menos de 4 segundos fallarán y se reembolsarán en su totalidad. Si deseas una actuación continua de larga duración, envía la narración o el diálogo completo en un solo archivo de audio; es más sencillo que generar por segmentos y luego empalmarlos, y también es menos propenso a saltos de sincronización labial y de expresiones en las uniones.

  • ¿Cuál es la resolución de salida? ¿Puede generar 1080p?

    Este modelo no tiene parámetro de resolución, por lo que no se puede especificar 1080p. El formato y la resolución del vídeo final siguen a la imagen de retrato de entrada; por ejemplo, un retrato de 960×960 dará como resultado un vídeo de 960×960, y tanto el material vertical como el horizontal se pueden usar directamente. Para que el vídeo final sea más nítido, utilice una imagen de retrato nítida y con una composición limpia, además de un audio limpio.

  • ¿Hay que usar modelos distintos para la narración, el canto y el diálogo?

    No es necesario: un mismo modelo cubre las tres categorías de audio (narración, canto y diálogo), no existe un modo de canto independiente. Su sincronización labial, sus expresiones faciales y sus movimientos corporales cambian de forma sincronizada siguiendo el tono, el ritmo, la emoción y la semántica del audio; para cambiar de tipo de audio basta con cambiar el propio audio. Esta es también la principal diferencia en expresividad respecto a las herramientas anteriores que solo hacían alineación labial.

Modelos relacionados

Ver todos los modelos →

Mismo tipo