ByteDance presenta su nuevo modelo de IA OmniHuman-1, generando animaciones realistas de cuerpo completo

ByteDance lanza el modelo OmniHuman-1
El 6 de febrero, los investigadores de ByteDance mostraron recientemente un modelo de IA capaz de generar videos de medio cuerpo y cuerpo completo a partir de una sola imagen y un clip de audio.
Animación de cuerpo completo y sincronización precisa
ByteDance afirmó que, a diferencia de algunas tecnologías de deepfake que solo generan animaciones de la cara o la parte superior del cuerpo, OmniHuman-1 es capaz de generar animaciones de cuerpo completo realistas y puede sincronizar con precisión los gestos y las expresiones faciales con la voz o la música.
Exposición del proyecto y aplicaciones
ByteDance publicó varios videos de prueba en su página de proyecto OmniHuman-lab, incluidos charlas TED generadas por IA y un Albert Einstein hablando. En un artículo publicado el lunes, ByteDance señaló que el modelo OmniHuman-1 admite diferentes tipos de cuerpo y relaciones de aspecto, lo que hace que los efectos de video sean más naturales.
Entrenamiento del modelo y rendimiento
Según IT Home, ByteDance afirmó que el modelo OmniHuman-1 se entrenó con aproximadamente 19,000 horas de datos de movimiento humano, lo que le permite generar videos de cualquier longitud dentro de los límites de memoria y adaptarse a diferentes señales de entrada. Los investigadores también mencionaron que OmniHuman-1 supera a otras herramientas de animación en términos de realismo y precisión.
Aún no disponible para su descarga o servicio
Actualmente, la herramienta no está disponible para su descarga ni servicio.
Conclusión
El modelo OmniHuman-1 de ByteDance, que genera animaciones realistas de cuerpo completo a partir de imágenes y audio, demuestra la innovación y los avances de la compañía en tecnología de IA. OmniHuman-1 no solo sincroniza con precisión los gestos y las expresiones faciales, sino que también admite diferentes tipos de cuerpo y relaciones de aspecto, proporcionando un potente soporte técnico para generar efectos de video naturales. Aunque la herramienta aún no está disponible para su descarga o servicio, su desempeño en términos de realismo y precisión ya ha atraído una gran atención y expectativas.