Innovación | IA

Tencent lanza DynamiCrafter, su revolucionario modelo de generación de videos

Tencent lanza una nueva versión de su modelo de generación de videos DynamiCrafter

La gigante de internet china, Tencent, ha presentado una nueva versión de su modelo de generación de videos de código abierto, DynamiCrafter, en GitHub. Esta noticia demuestra que algunas de las mayores empresas tecnológicas de China han estado aumentando discretamente sus esfuerzos para hacerse un hueco en el espacio de la conversión de texto e imágenes a video.

El modelo DynamiCrafter utiliza el método de difusión para convertir subtítulos e imágenes estáticas en videos de varios segundos. Inspirado en el fenómeno natural de la difusión en la física, los modelos de difusión en el aprendizaje automático pueden transformar datos simples en datos más complejos y realistas, de manera similar a cómo las partículas se mueven de una zona de alta concentración a otra de baja concentración.

Segunda generación de DynamiCrafter con mejoras en la resolución

La segunda generación de DynamiCrafter está generando videos con una resolución de píxeles de 640×1024, una mejora con respecto a su lanzamiento inicial en octubre, que presentaba videos de 320×512 píxeles. Un artículo académico publicado por el equipo detrás de DynamiCrafter señala que su tecnología se diferencia de la de sus competidores en que amplía la aplicabilidad de las técnicas de animación de imágenes a un "contenido visual más general".

Según el artículo, la clave es utilizar la prioridad del movimiento de los modelos de difusión de texto a video incorporando la imagen en el proceso generativo como guía. En comparación, las técnicas "tradicionales" se centran principalmente en animar escenas naturales con dinámicas estocásticas (como nubes y fluidos) o movimientos específicos del dominio (como cabello humano o movimientos corporales).

Comparativa de DynamiCrafter con otros modelos

En una demostración que compara DynamiCrafter, Stable Video Diffusion (lanzado en noviembre) y el recientemente popularizado Pika Labs, el resultado del modelo de Tencent parece tener un poco más de animación que los demás. Sin embargo, las muestras elegidas favorecerían a DynamiCrafter, y ninguno de los modelos, después de mis primeros intentos, da la impresión de que la IA pronto podrá producir películas completas.

A pesar de esto, los videos generativos se han convertido en el próximo punto focal en la carrera de la IA después del auge de los textos e imágenes generativos. Por lo tanto, se espera que las startups y las empresas tecnológicas destinen recursos al campo. Esto no es una excepción en China. Además de Tencent, la empresa matriz de TikTok, ByteDance, Baidu y Alibaba han lanzado sus propios modelos de difusión de videos.

ByteDance, Baidu y Alibaba también se suman a la carrera de los videos generativos

Tanto MagicVideo de ByteDance como UniVG de Baidu han publicado demos en GitHub, aunque ninguno parece estar disponible para el público todavía. Al igual que Tencent, Alibaba ha lanzado su modelo de generación de videos VGen de código abierto, una estrategia cada vez más popular entre las empresas tecnológicas chinas que esperan llegar a la comunidad global de desarrolladores.


Podcast El Desván de las Paradojas
Publicidad


Otras noticias • IA

Discriminación

Gemini de Google causa controversia al colocar personas de color

Gemini, el chatbot de Google, ha generado controversia por su falta de sensibilidad cultural al colocar a personas de color en uniformes nazis. Además, presenta...

Tecnología

Apple revoluciona GenAI con actualizaciones en Siri, Spotlight y más

Apple se compromete a innovar en GenAI este año con actualizaciones en Siri y Spotlight, así como nuevas funciones en Keynote, Apple Music y Xcode....

Innovación

Morph Studio revoluciona la creación de películas con IA

Morph Studio ha lanzado una herramienta de creación de películas con clips de video generados por IA. La plataforma permite a los usuarios editar y...

Innovación

SambaNova revoluciona inteligencia artificial con sistema modular y personalizado

SambaNova lanza Samba-1, un sistema de inteligencia artificial generativa modular y personalizado para empresas, que ofrece control sobre las solicitudes y respuestas, reduciendo costes de...

Inversión

Photoroom obtiene $43 millones para potenciar su app de edición

Photoroom cierra una ronda de financiación de $43 millones para potenciar su aplicación de edición de fotos basada en IA, con un enfoque en el...

Alianza

Humane y SK Telecom lanzan CosmOS en Corea del Sur

Humane anuncia su lanzamiento en Corea del Sur en asociación con SK Telecom, con planes de licenciar su sistema operativo CosmOS para el Ai Pin....

Inteligencia

Mistral AI lanza Mistral Large para competir con GPT-4

Mistral AI presenta Mistral Large para competir con GPT-4, con acceso a través de su plataforma API. La asociación con Microsoft y la inversión en...

Competencia

Alibaba desafía a OpenAI en desarrollo de inteligencia artificial

Empresas tecnológicas chinas como Alibaba están trabajando intensamente para igualar a OpenAI en el desarrollo de modelos de lenguaje, con investigadores como Binyuan Hui dedicando...