MIDAS: ¡La IA que da vida a avatares digitales interactivos en riempo real!

Descubre MIDAS, un innovador framework para la síntesis de humanos digitales que revoluciona la creación de avatares virtuales interactivos. Este sistema pionero permite la generación de videos en tiempo real de avatares virtuales dinámicos, capaces de sincronizar el habla con expresiones faciales y movimientos corporales naturales. Lo que lo distingue es su capacidad para aceptar múltiples señales de control multimodales, incluyendo audio, postura y texto, transformando retratos estáticos en experiencias digitales envolventes. Gracias a su modelo autorregresivo basado en LLM y un autoencoder de compresión profunda con una relación de reducción de hasta 64x, MIDAS garantiza baja latencia, alta eficiencia y coherencia visual y de identidad en videos de larga duración. Entrenado con un vasto conjunto de datos de aproximadamente 20,000 horas de diálogo, abre nuevas avenidas para aplicaciones en educación virtual, medios creativos, conversaciones multilingües y modelos de mundos interactivos.https://arxiv.org/pdf/2508.19320