Día tras día la inteligencia artificial nos sorprende con alguna novedad. En este caso un grupo de investigadores de la Universidad de Berkeley, han sido capaces de predecir los gestos de una persona, a partir de una grabación de voz.
Para conseguir ésto, entrenaron una IA con un dataset de 144 h. de vídeo de diez oradores distintos, entre ellos presentadores de televisión, profesores de universidad y telepredicadores.
La resultados de la IA son utilizados por una aplicación que representa esquemáticamente los gestos predichos por la IA. Luego obviamente se utilizan para sintetizar un nuevo vídeo con los gestos obtenidos ¡et voilà! ya tenemos un nuevo fake.
Además de utilizarlo para animar avatares de nuestras conversaciones telefónicas, no se me ocurre ningún uso inmediato.
Quién sabe, si lo ponemos marcha atrás lo mismo sirve para traducir conversaciones al lenguaje de signos.
Tenéis los vídeos con los resultados en el artículo original. Merece la pena verlos.
Fuente: people.eecs.berkeley.edu, leer artículo original
http://people.eecs.berkeley.edu/~shiry/projects/speech2gesture/