🚀Nuevo de Meta FAIR: hoy estamos presentando Interacción Sin Costuras, un proyecto de investigación dedicado a modelar dinámicas interpersonales. El proyecto cuenta con una familia de modelos de comportamiento audiovisual, desarrollados en colaboración con el laboratorio de Avatares Codec de Meta + el laboratorio de IA Core, que convierten el habla entre dos individuos en diversos gestos corporales expresivos y comportamientos de escucha activa, permitiendo la creación de avatares completamente incorporados en 2D y 3D. Estos modelos tienen el potencial de crear agentes virtuales más naturales e interactivos que pueden participar en interacciones sociales similares a las humanas en una variedad de entornos. Más información:

También estamos lanzando públicamente el conjunto de datos de interacción sin interrupciones, con 4,000+ participantes y 4,000+ horas de interacciones, lo que lo convierte en el conjunto de datos de video más grande conocido de su tipo. Este conjunto de datos permite que nuestros modelos de comportamiento audiovisual comprendan y generen comportamientos sociales similares a los humanos, y representa un trampolín crucial para comprender y modelar cómo las personas se comunican y se comportan cuando están juntas. Lo compartimos aquí para ayudar a la comunidad investigadora a avanzar en su trabajo:

Una cosa más... También puede consultar este informe técnico que detalla nuestra metodología para construir modelos de movimiento en el conjunto de datos, junto con un marco de evaluación para este tipo de modelo:

Dirígete a nuestro blog para profundizar en la historia completa: