Hogar
El equipo de Li Feifei presenta un método para generar campos de entrenamiento infinitos para robots a partir de un único vídeo
En el ámbito de la inteligencia incorporada, salvar la brecha entre la simulación y la realidad —lo que se conoce como «Sim2Real»— ha sido durante mucho tiempo un obstáculo persistente. Los entornos de simulación son costosos y, con frecuencia, los modelos pierden rendimiento cuando se implementan en entornos físicos. Un estudio colaborativo reciente del equipo de Li Fei-Fei, el NVIDIA GEAR Lab y Georgia Tech presenta una solución novedosa: Real2Sim.
Denominado «SimFoundry», este sistema crea simulaciones robóticas interactivas, entrenables y comprobables utilizando vídeos sencillos del mundo real. Más allá de la reconstrucción 3D tradicional, SimFoundry realiza un análisis profundo de la escena para automatizar la creación del entorno, lo que reduce drásticamente el esfuerzo necesario para construir simulaciones.

La innovación principal de SimFoundry consiste en un bucle cerrado entre «gemelos digitales» y «primos digitales». El sistema extrae datos geométricos, físicos e interactivos de los vídeos para construir gemelos digitales de alta fidelidad. A continuación, varía automáticamente la apariencia, la disposición y las tareas para generar diversos primos digitales. Esto permite a los desarrolladores obtener datos de entrenamiento prácticamente ilimitados a partir de un único vídeo, lo que facilita el aprendizaje y la evaluación de estrategias de principio a fin dentro de la simulación.
Los experimentos confirman la gran capacidad predictiva de SimFoundry, ya que el rendimiento simulado de los robots se ajusta estrechamente a los resultados del mundo real. Es fundamental destacar que las estrategias entrenadas con estos datos sintéticos se transfieren eficazmente a la realidad sin necesidad de ajuste fino («zero-shot»), destacando en tareas complejas como operaciones de varios pasos y la coordinación de dos brazos.
Este sistema de código abierto, cuyo artículo ha sido escrito conjuntamente por destacados expertos en robótica —entre los que se incluyen miembros clave del NVIDIA GEAR Lab y del equipo de Li Fei-Fei—, promete transformar el desarrollo de la IA incorporada. Al sustituir la costosa recopilación manual de datos por tecnología generativa, los robots pueden ahora pasar del laboratorio a las aplicaciones del mundo real mucho más rápidamente.
Enlace al artículo: https://arxiv.org/pdf/2606.28276v1
Artículo relacionado
El Senado exige que los centros de datos revelen sus facturas de energía
Dos senadores de Estados Unidos han intensificado su campaña contra los centros de datos y su consumo energético, enviando una carta el jueves a la Administración de Información Energética de EE. UU. (EIA). Los senadores Josh Hawley y Elizabeth Warre
Mira Murati regresa al centro de atención con un enfoque cuidadoso
Mira Murati nunca ha encajado naturalmente en el circuito de conferencias. Como CTO de OpenAI, permaneció en gran medida detrás de escena, sirviendo raramente como el rostro público de la empresa. Ahora al frente de su propia empresa, Thinking Machin
Informe de Adobe Creator: el 80 % afirma que la IA impulsa el crecimiento de la base de seguidores y del negocio
A medida que la inteligencia artificial acelera su expansión global, el sector de la creación de contenidos está experimentando un cambio fundamental. Las herramientas creativas de IA ya no son solo h
Recomendaciones de temas especiales relacionados
comentario (0)
0/500
En el ámbito de la inteligencia incorporada, salvar la brecha entre la simulación y la realidad —lo que se conoce como «Sim2Real»— ha sido durante mucho tiempo un obstáculo persistente. Los entornos de simulación son costosos y, con frecuencia, los modelos pierden rendimiento cuando se implementan en entornos físicos. Un estudio colaborativo reciente del equipo de Li Fei-Fei, el NVIDIA GEAR Lab y Georgia Tech presenta una solución novedosa: Real2Sim.
Denominado «SimFoundry», este sistema crea simulaciones robóticas interactivas, entrenables y comprobables utilizando vídeos sencillos del mundo real. Más allá de la reconstrucción 3D tradicional, SimFoundry realiza un análisis profundo de la escena para automatizar la creación del entorno, lo que reduce drásticamente el esfuerzo necesario para construir simulaciones.

La innovación principal de SimFoundry consiste en un bucle cerrado entre «gemelos digitales» y «primos digitales». El sistema extrae datos geométricos, físicos e interactivos de los vídeos para construir gemelos digitales de alta fidelidad. A continuación, varía automáticamente la apariencia, la disposición y las tareas para generar diversos primos digitales. Esto permite a los desarrolladores obtener datos de entrenamiento prácticamente ilimitados a partir de un único vídeo, lo que facilita el aprendizaje y la evaluación de estrategias de principio a fin dentro de la simulación.
Los experimentos confirman la gran capacidad predictiva de SimFoundry, ya que el rendimiento simulado de los robots se ajusta estrechamente a los resultados del mundo real. Es fundamental destacar que las estrategias entrenadas con estos datos sintéticos se transfieren eficazmente a la realidad sin necesidad de ajuste fino («zero-shot»), destacando en tareas complejas como operaciones de varios pasos y la coordinación de dos brazos.
Este sistema de código abierto, cuyo artículo ha sido escrito conjuntamente por destacados expertos en robótica —entre los que se incluyen miembros clave del NVIDIA GEAR Lab y del equipo de Li Fei-Fei—, promete transformar el desarrollo de la IA incorporada. Al sustituir la costosa recopilación manual de datos por tecnología generativa, los robots pueden ahora pasar del laboratorio a las aplicaciones del mundo real mucho más rápidamente.
Enlace al artículo: https://arxiv.org/pdf/2606.28276v1
El Senado exige que los centros de datos revelen sus facturas de energía
Dos senadores de Estados Unidos han intensificado su campaña contra los centros de datos y su consumo energético, enviando una carta el jueves a la Administración de Información Energética de EE. UU. (EIA). Los senadores Josh Hawley y Elizabeth Warre
Mira Murati regresa al centro de atención con un enfoque cuidadoso
Mira Murati nunca ha encajado naturalmente en el circuito de conferencias. Como CTO de OpenAI, permaneció en gran medida detrás de escena, sirviendo raramente como el rostro público de la empresa. Ahora al frente de su propia empresa, Thinking Machin
Informe de Adobe Creator: el 80 % afirma que la IA impulsa el crecimiento de la base de seguidores y del negocio
A medida que la inteligencia artificial acelera su expansión global, el sector de la creación de contenidos está experimentando un cambio fundamental. Las herramientas creativas de IA ya no son solo h











