Compartir

Los sistemas robóticos deben funcionar en entornos abiertos y complejos, donde es imposible tener un conocimiento completo del mundo. Esta charla explora como los Grandes Modelos de Lenguaje Multimodales ((M)LLMs) pueden apoyar el razonamiento robótico en condiciones de incertidumbre, al tiempo que se abordan los retos que plantean agentes incontrolados como los humanos.

Iremos más allá de la aplicación directa de los MLLMs introduciendo técnicas para controlar las alucinaciones y garantizar un razonamiento sólido.

Estas técnicas incluyen la integración de metodologías formales y enfoques neurosimbólicos para crear procesos de razonamiento más fiables y adaptativos para sistemas robóticos en el mundo real.

Programa

  • Introducción: El Problema de los Entornos Abiertos en Robótica
  • (M)LLMs como Fuentes Universales de Conocimiento
  • Control de las Alucinaciones y Mejora de la Solidez
  • Aterrizar la Percepción y Aprender a partir de Datos de los Robots
  • Generación Flexible de Planes a partir del Lenguaje Natural
  • Gestión de la Incertidumbre y Preferencias Humanas
  • Detección y Resolución de Fallos en la Ejecución de Acciones
  • Discusión: El Camino a Seguir en el Razonamiento de Robots en Entornos Abiertos

Masterclass impartida por Eurecat

[descargas tipo="masterclass"]

Impartido por:

Magí Dalmau Moreno
Jefe de Robótica Cognitiva en Eurecat

Magí Dalmau obtuvo su título en Ingeniería Industrial por la Universidad Politécnica de Cataluña en 2019 y completó su máster en Inteligencia Artificial en la Universidad Pompeu Fabra en 2022.

Se unió a Eurecat en 2019 como investigador dentro del grupo de Manipulación Robótica. Desde enero de 2024, es el jefe del grupo de Robótica Cognitiva, liderando la investigación para dotar a los robots de capacidades de razonamiento e interacción natural en escenarios centrados en los humanos, aprovechando la Inteligencia Artificial Generativa, el Aprendizaje por Refuerzo y la Planificación con IA.

CIDAI