Skip to main content
Ir a la página de inicio de la Comisión Europea (se abrirá en una nueva ventana)
español es
CORDIS - Resultados de investigaciones de la UE
CORDIS

Model-based Reinforcement Learning for Versatile Robots in the Real World

Descripción del proyecto

Aprendizaje rápido para robots

Aprender de la experiencia es un rasgo humano esencial que nos permite ser muy diestros y tener éxito en múltiples tareas. Facilitar que los robots autónomos aprendan de manera eficaz a partir de la experiencia les permitirá resolver tareas nuevas y complejas, y el aprovechamiento de sus capacidades específicas podría convertirlos en asistentes omnipresentes para las personas. Hoy día, se emplean métodos de aprendizaje por refuerzo no basados en modelos, pero estos requieren una gran cantidad de interacciones con el mundo real. Teniendo esto en cuenta, en el proyecto REAL-RL, financiado por el Consejo Europeo de Investigación, se examinará un método basado en modelos en el que las interacciones con el mundo real se aprenden a través de la experiencia y se registran en un modelo de aprendizaje, que se puede emplear para la simulación mental, lo que disminuye la cantidad requerida de interacciones con el mundo real. El equipo del proyecto desarrollará métodos genéricos de aprendizaje que se puedan emplear para controlar cualquier robot con piernas, brazos u otras morfologías.

Objetivo

REAL-RL proposes a path to autonomous robots that learn from experience. By learning to solve new and challenging tasks and exploiting their specific capabilities, they could become ubiquitous assistants to humans in an uncountable number of tasks. Current control strategies for robots are developed only for particular tasks and are not versatile. To ensure their functioning, it is necessary to have highly accurate physical models that precisely match all the essential aspects of the real world. REAL-RL follows a different path: a learning approach to robot control. The dominant direction in the field uses model-free reinforcement learning methods that need an incredible number of interactions with the world – often prohibitive for real robots. As a bypass, simulations are used but require detailed knowledge of all possible situations that the robot might encounter. These problems are circumvented in REAL-RL by proposing a model-based approach. Models of the interaction with the world are learned from experience and will be used to plan and adapt behavior on the fly. This approach promises to be much more data-efficient and allows to transfer of valuable experience between tasks. Fundamental challenges in model-learning, safety-aware exploration and planning, and higher-order reasoning are identified and presented here with concrete novel solution ideas, such as a causal inductive bias for deep dynamics models, risk-aware real-time general trajectory optimization, and differentiable discrete planning. Critical stepping stones, such as probabilistic models and fast trajectory planning, have just been developed by the community, and the applicant. By aiming at a generic learning method that can be used to control any robot – rigid or soft – with legs, arms, or other end-effectors for manipulation and locomotion tasks, and make them improve with experience, the proposal develops a solid basis for future robotic applications.

Ámbito científico (EuroSciVoc)

Palabras clave

Programa(s)

Tema(s)

Régimen de financiación

HORIZON-ERC - HORIZON ERC Grants

Ver todos los proyectos financiados en el marco de este régimen de financiación

Convocatoria de propuestas

(se abrirá en una nueva ventana) ERC-2021-COG

Ver todos los proyectos financiados en el marco de esta convocatoria

Institución de acogida

EBERHARD KARLS UNIVERSITAET TUEBINGEN
Aportación neta de la UEn
€ 1 998 500,00
Dirección
GESCHWISTER-SCHOLL-PLATZ
72074 Tuebingen
Alemania
Región
Baden-Württemberg Tübingen Tübingen, Landkreis
Tipo de actividad
Higher or Secondary Education Establishments
Enlaces
Coste total
€ 1 998 500,00

Beneficiarios (2)