Skip to main content
Przejdź do strony domowej Komisji Europejskiej (odnośnik otworzy się w nowym oknie)
polski pl
CORDIS - Wyniki badań wspieranych przez UE
CORDIS

Model-based Reinforcement Learning for Versatile Robots in the Real World

Opis projektu

Sprawić, by roboty uczyły się szybciej

Uczenie się na podstawie doświadczeń to jedna z podstawowych ludzkich cech, która pozwala nam stać się bardzo zręcznymi i skutecznie wykonywać różnorodne zadania. Umożliwienie robotom autonomicznym efektywnego uczenia się na podstawie doświadczeń pozwoliłoby im na rozwiązywanie nowych, trudnych zadań, a wykorzystanie ich specyficznych możliwości sprawiłoby, że stałyby się powszechnymi asystentami człowieka. Obecnie stosuje się niewykorzystujące modeli metody uczenia ze wzmocnieniem, ale wymagają one ogromnej liczby interakcji ze światem rzeczywistym. Z tych względów zespół finansowanego przez Europejską Radę ds. Badań Naukowych projektu REAL-RL zbada podejście oparte na modelach, w którym interakcje ze światem są trenowane na podstawie doświadczeń i ujmowane w wyuczonym modelu. Te ostatnie można wykorzystać do symulacji mentalnej, zmniejszając tym samym wymaganą ilość interakcji w świecie rzeczywistym. W projekcie powstaną ogólne metody uczenia, które będą mogły zostać wykorzystane do sterowania dowolnym robotem z nogami, rękami lub innymi elementami morfologicznymi.

Cel

REAL-RL proposes a path to autonomous robots that learn from experience. By learning to solve new and challenging tasks and exploiting their specific capabilities, they could become ubiquitous assistants to humans in an uncountable number of tasks. Current control strategies for robots are developed only for particular tasks and are not versatile. To ensure their functioning, it is necessary to have highly accurate physical models that precisely match all the essential aspects of the real world. REAL-RL follows a different path: a learning approach to robot control. The dominant direction in the field uses model-free reinforcement learning methods that need an incredible number of interactions with the world – often prohibitive for real robots. As a bypass, simulations are used but require detailed knowledge of all possible situations that the robot might encounter. These problems are circumvented in REAL-RL by proposing a model-based approach. Models of the interaction with the world are learned from experience and will be used to plan and adapt behavior on the fly. This approach promises to be much more data-efficient and allows to transfer of valuable experience between tasks. Fundamental challenges in model-learning, safety-aware exploration and planning, and higher-order reasoning are identified and presented here with concrete novel solution ideas, such as a causal inductive bias for deep dynamics models, risk-aware real-time general trajectory optimization, and differentiable discrete planning. Critical stepping stones, such as probabilistic models and fast trajectory planning, have just been developed by the community, and the applicant. By aiming at a generic learning method that can be used to control any robot – rigid or soft – with legs, arms, or other end-effectors for manipulation and locomotion tasks, and make them improve with experience, the proposal develops a solid basis for future robotic applications.

Dziedzina nauki (EuroSciVoc)

Słowa kluczowe

Program(-y)

Temat(-y)

System finansowania

HORIZON-ERC - HORIZON ERC Grants

Wyświetl wszystkie projekty finansowane w ramach tego programu finansowania

Zaproszenie do składania wniosków

(odnośnik otworzy się w nowym oknie) ERC-2021-COG

Wyświetl wszystkie projekty finansowane w ramach tego zaproszenia

Instytucja przyjmująca

EBERHARD KARLS UNIVERSITAET TUEBINGEN
Wkład UE netto
€ 1 998 500,00
Adres
GESCHWISTER-SCHOLL-PLATZ
72074 Tuebingen
Niemcy
Region
Baden-Württemberg Tübingen Tübingen, Landkreis
Rodzaj działalności
Higher or Secondary Education Establishments
Linki
Koszt całkowity
€ 1 998 500,00

Beneficjenci (2)