Skip to main content
Aller à la page d’accueil de la Commission européenne (s’ouvre dans une nouvelle fenêtre)
français fr
CORDIS - Résultats de la recherche de l’UE
CORDIS

FAME: OPEN-ENDED MANIPULATION TASK LEARNING WITH FAME (FUTURE-ORIENTED COGNITIVE1 ACTION MODELLING ENGINE)

Description du projet

Permettre à des robots de contextualiser des demandes de tâches de manipulation sous-déterminées

Le formidable défi que représente la création de modèles informatiques pour des tâches de manipulation polyvalentes, applicables à n’importe quel objet et à n’importe effet, pourrait révolutionner l’IA et la robotique. Le projet FAME, financé par le CER, entend doter les robots d’un cadre KR&R basé sur des modèles du monde intérieur interprétables par la machine, leur permettant de contextualiser les demandes de tâches de manipulation sous-déterminées dès la première tentative. Le projet concevra, déploiera et évaluera le moteur de modélisation des actions cognitives orientées vers l’avenir (FAME), un cadre hybride symbolique/sous-symbolique de KR&R. Le projet se propose de modéliser et paramétrer les modèles de mouvement de manipulation, à simuler mentalement des tâches de manipulation imaginées et observées, et à acquérir à la demande des modèles de causalité spécifiques à de nouvelles tâches de manipulation grâce à des simulations basées sur la physique mentale.

Objectif

The realization of computational models for accomplishing everyday manipulation tasks for any object and any purpose would be a
disruptive breakthrough in the creation of versatile, general-purpose robot agents; and it is a grand challenge for AI and robotics.
Humans are able to accomplish tasks such as “cut up the fruit” for many types of fruit by generating a large variety of context-specific
manipulation behaviors. They can typically accomplish the tasks on the first attempt despite uncertain physical conditions and novel
objects. Acting so effectively requires comprehensive reasoning about the possible consequences of intended behavior before
physically interacting with the real world.
In the FAME project, I will investigate the research hypothesis that a knowledge representation and reasoning (KR&R) framework
based on explictly-represented and machine-interpretable inner-world models can enable robots to contextualize underdetermined
manipulation task requests on the first attempt. To this end, I will design, implement, and evaluate FAME (Future-oriented cognitive
Action Modelling Engine), a hybrid symbolic/subsymbolic KR&R framework that will contextualize actions by reasoning symbolically
in an abstract and generalized manner but also by reasoning with “one’s eyes and hands” through mental simulation and imagistic
reasoning. Realizing FAME requires three breakthrough research results:
(1) modelling and parameterization of manipulation motion patterns and understanding the resulting effects under
uncertain conditions;
(2) the ability to mentally simulate imagined and observed manipulation tasks to link them to the robot’s knowledge and experience;
and
(3) the on-demand acquisition of task-specific causal models for novel manipulation tasks through mental physics-based simulations.
To assess the power and feasibility of FAME, I will use open manipulation task learning as a benchmark challenge.

Champ scientifique (EuroSciVoc)

Programme(s)

Thème(s)

Régime de financement

HORIZON-ERC - HORIZON ERC Grants

Voir tous les projets financés dans le cadre de ce programme de financement

Appel à propositions

(s’ouvre dans une nouvelle fenêtre) ERC-2022-ADG

Voir tous les projets financés au titre de cet appel

Institution d’accueil

UNIVERSITAET BREMEN
Contribution nette de l'UE
€ 2 499 063,00
Adresse
Bibliothekstrasse 1
28359 Bremen
Allemagne
Région
Bremen Bremen Bremen, Kreisfreie Stadt
Type d’activité
Higher or Secondary Education Establishments
Liens
Coût total
€ 2 499 063,00

Bénéficiaires (1)