Skip to main content
Ir a la página de inicio de la Comisión Europea (se abrirá en una nueva ventana)
español español
CORDIS - Resultados de investigaciones de la UE
CORDIS

Research on Embodied Perception and Intelligent Interaction Methods Driven by Multimodal Large Models

Descripción del proyecto

Inteligencia artificial incorporada: integración inteligente de la información sensorial en la robótica

La inteligencia incorporada se refiere a la capacidad de los «agentes» para responder a las señales de sus «cuerpos» y entornos con comportamientos inteligentes. Tiene un importante papel que desempeñar en la mejora de las capacidades cognitivas de los robots en diversos entornos, como el hogar, el ámbito médico y la industria, en comparación con la actual preprogramación de comportamientos específicos. Con el apoyo de las acciones Marie Skłodowska-Curie, el proyecto Embodied Perception aspira a impulsar modelos multimodales (basados en la integración de múltiples modalidades sensoriales) que apoyen la inteligencia incorporada. En concreto, la orientación visual tridimensional precisa, la percepción mejorada, la comprensión del lenguaje, el razonamiento inteligente y el conocimiento de la situación aumentarán las capacidades interactivas de los robots en entornos complejos.

Objetivo

With the rapid development of artificial intelligence technology, embodied intelligence has shown tremendous potential in fields such as home robotics, medical robots, and industrial design. This research focuses on open-world embodied perception and intelligent interaction methods driven by multimodal large models, aiming to develop advanced models that achieve accurate 3D visual grounding and intelligent reasoning, thereby enhancing the perceptual and interactive capabilities of robots in complex environments. The study will explore how to utilize multimodal large models to process and integrate various sensory inputs, enabling robots to accurately perceive 3D environments, understand context, and make intelligent decisions. Additionally, this research will strive to improve robots' natural interaction capabilities with humans and the environment, including language understanding and situational adaptation. This research not only holds significant academic value and profound implications for advancing artificial intelligence and robotics technologies, but also provides innovative solutions to challenges in practical applications, contributing importantly to improving production efficiency, enhancing medical services, and elevating quality of life.

Ámbito científico (EuroSciVoc)

CORDIS clasifica los proyectos con EuroSciVoc, una taxonomía plurilingüe de ámbitos científicos, mediante un proceso semiautomático basado en técnicas de procesamiento del lenguaje natural. Véase: https://op.europa.eu/en/web/eu-vocabularies/euroscivoc.

Para utilizar esta función, debe iniciar sesión o registrarse

Régimen de financiación

HORIZON-TMA-MSCA-PF-EF -

Coordinador

UNIVERSITY COLLEGE LONDON
Aportación neta de la UEn
€ 260 347,92
Dirección
GOWER STREET
WC1E 6BT London
Reino Unido

Ver en el mapa

Región
London Inner London — West Camden and City of London
Tipo de actividad
Institutos de educación secundaria o superior
Enlaces
Coste total
Sin datos
Mi folleto 0 0