Projektbeschreibung
Auf dem Weg zu einem verallgemeinerbaren menschlichen KI-Verständnis in offenen 3D-Umgebungen
Das rasante KI-Wachstum und die technologische Integration von großen Sprachmodellen (LLM) in eine Vielzahl von Diensten und Anwendungen haben den Bedarf an verbesserten visuellen Lern- und Sensorlösungen für die Zukunft der KI deutlich gemacht. Die Komplexität, Dynamik und Tiefe von Umgebungen sowie die Bewegungen und das Verhalten von Menschen machen dies zu einer ausgesprochen schwierigen Aufgabe, so dass die meisten Methoden in einer offenen Welt, die über bereichsspezifische Trainingsdaten hinaus Verallgemeinerungen erfordern, vor Herausforderungen stehen. Im Rahmen des ERC-finanzierten Projekts Human3D werden verallgemeinerbare visuelle Repräsentationen aus umfangreichen Trainingsdaten entwickelt und erforscht. Anschließend folgt die Erstellung eines Grundlagenmodells zur Unterstützung menschlicher Analyse- und Modellierungsaufgaben in offenen 3D-Umgebungen.
Ziel
The world is entering the age of autonomy, where systems like self-driving cars and assistive robots face the challenge of perceiving and understanding human behavior in complex, dynamic environments through sensory inputs like images. While human motion and behavior have been studied extensively using visual data, existing methods often struggle in open-world settings due to their inability to generalize beyond domain-specific training data. The goal of this project is to learn generalizable visual representations from large-scale training data and create a foundational model that supports various human analysis and modeling tasks, grounded in 3D environments, in an open-world setting. Our key objectives include (1) Devising new human-centric representations and algorithms for accurate 3D human motion and appearance reconstruction from in-the-wild videos. (2) Developing advanced generative models synthesizes large-scale, realistic virtual humans, emphasizing controllability and efficiency. (3) Designing physics-guided methods for long-duration human-scene interaction capture using embodied devices. (4) Studying efficient learning algorithms and unified model architectures for 3D human foundation models that enable efficient fine-tuning and generalization across various human-centric computer vision tasks. We aim to establish the computational and algorithmic groundwork for human-centric visual foundation models, with advancement in generative modeling, human-centric representation learning, and visual data simulation. Our work will facilitate the development of autonomous AI agents for various sectors, including autonomous driving, extended reality, education, and manufacturing. Ultimately, this project is committed to advancing human-centric AI technologies, fostering more robust and effective human-AI interaction, and paving the way for practical applications that significantly improve everyday life and industrial processes.
Wissenschaftliches Gebiet (EuroSciVoc)
CORDIS klassifiziert Projekte mit EuroSciVoc, einer mehrsprachigen Taxonomie der Wissenschaftsbereiche, durch einen halbautomatischen Prozess, der auf Verfahren der Verarbeitung natürlicher Sprache beruht. Siehe: Das European Science Vocabulary.
CORDIS klassifiziert Projekte mit EuroSciVoc, einer mehrsprachigen Taxonomie der Wissenschaftsbereiche, durch einen halbautomatischen Prozess, der auf Verfahren der Verarbeitung natürlicher Sprache beruht. Siehe: Das European Science Vocabulary.
- Naturwissenschaften Informatik und Informationswissenschaften künstliche Intelligenz maschinelles Sehen Bewegungsanalyse
Sie müssen sich anmelden oder registrieren, um diese Funktion zu nutzen
Schlüsselbegriffe
Schlüsselbegriffe des Projekts, wie vom Projektkoordinator angegeben. Nicht zu verwechseln mit der EuroSciVoc-Taxonomie (Wissenschaftliches Gebiet).
Schlüsselbegriffe des Projekts, wie vom Projektkoordinator angegeben. Nicht zu verwechseln mit der EuroSciVoc-Taxonomie (Wissenschaftliches Gebiet).
Programm/Programme
Mehrjährige Finanzierungsprogramme, in denen die Prioritäten der EU für Forschung und Innovation festgelegt sind.
Mehrjährige Finanzierungsprogramme, in denen die Prioritäten der EU für Forschung und Innovation festgelegt sind.
-
HORIZON.1.1 - European Research Council (ERC)
HAUPTPROGRAMM
Alle im Rahmen dieses Programms finanzierten Projekte anzeigen
Thema/Themen
Aufforderungen zur Einreichung von Vorschlägen sind nach Themen gegliedert. Ein Thema definiert einen bestimmten Bereich oder ein Gebiet, zu dem Vorschläge eingereicht werden können. Die Beschreibung eines Themas umfasst seinen spezifischen Umfang und die erwarteten Auswirkungen des finanzierten Projekts.
Aufforderungen zur Einreichung von Vorschlägen sind nach Themen gegliedert. Ein Thema definiert einen bestimmten Bereich oder ein Gebiet, zu dem Vorschläge eingereicht werden können. Die Beschreibung eines Themas umfasst seinen spezifischen Umfang und die erwarteten Auswirkungen des finanzierten Projekts.
Finanzierungsplan
Finanzierungsregelung (oder „Art der Maßnahme“) innerhalb eines Programms mit gemeinsamen Merkmalen. Sieht folgendes vor: den Umfang der finanzierten Maßnahmen, den Erstattungssatz, spezifische Bewertungskriterien für die Finanzierung und die Verwendung vereinfachter Kostenformen wie Pauschalbeträge.
Finanzierungsregelung (oder „Art der Maßnahme“) innerhalb eines Programms mit gemeinsamen Merkmalen. Sieht folgendes vor: den Umfang der finanzierten Maßnahmen, den Erstattungssatz, spezifische Bewertungskriterien für die Finanzierung und die Verwendung vereinfachter Kostenformen wie Pauschalbeträge.
HORIZON-ERC - HORIZON ERC Grants
Alle im Rahmen dieses Finanzierungsinstruments finanzierten Projekte anzeigen
Aufforderung zur Vorschlagseinreichung
Verfahren zur Aufforderung zur Einreichung von Projektvorschlägen mit dem Ziel, eine EU-Finanzierung zu erhalten.
Verfahren zur Aufforderung zur Einreichung von Projektvorschlägen mit dem Ziel, eine EU-Finanzierung zu erhalten.
(öffnet in neuem Fenster) ERC-2025-STG
Alle im Rahmen dieser Aufforderung zur Einreichung von Vorschlägen finanzierten Projekte anzeigenGastgebende Einrichtung
Finanzieller Nettobeitrag der EU. Der Geldbetrag, den der Beteiligte erhält, abzüglich des EU-Beitrags an mit ihm verbundene Dritte. Berücksichtigt die Aufteilung des EU-Finanzbeitrags zwischen den direkten Begünstigten des Projekts und anderen Arten von Beteiligten, wie z. B. Dritten.
8092 Zuerich
Schweiz
Die Gesamtkosten, die dieser Organisation durch die Beteiligung am Projekt entstanden sind, einschließlich der direkten und indirekten Kosten. Dieser Betrag ist Teil des Gesamtbudgets des Projekts.