Adaptive Tokenization and Memory in Foundation Models for Efficient and Long-Horizon AI

Projektinformationen

AToM-FM

ID Finanzhilfevereinbarung: 101222956

DOI

10.3030/101222956

EK-Unterschriftsdatum 4 September 2025

Startdatum 1 November 2025

Enddatum 31 Oktober 2030

Finanziert unter

• European Research Council (ERC)

Gesamtkosten

€ 1 499 453,00

EU-Beitrag

€ 1 499 453,00

Koordiniert durch

THE UNIVERSITY OF EDINBURGH
United Kingdom

CORDIS bietet Links zu öffentlichen Ergebnissen und Veröffentlichungen von HORIZONT-Projekten.

Links zu Ergebnissen und Veröffentlichungen von RP7-Projekten sowie Links zu einigen Typen spezifischer Ergebnisse wie Datensätzen und Software werden dynamisch von OpenAIRE abgerufen.

Leistungen

Data Management Plan (1)

Data Management Plan

Release of data management plan

Veröffentlichungen

Conference proceedings (5)

Can Vision-Language Models Predict Future States? Bootstrapping World Models from Inverse Dynamics

Autoren: Yifu Qiu, Yftah Ziser, Anna Korhonen, Shay B. Cohen, Edoardo M. Ponti
Veröffentlicht in: Proceedings of the 65th Annual Meeting of the Association for Computational Linguistics, 2026
Herausgeber: Association for Computational Linguistics

Neurosymbolic Diffusion Models

Autoren: Emile van Krieken, Pasquale Minervini, Edoardo M. Ponti, Antonio Vergari
Veröffentlicht in: The Thirty-ninth Annual Conference on Neural Information Processing Systems, 2025
Herausgeber: Curran Associates

Universal Cross-Tokenizer Distillation via Approximate Likelihood Matching

Autoren: Benjamin Minixhofer, Ivan Vulić, Edoardo Ponti
Veröffentlicht in: The Thirty-ninth Annual Conference on Neural Information Processing Systems, 2025
Herausgeber: Curran Associates

The sparse frontier: Sparse attention trade-offs in Transformer LLMs

Autoren: Piotr Nawrot, Robert Li, Renjie Huang, Sebastian Ruder, Kelly Marchisio, Edoardo M. Ponti
Veröffentlicht in: Proceedings of the 65th Annual Meeting of the Association for Computational Linguistics, 2026
Herausgeber: Association for Computational Linguistics

Inference-Time Hyper-Scaling with KV Cache Compression

Autoren: Adrian Łańcucki ~Adrian_Łańcucki1 , Konrad Staniszewski, Piotr Nawrot, Edoardo M. Ponti
Veröffentlicht in: The Thirty-ninth Annual Conference on Neural Information Processing Systems, 2025
Herausgeber: Curran Associates