Skip to main content
Aller à la page d’accueil de la Commission européenne (s’ouvre dans une nouvelle fenêtre)
français fr
CORDIS - Résultats de la recherche de l’UE
CORDIS

New Directions for Structure Segmentation, Phenotyping, and Language Interfacing in Histopathology

Description du projet

Percer la «boîte noire» de la pathologie grâce à l’IA

La pathologie constitue l’étape finale du diagnostic du cancer. Cependant, on constate une pénurie mondiale de pathologistes et une augmentation de la complexité des données tissulaires. Bien que les modèles d’IA de base offrent un moyen puissant de traiter des images gigapixels, ils fonctionnent souvent comme des «boîtes noires». Une IA qui attribue une étiquette «cancer» ou «pas de cancer» sans expliquer son raisonnement a une utilité limitée. Le projet DeepSPIM, financé par le CER, vise à intégrer de grands modèles linguistiques (LLM) à la segmentation automatisée des tissus afin de créer une interface permettant aux pathologistes d’examiner une lame. Au lieu d’accepter un résultat passif, un médecin peut demander à l’IA de quantifier des biomarqueurs spécifiques ou d’expliquer quelles caractéristiques cellulaires ont conduit à un score de risque particulier, permettant ainsi d’établir des diagnostics plus précis.

Objectif

Progress in deep learning brings new tools and methods that start reshaping pathology practice and advancing research in oncology. As a postdoctoral researcher in the Mahmood Lab (Harvard Medical School, 2022–), I played a pivotal role in the development and evaluation of “foundation models” for pathology – general-purpose models that can be used for various downstream tasks. Despite advances, foundation models still face several key limitations that restrict their widespread adoption. First, these models are designed to provide “non-human interpretable” data representation, providing little actionable insights to practitioners. Moreover, they lack robust language interfacing capabilities, especially in providing quantitative information. Finally, they are predominantly focused on hematoxylin & eosin (H&E) staining, leaving other histopathology modalities largely untouched. In this context, I hypothesize that foundation models for pathology will remain limited in impact unless they incorporate key additional features: (a) off-the-shelf structure segmentation and phenotyping for downstream analysis, (b) interactive language interfacing capable of answering quantitative queries, and (c) expanded support for other modalities, e.g. immunohistochemistry. To bring these ideas to life, I introduce DeepSPIM. In DeepSPIM, I will semi-automate data labeling to train segmentation models that will be combined with large language modeling to build a language interface. I will evaluate the translational capabilities of the models in assisting pathologists with routine clinical tasks, and, exploring interpretable morphological correlates of treatment response in oncology. The goals of DeepSPIM are closely aligned with the technical skills I developed throughout my PhD and postdoc. Leveraging my mentoring experience, professional network, and support of the University of Lausanne and the ERC Program, I aim to establish an independent research group in computational pathology.

Champ scientifique (EuroSciVoc)

Mots‑clés

Programme(s)

Thème(s)

Régime de financement

HORIZON-ERC - HORIZON ERC Grants

Voir tous les projets financés dans le cadre de ce programme de financement

Appel à propositions

(s’ouvre dans une nouvelle fenêtre) ERC-2025-STG

Voir tous les projets financés au titre de cet appel

Institution d’accueil

UNIVERSITE DE LAUSANNE
Contribution nette de l'UE
€ 1 675 683,00
Adresse
QUARTIER UNIL CENTRE - BATIMENT UNICENTRE
1015 LAUSANNE
Suisse
Région
Schweiz/Suisse/Svizzera Région lémanique Vaud
Type d’activité
Higher or Secondary Education Establishments
Liens
Coût total
€ 1 675 683,00

Bénéficiaires (1)