Neural Spectral Image Decoding

Informacje na temat projektu

NEURAL SPICING

Identyfikator umowy o grant: 101002198

DOI

10.3030/101002198

Data podpisania przez KE 22 Kwietnia 2021

Data rozpoczęcia 1 Maja 2021

Data zakończenia 31 Grudnia 2026

Finansowanie w ramach

• EXCELLENT SCIENCE - European Research Council (ERC)

Koszt całkowity

€ 1 999 975,00

Wkład UE

€ 1 999 975,00

Koordynowany przez

DEUTSCHES KREBSFORSCHUNGSZENTRUM HEIDELBERG
Germany

CORDIS oferuje możliwość skorzystania z odnośników do publicznie dostępnych publikacji i rezultatów projektów realizowanych w ramach programów ramowych HORYZONT.

Odnośniki do rezultatów i publikacji związanych z poszczególnymi projektami 7PR, a także odnośniki do niektórych konkretnych kategorii wyników, takich jak zbiory danych i oprogramowanie, są dynamicznie pobierane z systemu OpenAIRE .

Rezultaty

Open Research Data Pilot (1)

Data management plan

Publikacje

Peer reviewed articles (14)

Efficient Photoacoustic Image Synthesis with Deep Learning

Autorzy: Tom Rix; Kris K. Dreher; Jan-Hinrich Nölke; Melanie Schellenberg; Minu D. Tizabi; Alexander Seitel; Lena Maier-Hein
Opublikowane w: Sensors, Numer 23 (16), 2023, Strona(/y) 7085 ff, ISSN 1424-8220
Wydawca: Multidisciplinary Digital Publishing Institute (MDPI)
DOI: 10.3390/s23167085

Photoacoustic Quantification of Tissue Oxygenation Using Conditional Invertible Neural Networks

Autorzy: Jan-Hinrich Nölke, Tim J. Adler, Melanie Schellenberg, Kris K. Dreher, Niklas Holzwarth, Christoph J. Bender, Minu D. Tizabi, Alexander Seitel, Lena Maier-Hein
Opublikowane w: IEEE Transactions on Medical Imaging, Numer 43, 2024, Strona(/y) 3366-3376, ISSN 0278-0062
Wydawca: Institute of Electrical and Electronics Engineers
DOI: 10.1109/tmi.2024.3403417

Semantic segmentation of multispectral photoacoustic images using deep learning

Autorzy: Melanie Schellenberg, Kris K. Dreher, Niklas Holzwarth, Fabian Isensee, Annika Reinke, Nicholas Schreck, Alexander Seitel, Minu D. Tizabi, Lena Maier-Hein, and Janek Gröhl
Opublikowane w: Photoacoustics, Numer 26, 2022, ISSN 2213-5979
Wydawca: Elsevier GmbH
DOI: 10.1016/j.pacs.2022.100341

Photoacoustic image synthesis with generative adversarial networks

Autorzy: Melanie Schellenberg, Janek Gröhl, Kris K. Dreher, Jan-Hinrich Nölke, Niklas Holzwarth, Minu D. Tizabi, Alexander Seitel, Lena Maier-Hein,
Opublikowane w: Photoacoustics, Numer 28, 2022, ISSN 2213-5979
Wydawca: Elsevier GmbH
DOI: 10.1016/j.pacs.2022.100402

Spectral imaging enables contrast agent-free real-time ischemia monitoring in laparoscopic surgery

Autorzy: Leonardo Ayala; Tim J. Adler; Silvia Seidlitz; Sebastian Wirkert; Christina Engels; Alexander Seitel; Jan Sellner; Alexey Aksenov; Matthias Bodenbach; Pia Bader; Sebastian Baron; Anant Vemuri; Manuel Wiesenfarth; Nicholas Schreck; Diana Mindroc; Minu Tizabi; Sebastian Pirmann; Brittaney Everitt; Annette Kopp-Schneider; Dogu Teber; Lena Maier-Hein
Opublikowane w: Science Advances, Numer 10(9), 2023, ISSN 2375-2548
Wydawca: American Association for the Advancement of Science (AAAS)
DOI: 10.1101/2022.03.08.22271465

AI-powered skin spectral imaging enables instant sepsis diagnosis and outcome prediction in critically ill patients

Autorzy: Silvia Seidlitz, Katharina Hölzl, Ayca von Garrel, Jan Sellner, Stephan Katzenschlager, Tobias Hölle, Dania Fischer, Maik von der Forst, Felix C. F. Schmitt, Alexander Studier-Fischer, Markus A. Weigand, Lena Maier-Hein, Maximilian Dietrich
Opublikowane w: Science Advances, Numer 11, 2025, ISSN 2375-2548
Wydawca: American Association for the Advancement of Science (AAAS)
DOI: 10.1126/sciadv.adw1968

SIMPA: an open-source toolkit for simulation and image processing for photonics and acoustics

Autorzy: Janek Gröhl; Kris K. Dreher; Melanie Schellenberg; Tom Rix; Niklas Holzwarth; Patricia Vieten; Leonardo Ayala; Sarah E. Bohndiek; Alexander Seitel; Lena Maier-Hein
Opublikowane w: Journal of Biomedical Optics, Numer 8, 2022, ISSN 1083-3668
Wydawca: S P I E - International Society for Optical Engineering
DOI: 10.1117/1.jbo.27.8.083010

Semantic hyperspectral image synthesis for cross-modality knowledge transfer in surgical data science

Autorzy: Viet Tran Ba, Marco Hübner, Ahmad Bin Qasim, Maike Rees, Jan Sellner, Silvia Seidlitz, Evangelia Christodoulou, Berkin Özdemir, Alexander Studier-Fischer, Felix Nickel, Leonardo Ayala, Lena Maier-Hein
Opublikowane w: International Journal of Computer Assisted Radiology and Surgery, Numer 20, 2025, Strona(/y) 1205-1213, ISSN 1861-6429
Wydawca: Springer Science and Business Media LLC
DOI: 10.1007/s11548-025-03364-7

Neural illumination calibration for surgical workflow-optimized spectral imaging

Autorzy: Alexander Baumann, Leonardo Ayala, Alexander Studier-Fischer, Jan Sellner, Berkin Özdemir, Karl-Friedrich Kowalewski, Slobodan Ilic, Silvia Seidlitz, Lena Maier-Hein
Opublikowane w: International Journal of Computer Assisted Radiology and Surgery, 2025, ISSN 1861-6429
Wydawca: Springer Science and Business Media LLC
DOI: 10.1007/s11548-025-03525-8

ICG-augmented hyperspectral imaging for visualization of intestinal perfusion compared to conventional ICG fluorescence imaging: An experimental study.

Autorzy: Studier-Fischer, A., Schwab, F. M., Rees, M., Seidlitz, S., Sellner, J., Özdemir, B., Ayala, L., Odenthal, J., Knoedler, S., Kowalewski, K.-F., Haney, C. M., Dietrich, M., Salg, G. A., Kenngott, H. G., Müller-Stich, B. P., Maier-Hein, L., & Nickel, F.
Opublikowane w: International Journal of Surgery, Numer 109(12), 2023, ISSN 1743-9191
Wydawca: Surgical Association
DOI: 10.1097/js9.0000000000000706

Anthropomorphic tissue-mimicking phantoms for oximetry validation in multispectral optical imaging

Autorzy: Kris K. Dreher, Janek Gröhl, Friso Grace, Leonardo Ayala, Jan-Hinrich Nölke, Christoph J. Bender, Melissa J. Watt, Katie-Lou White, Ran Tao, Wibke Johnen, Minu D. Tizabi, Alexander Seitel, Lena Maier-Hein, Sarah E. Bohndiek
Opublikowane w: Journal of Biomedical Optics, Numer 30, 2025, ISSN 1083-3668
Wydawca: S P I E - International Society for Optical Engineering
DOI: 10.1117/1.jbo.30.7.076006

Shortcut learning leads to sex bias in deep learning models for photoacoustic tomography

Autorzy: Marcel Knopp, Christoph J. Bender, Niklas Holzwarth, Yi Li, Julius Kempf, Milenko Caranovic, Ferdinand Knieling, Werner Lang, Ulrich Rother, Alexander Seitel, Lena Maier-Hein, Kris K. Dreher
Opublikowane w: International Journal of Computer Assisted Radiology and Surgery, Numer 20, 2025, Strona(/y) 1325-1333, ISSN 1861-6429
Wydawca: Springer Science and Business Media LLC
DOI: 10.1007/s11548-025-03370-9

The SPECTRAL Perfusion Arm Clamping dAtaset (SPECTRALPACA) for video-rate functional imaging of the skin

Autorzy: Leonardo Ayala, Diana Mindroc-Filimon, Maike Rees, Marco Hübner, Jan Sellner, Silvia Seidlitz, Minu Tizabi, Sebastian Wirkert, Alexander Seitel, Lena Maier-Hein
Opublikowane w: Scientific Data, Numer 11, 2024, ISSN 2052-4463
Wydawca: Springer Science and Business Media LLC
DOI: 10.1038/s41597-024-03307-y

HeiPorSPECTRAL - the Heidelberg Porcine HyperSPECTRAL Imaging Dataset of 20 Physiological Organs

Autorzy: Alexander Studier-Fischer, Silvia Seidlitz, Jan Sellner, Marc Bressan, Berkin Özdemir, Leonardo Ayala, Jan Odenthal, Samuel Knoedler, Karl-Friedrich Kowalewski, Caelan Max Haney, Gabriel Salg, Maximilian Dietrich, Hannes Kenngott, Ines Gockel, Thilo Hackert, Beat Peter Müller-Stich, Lena Maier-Hein & Felix Nickel
Opublikowane w: Scientific Data, Numer 10(414), 2023, ISSN 2052-4463
Wydawca: Springer Nature
DOI: 10.1038/s41597-023-02315-8

Other (4)

Application-driven Validation of Posteriors in Inverse Problems

Autorzy: Tim J. Adler, Jan-Hinrich Nölke, Annika Reinke, Minu Dietlinde Tizabi, Sebastian Gruber, Dasha Trofimova, Lynton Ardizzone, Paul F. Jaeger, Florian Buettner, Ullrich Köthe, Lena Maier-Hein
Opublikowane w: 2023
Wydawca: arXiv
DOI: 10.48550/arxiv.2309.09764

Understanding metric-related pitfalls in image analysis validation

Autorzy: Annika Reinke, Minu D. Tizabi, Michael Baumgartner, Matthias Eisenmann, Doreen Heckmann-Nötzel, A. Emre Kavur, Tim Rädsch, Carole H. Sudre, Laura Acion, Michela Antonelli, Tal Arbel, Spyridon Bakas, Arriel Benis, Matthew Blaschko, Florian Buettner, M. Jorge Cardoso, Veronika Cheplygina, Jianxu Chen, Evangelia Christodoulou, Beth A. Cimini, Gary S. Collins, Keyvan Farahani, Luciana Ferrer, Adrian
Opublikowane w: 2023
Wydawca: arXiv
DOI: 10.48550/arxiv.2302.01790

Metrics reloaded: Recommendation for image analysis validation

Autorzy: Lena Maier-Hein, Annika Reinke, Patrick Godau, Minu D. Tizabi, Florian Buettner, Evangelia Christodoulou, Ben Glocker, Fabian Isensee, Jens Kleesiek, Michal Kozubek, Mauricio Reyes, Michael A. Riegler, Manuel Wiesenfarth, A. Emre Kavur, Carole H. Sudre, Michael Baumgartner, Matthias Eisenmann, Doreen Heckmann-Nötzel, A. Tim Rädsch, Laura Acion, Michela Antonelli, Tal Arbel, Spyridon Bakas, Arrie
Opublikowane w: 2023
Wydawca: arXiv
DOI: 10.48550/arxiv.2206.01653

Machine learning-based analysis of hyperspectral images for automated sepsis diagnosis

Autorzy: Dietrich, Maximilian; Seidlitz, Silvia; Schreck, Nicholas; Wiesenfarth, Manuel; Godau, Patrick; Tizabi, Minu; Sellner, Jan; Marx, Sebastian; Kn��dler, Samuel; Allers, Michael M.; Ayala, Leonardo; Schmidt, Karsten; Brenner, Thorsten; Studier-Fischer, Alexander; Nickel, Felix; M��ller-Stich, Beat P.; Kopp-Schneider, Annette; Weigand, Markus A.; Maier-Hein, Lena
Opublikowane w: arXiv, 2021
Wydawca: arXiv
DOI: 10.48550/arxiv.2106.08445

Conference proceedings (2)

Unsupervised Domain Transfer with Conditional Invertible Neural Networks

Autorzy: Kris K. Dreher, Leonardo Ayala, Melanie Schellenberg, Marco Hübner, Jan-Hinrich Nölke, Tim J. Adler, Silvia Seidlitz, Jan Sellner, Alexander Studier-Fischer, Janek Gröhl, Felix Nickel, Ullrich Köthe, Alexander Seitel, Lena Maier-Hein
Opublikowane w: Lecture Notes in Computer Science, Numer 14220, 2023, ISBN 978-3-031-43907-0
Wydawca: Springer Nature
DOI: 10.1007/978-3-031-43907-0_73

Semantic segmentation of surgical hyperspectral images under geometric domain shifts

Autorzy: Sellner, Jan; Seidlitz, Silvia; Studier-Fischer, Alexander; Motta, Alessandro; Özdemir, Berkin; Müller-Stich, Beat Peter; Nickel, Felix; Maier-Hein, Lena
Opublikowane w: Lecture Notes in Computer Science, Numer 14228, 2023, ISBN 978-3-031-43996-4
Wydawca: Springer Nature
DOI: 10.1007/978-3-031-43996-4_59

Book chapters (1)

Deep Intra-operative Illumination Calibration of Hyperspectral Cameras

Autorzy: Alexander Baumann, Leonardo Ayala, Alexander Studier-Fischer, Jan Sellner, Berkin Özdemir, Karl-Friedrich Kowalewski, Slobodan Ilic, Silvia Seidlitz, Lena Maier-Hein
Opublikowane w: Lecture Notes in Computer Science, Medical Image Computing and Computer Assisted Intervention – MICCAI 2024, 2024, Strona(/y) 120-131
Wydawca: Springer Nature Switzerland
DOI: 10.1007/978-3-031-72089-5_12

Non-peer reviewed articles (2)

Spectral Organ Fingerprints For Machine Learning-Based Intraoperative Tissue Classification With Hyperspectral Imaging

Autorzy: Alexander Studier-Fischer, Silvia Seidlitz, Jan Sellner, Berkin Özdemir, Manuel Wiesenfarth, Leonardo Ayala, Jan Odenthal, Samuel Knödler, Karl-Friedrich Kowalewski, Caelan Max Haney, Isabella Camplisson, Maximilian Dietrich, Karsten Schmidt, Gabriel Alexander Salg, Hannes Götz Kenngott, Tim Julian Adler, Nicholas Schreck, Annette Kopp-Schneider, Klaus Maier-Hein, Lena Maier-Hein, Beat Peter M
Opublikowane w: Scientific Reports, Numer 12, 2022, ISSN 2045-2322
Wydawca: Nature Publishing Group
DOI: 10.1038/s41598-022-15040-w

Robust deep learning-based semantic organ segmentation in hyperspectral images

Autorzy: Silvia Seidlitz, Jan Sellner, Jan Odenthal, Berkin Özdemir, Alexander Studier-Fischer, Samuel Knödler, Leonardo Ayala, Tim Adler, Hannes G Kenngott, Minu Tizabi, Martin Wagner, Felix Nickel, Beat P Müller-Stich, Lena Maier-Hein
Opublikowane w: Medical Image Analysis, Numer 80, 2022, ISSN 1361-8415
Wydawca: Elsevier BV
DOI: 10.1016/j.media.2022.102488