Cascade Processes for Sparse Machine Learning

Projektinformationen

SPARSE-ML

ID Finanzhilfevereinbarung: 101116395

DOI

10.3030/101116395

EK-Unterschriftsdatum 25 Oktober 2023

Startdatum 1 Dezember 2023

Enddatum 30 November 2028

Finanziert unter

• European Research Council (ERC)

Gesamtkosten

€ 1 499 285,00

EU-Beitrag

€ 1 499 285,00

Koordiniert durch

CISPA - HELMHOLTZ-ZENTRUM FUR INFORMATIONSSICHERHEIT GGMBH
Germany

CORDIS bietet Links zu öffentlichen Ergebnissen und Veröffentlichungen von HORIZONT-Projekten.

Links zu Ergebnissen und Veröffentlichungen von RP7-Projekten sowie Links zu einigen Typen spezifischer Ergebnisse wie Datensätzen und Software werden dynamisch von OpenAIRE abgerufen.

Veröffentlichungen

Conference proceedings (31)

Robustness of Mixtures of Experts to Feature Noise

Autoren: Dong Sun; Rahul Nittala; Rebekka Burkholz
Veröffentlicht in: Forty-third International Conference on Machine Learning, 2026, Ausgabe 43, 2026
Herausgeber: arXiv
DOI: 10.60882/CISPA.32771433

Pruning neural network models for gene regulatory dynamics using data and domain knowledge

Autoren: Intekhab Hossain, Jonas Fischer, Rebekka Burkholz, John Quackenbush
Veröffentlicht in: Advances in Neural Information Processing Systems 37, 2024
Herausgeber: Neural Information Processing Systems Foundation, Inc. (NeurIPS)
DOI: 10.60882/CISPA.31169941

Bridging Domains through Subspace-Aware Model Merging

Autoren: Levy Chaves; Chao Zhou; Rebekka Burkholz; Eduardo Valle; Andra Avila
Veröffentlicht in: IEEE Conference on Computer Vision and Pattern Recognition, 2026, 2026
Herausgeber: Computer Vision Foundation (CVF) / IEEE

Are GATs Out of Balance?

Autoren: Nimrah Mustafa; Aleksandar Bojchevski; Rebekka Burkholz
Veröffentlicht in: Thirty-seventh Conference on Neural Information Processing Systems, 2023, Ausgabe 37, 2023, ISSN 1049-5258
Herausgeber: NeurIPS
DOI: 10.60882/CISPA.25233052

Masks, Signs, And Learning Rate Rewinding.

Autoren: Advait Gadhikar; Rebekka Burkholz
Veröffentlicht in: The Twelfth International Conference on Learning Representations, 2024, Ausgabe 12, 2024
Herausgeber: ICLR
DOI: 10.60882/CISPA.26808280

Fixed Aggregation Features Can Rival GNNs

Autoren: Celia Rubio-Madrigal; Rebekka Burkholz
Veröffentlicht in: Forty-third International Conference on Machine Learning, 2026, Ausgabe 43, 2026
Herausgeber: PMLR
DOI: 10.60882/CISPA.32771526

When Shift Happens - Confounding Is to Blame

Autoren: Abbavaram Gowtham Reddy; Celia Rubio-Madrigal; Rebekka Burkholz; Krikamol Muandet
Veröffentlicht in: The Fourteenth International Conference on Learning Representations, 2026, Ausgabe 14, 2026
Herausgeber: International Conference on Learning Representations (ICLR)
DOI: 10.60882/CISPA.31150255

The Graphon Limit Hypothesis: Understanding Neural Network Pruning via Infinite Width Analysis

Autoren: Hoang Pham; The-Anh Ta; Tom Jacobs; Rebekka Burkholz; Long Tran-Thanh
Veröffentlicht in: The Thirty-ninth Annual Conference on Neural Information Processing Systems, 2025, Ausgabe 39, 2025
Herausgeber: eural Information Processing Systems Foundation
DOI: 10.60882/CISPA.31170061

Pruning neural network models for gene regulatory dynamics using data and domain knowledge

Autoren: Rebekka Burkholz, Jonas Fischer, Intekhab Hossain, John Quackenbush
Veröffentlicht in: Advances in Neural Information Processing Systems 37, 2025
Herausgeber: Neural Information Processing Systems Foundation, Inc. (NeurIPS)
DOI: 10.52202/079017-3732

Spectral Graph Pruning Against Over-Squashing and Over-Smoothing

Autoren: Adarsh Jamadandi, Celia Rubio-Madrigal, Rebekka Burkholz
Veröffentlicht in: Advances in Neural Information Processing Systems 37, 2026
Herausgeber: Neural Information Processing Systems Foundation, Inc. (NeurIPS)
DOI: 10.60882/CISPA.31169929

SparseOpt: Addressing Normalization-induced Gradient Skew in Sparse Training

Autoren: Mohammed Adnan; Rohan Jain; Tom Jacobs; Ekansh Sharma; Rahul G Krishnan; Rebekka Burkholz; Yani Ioannou
Veröffentlicht in: Forty-third International Conference on Machine Learning, 2026, Ausgabe 43, 2026
Herausgeber: OpenReview
DOI: 10.60882/CISPA.32771370

Linear GCNs Need Better Bias, Not More Expressive Power

Autoren: Celia Rubio-Madrigal; Rebekka Burkhol
Veröffentlicht in: Workshop on Graph Foundation Models: A New Era for Graph Machine Learning (GFM) @ ICML, 2026, 2026
Herausgeber: OpenReview
DOI: 10.60882/CISPA.32771808

HAM: A Hyperbolic Step to Regulate Implicit Bias

Autoren: Tom Jacobs et al
Veröffentlicht in: 2026
Herausgeber: International Con-ference on Learning Representations (ICLR)
DOI: 10.48550/ARXIV.2506.02630

Hyperbolic Aware Minimization: Implicit Bias for Sparsity

Autoren: Tom Jacobs; Advait Gadhikar; Celia Rubio-Madrigal; Rebekka Burkholz
Veröffentlicht in: The Fourteenth International Conference on Learning Representations, 2026, Ausgabe 41, 2026
Herausgeber: arXiv
DOI: 10.60882/CISPA.31229218

Multi-Agent Systems are Mixtures of Experts: Who Becomes an Influencer?

Autoren: Franka Bause; Jonas Niederle; Martin Pawelczyk; Rebekka Burkholz
Veröffentlicht in: Workshop on Compositional Learning: Safety, Interpretability, and Agents (CompLearn) @ ICML, 2026, 2026
Herausgeber: arXiv
DOI: 10.60882/CISPA.32771649

HORST: Composing Optimizer Geometries for Sparse Transformer Training

Autoren: Tom Jacobs; Rohan Jain; Rebekka Burkholz
Veröffentlicht in: Workshop on High-dimensional Learning Dynamics (HiLD) @ ICML, 2026, 2026
Herausgeber: arXiv
DOI: 10.60882/CISPA.32771553

Batch normalization is sufficient for universal function approximation in CNNs

Autoren: Rebekka Burkholz
Veröffentlicht in: The Twelfth International Conference on Learning Representations, 2024, Ausgabe 12, 2024
Herausgeber: International Conference on Learning Representations (ICLR)
DOI: 10.60882/CISPA.26892709

GATE: How to Keep Out Intrusive Neighbors

Autoren: Nimrah Mustafa; Rebekka Burkholz
Veröffentlicht in: Forty-first International Conference on Machine Learning, 2024, Ausgabe 41, 2024
Herausgeber: PMLR
DOI: 10.60882/CISPA.27195786

Continuous Sparsification via Minimizing Movement

Autoren: Hoang Pham; Tom Jacobs; Binh Nguyen; Rebekka Burkholz; Long Tran-Thanh
Veröffentlicht in: Workshop on High-dimensional Learning Dynamics (HiLD) @ ICML, 2026, 2026
Herausgeber: PMLR
DOI: 10.60882/CISPA.32771496

Prune to Protect: Faster Training and Enhanced Privacy by Dynamic Data Pruning

Autoren: Chinmay Joshi; Advait Gadhikar; Celia Rubio-Madrigal; Aneet Kumar Dutta; Mridula Singh; Rebekka Burkholz
Veröffentlicht in: Workshop on The Impact of Memorization on Trustworthy Foundation Models (MemFM) @ ICML, 2026, 2026
Herausgeber: OpenReview
DOI: 10.60882/CISPA.32771721

Boosting for Predictive Sufficiency

Autoren: Abbavaram Gowtham Reddy; Rajeev Verma; Celia Rubio-Madrigal; Krikamol Muandet; Rebekka Burkholz
Veröffentlicht in: The Fourteenth International Conference on Learning Representations, 2026, Ausgabe 14, 2026
Herausgeber: International Con-ference on Learning Representations (ICLR)
DOI: 10.60882/CISPA.31150249

Spectral Graph Pruning Against Over-Squashing and Over-Smoothing

Autoren: Rebekka Burkholz, Adarsh Jamadandi, Celia Rubio-Madrigal
Veröffentlicht in: Advances in Neural Information Processing Systems 37, 2024
Herausgeber: Neural Information Processing Systems Foundation, Inc. (NeurIPS)
DOI: 10.52202/079017-0331

Edge-LLMs: Edge-Device Large Language Model Competition

Autoren: Shiwei Liu; Kai Han; Adriana Fernandez-Lopez; Ajay Kumar Jaiswal; Zahra Atashgahi; Boqian Wu; Edoardo Ponti; Callie Hao; Rebekka Burkholz; Olga Saukh; Lu Yin; Andreas Zinonos; Tianjin Huang; Jared Tanner; Yunhe Wang
Veröffentlicht in: NeurIPS 2024 Competition Track, 2024, Ausgabe 38, 2024
Herausgeber: NeurIPS

Dynamic Rescaling for Training GNNs

Autoren: Rebekka Burkholz, Nimrah Mustafa
Veröffentlicht in: Advances in Neural Information Processing Systems 37, 2024
Herausgeber: Neural Information Processing Systems Foundation, Inc. (NeurIPS)
DOI: 10.60882/CISPA.31169848

Don't Trust Stubborn Neighbors: A Security Framework for Agentic Networks

Autoren: Samira Abedini; Sina Mavali; Lea Schönherr; Martin Pawelczyk; Rebekka Burkholz
Veröffentlicht in: Workshop on Compositional Learning: Safety, Interpretability, and Agents (CompLearn) @ ICML, 2026, 2026
Herausgeber: PMLR
DOI: 10.60882/CISPA.32771607

Frequency-Based Hyperparameter Selection in Games

Autoren: Aniket Sanyal et al.
Veröffentlicht in: 2026
Herausgeber: ML Research Press (PMLR)
DOI: 10.60882/CISPA.31157677

GNNs Getting ComFy: Community and Feature Similarity Guided Rewiring

Autoren: Celia Rubio-Madrigal; Adarsh Jamadandi; Rebekka Burkholz
Veröffentlicht in: The Thirteenth International Conference on Learning Representations, 2025, Ausgabe 13, 2025
Herausgeber: International Conference on Learning Representations
DOI: 10.60882/CISPA.28731815

Never Saddle for Reparameterized Steepest Descent as Mirror Flow

Autoren: Tom Jacobs, Chao Zhou, and Rebekka Burkholz
Veröffentlicht in: The Fourteenth International Conference on Learning Representations, 2026, Ausgabe 14, 2026
Herausgeber: nternational Conference on Learning Representations (ICLR)
DOI: 10.60882/CISPA.31171063

Mirror, Mirror of the Flow: How Does Regular-ization Shape Implicit Bias?

Autoren: Tom Jacobs, Chao Zhou, and Rebekka Burkholz
Veröffentlicht in: Forty-second International Conference on Machine Learning, 2025, Ausgabe 42, 2025
Herausgeber: Modern Language Association of America (PMLA)
DOI: 10.60882/CISPA.31169938

Mask in the Mirror: Implicit Sparsification

Autoren: Tom Jacobs and Rebekka Burkholz
Veröffentlicht in: The Thirteenth International Conference on Learning Representations, 2025, Ausgabe 13, 2025
Herausgeber: arXiv
DOI: 10.60882/CISPA.31169785

Sign-In to the Lottery: Reparameterizing Sparse Training

Autoren: Advait Gadhikar; Tom Jacobs; Chao Zhou; Rebekka Burkholz
Veröffentlicht in: The Thirty-ninth Annual Conference on Neural Information Processing Systems, 2025, Ausgabe 39, 2025
Herausgeber: Conference on Neural Information Processing Systems (NeurIPS)
DOI: 10.60882/CISPA.31169662

Peer reviewed articles (2)

Sex differences in gene regulation and its impact on cancer incidence

Autoren: Camila M. Lopes-Ramos, Rebekka Burkholz, Marouen Ben Guebila, Viola Fanfani, Enakshi Saha, Katherine H. Shutta, Kimberly Glass, John Quackenbush, Dawn L. DeMeo
Veröffentlicht in: iScience, Ausgabe 29, 2026, ISSN 2589-0042
Herausgeber: Elsevier BV
DOI: 10.60882/CISPA.32323656

Biologically informed NeuralODEs for genome-wide regulatory dynamics

Autoren: Intekhab Hossain, Viola Fanfani, Jonas Fischer, John Quackenbush, Rebekka Burkholz
Veröffentlicht in: Genome Biology, Ausgabe 25, 2024, ISSN 1474-760X
Herausgeber: Springer Science and Business Media LLC
DOI: 10.60882/CISPA.25469869