Learning Generative 3D Scene Models for Training and Validating Intelligent Systems

Projektinformationen

LEGO-3D

ID Finanzhilfevereinbarung: 850533

DOI

10.3030/850533

EK-Unterschriftsdatum 22 Oktober 2019

Startdatum 1 Oktober 2020

Enddatum 31 März 2026

Finanziert unter

• EXCELLENT SCIENCE - European Research Council (ERC)

Gesamtkosten

€ 1 467 500,00

EU-Beitrag

€ 1 467 500,00

Koordiniert durch

EBERHARD KARLS UNIVERSITAET TUEBINGEN
Germany

CORDIS bietet Links zu öffentlichen Ergebnissen und Veröffentlichungen von HORIZONT-Projekten.

Links zu Ergebnissen und Veröffentlichungen von RP7-Projekten sowie Links zu einigen Typen spezifischer Ergebnisse wie Datensätzen und Software werden dynamisch von OpenAIRE abgerufen.

Veröffentlichungen

Conference proceedings (27)

ARAH: Animatable Volume Rendering of Articulated Human SDFs

Autoren: S. Wang, K. Schwarz, A. Geiger, S. Tang
Veröffentlicht in: European Conference on Computer Vision (ECCV), 2022
Herausgeber: Springer

KiloNeRF: Speeding up Neural Radiance Fields with Thousands of Tiny MLPs

Autoren: C. Reiser, S. Peng, Y. Liao, A. Geiger
Veröffentlicht in: International Conference on Computer Vision (ICCV), 2021
Herausgeber: IEEE/CVF

AG3D: Learning to Generate 3D Avatars from 2D Image Collections

Autoren: Zijian Dong, Xu Chen, Jinlong Yang, Michael J. Black, Otmar Hilliges, Andreas Geiger
Veröffentlicht in: 2023 IEEE/CVF International Conference on Computer Vision (ICCV), 2024, Seite(n) 14870-14881
Herausgeber: IEEE
DOI: 10.1109/iccv51070.2023.01370

SMD-Nets: Stereo Mixture Density Networks

Autoren: F. Tosi, Y. Liao, C. Schmitt, A. Geiger
Veröffentlicht in: Conference on Computer Vision and Pattern Recognition (CVPR), 2021
Herausgeber: IEEE/CV

Hidden Biases of End-to-End Driving Models

Autoren: Bernhard Jaeger, Kashyap Chitta, Andreas Geiger
Veröffentlicht in: 2023 IEEE/CVF International Conference on Computer Vision (ICCV), 2024, Seite(n) 8206-8215
Herausgeber: IEEE
DOI: 10.1109/iccv51070.2023.00757

UNISURF: Unifying Neural Implicit Surfaces and Radiance Fields for Multi-View Reconstruction

Autoren: Oechsle, Michael; Peng, Songyou; Geiger, Andreas
Veröffentlicht in: International Conference on Computer Vision (ICCV), 2021
Herausgeber: IEEE/CVF
DOI: 10.1109/iccv48922.2021.00554

Shape As Points: A Differentiable Poisson Solver

Autoren: "Peng, Songyou; Jiang, Chiyu ""Max""; Liao, Yiyi; Niemeyer, Michael; Pollefeys, Marc; Geiger, Andreas"
Veröffentlicht in: Advances in Neural Information Processing Systems (NeurIPS), 2021
Herausgeber: Curran Associates, Inc.
DOI: 10.48550/arxiv.2106.03452

IntrinsicAvatar: Physically Based Inverse Rendering of Dynamic Humans from Monocular Videos via Explicit Ray Tracing

Autoren: Shaofei Wang, Božidar Antić, Andreas Geiger, Siyu Tang
Veröffentlicht in: 2024 IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR), 2024, Seite(n) 1877-1888
Herausgeber: IEEE
DOI: 10.1109/cvpr52733.2024.00184

MuRF: Multi-Baseline Radiance Fields

Autoren: Haofei XU, Anpei Chen, Yuedong Chen, Christos Sakaridis, Yulun Zhang, Marc Pollefeys, Andreas Geiger, Fisher Yu
Veröffentlicht in: 2024 IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR), 2024, Seite(n) 20041-20050
Herausgeber: IEEE
DOI: 10.1109/cvpr52733.2024.01894

GOOD: Exploring geometric cues for detecting objects in an open world

Autoren: H. Huang, A. Geiger, D. Zhang
Veröffentlicht in: International Conference on Learning Representations (ICLR), 2023
Herausgeber: OpenReview

Mip-Splatting: Alias-Free 3D Gaussian Splatting

Autoren: Zehao Yu, Anpei Chen, Binbin Huang, Torsten Sattler, Andreas Geiger
Veröffentlicht in: 2024 IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR), 2024, Seite(n) 19447-19456
Herausgeber: IEEE
DOI: 10.1109/cvpr52733.2024.01839

2D Gaussian Splatting for Geometrically Accurate Radiance Fields

Autoren: Binbin Huang, Zehao Yu, Anpei Chen, Andreas Geiger, Shenghua Gao
Veröffentlicht in: Special Interest Group on Computer Graphics and Interactive Techniques Conference Conference Papers '24, 2024, Seite(n) 1-11
Herausgeber: ACM
DOI: 10.1145/3641519.3657428

GIRAFFE: Representing Scenes as Compositional Generative Neural Feature Fields

Autoren: Geiger, Andreas; Niemeyer, Michael
Veröffentlicht in: Conference on Computer Vision and Pattern Recognition (CVPR), 2021
Herausgeber: IEEE/CVF
DOI: 10.48550/arxiv.2011.12100

Multi-Modal Fusion Transformer for End-to-End Autonomous Driving

Autoren: Aditya Prakash, Kashyap Chitta, Andreas Geiger
Veröffentlicht in: 2021 IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR), 2023, Seite(n) 7073-7083
Herausgeber: IEEE
DOI: 10.1109/cvpr46437.2021.00700

NeLF-Pro: Neural Light Field Probes for Multi-Scale Novel View Synthesis

Autoren: Zinuo You, Andreas Geiger, Anpei Chen
Veröffentlicht in: 2024 IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR), 2024, Seite(n) 19833-19843
Herausgeber: IEEE
DOI: 10.1109/cvpr52733.2024.01875

Projected GANs Converge Faster

Autoren: A. Sauer, K. Chitta, J. Müller, A. Geiger
Veröffentlicht in: Advances in Neural Information Processing Systems (NeurIPS), 2021
Herausgeber: Curran Associates, Inc.
DOI: 10.48550/arxiv.2111.01007

StyleGAN-XL: Scaling StyleGAN to Large Diverse Datasets

Autoren: A. Sauer, K. Schwarz, A. Geiger
Veröffentlicht in: International Conference on Computer Graphics and Interactive Techniques (SIGGRAPH), 2022
Herausgeber: Association for Computing Machinery
DOI: 10.48550/arxiv.2202.00273

MetaAvatar: Learning Animatable Clothed Human Models from Few Depth Images

Autoren: S. Wang, M. Mihajlovic, Q. Ma, A. Geiger, S. Tang
Veröffentlicht in: Advances in Neural Information Processing Systems (NeurIPS), 2021
Herausgeber: Curran Associates, Inc.

GTA: A Geometry-Aware Attention Mechanism for Multi-View Transformers

Autoren: Takeru Miyato, Bernhard Jaeger, Max Welling, Andreas Geiger
Veröffentlicht in: International Conference on Learning Representations (ICLR), 2024
Herausgeber: OpenReview.net
DOI: 10.48550/arxiv.2310.10375

VoxGRAF: Fast 3D-Aware Image Synthesis with Sparse Voxel Grids

Autoren: K. Schwarz, A. Sauer, M. Niemeyer, Y. Liao, A. Geiger
Veröffentlicht in: Advances in Neural Information Processing Systems (NeurIPS), 2022
Herausgeber: Curran Associates, Inc.

Parting with Misconceptions about Learning-based Vehicle Motion Planning

Autoren: Dauner, Daniel; Hallgarten, Marcel; Geiger, Andreas; Chitta, Kashyap
Veröffentlicht in: Conference on Robot Learning, 2023
Herausgeber: Proceedings of Machine Learning Research
DOI: 10.48550/arxiv.2306.07962

Counterfactual Generative Networks

Autoren: Sauer, Axel; Geiger, Andreas
Veröffentlicht in: International Conference on Learning Representations (ICLR), 2021
Herausgeber: OpenReview
DOI: 10.48550/arxiv.2101.06046

3DGS-Avatar: Animatable Avatars via Deformable 3D Gaussian Splatting

Autoren: Zhiyin Qian, Shaofei Wang, Marko Mihajlovic, Andreas Geiger, Siyu Tang
Veröffentlicht in: 2024 IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR), 2024, Seite(n) 5020-5030
Herausgeber: IEEE
DOI: 10.1109/cvpr52733.2024.00480

CAMPARI: Camera-Aware Decomposed Generative Neural Radiance Fields

Autoren: Michael Niemeyer; Andreas Geiger
Veröffentlicht in: International Conference on 3D Vision (3DV), 2021
Herausgeber: IEEE Computer Society
DOI: 10.1109/3dv53792.2021.00103

HUGS: Holistic Urban 3D Scene Understanding via Gaussian Splatting

Autoren: Hongyu Zhou, Jiahao Shao, Lu Xu, Dongfeng Bai, Weichao Qiu, Bingbing Liu, Yue Wang, Andreas Geiger, Yiyi Liao
Veröffentlicht in: 2024 IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR), 2024, Seite(n) 21336-21345
Herausgeber: IEEE
DOI: 10.1109/cvpr52733.2024.02016

GraphDreamer: Compositional 3D Scene Synthesis from Scene Graphs

Autoren: Gege Gao, Weiyang Liu, Anpei Chen, Andreas Geiger, Bernhard Schölkopf
Veröffentlicht in: 2024 IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR), 2024, Seite(n) 21295-21304
Herausgeber: IEEE
DOI: 10.1109/cvpr52733.2024.02012

MonoSDF: Exploring Monocular Geometric Cues for Neural Implicit Surface Reconstruction

Autoren: Z. Yu, S. Peng, M. Niemeyer, T. Sattler, A. Geiger
Veröffentlicht in: Advances in Neural Information Processing Systems (NeurIPS), 2022
Herausgeber: Curran Associates, Inc.

Peer reviewed articles (8)

KITTI-360: A Novel Dataset and Benchmarks for Urban Scene Understanding in 2D and 3D

Autoren: Liao, Yiyi; Xie, Jun; Geiger, Andreas
Veröffentlicht in: IEEE Transactions on Pattern Analysis and Machine Intelligence, Ausgabe 1, 2022, ISSN 1939-3539
Herausgeber: IEEE Computer Society
DOI: 10.1109/tpami.2022.3179507

End-to-End Autonomous Driving: Challenges and Frontiers

Autoren: Li Chen, Penghao Wu, Kashyap Chitta, Bernhard Jaeger, Andreas Geiger, Hongyang Li
Veröffentlicht in: IEEE Transactions on Pattern Analysis and Machine Intelligence, Ausgabe 46, 2024, Seite(n) 10164-10183, ISSN 0162-8828
Herausgeber: Institute of Electrical and Electronics Engineers
DOI: 10.1109/tpami.2024.3435937

Unifying Flow, Stereo and Depth Estimation

Autoren: Haofei Xu, Jing Zhang, Jianfei Cai, Hamid Rezatofighi, Fisher Yu, Dacheng Tao, Andreas Geiger
Veröffentlicht in: IEEE Transactions on Pattern Analysis and Machine Intelligence, Ausgabe 45, 2023, Seite(n) 13941-13958, ISSN 0162-8828
Herausgeber: Institute of Electrical and Electronics Engineers
DOI: 10.1109/tpami.2023.3298645

Binary Opacity Grids: Capturing Fine Geometric Detail for Mesh-Based View Synthesis

Autoren: Christian Reiser, Stephan Garbin, Pratul Srinivasan, Dor Verbin, Richard Szeliski, Ben Mildenhall, Jonathan Barron, Peter Hedman, Andreas Geiger
Veröffentlicht in: ACM Transactions on Graphics, Ausgabe 43, 2024, Seite(n) 1-14, ISSN 0730-0301
Herausgeber: Association for Computing Machinary, Inc.
DOI: 10.1145/3658130

MERF: Memory-Efficient Radiance Fields for Real-time View Synthesis in Unbounded Scenes

Autoren: Christian Reiser, Rick Szeliski, Dor Verbin, Pratul Srinivasan, Ben Mildenhall, Andreas Geiger, Jon Barron, Peter Hedman
Veröffentlicht in: ACM Transactions on Graphics, Ausgabe 42, 2024, Seite(n) 1-12, ISSN 0730-0301
Herausgeber: Association for Computing Machinary, Inc.
DOI: 10.1145/3592426

TransFuser: Imitation with Transformer-Based Sensor Fusion for Autonomous Driving

Autoren: K. Chitta, A. Prakash, B. Jaeger, Z. Yu, K. Renz, A. Geiger
Veröffentlicht in: IEEE Transactions on Pattern Analysis and Machine Intelligence (TPAMI), 2023, ISSN 0162-8828
Herausgeber: Institute of Electrical and Electronics Engineers
DOI: 10.1109/tpami.2022.3200245

Towards Scalable Multi-View Reconstruction of Geometry and Materials

Autoren: Carolin Schmitt, Božidar Antić, Andrei Neculai, Joo Ho Lee, Andreas Geiger
Veröffentlicht in: IEEE Transactions on Pattern Analysis and Machine Intelligence, Ausgabe 45, 2024, Seite(n) 15850-15869, ISSN 0162-8828
Herausgeber: Institute of Electrical and Electronics Engineers
DOI: 10.1109/tpami.2023.3314348

Gaussian Opacity Fields: Efficient Adaptive Surface Reconstruction in Unbounded Scenes

Autoren: Zehao Yu, Torsten Sattler, Andreas Geiger
Veröffentlicht in: ACM Transactions on Graphics, Ausgabe 43, 2024, Seite(n) 1-13, ISSN 0730-0301
Herausgeber: Association for Computing Machinary, Inc.
DOI: 10.1145/3687937

Book chapters (3)

LaRa: Efficient Large-Baseline Radiance Fields

Autoren: Anpei Chen, Haofei Xu, Stefano Esposito, Siyu Tang, Andreas Geiger
Veröffentlicht in: Lecture Notes in Computer Science, Computer Vision – ECCV 2024, 2024, Seite(n) 338-355
Herausgeber: Springer Nature Switzerland
DOI: 10.1007/978-3-031-73247-8_20

Efficient Depth-Guided Urban View Synthesis

Autoren: Sheng Miao, Jiaxin Huang, Dongfeng Bai, Weichao Qiu, Bingbing Liu, Andreas Geiger, Yiyi Liao
Veröffentlicht in: Lecture Notes in Computer Science, Computer Vision – ECCV 2024, 2025, Seite(n) 90-107
Herausgeber: Springer Nature Switzerland
DOI: 10.1007/978-3-031-73404-5_6

SLEDGE: Synthesizing Driving Environments with Generative Models and Rule-Based Traffic

Autoren: Kashyap Chitta, Daniel Dauner, Andreas Geiger
Veröffentlicht in: Lecture Notes in Computer Science, Computer Vision – ECCV 2024, 2024, Seite(n) 57-74
Herausgeber: Springer Nature Switzerland
DOI: 10.1007/978-3-031-73235-5_4