Information Theory beyond Communications: Distributed Representations and Deep Learning

Informations projet

STRUDEL

N° de convention de subvention: 797805

DOI

10.3030/797805

Projet clôturé

Date de signature de la CE 5 Avril 2018

Date de début 1 Septembre 2018

Date de fin 31 Août 2020

Financé au titre de

• EXCELLENT SCIENCE - Marie Skłodowska-Curie Actions

Coût total

€ 171 349,20

Contribution de l’UE

€ 171 349,20

Coordonné par

CENTRALESUPELEC
France

CORDIS fournit des liens vers les livrables publics et les publications des projets HORIZON.

Les liens vers les livrables et les publications des projets du 7e PC, ainsi que les liens vers certains types de résultats spécifiques tels que les jeux de données et les logiciels, sont récupérés dynamiquement sur OpenAIRE .

Publications

Conference proceedings (13)

Detecting Covariate Shift with Black Box Predictors

Auteurs: Florence Alberge, Clement Feutry, Pierre Duhamel, Pablo Piantanida
Publié dans: 2019 26th International Conference on Telecommunications (ICT), 2019, Page(s) 324-329, ISBN 978-1-7281-0273-3
Éditeur: IEEE
DOI: 10.1109/ict.2019.8798827

Deep Directed Information-Based Learning for Privacy-Preserving Smart Meter Data Release

Auteurs: Mohammadhadi Shateri, Francisco Messina, Pablo Piantanida, Fabrice Labeau
Publié dans: 2019 IEEE International Conference on Communications, Control, and Computing Technologies for Smart Grids (SmartGridComm), 2019, Page(s) 1-7, ISBN 978-1-5386-8099-5
Éditeur: IEEE
DOI: 10.1109/smartgridcomm.2019.8909813

Privacy-Preserving Synthetic Smart Meters Data

Auteurs: Ganesh Del Grosso, Georg Pichler, Pablo Piantanida
Publié dans: 2021 IEEE Power & Energy Society Innovative Smart Grid Technologies Conference (ISGT), 2021, Page(s) 1-5, ISBN 978-1-7281-8897-3
Éditeur: IEEE
DOI: 10.1109/isgt49243.2021.9372157

Few-Shot Segmentation Without Meta-Learning: A Good Transductive Inference Is All You Need?

Auteurs: Malik Boudiaf, Hoel Kervadec, Ziko Imtiaz Masud, Pablo Piantanida, Ismail Ben Ayed, Jose Dolz
Publié dans: IEEE/CVF Conference on Computer Vision and Pattern Recognition, 2021, Page(s) 13979-13988, ISBN 978-1-6654-4509-2
Éditeur: IEEE
DOI: 10.1109/cvpr46437.2021.01376

A Differential Entropy Estimator for Training Neural Networks

Auteurs: Georg Pichler, Pierre Jean A. Colombo, Malik Boudiaf, Günther Koliander, Pablo Piantanida
Publié dans: International Conference on Machine Learning, Numéro 162, 2022, Page(s) 17691-17715
Éditeur: PMLR

DOCTOR: A Simple Method for Detecting Misclassification Errors

Auteurs: Federica Granese, Marco Romanelli, Daniele Gorla, Catuscia Palamidessi, Pablo Piantanida
Publié dans: Advances in Neural Information Processing Systems, Numéro 34, 2021, Page(s) 5669-5681, ISSN 1049-5258
Éditeur: Curran Associates, Inc.
DOI: 10.48550/arxiv.2106.02395

A Novel Estimator of Mutual Information for Learning to Disentangle Textual Representations

Auteurs: Pierre Colombo, Pablo Piantanida, Chloé Clavel
Publié dans: Proceedings of the 59th Annual Meeting of the Association for Computational Linguistics and the 11th International Joint Conference on Natural Language Processing (Volume 1: Long Papers), 2021, Page(s) 6539–6550
Éditeur: Association for Computational Linguistics
DOI: 10.18653/v1/2021.acl-long.511

Transductive Information Maximization For Few-Shot Learning

Auteurs: Malik Boudiaf, Ziko Imtiaz Masud, Jérôme Rony, Jose Dolz, Pablo Piantanida,Ismail Ben Ayed
Publié dans: Conference on Neural Information Processing Systems, Numéro 33, 2020, ISBN 9781713829546
Éditeur: Curran Associates, Inc.

Privacy-Cost Management in Smart Meters Using Deep Reinforcement Learning

Auteurs: Mohammadhadi Shateri, Francisco Messina, Pablo Piantanida, Fabrice Labeau
Publié dans: 2020 IEEE PES Innovative Smart Grid Technologies Europe (ISGT-Europe), 2020, Page(s) 929-933, ISBN 978-1-7281-7100-5
Éditeur: IEEE
DOI: 10.1109/isgt-europe47291.2020.9248831

Estimating g-leakage via machine learning

Auteurs: K. Chatzikokolakis, C. Palamidessi, P. Piantanida, and M. Romanelli
Publié dans: ACM Conference on Computer and Communications Security (CCS), 2020
Éditeur: ACM
DOI: 10.1145/3372297.3423363

On the Impact of Side Information on Smart Meter Privacy-Preserving Methods

Auteurs: Mohammadhadi Shateri, Francisco Messina, Pablo Piantanida, Fabrice Labeau
Publié dans: 2020 IEEE International Conference on Communications, Control, and Computing Technologies for Smart Grids (SmartGridComm), 2020, Page(s) 1-6, ISBN 978-1-7281-6127-3
Éditeur: IEEE
DOI: 10.1109/smartgridcomm47815.2020.9302948

Learning Semi-Supervised Anonymized Representations by Mutual Information

Auteurs: C. Feutry, P. Piantanida, P. Duhamel
Publié dans: ICASSP 2020 - 2020 IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP), 2020, Page(s) 3467-3471, ISBN 978-1-5090-6631-5
Éditeur: IEEE
DOI: 10.1109/icassp40776.2020.9053379

On Direct Distribution Matching for Adapting Segmentation Networks SAVE

Auteurs: Pichler, Georg; Dolz, Jose; Ayed, Ismail Ben; Piantanida, Pablo
Publié dans: MIDL 2020 - Medical Imaging with Deep Learning Publications Manually add publicatio, Numéro 3, 2020
Éditeur: PMLR
DOI: 10.48550/arXiv.1904.02657

Other (2)

Learning anonymized representations with adversarial neural networks

Auteurs: C. Feutry, P. Piantanida, Y. Bengio, and P. Duhamel
Publié dans: Technical report, 2018
Éditeur: Online technical report

On the Estimation of Information Measures of Continuous Distributions

Auteurs: Georg Pichler, Pablo Piantanida, Günther Koliander
Publié dans: Technical report, 2020
Éditeur: Technical Report

Peer reviewed articles (10)

On Universal D-Semifaithful Coding for Memoryless Sources With Infinite Alphabets

Auteurs: Jorge F. Silva, Pablo Piantanida
Publié dans: IEEE Transactions on Information Theory, Numéro Volume: 68, Numéro: 4, 2022, Page(s) 1557-9654, ISSN 0018-9448
Éditeur: Institute of Electrical and Electronics Engineers
DOI: 10.1109/tit.2021.3134891

Finite-Length Bounds on Hypothesis Testing Subject to Vanishing Type I Error Restrictions

Auteurs: Sebastian Espinosa, Jorge F. Silva, Pablo Piantanida
Publié dans: IEEE Signal Processing Letters, Numéro 28, 2021, Page(s) 229-233, ISSN 1070-9908
Éditeur: Institute of Electrical and Electronics Engineers
DOI: 10.1109/lsp.2021.3050381

Collaborative Information Bottleneck

Auteurs: Matias Vera, Leonardo Rey Vega, Pablo Piantanida
Publié dans: IEEE Transactions on Information Theory, Numéro 65/2, 2019, Page(s) 787-815, ISSN 0018-9448
Éditeur: Institute of Electrical and Electronics Engineers
DOI: 10.1109/tit.2018.2883295

The Role of Mutual Information in Variational Classifiers

Auteurs: Matias Vera, Leonardo Rey Vega, Pablo Piantanida
Publié dans: Under revision for publication in Machine Learning, 2023, ISSN 1532-4435
Éditeur: MIT Press
DOI: 10.1007/s10994-023-06337-6

Distributed information-theoretic clustering

Auteurs: Georg Pichler, Pablo Piantanida, Gerald Matz
Publié dans: Information and Inference: A Journal of the IMA, 2021, ISSN 2049-8772
Éditeur: Oxford University Press
DOI: 10.1093/imaiai/iaab007

Fundamental Limits of Decentralized Data Shuffling

Auteurs: Kai Wan, Daniela Tuninetti, Mingyue Ji, Giuseppe Caire, Pablo Piantanida
Publié dans: IEEE Transactions on Information Theory, Numéro 66/6, 2020, Page(s) 3616-3637, ISSN 0018-9448
Éditeur: Institute of Electrical and Electronics Engineers
DOI: 10.1109/tit.2020.2966197

On the Exponential Approximation of Type II Error Probability of Distributed Test of Independence

Auteurs: Espinosa, Sebastian; Silva, Jorge F.; Piantanida, Pablo
Publié dans: IEEE Transactions on Signal and Information Processing over Networks, 2021, Page(s) 777 - 790, ISSN 2373-776X
Éditeur: Institute of Electrical and Electronics Engineers
DOI: 10.1109/tsipn.2021.3133192

Adversarial Robustness Via Fisher-Rao Regularization

Auteurs: Marine Picot, Francisco Messina, Malik Boudiaf, Fabrice Labeau, Ismail Ben Ayed, Pablo Piantanida
Publié dans: IEEE Transactions on Pattern Analysis and Machine Intelligence, Numéro vol. 45, no. 3, 2023, Page(s) 2698-2710, ISSN 0162-8828
Éditeur: Institute of Electrical and Electronics Engineers
DOI: 10.1109/tpami.2022.3174724

Privacy-Cost Management in Smart Meters with Mutual Information-Based Reinforcement Learning

Auteurs: M. Shateri, F. Messina, P. Piantanida, and F. Labeau
Publié dans: IEEE Internet of Things Journal, 2021, Page(s) 1 - 1, ISSN 2327-4662
Éditeur: Institute of Electrical and Electronics Engineers Inc.
DOI: 10.1109/jiot.2021.3128488

Real-Time Privacy-Preserving Data Release for Smart Meters

Auteurs: Mohammadhadi Shateri, Francisco Messina, Pablo Piantanida, Fabrice Labeau
Publié dans: IEEE Transactions on Smart Grid, 2020, Page(s) 1-1, ISSN 1949-3053
Éditeur: Institute of Electrical and Electronics Engineers
DOI: 10.1109/tsg.2020.3005634

Book chapters (2)

Information Bottleneck and Representation Learning

Auteurs: Pablo Piantanida, Leonardo Rey Vega
Publié dans: Information-Theoretic Methods in Data Science, 2021, Page(s) 330-358, ISBN 9781108616799
Éditeur: Cambridge University Press
DOI: 10.1017/9781108616799.012

A Unifying Mutual Information View of Metric Learning: Cross-Entropy vs. Pairwise Losses

Auteurs: Malik Boudiaf, Jérôme Rony, Imtiaz Masud Ziko, Eric Granger, Marco Pedersoli, Pablo Piantanida, Ismail Ben Ayed
Publié dans: Computer Vision – ECCV 2020 - 16th European Conference, Glasgow, UK, August 23–28, 2020, Proceedings, Part VI, Numéro 12351, 2020, Page(s) 548-564, ISBN 978-3-030-58538-9
Éditeur: Springer International Publishing
DOI: 10.1007/978-3-030-58539-6_33