Extreme Near-Data Processing Platform

Projektinformationen

NEARDATA

ID Finanzhilfevereinbarung: 101092644

DOI

10.3030/101092644

Projekt abgeschlossen

EK-Unterschriftsdatum 16 November 2022

Startdatum 1 Januar 2023

Enddatum 31 Dezember 2025

Finanziert unter

• Digital, Industry and Space

Gesamtkosten

€ 3 913 585,00

EU-Beitrag

€ 3 913 585,00

Koordiniert durch

UNIVERSITAT ROVIRA I VIRGILI
Spain

CORDIS bietet Links zu öffentlichen Ergebnissen und Veröffentlichungen von HORIZONT-Projekten.

Links zu Ergebnissen und Veröffentlichungen von RP7-Projekten sowie Links zu einigen Typen spezifischer Ergebnisse wie Datensätzen und Software werden dynamisch von OpenAIRE abgerufen.

Leistungen

Documents, reports (7)

First release of KPI benchmarks in all use cases and data connector libraries

This deliverable will describe the first validation benchmarks in the five use cases. First release of open data connectors.

Communication plan

Definition of the required process and strategy for communication activities. Description of the planned communication activities and expected progress reporting. It will also describe planned community involvement activities.

Initial Architecture Specifications

Description of use case scenarios, experiments and benchmarking framework. Initial specifications of the architecture.

Data Broker release and documentation

The deliverable will describe the architecture and functionality of the Data Broker.

Communication and standardization report

Description of the first months of standardization activities with a summary of the main achievements of the project partners. Description of the dissemination and community involvement activities with lessons learned and progress reporting.

NEARDATA Architecture Specs and Early Prototypes

Specification of the Architecture and APIs. Documentation, early tutorials, and automated tests for the early prototypes of the different software components.

XtremeHub first release and documentation

The deliverable will describe the architecture and functionality of the data connector interfaces connecting to the data sources.

Websites, patent fillings, videos etc. (1)

Public Project Website

A website will be developed in order to provide a continuous update about the project progress and the results obtained during it. All public deliverables and publications (Open Access) will be uploaded on the website.

Data Management Plan (1)

Data Management Plan

Document describing project data management strategies. The different experiments, workloads, benchmarks, and results will be delivered as Open Research Data for the community.

Veröffentlichungen

Peer reviewed articles (8)

Building Stateless Serverless Vector DBs via Block-based Data Partitioning

Autoren: Daniel Barcelona-Pons, Raúl Gracia-Tinedo, Albert Cañadilla-Domingo, Xavier Roca-Canals, Pedro García-López
Veröffentlicht in: Proceedings of the ACM on Management of Data, Ausgabe 3, 2025, ISSN 2836-6573
Herausgeber: Association for Computing Machinery (ACM)
DOI: 10.1145/3769769

A Seer Knows Best: Auto-tuned Object Storage Shuffling for Serverless Analytics

Autoren: G. Eizaguirre and M. Sánchez-Artigas
Veröffentlicht in: Journal of Parallel and Distributed Computing, 2023, ISSN 1096-0848
Herausgeber: Elsevier Inc.
DOI: 10.1145/3528535.3565241

MLLess: Achieving Cost Efficiency in Serverless Machine Learning Training

Autoren: P. Gimeno Sarroca and M. Sánchez-Artigas
Veröffentlicht in: Journal of Parallel and Distributed Computing, 2023, ISSN 1096-0848
Herausgeber: Elsevier Inc.
DOI: 10.48550/arXiv.2206.05786

Dynamic Selection and Detection of Spreading Factors and Channels for End-Node Devices of LoRa Networks

Autoren: Carles Aliagas, Roger Pueyo Centelles, Roc Meseguer, Pere Millán, Carlos Molina
Veröffentlicht in: Electronics, Ausgabe 14, 2025, ISSN 2079-9292
Herausgeber: MDPI AG
DOI: 10.3390/ELECTRONICS14173341

Glider: Serverless Ephemeral Stateful Near-Data Computation

Autoren: Daniel Barcelona-Pons, Pedro García-López, Bernard Metzler
Veröffentlicht in: Middleware ’23: Proceedings of the 24th International Middleware Conference, 2023, ISSN 0004-5411
Herausgeber: Association for Computing Machinary, Inc.
DOI: 10.1145/3590140.3629119

METASPACE-ML: Metabolite annotation for imaging mass spectrometry using machine learning

Autoren: Bishoy Wadie, Lachlan Stuart, Christopher M. Rath, Theodore Alexandrov
Veröffentlicht in: bioRxiv, 2024, ISSN 2692-8205
Herausgeber: bioRxiv
DOI: 10.1101/2023.05.29.542736v2

An Exhaustive Variant Interaction Analysis using Multifactor Dimensionality Reduction

Autoren: Gonzalo Gómez- Sánchez, Ignasi Morán, Lorena Alonso, Miguel Ángel Pérez, David Torrents, Josep Ll. Berral
Veröffentlicht in: Nature Scientific Reports, 2023, ISSN 2045-2322
Herausgeber: Nature
DOI: 10.21203/rs.3.rs-3401025

Exploiting Inherent Elasticity of Serverless in Algorithms with Unbalanced and Irregular Workloads

Autoren: Gerard Finol, Pedro Garcia Lopez and M. Sánchez-Artigas
Veröffentlicht in: Journal of Parallel and Distributed Computing, 2023, ISSN 1096-0848
Herausgeber: Elsevier Inc.
DOI: 10.48550/arXiv.2206.15321

Conference proceedings (25)

Novel Approaches Toward Scalable Composable Workflows in Hyper-Heterogeneous Computing Environments

Autoren: Kica,P., Lichołai S., Malawski M
Veröffentlicht in: Supercomputing23 – SC23, 2023, ISSN 0004-5411
Herausgeber: ACM
DOI: 10.1145/3624062.3626283

Exploring Secure and Efficient Temporary Data Sharing between co-located Kubernetes Containers

Autoren: Aitor Arjona, Bernard Metzler, Pascal Spörri
Veröffentlicht in: 2024
Herausgeber: IEEE
DOI: 10.5281/ZENODO.15097004

On Data Processing through the Lenses of S3 Object Lambda

Autoren: . Gimeno Sarroca and M. Sánchez-Artigas
Veröffentlicht in: IEEE INFOCOM’23, 2023, ISSN 2643-3303
Herausgeber: IEEE
DOI: 10.1109/INFOCOM53939.2023.10228890

Solutions for Distributed Memory Access Mechanism on HPC Clusters

Autoren: Jan Meizner, Maciej Malawski
Veröffentlicht in: 2025 IEEE International Conference on eScience (eScience), 2025
Herausgeber: IEEE
DOI: 10.1109/ESCIENCE65000.2025.00077

Optimizing Star Aligner for High Throughput Computing in the Cloud

Autoren: Kica, Piotr; Lichołai, Sabina; Orzechowski, Michał; Malawski, Maciej
Veröffentlicht in: 2024 IEEE International Conference on Cluster Computing Workshops (CLUSTER Workshops), 2024
Herausgeber: IEEE
DOI: 10.48550/ARXIV.2409.05886

SinClave: Hardware-assisted Singletons for TEEs

Autoren: Franz Gregor, Robert Krahn, Do Le Quoc, Christof Fetzer
Veröffentlicht in: Middleware ’23: Proceedings of the 24th International Middleware Conference, 2023, ISSN 0004-5411
Herausgeber: ACM
DOI: 10.1145/3590140.3629107

CRISP: Confidentiality, Rollback, and Integrity Storage Protection for Confidential Cloud-Native Computing

Autoren: Hartono, Ardhi Putra Pratama; Brito, Andrey; Fetzer, Christof
Veröffentlicht in: 2024 IEEE 17th International Conference on Cloud Computing (CLOUD), 2024
Herausgeber: IEEE
DOI: 10.48550/ARXIV.2408.06822

Burst Computing: Quick, Sudden, Massively Parallel Processing on Serverless Resources

Autoren: Daniel Barcelona-Pons; Aitor Arjona; Pedro García-López; Enrique Molina-Giménez; Stepan Klymonchuk
Veröffentlicht in: USENIX Annual Technical Conference 2025, 2025
Herausgeber: USENIX
DOI: 10.5281/ZENODO.17662627

Serverless End Game: Disaggregation enabling Transparency

Autoren: Pedro Garcia Lopez, Aleksander Slominski, Bernard Metzler, Michael Berhendt, Simon Shillaker
Veröffentlicht in: Proceedings of the 2nd Workshop on SErverless Systems, Applications and MEthodologies, 2025
Herausgeber: ACM
DOI: 10.1145/3642977.3652094

"""Back to the Byte"": Towards Byte-oriented Semantics for Streaming Storage"

Autoren: Raúl Gracia-Tinedo, Flavio Junqueira, Tom Kaitchuck
Veröffentlicht in: Proceedings of the 25th International Middleware Conference Industrial Track on ZZZ, 2025
Herausgeber: ACM
DOI: 10.1145/3700824.3701099

Exhaustive Variant Interaction Analysis using Multifactor Dimensionality Reduction

Autoren: Gonzalo Gómez-Sánchez, Lorena Alonso, Miguel Ángel Pérez, Ignasi Morán, David Torrents, Josep Lluis Berral
Veröffentlicht in: 2024
Herausgeber: Research Square Platform LLC
DOI: 10.21203/RS.3.RS-3401025/V1

A Last-Level Defense for Appli- cation Integrity and Confiden- tiality

Autoren: Ardhi Putra Pratama Hartono, Andrey Brito, Christof Fetzer
Veröffentlicht in: Middleware ’23: Proceed- ings of the 24th International Middleware Conference, 2023, ISSN 0004-5411
Herausgeber: Association for Computing Machinary, Inc.
DOI: 10.1145/3603166.3632127

TICAL: Trusted and Integrity-protected Compilation of AppLications

Autoren: Robert Krahn, Nikson Kanti Paul, Franz Gregor, Do Le Quoc, Andrey Brito, André Martin, Christof Fetzer
Veröffentlicht in: 2024 19th European Dependable Computing Conference (EDCC), 2024
Herausgeber: IEEE
DOI: 10.1109/EDCC61798.2024.00018

Trustworthy confidential virtual machines for the masses

Autoren: Anna Galanou, Khushboo Bindlish, Luca Preibsch, Yvonne-Anne Pignolet, Christof Fetzer, Rüdiger Kapitza
Veröffentlicht in: Middleware ’23: Proceedings of the 24th International Middleware Conference, 2023, ISSN 0004-5411
Herausgeber: ACM
DOI: 10.1145/3590140.3629124

Pravega: A Tiered Storage System for Data Streams

Autoren: Raúl Gracia-Tinedo, Flavio Junqueira, Tom Kaitchuck, Sachin Joshi
Veröffentlicht in: Middleware ’23: Proceedings of the 24th International Middleware Conference, 2023, ISSN 0004-5411
Herausgeber: ACM
DOI: 10.1145/3590140.3629113

Challenges and Opportunities for RISC-V Architectures towards Genomics-based Workloads

Autoren: Gonzalo Gómez- Sánchez, Aaron call, Xavier Teruel, Lorena Alonso, Ignasi Moran, Miguel Ángel Perez, David Torrents, Josep Ll. Berral
Veröffentlicht in: First International workshop on RISC-V for HPC, of ISC High Performance conference, 2023, ISSN 2193-1801
Herausgeber: Springer
DOI: 10.1007/978-3-031-40843-4_34

Scaling a Variant Calling Genomics Pipeline with FaaS

Autoren: Aitor Arjona, Arnau Gabriel-Atienza, Sara Lanuza-Orna, Xavier Roca-Canals, Ayman Bourramouss, Tyler K. Chafin, Lucio Marcello, Paolo Ribeca, Pedro García-López
Veröffentlicht in: WoSC ’23: Proceedings of the 9th International Workshop on Serverless Computing, 2023, ISSN 0004-5411
Herausgeber: ACM
DOI: 10.48550/arXiv.2312.07090

Serverless Data Analytics (Finally) Bridging the Gap: Introducing the Ortzi Dataframe

Autoren: Germán T. Eizaguirre, Marc Hostau, Marc Sánchez-Artigas
Veröffentlicht in: 2025
Herausgeber: ACM
DOI: 10.5281/ZENODO.17701352

Practical Storage-Compute Elasticity for Stream Data Processing

Autoren: Raúl Gracia-Tinedo, Brian Zhou, Yimin Xiong, Luis Liu
Veröffentlicht in: Middleware ’23: Proceedings of the 24th International Middleware Conference, 2023, ISSN 0004-5411
Herausgeber: ACM
DOI: 10.1145/3626562.3626828

A Comprehensive Study on the Impact of Vulnerable Dependencies on Open-Source Software

Autoren: Shree Hari Bittugondanahalli Indra Kumar, Lília Rodrigues Sampaio, André Martin, Andrey Brito, Christof Fetzer
Veröffentlicht in: 2024 IEEE 35th International Symposium on Software Reliability Engineering (ISSRE), 2025
Herausgeber: IEEE
DOI: 10.1109/ISSRE62328.2024.00020

Serverful Functions: Leveraging Servers in Complex Serverless Workflows (industry track)

Autoren: Germán T. Eizaguirre, Daniel Barcelona-Pons, Aitor Arjona, Gil Vernik, Pedro García-López, Theodore Alexandrov
Veröffentlicht in: Proceedings of the 25th International Middleware Conference Industrial Track on ZZZ, 2025
Herausgeber: ACM
DOI: 10.1145/3700824.3701095

Towards Multi-Tier Stream Data Tiering in the Cloud-Edge Continuum

Autoren: Omar Jundi, Raúl Gracia-Tinedo, Sean Ahearne, Pascal Spörri, Bernard Metzler
Veröffentlicht in: 2024 IEEE 32nd International Conference on Network Protocols (ICNP), 2025
Herausgeber: IEEE
DOI: 10.1109/ICNP61940.2024.10858547

StreamSense: Policy-driven Semantic Video Search in Streaming Systems

Autoren: Gerard Finol, Arnau Gabriel, Pedro García-López, Raúl Gracia-Tinedo, Luis Liu, Reuben Docea, Max Kirchner, Sebastian Bodenstedt
Veröffentlicht in: Proceedings of the 25th International Middleware Conference Industrial Track on ZZZ, 2025
Herausgeber: ACM
DOI: 10.1145/3700824.3701097

Triad - Trusted Timestamps in Untrusted Environments

Autoren: Gabriel P. Fernandez, Andrey Brito, Christof Fetzer
Veröffentlicht in: IEEE International Conference on Cloud Computing Technology and Science (CloudCom), 2023
Herausgeber: IEEE
DOI: 10.48550/ARXIV.2311.06156

The Nanoservices Framework: Co-locating Microservices in the Cloud-Edge Continuum

Autoren: Eric Caron, Raúl Gracia-Tinedo
Veröffentlicht in: IEEE ICNP’23, 2023, ISSN 2643-3303
Herausgeber: IEEE
DOI: 10.1109/ICNP59255.2023.10355592