Skip to main content
DeutschDE
European Commission logo print header

IO Software for Exascale Architecture

Projektbeschreibung

DEENESFRITPL

Mit modernem Speichersystem dem Exa-Hochleistungsrechnen einen Schritt näherkommen

Das EU-finanzierte Projekt IO-SEA plant, eine neuartige Datenverwaltungs- und -speicherplattform für das Exa-Hochleistungsrechnen zu schaffen, die auf Objektspeichern, hierarchischem Speichermanagement und der auf Abruf erfolgenden Bereitstellung von Speicherdienstleistungen beruht. Die Plattform wird Speicherebenen und Technologien einschließlich der Schnittstelle NVM Express für nichtflüchtige Speicher und nichtflüchtiger Direktzugriffsspeicher bis hin zu bandbasierten Verfahren effizient einsetzen. Dank flüchtiger Datenknoten und Datenzugriffsfunktionen können die Nutzenden das System unter Anwendung verschiedener bekannter Datenzugriffsparadigmen auf flexible Weise betreiben. Diese flüchtigen Ressourcen werden das Problem der als statisch behandelten Speicherressourcen und Systemkomponenten lösen. Die neu entwickelten Datenverwaltungsmethoden könnten nun über im Exabereich arbeitende Plattformen bei datenintensiven Anwendungen zum Einsatz kommen.

Ziel

IO-SEA aims to provide a novel data management and storage platform for exascale computing based on hierarchical storage management (HSM) and on-demand provisioning of storage services. The platform will efficiently make use of storage tiers spanning NVMe and NVRAM at the top all the way down to tape-based technologies. System requirements are driven by data intensive use-cases, in a very strict co-design approach. The concept of ephemeral data nodes and data accessors is introduced that allow users to flexibly operate the system, using various well-known data access paradigms, such as POSIX namespaces, S3/Swift Interfaces, MPI-IO and other data formats and protocols. These ephemeral resources eliminate the problem of treating storage resources as static and unchanging system components – which is not a tenable proposition for data intensive exascale environments. The methods and techniques are applicable to exascale class data intensive applications and workflows that need to be deployed in highly heterogeneous computing environments.

Critical aspects of intelligent data placement are considered for extreme volumes of data. This ensures that the right resources among the storage tiers are used and accessed by data nodes as close as possible to compute nodes – optimising performance, cost, and energy at extreme scale. Advanced IO instrumentation and monitoring features will be developed to that effect leveraging the latest advancements in AI and machine learning to systematically analyse the telemetry records to make smart decisions on data placement. These ideas coupled with in-storage-computation remove unnecessary data movements within the system.

The IO-SEA project (EuroHPC-2019-1 topic b) has connections to the DEEP-SEA (topic d) and RED-SEA (topic c) project. It leverages technologies developed by the SAGE, SAGE2 and NextGEN-IO projects, and strengthens the TLR of the developed products and technologies.

Wissenschaftliches Gebiet

Schlüsselbegriffe

Programm/Programme

Thema/Themen

Aufforderung zur Vorschlagseinreichung

H2020-JTI-EuroHPC-2019-1

Andere Projekte für diesen Aufruf anzeigen

Finanzierungsplan

RIA - Research and Innovation action

Koordinator

COMMISSARIAT A L ENERGIE ATOMIQUE ET AUX ENERGIES ALTERNATIVES
Netto-EU-Beitrag
€ 683 381,25
Adresse
RUE LEBLANC 25
75015 PARIS 15
Frankreich

Auf der Karte ansehen
Region
Ile-de-France Ile-de-France Paris
Aktivitätstyp
Research Organisations
Links
Gesamtkosten
€ 1 366 762,50

Beteiligte (10)

Diese Seite teilen

Herunterladen

Letzte Aktualisierung: 17 April 2024

Mein Booklet

Permalink: https://cordis.europa.eu/project/id/955811/de

European Union, 2024