Skip to main content
European Commission logo
español español
CORDIS - Resultados de investigaciones de la UE
CORDIS
CORDIS Web 30th anniversary CORDIS Web 30th anniversary

Earth Observation & Weather Data Federation with AI Embeddings

Descripción del proyecto

Compresión por inteligencia artificial para el intercambio de datos meteorológicos y de observación de la Tierra

El programa Copernicus, los modelos meteorológicos y los sistemas mundiales de navegación por satélite (GNSS, por sus siglas en inglés) proporcionan amplios datos geoespaciales aplicables a diversos sectores científicos. Sin embargo, el volumen de estos datos hace inviable su alojamiento en una única plataforma. En consecuencia, los proveedores de servicios se enfrentan a dificultades para acceder a datos de distintos archivos debido a las limitaciones de costes. El equipo del proyecto Embed2Scale, financiado con fondos europeos, abordará este problema aprovechando técnicas de compresión de datos basadas en inteligencia artificial (IA) para permitir un intercambio de datos eficiente. El equipo del proyecto investigará métodos de entrenamiento de redes neuronales profundas e introducirá innovaciones en la gestión y portabilidad de datos. El resultado será una investigación pionera en el campo de la compresión de datos impulsada por la IA, que permitirá un acceso más fácil y eficiente a los datos meteorológicos y de observación de la Tierra.

Objetivo

The full potential of the Copernicus Programme unfolds when fused with additional geo-information such as weather models or GNSS measurements. However, no single platform can host all the hundreds of petabytes of geospatial data. Currently, service suppliers download data from different archives, and the sheer volume to be transferred render many applications economically not viable.
With Embed2Scale we strive to overcome these limitations enabling efficient exchange of data through AI-based data compression. We will explore the training of deep neural networks on HPC systems with self-supervised learning to transform raw geo-information into embeddings with up to 1000-fold compression. The main innovations will enable i) decentralized applications through substantial reduction of “data gravity”, ii) the portability of geospatial analytics by significantly lowering computational demand, iii) minimizing data labeling by few-shot learning, and iv) the near-real-time similarity search at petabyte scale of Earth observation and weather/climate data archives.
The objectives of Embed2Scale target i) the exploration of ground-breaking AI-compressors enabling data federation to proliferate a MLOps reference implementation for embeddings in data centers, ii) to demonstrate data federation on real-world use-cases for the Copernicus Programme, and iii) to enable the Earth observation community by open-sourcing and standardization. Within Embed2Scale, we will benchmark the use of embeddings in four applications: i) maritime awareness, ii) aboveground biomass estimation, iii) climate and air pollution prediction, and iv) crop stress & early yield detection. Overall, Embed2Scale will enable near-real time quantitative assessments of geo-information at continental scale - we respond to challenge 2 of the call: “new, enabling, scalable, operational solutions and technologies to improve capabilities of the Copernicus value chain and supporting infrastructure”.

Ámbito científico (EuroSciVoc)

CORDIS clasifica los proyectos con EuroSciVoc, una taxonomía plurilingüe de ámbitos científicos, mediante un proceso semiautomático basado en técnicas de procesamiento del lenguaje natural.

Para utilizar esta función, debe iniciar sesión o registrarse

Coordinador

MARTEL INNOVATE BV
Aportación neta de la UEn
€ 416 250,00
Dirección
KEIZERSGRACHT 482
1017 EG Amsterdam
Países Bajos

Ver en el mapa

Pyme

Organización definida por ella misma como pequeña y mediana empresa (pyme) en el momento de la firma del acuerdo de subvención.

Tipo de actividad
Private for-profit entities (excluding Higher or Secondary Education Establishments)
Enlaces
Coste total
€ 416 250,00

Participantes (6)

Socios (3)