EUMETSAT Destination Earth Data Lake (DEDL) Cube
Il progetto Destination Earth Data Lake Cube (DEDL Cube) è finanziato da EUMETSAT e mira a facilitare la ricerca, l'accesso e l'elaborazione dei dati dei prodotti offerti nell'ambito del Destination Earth Harmonized Data Access (HDA). L'HDA offre un ampio portafoglio di dati con centinaia di prodotti, tra cui i più recenti Digital Twins atmosferici prodotti dall'ECMWF.
Il DEDL Cube sarà costituito da diversi componenti, ciascuno implementato e gestito da esperti del consorzio. Il componente DataCube Generation è responsabile della conversione di un set di dati selezionati in una versione ottimizzata per il cloud pronta per l'analisi. Incorpora funzionalità per la ricerca dei dati tramite l'API HDA - STAC, il loro download e la loro rielaborazione nel formato cloud nativo Zarr su un sistema a griglia globale discreta (DGGS). Il secondo componente principale è un servizio API openEO, che offrirà funzionalità di individuazione e elaborazione dei dati nel cloud con lo standard openEO, favorendo la portabilità, la riproducibilità ed evitando il vendor lock-in. L'implementazione sarà realizzata riutilizzando ed estendendo progetti open source con una base di utenti consolidata, apportando nuove funzionalità all'intera comunità openEO.
Il gruppo Advanced Computing dell'Istituto per l'Osservazione della Terra ha una vasta esperienza nell'elaborazione e nella gestione di dati geospaziali cloud-native e contribuirà con la sua competenza alla progettazione dell'architettura DEDL Cube, all'implementazione e alla convalida dell'API openEO e, infine, alla documentazione del progetto.
Questo progetto consolida l'adozione dell'API openEO, introducendola a un grande produttore di dati come EUMETSAT. Eurac Research ha svolto un ruolo chiave nello sviluppo di openEO sin dal progetto iniziale e continua a utilizzarlo e svilupparlo in molti altri progetti.
Contatto: Michele Claus michele.claus@eurac.edu
Eurac Research activities in the project are divided among the three work packages:
Service Design & Architecture: we will be responsible for coordinating the requirements analysis, the update of the system architecture documenting the rationale for chosen stack and finally updating the identified design constraints. The work will result in the deliverable D01 due to KO+3 months (end of February).
Minimum Viable Product: we will contribute to the DataCube Generation component development, testing out the products converted by DevelopmentSeed with openEO. We will extend the openEO Python software stack to be compatible with the EUMETSAT products (Sentinel-3 WFR, MSG, MTG, ASCAT), initiating the integration of data projected on the HEALPix DGGS.
Increment A: we will contributor the the openEO API deployment, focusing on the User Defined Functions (UDFs) implementation to run custom workflows, based on either custom Python scripts or on containers defined by a Common Workflow Language (CWL) document.
Eurac Research is also responsible for the whole project documentation, covered in all the work packages
- Project duration: -
- Project status:
- Funding: Public institutions (Other projects /Project)
- Institute: Istituto per l'osservazione della Terra
Discover
Scopri esperte ed esperti, pubblicazioni e temi di ricerca collegati.
Preferenze Cookie
