Opis projektu
System oparty na chmurze umożliwia niedrogą i prostszą analizę danych
Finansowany przez Europejską Radę ds. Badań Naukowych projekt CODAC ma na celu przekształcenie wielkoskalowej analityki danych w chmurze w produkt. Aby tego dokonać, zespół zaprojektuje i rozwinie otwarty i niedrogi system analitycznej bazy danych dla chmury. System będzie składał się głównie z komponentu inteligentnego sterowania, w pełni wydajnego i skalowalnego silnika przetwarzania zapytań oraz abstrakcji pamięci masowej w postaci jeziora danych. Komponent ten będzie w sposób automatyczny i przejrzysty wybierał i zarządzał najtańszym sprzętem dla danego obciążenia roboczego oraz ułatwi migrację do usług chmurowych świadczonych przez innych dostawców. Silnik będzie wykorzystywał nowoczesne urządzenia chmurowe, a jezioro danych pozwoli na niedrogie przechowywanie danych.
Cel
The goal of this project is to commoditize large-scale data analytics in the cloud, which means (a) to reduce query processing cost to close to what the available hardware is theoretically capable of and (b) to prevent vendor lock-in by making it easy to move data between different clouds and systems. To achieve this, we will design and develop an open and cost-efficient analytical database system for the cloud called CODAC.
The CODAC system consists of three main components: First, an intelligent control component that automatically and transparently selects and manages the cheapest hardware instances for the given workload and makes migration to other (e.g. European) cloud vendors possible. Second, a highly-efficient and scalable query processing engine that is capable of fully exploiting modern cloud hardware. Third, a data lake storage abstraction based on open data formats that enables cheap storage as well as modularity and interoperability across different data systems. The resulting system therefore has the potential for making large-scale data analytics both cheaper and easier, boosting data-driven instruct and science.
Dziedzina nauki
Słowa kluczowe
Program(-y)
- HORIZON.1.1 - European Research Council (ERC) Main Programme
Temat(-y)
System finansowania
HORIZON-ERC - HORIZON ERC GrantsInstytucja przyjmująca
80333 Muenchen
Niemcy