Projektbeschreibung
Cloud-basiertes System zur kosteneffizienten, einfacheren Datenanalyse
Ziel des vom Europäischen Forschungsrat finanzierten Projekts CODAC ist, die großangelegte Datenanalytik in der Cloud in ein Primärgut umzuwandeln. Zu diesem Zweck wird es ein offenes und kostengünstiges analytisches Datenbanksystem für die Cloud entwerfen und entwickeln. Das System wird im Wesentlichen aus einer intelligenten Steuerungskomponente, einer vollständig effizienten und skalierbaren Anfragebearbeitungsengine und einer Data-Lake-Speicherabstraktion bestehen. Die Komponente wird auf automatische und transparente Weise die günstigste Hardware für die jeweilige spezielle Arbeitslast auswählen und verwalten sowie die Migration zu anderen Cloud-Anbietern erleichtern. Bei der Engine werden die Vorteile moderner Cloud-Hardware ausgenutzt, während der Data Lake eine kostengünstige Speicherung gestattet.
Ziel
The goal of this project is to commoditize large-scale data analytics in the cloud, which means (a) to reduce query processing cost to close to what the available hardware is theoretically capable of and (b) to prevent vendor lock-in by making it easy to move data between different clouds and systems. To achieve this, we will design and develop an open and cost-efficient analytical database system for the cloud called CODAC.
The CODAC system consists of three main components: First, an intelligent control component that automatically and transparently selects and manages the cheapest hardware instances for the given workload and makes migration to other (e.g. European) cloud vendors possible. Second, a highly-efficient and scalable query processing engine that is capable of fully exploiting modern cloud hardware. Third, a data lake storage abstraction based on open data formats that enables cheap storage as well as modularity and interoperability across different data systems. The resulting system therefore has the potential for making large-scale data analytics both cheaper and easier, boosting data-driven instruct and science.
Wissenschaftliches Gebiet
Schlüsselbegriffe
Programm/Programme
- HORIZON.1.1 - European Research Council (ERC) Main Programme
Thema/Themen
Finanzierungsplan
HORIZON-ERC - HORIZON ERC GrantsGastgebende Einrichtung
80333 Muenchen
Deutschland