Success Story: Refactoring eines Raw Data Vault-Modells zur Speicherung von Trackingdaten

In weniger als 45 Minuten gebe ich einen Überblick über ein Jahr intensiver Arbeit: Ein Data Lake mit vier Petabyte an Trackingdaten und ein Data Vault-Modell am Limit für Deutschlands zweitgrößten Onlineshop.

Dieser Vortrag zeigt, wie wir in Zusammenarbeit mit unserem Kunden das Data Vault-Modell, einschließlich der Implementierung von Transactional Links, komplett neu auf Basis von Googles Datenbank BigQuery gestaltet haben. Wir haben fachliche Anforderungen präzise erfasst und die Datenintegration mithilfe von Airflow und dbt optimiert.

Erfahre, welche Herausforderungen wir meistern mussten und welche Erfolge wir letztendlich feiern konnten – alles selbstverständlich in der Cloud!