Opdrachtgever · 2021–2025 · Lakehouse

Twee jaar migratie vast. ETL van 15 uur naar 20 minuten. Vier maanden later live.

15u 20m
ETL verwerkingstijd
€400k/jr
Recurring licentiedruk weg
5.000
Gebruikers, nul verstoringen bij cutover
18%
FTE-efficiëntie holding-breed

Ingestapt als data architect op een vastgelopen migratie. Stermodel herontworpen, gefaseerde cutover met rollback per laag. Zonder één verstoring voor de eindgebruiker.

Migration map
Hover over een component om te zien wat er speelde, en wat er veranderde.
Oud landschap
Oracle → Redshift lift-and-shift, vastgelopen
Legacy bron
Oracle
15 jaar oude ETL-logica. Lift-and-shift naar Redshift zonder herontwerp. Kern van de migratiecrisis.
ETL laag
Redshift views (lift-and-shift)
Full-loads over miljarden records, geen incrementele logica. Elke run: 15 uur.
Data Warehouse
Redshift
€400k/jr recurring licentiekosten. Weekafsluiting drie maanden onbetrouwbaar.
Reporting
MicroStrategy
20.000 dashboards in omloop. Niemand wist welke nog actief gebruikt werden.
Gefaseerde cutover
Rollback per laag
Nieuw platform
Snel, schaalbaar, uitlegbaar
Landing zone
S3
Validatie tegen bron op elke laag. Fouten vroeg gevangen, niet bij de eindgebruiker.
Data Warehouse
Snowflake
Incrementeel laden. Van 15 uur naar 20 minuten structureel.
Transformaties
dbt
Herbruikbare framework-blocks. Eén aanpassing updatet 12 downstream flows automatisch.
Reporting
Tableau
5.000 gebruikers. Nul verstoringen bij de cutover.
Wat vervangen is Wat er nu staat Klik of hover voor context per laag
Stack
Snowflake dbt Tableau Airflow OpenMetadata Great Expectations GitHub Terraform
Aanpak
Lakehouse architectuur Data Mesh Column-level lineage Dynamic PII masking TDD pipeline Virtual DTAP · Zero Copy Cloning CDC (Change Data Capture) Matillion → dbt migratie Snowflake Cortex AI (POC)
Het team draait door. De aanpak is organisatiebreed overgenomen. Ik ben in april 2025 vertrokken.