Demo 07
End-to-end data engineering
Draai een echte miniatuur-datapijplijn: neem CRM- en ordergegevens in, vang kwaliteitsproblemen, plaats foutieve rijen in quarantaine, schoon op en transformeer, bouw een gold fact-/dimensiemodel en lees analyse-klare output, met schema-driftdetectie, incrementele ladingen, lineage en monitoring.
Demo Alleen veilige voorbeelddata. Deterministische client-side logica. Geen live modelaanroepen.
Deze interactieve demo bootst de architectuur en het gedrag van een productie-datapijplijn na met veilige, synthetische voorbeelddata en een verkleinde dataset. Alles draait volledig in je browser.
Orkestratie
Datakwaliteit
Monitoring
| order_id | customer_key | product_key | date_key | quantity | revenue | cost | margin |
|---|---|---|---|---|---|---|---|
| O0001 | C018 | P06 | 2026-06-25 | 11 | 2.210,45 | 1.210 | 1.000,45 |
| O0002 | C006 | P04 | 2026-08-13 | 1 | 392,96 | 260 | 132,96 |
| O0003 | C006 | P02 | 2026-08-13 | 18 | 5.983,98 | 4.320 | 1.663,98 |
| O0004 | C006 | P03 | 2026-08-14 | 3 | 1.416,75 | 960 | 456,75 |
| O0005 | C005 | P05 | 2026-05-29 | 6 | 1.317,76 | 840 | 477,76 |
| O0006 | C019 | P04 | 2026-06-04 | 19 | 7.480,4 | 4.940 | 2.540,4 |
| O0007 | C010 | P05 | 2026-08-13 | 10 | 2.113,76 | 1.400 | 713,76 |
| O0008 | C022 | P06 | 2026-07-22 | 1 | 160,53 | 110 | 50,53 |
Bedrijfsmodel (Gold)
Een vereenvoudigd dimensioneel model: één feitentabel gekoppeld aan conforme dimensies.
Lineage
Klik op een tabel of metric om te traceren waar die vandaan komt.
Analyse-klare output
Omzet per regio
Omzet per categorie
Van demo naar productie
| Demo-concept | Productie-equivalent |
|---|---|
| Bronlader | Azure Data Factory / Fabric pipeline / API |
| Bronze / ruwe laag | ADLS / Lakehouse raw zone |
| Validatie | dbt tests / custom validation |
| Silver / schone laag | Transformed lakehouse tables (Spark / SQL) |
| Gold / bedrijfsmodel | Semantic / business models (dbt, warehouse) |
| Orkestratie | ADF / Fabric / Databricks workflows |
| Monitoring | Azure Monitor / pipeline telemetry |
Zo'n pijplijn nodig op je eigen data?
Zo maakt MCC van verspreide operationele data een betrouwbaar, analyse-klaar dataplatform. Zin om het te bespreken?
Start een project