Senior Data Engineer • Azure Databricks • Data Engineering

Opdrachtomschrijving

Senior Data Engineer • Azure Databricks • Data Engineering

Wij zoeken een Senior Data Engineer voor het realiseren van een centrale, herbruikbare en beheersbare voorziening voor het ontsluiten, verwerken en beschikbaar stellen van publieke databronnen. Je bouwt hands-on aan robuuste data-pipelines en draagt bij aan technische keuzes rond kwaliteit, beheer, herbruikbaarheid en schaalbaarheid.

Rol & context

Je werkt binnen een Data & AI-team van een overheidsorganisatie aan een cloud data platform op Microsoft Azure met onder meer Databricks. Het doel is om publieke databronnen centraal te ontsluiten, op te werken en beschikbaar te maken voor hergebruik in onder andere analyses, dashboards, AI-toepassingen en andere dataproducten.

Werkzaamheden

• Inventariseren van relevante publieke databronnen en technische ontsluitingsmogelijkheden
• Ontwerpen en realiseren van robuuste data-ingestie voor API-gebaseerde en andere externe databronnen
• Opschonen, transformeren, verrijken en structureren van data voor hergebruik
• Inrichten van herhaalbare data-pipelines in Azure en Databricks
• Inrichten van foutafhandeling, logging, monitoring en herstelbaarheid
• Beschikbaar stellen van datasets voor analyses, dashboards, AI-toepassingen en verdere dataverwerking
• Bijdragen aan afspraken over datamodellering, metadata, documentatie, kwaliteit en beheer
• Afstemmen met data-afnemers, architectuur, platformbeheer en andere stakeholders
• Mede bepalen van technische keuzes en richting binnen het team
• Overdragen van kennis aan teamleden

Eisen

• WO werk- en denkniveau
• Minimaal 5 jaar werkervaring als Data Engineer of in een vergelijkbare rol
• Kennis van data-engineering in Microsoft Azure
• Ervaring met het ontwerpen, bouwen en/of beheren van dataoplossingen in Azure
• Ervaring met gangbare programmeer- en querytalen
• Ervaring met het ontsluiten, combineren en/of verwerken van data uit externe bronnen binnen een Azure-omgeving
• Ervaring met API’s, databestanden en andere gegevensbronnen in verschillende formaten

Pré’s

• Kennis van Azure Databricks, Spark, Python en SQL
• Ervaring met robuuste en herhaalbare data-pipelines inclusief monitoring, foutafhandeling en beheerbaarheid
• Ervaring met het ontsluiten, opschonen, transformeren en beschikbaar maken van publieke of externe databronnen voor meervoudig intern gebruik
• Ervaring binnen een overheidsorganisatie of vergelijkbare complexe omgeving
• Ervaring met Azure Storage en Data Factory
• Ervaring met Delta Lake, medallion-architectuur of vergelijkbare patronen voor dataopwerking
• Ervaring met metadata, lineage en documentatie van datasets
• Ervaring met zelfstandig oppakken van complexe datavraagstukken en samenwerken met verschillende stakeholders
• Ervaring met technisch richting geven en kennis overdragen aan teamleden

Praktische informatie

• Start: 12 oktober 2026
• Looptijd: Tot en met 31 augustus 2027
• Uren: 32 - 40 uur per week
• Locatie: Den Haag / hybride
• Soort opdracht: Payrolling
• Reageren t/m: 27 september 2026 12:35
• Kenmerk DC&I: 202609144

Over DC&I

DC&I verbindt ervaren professionals met uitdagende opdrachten binnen de publieke én private sector. Onze focus ligt op data, procesverbetering en grote maatschappelijke transities, zoals de energietransitie, digitalisering van de overheid en toekomstbestendige zorg.

💭 Interesse? Reageer met je CV en gewenste uurtarief. Twijfel je of deze opdracht helemaal past? Voel je vrij om toch te reageren — we kijken graag samen naar andere passende opdrachten binnen ons netwerk.

Korte omschrijving van de organisatie