NVWA
Senior Data Engineer
Senior Data Engineer bouwt pilotcasussen op een open source dataplatform en draagt kennis over aan NVWA-datateams.
Match
op je zoekprofiel
De gap-analyse wordt uitgevoerd, dit kan even duren...
Beschrijving
Eisen
- Uitvoering via detachering vanwege de aard en organisatorische inbedding van de opdracht.
- CV in het Nederlands, in Word en maximaal 5 pagina’s.
- Minimaal 10 jaar aantoonbare werkervaring in de IT.
- Minimaal 5 jaar werkervaring als data engineer en met het bouwen en beheren van dataplatformen en datapijplijnen.
- Minimaal 3 jaar werkervaring met gedistribueerde dataverwerking op een modern platform, zoals Spark/PySpark, Databricks, Fabric of gelijkwaardig.
- Minimaal 3 jaar aantoonbare werkervaring met SQL en/of Python.
- Minimaal 3 jaar aantoonbare werkervaring met CI/CD, versiebeheer en configuratie als code.
- Aantoonbare werkervaring met open source en met leveranciersonafhankelijke oplossingen.
Wensen
- Een afgeronde HBO-opleiding.
- Aantoonbare werkervaring met het bouwen van dataplatformen en datapijplijnen op schaal.
- Aantoonbaar vermogen om zich een nieuwe open source-stack, waaronder Spark, Trino, dbt, Airflow en NiFi, snel eigen te maken.
- Aantoonbaar vermogen om ontwikkelaars uit meerdere teams mee te nemen en kennis over te dragen.
- Aantoonbare ervaring met de migratie of vervanging van een bestaand dataplatform, inclusief het overzetten van functionaliteit.
- Aantoonbare ervaring met dataomgevingen, inclusief inrichting van security, rechten en toegangsbeheer.
- Aantoonbare ervaring binnen de (semi-)publieke sector in een politiek-bestuurlijk gevoelige omgeving.
- De opdracht begrijpen en bij de organisatie passen.
- Competenties: objectief en pragmatisch, politiek-bestuurlijke sensitiviteit, resultaatgerichtheid en passie, verbindend vermogen en didactische vaardigheden.
Beschrijving
De NVWA onderzoekt de vervanging van de huidige analyse- en rapportageomgeving.
De pilot maakt gebruik van een open source, Kubernetes-gebaseerd dataplatform.
Als Senior Data Engineer bouw je representatieve pilotcasussen.
Je realiseert de volledige keten van bronontsluiting tot businessontsluiting.
Je bouwt data-ingestie, transformaties en ontsluiting op bestaande NVWA-databronnen.
De stack bevat onder meer Apache NiFi, Spark, Trino, Iceberg, dbt en Airflow.
Daarnaast worden Superset, OpenMetadata en OPA op Kubernetes gebruikt.
Je vertaalt bestaande functionaliteit naar equivalenten in de nieuwe stack.
Je legt verschillen, beperkingen en bevindingen per casus vast.
Je bewaakt de voortgang en levert reproduceerbare resultaten binnen de planning.
Je werkt samen met ontwikkelaars uit verschillende teams.
Via voordoen, samendoen en zelf doen draag je kennis over.
Je levert herbruikbare bouwblokken, configuratie als code en documentatie op.
Je beoordeelt functionaliteit, performance, beheerlast, beveiliging en kosten.
Je signaleert risico’s en knelpunten tijdig aan de projectleider.
De werkzaamheden vinden plaats onder aanwijzing en toezicht van de NVWA.
De pilot wordt uitgevoerd samen met datateams en DICTU.
De uitkomsten ondersteunen de besluitvorming over het toekomstige dataplatform.
De opdracht loopt van 1 december 2026 tot en met 31 mei 2027.
Verlenging is mogelijk.
Domeinen