Door de Wet DBA is deze opdracht alleen in te vullen door IT-professionals in loondienst (detachering).

Eisen:

• Minimaal 4 jaar aantoonbare ervaring met cloud data platforms op Microsoft Azure, inclusief Databricks.
• Minimaal 3 jaar ervaring in het ontwerpen en realiseren van dataplatformen en datapijplijnen met Kubernetes.
• Minimaal 3 jaar ervaring in het ontwerpen en uitwerken van een technische data solution architectuur, met aandacht voor governance en security.
• Minimaal 3 jaar ervaring in het ontwikkelen van datapijplijnen met PySpark en SQL.

Wensen:

• Kennis van en ervaring met Microsoft Azure, met name Databricks, Storage, Active Directory en Key Vault.
• Ervaring met het naar productie brengen van modellen en het beheren en schalen daarvan met Azure, Kubernetes en Databricks.
• Werken volgens best practices (CI/CD, testing, versioning, IaC).
• Collega’s en teamleden laten groeien in data-engineeringvaardigheden.

Omschrijving:

Voor de Rijksdienst voor Ondernemend Nederland zijn we op zoek naar een Data Engineer. In deze rol werk je als Cloud/Data Engineer en draag je bij aan de realisatie van schaalbare, efficiënte en veilige data-platforms in de Azure-cloud. Hierbij spelen Databricks of Kubernetes een centrale rol. Je werkt binnen een DevOps-team aan oplossingen die techniek, beleid en concrete waarde voor Nederland verbinden. Je richt de Medallion-architectuur in binnen Databricks en vertaalt complexe businesslogica naar helder gestructureerde datasets, bij voorkeur volgens Kimball. Daarnaast ontwikkel en onderhoud je robuuste datapijplijnen met Kubernetes, PySpark en SQL. Je ontwerpt modulaire transformaties met dbt en optimaliseert platformperformance door juiste inzet van Databricks compute clusters. Ook richt je centrale governance in via Unity Catalog en implementeert RBAC. Je automatiseert deployments en streeft naar Engineering Excellence met Databricks Asset Bundles. Monitoring en logging zijn ook belangrijke onderdelen van je rol. Je ontwikkelt backend-API’s met Django en realiseert koppelingen met databases zoals Postgres. Tot slot deel je kennis en leid je interne medewerkers op, waarmee je de expertise van teamleden verhoogt.