Door de Wet DBA is deze opdracht alleen in te vullen door IT-professionals in loondienst (detachering).

Eisen:

• Je hebt minimaal HBO werk- en denkniveau
• Je hebt minimaal 3 jaar ervaring in een vergelijkbare rol
• Je hebt ervaring met het bouwen van robuuste, schaalbare en onderhoudbare services in Python
• Je beheerst het Nederlands uitstekend, zowel mondeling als schriftelijk
• Je hebt werkervaring bij een soortgelijke organisatie (minimaal 5.000 werkplekken)
• Je hebt hands-on ervaring met Azure (Function Apps, Container Apps, ADLS Gen2) en met schaalbare microservice-architecturen
• Je hebt ervaring met Infrastructure as Code, bijvoorbeeld Terraform of Bicep
• Je hebt ervaring met Databricks of Snowflake en bent bekend met OTF

Wensen:

• Het is een pre als je ervaring hebt met Databricks of Snowflake en bekend bent met OTF
• Bij voorkeur heb je werkervaring bij een vergelijkbare organisatie, bijvoorbeeld met meer dan 5.000 werkplekken

Omschrijving:

Voor de Nederlandse Spoorwegen zijn we op zoek naar een Data Ingestion Engineer. In deze rol maak je deel uit van team Lakehouse binnen de afdeling Data Innovatie & Analyse. Je zult werken aan een grootschalig data-ingestieplatform dat datateams ondersteunt in hun werkzaamheden. Dit platform stelt hen in staat om zich te concentreren op het creëren van waardevolle data-, informatie- en AI-producten. Als Data Ingestion Engineer ben je verantwoordelijk voor het volledige ontwikkel- en beheerproces van het platform. Je legt de focus op automatisering en kwaliteit, en zorgt ervoor dat het platform betrouwbaar en productiewaardig is. Je ontwikkelt core services met Python, inclusief componenten voor API en FTP, en implementeert data push-principes. Daarnaast ben je verantwoordelijk voor de logica rondom validatie, versioning en metadata-management. Dit draagt bij aan het creëren van een betrouwbare bron- en zilverlaag in Databricks. Je werkt met relationele databases zoals Postgres en maakt gebruik van containers in Azure voor het draaien van pipelines. Het ontwerpen en bouwen van API's behoort ook tot jouw taken. Je draagt bij aan de automatisering en monitoring van het ontwikkel- en beheerproces om de kwaliteit en schaalbaarheid te waarborgen. Je werkt in een autonoom scrumteam en hebt een actieve rol in kennisdeling. De opdrachtgever waardeert diversiteit en inclusie en is benieuwd naar jouw visie op de rol van Data Ingestion Engineer.