Door de Wet DBA is deze opdracht alleen in te vullen door IT-professionals in loondienst (detachering).

Eisen:

• Je hebt minimaal hbo werk- en denkniveau
• Je hebt minimaal 5 jaar aantoonbare ervaring als (senior) data engineer of vergelijkbare rol
• Je hebt aantoonbare ervaring met het ontwikkelen van ELT/ETL processen met behulp van SQL en/of Python
• Je hebt aantoonbare ervaring met verschillende databases, waaronder SQL Server en Databricks, en bent bekend met datalake concepten zoals Delta Lake
• Je hebt ervaring met het vertalen van features naar technische oplossingen binnen bestaande architectuurkaders
• Je hebt ervaring met best practices voor software-engineering, zoals OTAP, versiebeheer in GIT, testautomatisering en CI/CD

Wensen:

• Je hebt kennis van Microsoft Fabric, vooral in verband met een migratie van Databricks hiernaar toe.

Omschrijving:

Voor Stedin zoeken wij een Senior Data Engineer. Als Senior Data Engineer speel je een sleutelrol in de energietransitie, waarbij jouw expertise op het gebied van data onmisbaar is voor vooruitgang. De opdrachtgever heeft de overstap naar Microsoft Azure Cloud gemaakt en werkt met producten als Databricks en in de toekomst Microsoft Fabric. Je werkt aan het bouwen van generieke datasets die de business helpen bij het nemen van beslissingen en je pakt diverse Data Engineering vraagstukken op, zoals het creëren van interfaces tussen het platform en andere systemen. Afhankelijk van de tool en toepassing gebruik je SQL of Python om oplossingen te realiseren en API's te integreren. Je uitdaging ligt in het slim omzetten van grote hoeveelheden ruwe data, onder andere afkomstig van sensoren, naar waardevolle informatie. Als Senior Data Engineer vertaal je de informatiebehoefte naar succesvolle data-oplossingen met behulp van onder meer Databricks en Airflow. Je levert een actieve bijdrage aan de ontwikkeling en positionering van BI- en data-dienstverlening rond thema's als decentralisatie en het professionaliseren van self service BI (Microsoft Fabric). Hiermee help je bedrijfsafdelingen zoals Asset Management, Operations, Instandhouding en de Capaciteitsmanagementketen om meer datagedreven te werken en maximaal waarde uit data te halen. Je kunt nieuwe tooling en programmeertalen snel eigen maken en vindt het leuk om samen te vernieuwen én anderen in het innovatieproces mee te nemen. In alles wat je doet, houd je het klantbelang scherp in het vizier. Samen met het team onderhoud je ook reeds gebouwde datastromen.