Data Engineer
Door de Wet DBA is deze opdracht alleen in te vullen door IT-professionals in loondienst (detachering). Eisen: - Snowflake - Matillion - Azure - SQL - Python Omschrijving: Als Data Engineer ben je verantwoordelijk voor het bouwen van data pipelines voor het Engine Project (BtC). In deze rol ontwerp, ontwikkel en onderhoud je data pipelines en architecturen op het Azure-platform, met een focus op Snowflake als data warehouse en Matillion als het primaire ETL-gereedschap. Je speelt een cruciale rol in het mogelijk maken van schaalbare, high-performance dataoplossingen die de bedrijfsintelligentie, analytics en data science-initiatieven ondersteunen. Je ontwerpt en ontwikkelt robuuste, schaalbare en efficiënte data pipelines met behulp van Matillion ETL op Snowflake. Daarnaast bouw en onderhoud je veilige en geoptimaliseerde datamodellen binnen Snowflake, waarbij je de beste praktijken in schema-ontwerp en datagovernance waarborgt. Je maakt gebruik van Azure-diensten zoals Azure Data Factory, Azure Data Lake, Azure Blob Storage en Azure Synapse Analytics om datastromen te beheren en te orkestreren. Samenwerken met Data Architects, Analysts en Business Stakeholders is essentieel om de vereisten te begrijpen en hoogwaardige dataoplossingen te leveren. Je monitort en lost ETL/ELT-workflows op en optimaliseert processen voor efficiëntie en betrouwbaarheid. Het implementeren en onderhouden van datakwaliteit, herkomst en documentatiepraktijken is ook een belangrijk onderdeel van je rol. Je neemt deel aan code reviews en houdt je aan DevOps/CI-CD-praktijken voor het implementeren van data pipelines. Blijf op de hoogte van de nieuwste trends en opkomende tools in de data engineering en cloudruimte.