Data Engineer

Ben jij een ervaren Data Engineer die graag werkt aan moderne cloud data platformen? In de regio nabij Antwerpen is er een boeiende kans om het Databricks platform vorm te geven en te optimaliseren binnen een dynamische organisatie die zich richt op data-gedreven besluitvorming.

Als Data Engineer ben je verantwoordelijk voor het ontwerpen, bouwen en onderhouden van schaalbare data pipelines binnen Azure Databricks. Je integreert diverse databronnen, waarborgt de datakwaliteit en werkt nauw samen met data-analisten en business stakeholders om betrouwbare datasets te leveren voor rapportage en analyse.

• Ontwerpen, bouwen en optimaliseren van data pipelines in Azure Databricks volgens medallion architectuur (Bronze, Silver, Gold).
• Integreren van nieuwe data bronnen zoals interne systemen, externe datasets, API's en bestanden.
• Verbeteren van prestaties, betrouwbaarheid en kosten-efficiëntie van het data platform.
• Samenwerken met data-analisten en business gebruikers om data vereisten te vertalen naar technische oplossingen.
• Implementeren van data kwaliteitscontroles en documenteren van data flows en technische beslissingen.

• Ervaring met Azure Databricks, SQL, Python/PySpark en data pipeline ontwikkeling.
• Kennis van medallion architectuur en cloud-gebaseerde data engineering tools zoals Azure Data Factory.
• Goede communicatieve vaardigheden in het Nederlands en Engels, met het vermogen om technische onderwerpen begrijpelijk uit te leggen.