Als Data Engineer ben je onderdeel van een toegewijd Data Insights Team. Je structureert complexe datastromen, ontwikkelt schaalbare modellen en optimaliseert de volledige dataketen.
Wat je doet:
Ontwikkelen en onderhouden van data pipelines en ETL-processen in Azure Data Factory en on-prem.
Integreren van data uit o.a. ERP-systemen, SQL-databases, API’s en flat files.
Zorgen voor datakwaliteit via controles, outlier detectie, data profiling en opschoning.
Schrijven van Python-scripts voor verwerking en automatisering.
Beheren van CI/CD pipelines in Azure DevOps.
Aansluiten van nieuwe databronnen en harmoniseren van bestaande bronnen.
Meewerken aan een robuuste data-architectuur met o.a. een data dictionary en centrale governance.
Volgen van trends in data engineering en vertalen naar innovatieve toepassingen.