Data Engineer

Als Senior Data Engineer / Integratie Specialist ben jij de spil in ons datalandschap. Je ontwerpt, bouwt en beheert de integraties tussen een breed scala aan applicaties. Je zorgt ervoor dat data veilig, snel en efficiënt stroomt. Of het nu gaat om realtime streaming of traditionele API-koppelingen; jij weet er wel raad mee. Als T-shaped specialist heb je diepgaande expertise in integratie- en cloudoplossingen, maar beschik je daarnaast over brede kennis van data engineering, analytics en DevOps. Hierdoor ben je in staat om niet alleen integraties te ontwerpen en beheren, maar ook de impact ervan op het bredere dataplatform te overzien. Je migreert en optimaliseer onze integraties richting de Azure cloud-omgeving. Hierbij maak je intensief gebruik van containerisatie, microservices-architecturen en moderne dataplatformen om onze systemen schaalbaar en toekomstbestendig te maken. Daarnaast schrijf je scripts om processen te automatiseren en complexe datastromen te manipuleren. Jouw belangrijkste taken: Integratie & Cloud: Het ontwerpen en implementeren van serverless integraties en workflows met Azure Functions en Logic Apps. Het ontwikkelen en beheren van integraties binnen WSO2 API Manager en Micro Integrator is een sterke pré. Data Engineering: Het ontwerpen, bouwen en onderhouden van robuuste datapipelines (ETL/ELT) om data te ontsluiten, transformeren en te laden in ons centrale dataplatform. Streaming & Messaging: Het ontwerpen en implementeren van moderne integratiepatronen, API’s, messaging- en streamingtechnologieën (zoals Kafka en Event Hubs) voor realtime dataverwerking. DevOps & Containerisatie: Het containeriseren van integratie-oplossingen met Docker en het orchestreren hiervan binnen Azure Container Apps. Je maakt gebruik van CI/CD pipelines en werkt volgens de nieuwste DevOps-standaarden. Scripting & Maatwerk: Het schrijven van efficiënte scripts en maatwerkkoppelingen in Python voor data-transformaties en automatisering. Wie zoeken wij? Je bent analytisch sterk, communicatief vaardig en verliest het overzicht nooit. Je hebt een passie voor cloudtechnologie, automatisering en moderne data-architectuur. Als T-Shaped specialist switch je moeiteloos tussen een integratie-vraagstuk en een data-engineering uitdaging. Daarnaast breng je het volgende mee: Azure Cloud ervaring: Je hebt aantoonbare ervaring met het werken in een Azure cloud-omgeving, specifiek met Azure Functions en Logic Apps. Ervaring met Azure Data Factory of Synapse/Databricks is een eis. Data Engineering & SQL: Ervaring met het modelleren van data en het bouwen van betrouwbare datapipelines. Je schrijft complexe SQL-queries alsof het je moedertaal is. Development & Scripting: Je kunt vloeiend uit de voeten met Python voor data-transformaties, data-manipulatie (bijv. Pandas/PySpark) of automatiseringstaken. Integratie & Streaming: Ervaring met moderne integratiepatronen, API’s (manager), messaging en streamingtechnologieën zoals Kafka en EventHub. Containers & Orchestratie: Gedegen kennis van Docker en ervaring met het beheren of uitrollen van applicaties in Kubernetes en/of Azure Container Apps. Protocollen & Data-formaten: Grondige kennis van data-uitwisselingsprotocollen en standaarden, waaronder: REST, JSON, HTTP(S), SOAP, XML, XSLT, SFTP en SQL. DevOps Mindset: Ervaring met tooling zoals Git, Azure DevOps en Jira.Senior Data Engineer / Integratie specialist (60/40)