HTM Personenvervoer N.V.
Data Engineer
Vandaag toegevoegd
Sommige details van deze opdracht zijn niet publiek beschikbaar.
Word gratis lidOver de opdracht
De rol van Data Engineer is gericht op het vormgeven en onderhouden van het datalandschap binnen een organisatie voor openbaar vervoer en mobiliteitsdiensten. In deze functie ontwerp, bouw en beheer je integraties tussen diverse applicaties, zodat data veilig, snel en efficiënt doorstroomt. Je werkt daarbij zowel aan realtime dataverwerking als aan meer traditionele koppelingen via API’s.
Wat ga je doen?
Als Senior Data Engineer / Integratie specialist ben je verantwoordelijk voor het ontwikkelen en optimaliseren van integraties en datapipelines. Je migreert integraties richting een cloudomgeving en maakt de onderliggende systemen schaalbaar en toekomstbestendig met moderne architectuurprincipes, waaronder containerisatie en microservices. Daarnaast automatiseer je processen door scripts te schrijven en complexe datastromen te manipuleren.
Je richt je op integratie- en cloudoplossingen door serverless integraties en workflows te ontwerpen en te implementeren. Verder onderhoud je de integratielaag binnen een API-beheeromgeving en zorg je voor robuuste dataverwerking. Voor data engineering werk je aan datapipelines (ETL/ELT) waarmee data wordt ontsloten, getransformeerd en geladen in een centraal dataplatform.
Voor realtime behoeften ontwerp je integratiepatronen, API’s en messaging- en streamingtechnologieën die zorgen voor betrouwbare dataverwerking. Ook containeriseer je integratie-oplossingen en orkestreert deze binnen een container-omgeving in de cloud. Daarbij werk je met een DevOps-werkwijze en ondersteunende automatisering voor build- en releaseprocessen.
Naast integratie en data engineering schrijf je maatwerk in Python voor data-transformaties en automatiseringstaken, zodat processen end-to-end kunnen worden ingericht en beheerd. In je rol bewaak je niet alleen de technische werking van de integraties, maar ook de impact op het bredere dataplatform.
Eisen
- Ervaring met het werken in een Azure cloud-omgeving, specifiek met Azure Functions en Logic Apps
- Ervaring met Azure Data Factory of Synapse/Databricks
Wensen
- Het ontwikkelen en beheren van integraties binnen WSO2 API Manager en Micro Integrator is een sterke pré