Vattenfall AB
Data engineer
Vandaag toegevoegd
Sommige details van deze opdracht zijn niet publiek beschikbaar.
Over de opdracht
De Senior Data Engineer ontwerpt, bouwt en beheert data-infrastructuur en integreert gegevens uit uiteenlopende bronnen en bestaande systemen. De rol omvat het realiseren van datapijplijnen en end-to-end BI-oplossingen, van gegevensverzameling tot rapportage en visualisatie. Ook ondersteunt de functie het gebruik van AI- en machinelearningmodellen in datagedreven toepassingen.
Werkzaamheden en context
De Data Engineer werkt in een DevOps-team dat oplossingen ontwikkelt en beheert op basis van een cloudplatform. Daarbij wordt dagelijks samengewerkt met collega’s uit verschillende bedrijfsafdelingen en met onder meer architecten, requirements engineers, data engineers, data scientists en businessspecialisten. De gegevens, toepassingen en technologieën lopen uiteen. Voorbeelden zijn realtime analyses van meter- en sensorgegevens, voorspellend onderhoud en streaminganalyses.
De werkzaamheden bestaan uit het analyseren van bedrijfsbehoeften en vertalen daarvan naar IT-specificaties en technische user stories. De Data Engineer adviseert teams en andere afdelingen en helpt oplossingen af te stemmen op hun behoeften en prioriteiten. De rol omvat het ontwerpen en onderhouden van data lakes, datamodellen en datawarehouses, en het structureren van gegevens in cloud-, on-premise- en hybride omgevingen voor selfservice-rapportage.
Daarnaast bouwt en beheert de Data Engineer ETL- en ELT-pijplijnen, API’s en oplossingen voor streamingdata. De functie omvat het ontwikkelen en optimaliseren van gegevensopslag en -verwerking, het vastleggen van testcriteria en het uitvoeren van geautomatiseerde implementaties, inclusief terugdraaiprocedures. Ook worden monitoring, signalering, gegevenskwaliteitscontroles, validatie, toegangsbeheer en beveiligingsmaatregelen ingericht. De rol draagt bij aan geautomatiseerde infrastructuur en implementaties en ondersteunt cloud-native en containergebaseerde workloads.
De oplossingen worden gerealiseerd met moderne cloud- en gedistribueerde technologie. Daarbij werkt de Data Engineer met onder meer programmeertalen en hulpmiddelen voor data-analyse, infrastructuurautomatisering, versiebeheer en CI/CD, en houdt de functie rekening met architectuurprincipes en cloud-, on-premise- en hybride patronen. De toepassingen ondersteunen uiteenlopende bedrijfsprocessen binnen de energiesector.
Werkomstandigheden
Het team werkt op dinsdag en donderdag vanuit een kantoor in Amsterdam; aanwezigheid op die dagen wordt verwacht. Engels is de voertaal in het internationale team.
Eisen
- HBO- of WO-opleidingsniveau.
- Aantoonbare ervaring in data engineering.
- Werkervaring met analytics- en BI-tools en -diensten.
- Een technische achtergrond en inzicht in het ontwikkelen van analyticsoplossingen met bijvoorbeeld Python, SQL en PySpark.
- Bekendheid met CI/CD, testen en versiebeheer.
- Bekendheid met Terraform en Bash.
- Bekendheid met datawarehousing- en datamodelleringsconcepten.
- Ervaring met het ontwerpen, implementeren en onderhouden van Azure-infrastructuur met Infrastructure as Code en Terraform.
- Ervaring met het implementeren van RBAC, IAM en beveiligingspraktijken in Azure-omgevingen.
- Ervaring met het ondersteunen van gecontaineriseerde workloads met Kubernetes.
- Inzicht in IT-architectuurrichtlijnen en -principes, zoals TOGAF, en on-premise-, cloud- en hybride architectuurpatronen.
- Ervaring met agile werken.
- Goede mondelinge en schriftelijke beheersing van het Engels.
- Beschikbaarheid om op dinsdag en donderdag op kantoor in Amsterdam aanwezig te zijn.