Ministerie van Economische Zaken en Klimaat
Data Engineer (Azure Databricks)
3 dagen geleden toegevoegd
Sommige details van deze opdracht zijn niet publiek beschikbaar.
Word gratis lidOver de opdracht
De functie betreft een Data Engineer binnen een publieke organisatie die data- en informatievoorziening ontwikkelt en beheert voor beleids- en uitvoeringsorganisaties. De opdracht valt onder de Directie Informatievoorziening (IV) met als ambitie om data integraal beschikbaar te maken en inzicht te creëren voor beleids- en kerndirecties. Binnen het team Dataservices wordt gewerkt aan de doorontwikkeling van een bestaand data- en analyseplatform naar een duurzame oplossing met toegankelijke data en beschikbare dataproducten. Dit gebeurt in samenwerking met beleidsdirecties die de datavraagstukken aanleveren.
Opdrachtomschrijving
In de rol ontwikkel, onderhoud en optimaliseer je datapipelines voor specifieke informatieproducten. Je gebruikt hiervoor een modern data-engineeringplatform. Daarnaast ontwerp en bouw je datamodellen die aansluiten op de datavragen van collega’s en werk je aan een professionele data-strategie. Je draagt bij aan het opzetten van een doorzoekbare data-catalogus voor kerndepartementen en denkt kritisch mee over de verdere doorontwikkeling van het data-platform. Hierbij volg je relevante ontwikkelingen in tools, technieken en architectuur voor data-ontwikkeling en -beheer.
Je werkt nauw samen met datagebruikers, datascientists en andere betrokkenen om ervoor te zorgen dat zij de benodigde data kunnen integreren en gebruiken. Je stimuleert datagedreven werken binnen de kerndepartementen en ondersteunt collega’s bij het toepassen van deze werkwijze. Ook professionaliseer je de bestaande ETL-werkwijzen door best-practices en werkafspraken te beschrijven en verder te brengen. Vanuit je rol ben je sparringspartner op architectuurvraagstukken en draag je bij aan de vertaling van wensen naar praktische en duurzame oplossingen.
De inzet voor deze functie is verdeeld over twee inhoudelijke teams: ongeveer de helft van de tijd binnen Dataservices en ongeveer de helft binnen een cluster Data, Kennis & Monitoring van de directie Strategie Energiesysteem. Dit cluster heeft een trekkende rol in de implementatie van het data-platform binnen de kerndepartementen en gebruikt de beschikbare data ter ondersteuning van datagedreven beleid. Tevens houdt het cluster zich bezig met het samenbrengen van decentrale ontwikkelingen rond het platform.
Eisen
- Minimaal 5 jaar ervaring als data engineer, data analist, BI specialist, data architect of een vergelijkbare rol (in het cv gemotiveerd in welke manier dit vergelijkbaar is).
- Minimaal 3 jaar ervaring in Microsoft Azure en Azure Databricks.
Wensen
- Diepgaande kennis en ervaring met ETL-principes en de realisatie ervan
- Kennis en ervaring met datamodelleringsprincipes
- Kennis en ervaring met data-architectuurprincipes
- Kennis en ervaring met de Rijksoverheid