Rijksinstituut voor de Volksgezondheid en Milieu
Senior Data Engineer.
Vandaag toegevoegd
Sommige details van deze opdracht zijn niet publiek beschikbaar.
Over de opdracht
In deze opdracht help je een data-team bij een Nederlandse publieke organisatie met het professioneel en schaalbaar inrichten van de Azure Landing Zone voor data. De nadruk ligt op het opzetten en automatiseren van cloudgebaseerde dataprocessen, zodat data betrouwbaar kan worden ontsloten, verwerkt en beschikbaar gemaakt. Je werkt in een omgeving voor publieke gezondheid, milieuonderzoek en beleidsadvies, waar informatiebeveiliging en overheidskaders van belang zijn.
Werkzaamheden
Je richt infrastructure-as-codeprocessen in en ontwikkelt de werkwijze voor het beheer van Azure-infrastructuur. Je realiseert een robuuste, geautomatiseerde uitrol van de Databricks-infrastructuur en verbindt bronsystemen via Kafka Connect voor zowel batch- als streamingintegratie. Daarbij pas je DataOps-principes toe, waaronder CI/CD voor data, automatisering, monitoring en reproduceerbaarheid.
Je zorgt ervoor dat de cloudomgeving aansluit op de beveiligings- en regelgevingseisen van de overheid. Daarbij werk je onder meer aan netwerkbeveiliging, toegangsbeheer, monitoring en infrastructuurbeveiliging. Je stemt oplossingen af met het bestaande team, begeleidt de invoering van nieuwe werkwijzen en draagt kennis actief over via documentatie, uitleg en sessies. Zo kan het team de processen na afloop zelfstandig voortzetten en blijft DataOps niet afhankelijk van één persoon.
De opdracht vraagt om samenwerking met betrokkenen over meerdere teams, domeinen of organisaties heen. Er is geen specifieke werkplek-, hybride of thuiswerkregeling vermeld.
Eisen
- Aantoonbare ervaring als cloud engineer met Azure.
- Sterke kennis van Azure Databricks en DataOps-principes, waaronder CI/CD voor data, automatisering, monitoring en reproduceerbaarheid.
- Ervaring met Kafka Connect of vergelijkbare tooling voor batch- en streamingdataintegratie.
- Ervaring met Git en GitOps.
- Ervaring met het opzetten van infrastructure as code met ARM, Bicep, Terraform of vergelijkbare technologie.
- Ervaring met Azure-netwerkbeveiliging, waaronder hub-and-spoke, NSG's, Private Endpoints, UDR's en microsegmentatie.
- Ervaring met het inrichten van monitoring met Azure Monitor, Log Analytics (KQL) en/of Splunk.
- Ervaring met het inrichten van Databricks-toegangsbeheer, waaronder Entra ID/IAM, Unity Catalog-rechten en workspacetoegang.
- Ervaring met Azure-infrastructuurbeveiliging, waaronder Defender for Cloud, Sentinel (SIEM), SOC-processen en KQL-detecties.
- Ervaring met het opstellen van infrastructure-as-codeprocessen en het realiseren van robuuste, geautomatiseerde uitrol van Databricks-infrastructuur op Azure.
- Ervaring met het ontsluiten van bronsystemen via Azure Databricks en Kafka Connect om data betrouwbaar te ontsluiten, verwerken en beschikbaar te maken.
- Ervaring met werken binnen de overheid en bekendheid met de bijbehorende processen en kaders.
- Vermogen om mensen mee te nemen, kennis over te dragen en een team te begeleiden bij nieuwe werkwijzen.
- Ervaring met ontwikkeling en samenwerking binnen de Rijksoverheid of andere publieke organisaties.
- Ervaring met het coördineren van ontwikkeling over meerdere teams, domeinen of organisaties heen.