Stel je eens voor; als Data Engineer binnen de afdeling Data van RVO zorg jij er voor dat onze ca. 6500 collega’s de beschikking hebben over actuele data. Daarvoor zijn we een nieuw Data en Analytics platform (DADEL) aan het neer zetten in de Azure cloud. En jij staat aan de basis van dit platform.
Jij draagt bij aan de ontwikkeling van ons Data en Analytics platform, waarbinnen je relevante data beschikbaar stelt en integreert. Je ontwikkelt de bouwblokken voor ons platform en je ontwikkelt de data pipelines waarmee je data beschikbaar maakt voor viewers, analyses en voor data science producten. Daarnaast coördineer je engineeringsvraagstukken en ben je medeverantwoordelijk voor de borging van de hoge kwaliteitsstandaarden van de afdeling data.
In deze uitdagende data engineer functie kun jij jouw engineering kennis inzetten op de verschillende transities waaraan wij werken.
Dit doe je niet alleen, maar samen met je agile team. Je werkt aan verschillende opdrachten op het gebied van interne bedrijfsfuncties (o.a. klant, financiën). Je werkt hierin samen met andere data engineers, maar ook met data modelleurs, analisten en data scientists.
Je vindt het leuk om DevOps pipelines in te richten, data te ontsluiten met Python/PySpark en een beetje te Terraformen. Daarnaast denk je na over MLops inrichting voor data science producten en het documenteren in onze wiki. Voor een groot deel van de organisatie is de Azure/cloud nieuw en neem jij de mensen graag mee in deze nieuwe manier van werken.
Verder ga jij je bezighouden met het:
• Inrichten tooling ((o.a. ADF, Databricks, PowerBI, Microsoft DevOps) op Azure.
• Ontsluiten bronnen (nadruk op Databricks/ADF) en het verder opwerken van dat in Databricks.
• MLops voor data science producten.
• Ondersteunen van collega’s binnen de agile teams en SSBI’ers in de lijn.
Kijk voor meer informatie ook op Werken met data bij RVO | RVO.nl