Functieomschrijving

Opdrachtbeschrijving

Je speelt een centrale rol binnen het Business Intelligence Team van BZ.
Buitenlandse zaken heeft de ambitie door te groeien naar een informatie gestuurde, data-gedreven organisatie. Om dit te verwezenlijken loopt een diversiteit aan business intelligence & analytics (BIA) en data science projecten die grotendeels in elkaar verweven zijn. Ontwikkeling en beheer worden uitgevoerd door twee ontwikkel- en beheerteams onder aansturing van twee projectleiders.

De verschillende agile-scrum teams werken nauw samen met producteigenaren en opdrachtgevers vanuit verschillende afdelingen. Verschillende stakeholders, verschillende belangen, allemaal met als doel steeds beter en meer informatiegestuurd te kunnen werken voor een steeds grotere gebruikersgroep.

Je activiteiten gaan zich richten op het doorontwikkelen van het datawarehouse op basis van het Databricks platform. Uitgebreide kennis van python en sql is hiervoor van belang.

De volgende taken en resultaatgebieden worden onderkend

Ontwikkelt, onderhoudt en optimaliseert datapipelines voor specifieke informatieproducten. Hiervoor wordt het Databricks platform gebruikt.
Ondersteunt, adviseert en stemt af met data analisten, infra engineer, visualisten, datascientists en BI-consultant (en informatiemanagers) betreffende informatieplanning en informatiestrategie
Werkt nauw samen met BI-consultants, datagebruikers, datascientists e.a. op in de hiervoor genoemde technieken, zodat ze in staat zijn om de data die ze nodig hebben te integreren en te gebruiken
Draagt er zorg voor dat de workloads gemanaged (deployment via devops pipelines) naar ontwikkeling en productie worden gebracht. Dit proces wordt door de data-engineer continu doorontwikkeld
De Data-engineer is verantwoordelijk voor het monitoren en signaleren van de meest recente ontwikkelingen van innovatieve en moderne tools, technieken en architectuur voor data-ontwikkeling en beheer
De data-engineer draagt zorg voor het zoveel mogelijk geheel of gedeeltelijk automatiseren van de laad- en verwerkingsprocessen
Draagt er samen met o.a. de datasteward zorg voor dat compliance-eisen en datagovernance worden verwerkt in de technische oplossing, zodat gebruikers (BI-consultants, data-scientists, datagebruikers) de data op een verantwoorde manier gebruiken
Denkt onafhankelijk en zet technologische kennis in om verschillende concepten te integreren zodat unieke oplossingen ontstaan (Innoveren)

Achtergrond opdracht

Als Data Engineer weet je als geen ander dat de opkomst van informatie gestuurd werken onvermijdelijk is. Data is overal om ons heen. Het toepassen van data kan BZ efficiënter en slimmer maken. Het doel van het Data Competence Centre is om (big)data (intern/extern, gestructureerd/ongestructureerd) te verzamelen en deze zodanig te rangschikken dat de data kan worden toegepast om tot inzichten te komen ter ondersteuning van de processen van BZ. Voor de ontwikkeling hiervan is een business intelligence & analytics en data science team ingericht. Je komt te werken in een multidisciplinair scrumteam voor de business intelligence producten o.a. bestaande uit data analisten, ontwikkelaars en business vertegenwoordigers. In samenwerking met vertegenwoordigers van diverse directies wordt gewerkt aan het gestructureerd ontsluiten van de belangrijkste systemen van BZ en het onderbrengen van deze gegevens in een enterprise data warehouse en bijbehorende analytische omgevingen. Voor de facilitering van dit team is BZ op zoek naar een bevlogen Senior Data engineer met relevante ervaring op het Microsoft Azure platform.

De data-engineer speelt een centrale rol bij het strategisch positioneren en toepasbaar (beschikbaar maken, automatiseren, inladen en prepareren) maken van de data- en analyse-initiatieven voor (beleids)directies en posten. Het grootste deel van het werk besteedt de dataengineer aan het bouwen, beheren en optimaliseren van datapipelines en het effectief verplaatsen van deze datapipelines naar productie.

Hierin werkt de Data Engineer nauw samen met het functionele DevOps team van Infra Engineers, analisten en Tableau ontwikkelaars. Hiervoor is soms een flinke dosis flexibiliteit en creativiteit nodig richting de collega teamleden. De geschikte kandidaat weet van aanpakken, kan goed omgaan met een grote verscheidenheid werkzaamheden gedurende de werkdagen en is een echte teamspeler. Bovendien is de Data engineer de specialist op het gebied van ontsluiten van data uit bronnen, datatransformaties en datamodelleren.

Organisatorische context en cultuur

Het ministerie van Buitenlandse Zaken is de spil in de communicatie tussen de Nederlandse regering en de regeringen van andere landen én tussen de Nederlandse regering en internationale organisaties. Het ministerie coördineert het buitenlands beleid van de Nederlandse regering en voert dit uit. Naast het departement in Den Haag opereert het ministerie vanuit ambassades, permanente vertegenwoordigingen en consulaten-generaal, verspreid over de hele wereld.

Het ministerie voert een actief diversiteitsbeleid en zet in op een inclusieve organisatie. We doen dit door de verschillen van mensen optimaal in te zetten en te benutten. We streven bij de samenstelling van teams en bij de aanname van nieuw talent naar diversiteit in leeftijd, geslacht, cultuur, achtergrond, geaardheid, kennis en competenties.

De Directie Informatievoorziening en Digitale Innovatie (IDI) is verantwoordelijk voor de I(CT)-voorziening van het Ministerie van Buitenlandse Zaken. Met ruim 100 medewerkers voert IDI regie op externe leveranciers (zowel commercieel als overheidspartijen) die I(CT)-diensten aan BZ leveren, zodat de 5000 collega’s in binnen- en buitenland optimaal digitaal kunnen (samen)werken.

IDI is de strategisch partner van de departementsleiding op het gebied van digitalisering en ondersteunt het departement om digitaal professioneel te functioneren. Door de inzet van nieuwe technologieën wil BZ vooroplopen als wereldwijd digitaal opererende diplomatieke dienst.

Het wereldwijde ICT-netwerk dat ook in minder ontwikkelde landen goed moet werken, de hoge beveiligingseisen die gelden voor internationale samenwerking en een inspirerend Data Competence Centre zorgen voor een uitdagende werkomgeving voor een I(CT)professional.

De Directie Informatievoorziening en Digitale Innovatie (IDI) valt organisatorisch direct onder de Plaatsvervangend Secretaris-Generaal (PSG), met aan het hoofd de CIO van BZ. Doelstelling van IDI is digitalisering nog meer te positioneren als strategisch element in de primaire en ondersteunende processen van BZ. Naast het cluster Data Competence Centre omvat de directie ook de andere clusters Advies en integratie, Informatiemanagement, Functioneel beheer, Security center en Strategie en Portfolio, Projectmanagement.

Cluster Data Competence Centre BZ (DCBZ)

Het cluster Data Competence Centre BZ is onderdeel van IDI en verantwoordelijk voor de ondersteuning van het werken met data bij BZ. Dit wordt gedaan door de ontwikkeling van informatieproducten en rapportages, die alle processen van BZ raken. Of het nu gaat om een bijdrage leveren aan inzicht in en voorspellen van de veiligheidssituatie in een land of regio op basis van onder meer open datasets of het inzicht in de uitgaven van BZ voor ontwikkelingssamenwerking. Met data wordt dagelijks een belangrijke bijdrage geleverd aan het werk van BZ. Naast de ontwikkeling van producten staat het DCBZ ook aan de lat voor het ontwikkelen en implementeren van de kaders op het gebied van werken met data. Ook het adviseren over hoe te werken met data en het vergroten van het bewustzijn van de (on)mogelijkheden van werken met gegevens behoren tot de taken van het DCBZ.

Wat wordt er van jou gevraagd?

Eisen bij de opdracht:

Je hebt ervaring met netwerken, specifiek in relatie tot Databricks en Microsoft Azure.
Je bent op de hoogte van de laatste inzichten in het inrichten en beveiligen van Azure-resources, zoals Databricks.

Wensen bij de opdracht:

Je hebt ervaring met CI/CD-methodologie en Azure DevOps.
Je hebt ervaring met Azure-tools, zoals Azure DevOps, Data Factory en vergelijkbare tools voor streaming- en batchverwerking.
Je bent bekend met architecturen voor enterprise datawarehouses en business intelligence en je hebt ervaring met PowerShell.
Je bent geïnteresseerd in en altijd op de hoogte van de nieuwste technologieën op het gebied van data engineering, data analytics en datawarehousing.
Je hebt ervaring met het beheren van cloudservices.
Je hebt ervaring met het beheren van visualisatieprogramma’s, zoals Tableau.
Je hebt kennis van en ervaring met visualisatietools, zoals Tableau. Dit is een pre.
Je hebt kennis van financiële processen en/of HR-processen, bij voorkeur binnen de Rijksoverheid.
Je hebt brede productkennis van business intelligence- en datawarehousetools.
Je hebt ervaring met leveranciersmanagement.
Je hebt kennis van en ervaring met SAP-architectuur.
Je hebt kennis van en ervaring met datamanagement en datagovernance.
Je hebt een goede beheersing van de Nederlandse taal.
Je bent in staat om draagvlak te creëren voor de grenzen van data engineering.
Je bent vaardig in het ontwikkelen, uitdragen en verdedigen van beleids- en bedrijfsvoeringsproducten, diensten, beleid, processen, nieuwe ideeën en concepten.
Je bent vaardig in het tot stand brengen, implementeren en uitvoeren van producten, diensten, beleid en processen.