Data Engineer 23052730

Achtergrond opdracht

Met de nieuwe Directie IT & Innovatie (DI&I) zet het Defensie Ondersteuningscommando (DOSCO) koers naar de toekomst. Na jaren van krimp zetten we in op een indrukwekkende vernieuwingsslag met behulp van een digitale transformatie om zo - in de ondersteuning die DOSCO levert - het verschil in het gevecht voor Defensie te kunnen maken. In een team van bevlogen specialisten werk je mee aan het vormgeven van deze digitale transitie. 

DI&I is meer dan alleen IT. We zijn de motor achter innovatie en dragen bij aan een toekomstbestendig DOSCO. Met onze gedegen kennis en expertise op het gebied van cyber, data, informatievoorziening, informatiehuishouding en informatieplanning zorgen we voor een veilige en betrouwbare maar ook wendbare IT-omgeving die de kernprocessen van DOSCO optimaal ondersteunt. 

Binnen DI&I tref je een inspirerende werkomgeving aan waar samenwerking, innovatie, creativiteit en humor centraal staan. We geloven in de kracht van teamwork en delen onze kennis en expertise graag met elkaar. We zijn voortdurend op zoek naar nieuwe en betere manieren om onze DOSCO divisies te ondersteunen met betrouwbare en innovatieve IT. Spreekt jou dit aan en wil je een bijdrage leveren dan komen we graag met je in gesprek 

Je komt te werken in het team van de dCDO van DOSCO in de Data Science Cell van DOSCO. Daarmee leg je ook verantwoording af aan de Hoofd Data Science DOSCO en werk je nauw samen met de andere teamleden.

Opdrachtbeschrijving

Een Data Engineer specialist binnen DOSCO gaat zicht bezig houden met het beheren en optimaliseren van de centrale gegevensbronnen en betrouwbare ontsluiting daarvan. 

De taken bevatten onder meer:
• Bouwen en beheren van het centrale dataplatform, inclusief data pipelines, opslag en integraties.
• Ontsluiten van data uit operationele systemen naar het centrale dataplatfom, inclusief inrichting van toegangsrechten, logging en beveiliging.
• Opzetten (O)TAP-straat dmv CI/CD-pipelines op GitLab.
• Ontwikkelen van een oplossing om mutatiebestanden te combineren met historische data.
• Automatisch ophalen en laden van metadata uit operationele systemen in een centrale data catalogus, ter ondersteuning van governance en datavindbaarheid.
• Borgen van datakwaliteit en dataconsistentie door validatie, monitoring en alerts in de data pipelines.
• Samenwerken met analisten, data scientists en BI-teams om datasets beschikbaar en bruikbaar te maken voor analyse en rapportage.
• Samenwerking met Beveiliging Autoriteiten en AVG-functionarissen voor het ophalen, analyseren en visualiseren van processen die nodig zijn om toegang te verkrijgen tot data in operationele systemen.

Eisen

1. Kandidaat heeft minimaal 5 jaar aantoonbare werkervaring met het hanteren van databeheerprincipes.
2. Kandidaat heeft bij minimaal 2 organisaties Data Engineer processen uitgewerkt en in beheer gebracht.
3. Kandidaat heeft de laatste 5 jaar aantoonbaar kennisniveau opgebouwd m.b.t. compliancy, beveiligingseisen en data governance
4. Kandidaat beschikt over 5 jaar ervaring in SQL, Python, ETL-processen.
5. Kandidaat beschikt over 5 jaar ervaring in het opzetten van CI/CD pipelines.
6. Kandidaat beschikt over 5 jaar ervaring in database beheer, waaronder (o.a.) PostgreSQL
7. Kandidaat beschikt over 5 jaar ervaring in ontwerpen van schaalbare en betrouwbare data-architectuur.

Wensen

1. Kandidaat heeft aantoonbare affiniteit met Data-engineering binnen het OOV-domein.
2. Kandidaat heeft aantoonbare kennis van en bij voorkeur werkervaring met DataIKU.