KIXS Data Engineer 23380160

Achtergrond opdracht

Voor effectieve commandovoering is goed omgevingsbewustzijn essentieel. Tactische besluitvorming begint bij beeldvorming. Hoe completer het beeld, hoe beter je goed kan beslissen. We zoeken ontwikkelaars om een nieuw te bouwen Command & Control COP (Common Operational Picture). Met gebruik van moderne cloud-native technieken wordt een prototype (Minimum Viable product) geleverd van een dataplatform met applicaties waarmee een gedeeld operationeel beeld kan worden opgebouwd, geschikt voor multi-domain optreden.

Opdrachtbeschrijving

Als data engineer maak je onderdeel uit van het backend team binnen het project. Het team is verantwoordelijk voor de ontwikkeling, inrichting, coördinatie, advisering en besturing van een dataplatform. Als data engineer heb je ervaring met het bouwen van databases conform het Data Mesh concept. Je helpt het platform op basis hiervan vorm te geven. Daarmee bouw je mee aan de kern van het dataplatform, waar applicaties op zullen draaien in de cloud. Deze applicaties worden deels gebouwd door het projectteam (SAAS oplossing) zelf en deels door andere projectteams (PAAS oplossing). Je werkt in een scrum-team aan het ontwikkelen en beheren van een data ecosysteem. Je werk is veelzijdig. Denk hierbij aan het vertalen van onze visie naar concrete resultaten, het bouwen met behulp van pipelines, het updaten en patchen van tools en het up-to-date houden van alle bijbehorende documentatie.

Je doet je werk niet alleen, maar werkt nauw samen met je directe collega’s van het backend ontwikkelteam. Jouw werkzaamheden in het kort:
- Het realiseren van een data architectuur;
- Het selecteren van technologieen die passen bij de behoeftes (batch en streaming);
- Het ontwikkelen en onderhouden van databases en pipelines;
- Het inventariseren, controleren en documenteren van data kwaliteit;
- Het werken in een DevOps team;
- Het werken met CI/CD (Continuous Integration/ Continuous Delivery) pipelines;
- Het onderzoeken en bewaken van de kwaliteit en integriteit van het platform;
- Het up-to-date houden van de bijbehorende documentatie en zo bijdragen aan de kennisdeling binnen en buiten het SCIPIO project. 

Extra locaties: Maasland en Amersfoort 

Eisen

1. Kandidaat heeft minimaal 5 jaar werkervaring als data engineer of soortgelijke richting.
2. Kandidaat heeft ervaring met het ontwerpen, bouwen en monitoren van ETL/ELT pipelines.
3. Kandidaat heeft ervaring met tools en technologieën zoals: Pulsar, Kafka, (postgres)SQL, FastAPI, Python, Kubernetes, GitLab CI/CD;
4. Kandidaat heeft ervaring met Big Data en Cloud technologieën.
5. Kandidaat is in het bezit van een HBO of WO diploma op het gebied van IT of vergelijkbare combinatie van opleiding en ervaring.
6. Kandidaat heeft aantoonbare ervaring binnen het IT Innovatie domein.
7. Kandidaat heeft aantoonbare ervaring met vervaardigen van documentatie.
8. Kandidaat heeft aantoonbare ervaring met systeemintegratie.

Wensen

1. Kandidaat heeft bij voorkeur minimaal een HBO opleiding in de richting van IT.