Als Data Engineer versterk je het DataHub-team waarbij je nauw samenwerkt met enerzijds de business en anderzijds de collega-teams. Je bent verantwoordelijk voor het ontwikkelen en in deze rol specifiek het beheren en testen van technische oplossingen (NiFi/CDC/REST) die het mogelijk maken grote hoeveelheden data te verzamelen binnen de DataHub. Deze dient als backbone voor de operationele systemen, als document managementsysteem, als operational datastore voor het leveren van business intelligence en als bron voor o.a. data-sciencetoepassingen. Je werkt, door het neerzetten van een centraal gemodelleerd en geharmoniseerd data-fundament, aan een solide basis voor een ‘central point of facts’ met een eenduidige semantische laag. Je houdt je hierbij bezig met het extraheren, transformeren, valideren en harmoniseren van data. Hierbij houd je rekening met het data governance beleid. Je bent verantwoordelijk voor het ontwikkelen en testen conform de definities van het logische datamodel.
Je bent proactief in het ontwerpen, opzetten, evalueren en verder ontwikkelen van ondersteunende systemen, methoden en technieken. Je draagt voorstellen aan, ter verbetering van de DataHub voor verdere besluitvorming. Vervolgens pak je een coördinerende rol in het implementeren van de geaccordeerde verbeterinitiatieven volgens de OTAP methodiek.
Belangrijkste taken:
- Het ontwikkelen en (met specifieke focus op) het onderhouden, beheren en testen van het MarkLogic-systeem.
- Het analyseren van nieuwe eisen en het verwerken tot technische specificaties om daarmee de meest geschikte technische oplossingen te definiëren en te ontwikkelen.
- Het beschrijven en modelleren van gerealiseerde oplossingen.
- Het in samenwerking met belangrijke stakeholders, zoals Architectuur, Data Governance, Security en de overige componentteams, het creëren van technische en procesoplossingen voor databeheer.
De afdeling Datamanagement bestaat uit verschillende Scrum-teams; het Data Hub en het BI team, data modellering en data governance. Het DataHub-team houdt zich met name bezig met de inrichting, harmonisatie en beheer van de data in ons lakehouse (MarkLogic). Het BI team werkt, naast het centraal aanbieden en ondersteunen van Business Intelligence, samen met het DataHub-team aan de basis, om in de toekomst selfservice BI te kunnen faciliteren. Dit met het doel om TVM nog verder te ontwikkelen tot de data gedreven organisatie die het wil zijn.