In het kort
RET (SA) zoekt een lead Data Platform Engineer / Solution Architect in Rotterdam. Het gaat om een freelanceopdracht voor 36 uur per week met een looptijd van 6 maanden.
Over de functie
Je bent verantwoordelijk voor de technische architectuur, de uitvoering van de roadmap en de verdere professionalisering van het centrale data- en analyticsplatform CREDO. Het platform is gebaseerd op een metadata-driven lakehouse-architectuur in Microsoft Azure, met een medallion-structuur (bronze, silver en gold) en Delta Lake.
Een belangrijke uitdaging is de migratie van Azure Synapse Analytics naar Microsoft Fabric. Je werkt aan een schaalbaar, betrouwbaar, veilig en toekomstbestendig platform, waarbij performance, datakwaliteit, governance, automatisering en kostenbeheersing centraal staan. Daarnaast geef je inhoudelijk leiding aan het data-engineeringteam en stimuleer je kennisdeling en professionele ontwikkelprocessen.
Werkzaamheden en verantwoordelijkheden
- Verantwoordelijk zijn voor de solution architectuur en verdere ontwikkeling van het CREDO-dataplatform.
- De migratie van Azure Synapse Analytics naar Microsoft Fabric technisch begeleiden en realiseren, inclusief beheerste parallelle werking tijdens de overgang.
- De technische architectuurroadmap en het vastgestelde solution design uitvoeren.
- Het metadata-driven framework ontwerpen, ontwikkelen en onderhouden, inclusief datamodellen, orchestration en datapipelines.
- De lakehouse-architectuur volgens medallion-principes en Delta Lake ontwerpen en optimaliseren.
- Oplossingen ontwikkelen voor het ontsluiten, verwerken en dimensioneel modelleren van gestructureerde en ongestructureerde data.
- CI/CD-pipelines, release management en deployment governance binnen Azure DevOps inrichten en optimaliseren.
- Het data quality framework uitbreiden en geautomatiseerde kwaliteitscontroles binnen ETL/ELT-processen implementeren.
- SQL-gebaseerde dataomgevingen beheren en structureren.
- Performance, capaciteit, monitoring, betrouwbaarheid en kosten van het dataplatform optimaliseren.
- Technical debt signaleren en oplossen.
- Agile werken en Azure DevOps verankeren, inclusief kwartaalplanning, epics, features en user stories.
- Adviseren over data governance, technische haalbaarheid en platformverbeteringen.
- Businessrequirements vertalen naar schaalbare technische dataoplossingen.
- Data literacy en self-service analytics stimuleren.
- Data engineers technisch aansturen, begeleiden en coachen.
- Documentatie, kennisoverdracht en verdere professionalisering van het team borgen.
Beoogd resultaat
Je realiseert de beoogde solution architectuur van CREDO op basis van Microsoft Fabric en begeleidt de migratie vanuit Azure Synapse. Je zorgt voor een betrouwbaar, beheersbaar, onderhoudbaar en toekomstbestendig dataplatform, met een robuuste inrichting van datakwaliteit, security, CI/CD, release management en monitoring. Ook borg je kennis structureel door middel van documentatie, training, coaching en overdracht.
Eisen
Hier moet je cv aantoonbaar aan voldoen
- Meer dan 10 jaar aantoonbare ervaring met het ontwerpen, implementeren en beheren van dataplatformen, waarvan meer dan 5 jaar in een leidende rol
- Aantoonbare ervaring met het meerdere keren succesvol opbouwen en begeleiden van multidisciplinaire datateams van minimaal 5 FTE, vanaf ontwerp en implementatie tot productiegang, coaching en beheer
- Minimaal 5 jaar ervaring binnen Microsoft Azure-omgevingen met Azure Synapse Analytics en/of Microsoft Fabric
- Aantoonbare ervaring met lakehouse-architecturen en medallion-principes
- Uitgebreide kennis van en minimaal 5 jaar ervaring met metadata-driven dataplatformen
- Minimaal 2 succesvolle implementaties van nieuwe dataplatformen binnen organisaties met meer dan 1.000 medewerkers, inclusief begeleiding van engineeringteams en adoptie door stakeholders
- Uitgebreide kennis van en minimaal 5 jaar ervaring met dimensionele datamodellering, SQL, Python en notebooks
- Minimaal 5 jaar ervaring met standaardisatie en automatisering van workflows en CI/CD-pipelines
- Aantoonbare ervaring met Azure DevOps, Git en CI/CD-principes
- Ervaring met werken in een agile omgeving
Wensen
Hiermee val je op
- Relevante certificeringen op het gebied van solution architectuur, data-analyse, datamodellering en agile werken, bijvoorbeeld Scrum
Competenties
- Sterke communicatieve vaardigheden op zowel technisch, operationeel als managementniveau
- Proactieve en zelfstandige werkhouding
- Sterk analytisch en probleemoplossend vermogen
- Vermogen om complexe technische vraagstukken te vertalen naar schaalbare en efficiënte oplossingen
- Aantoonbare technische leiderschapskwaliteiten en ervaring met het coachen en ontwikkelen van engineers
- In staat om richting te geven aan technische teams en nieuwe werkwijzen te implementeren
- Organisatiesensitiviteit en vermogen om stakeholders mee te nemen in veranderingen
- Overzicht over de volledige dataketen, van requirements en architectuur tot implementatie, beheer en overdracht