Een grote organisatie in de publieke sector beheert een enterprise data platform dat gegevens over polissen, claims en operationele data consolideert. De rol bestaat erin technisch leiderschap te bieden binnen de data-engineeringteams, waarbij hands-on ontwikkeling van pipelines in Azure Synapse, Azure Data Factory en Databricks wordt gecombineerd met architecturale afstemming en handhaving van standaarden voor het bredere platform in Brussel. Je ontwerpt en optimaliseert datapipelines binnen het Azure-ecosysteem, gebruikt PySpark en SQL, en fungeert als de primaire technische referentie tussen engineers en architecten.
De missie
De organisatie migreert en brengt zijn enterprise datawarehouse en analytische lagen op Azure naar een hoger niveau, met ingestie en transformatie geïmplementeerd in Azure Data Factory (inclusief Mapping Data Flow), Azure Synapse en Databricks. Het werk beslaat gestructureerde datasets voor verzekeringen en operatie, productie-ETL die rapportering en BI-consumenten ondersteunt, en een streven naar betere prestaties, datakwaliteit en operationele betrouwbaarheid over het platform.
In deze Technical Lead-rol verdeel je je tijd tussen hands-on levering en technische begeleiding. Op een typische dag review je en keur je pull requests goed, implementeer of optimaliseer je PySpark-jobs op Databricks, vertaal je platformarchitectuur naar concrete engineering-standaarden, en coach je meerdere data-engineering squads. Jouw werk voedt rechtstreeks het DWH en de semantische lagen die gebruikt worden door downstream Power BI-rapporten en analytics-teams.
Uw verantwoordelijkheden
- Leiden en afdwingen van technische standaarden binnen de data-engineeringteams, en zorgen voor architecturale afstemming met de data platform architects
- Leveren en optimaliseren van productie-datapipelines, met verbetering van throughput, latency en operationele stabiliteit met Azure Synapse, ADF en Databricks
- Code en pull requests reviewen, bruikbare feedback geven en de engineeringkwaliteit verhogen via peer review en geautomatiseerde checks
- Architectuurrichtlijnen vertalen naar implementeerbare patronen voor ingestie-, transformatie- en consumptielagen
- Coach en mentor zijn voor junior en mid-level data engineers, kennisoverdrachtsessies organiseren en onboardingmateriaal vormgeven
- Sturen op performance tuning, datakwaliteitsinitiatieven en root-cause-analyses van incidenten om herhaalde operationele gebeurtenissen te verminderen
Uw profiel
Essentiële vaardigheden
- Aangetoonde senior ervaring in het ontwerpen, ontwikkelen en optimaliseren van datapipelines binnen het Azure-ecosysteem, inclusief Azure Synapse, Azure Data Factory (ADF) en Mapping Data Flow (MDF)
- Hands-on Databricks- en PySpark-ontwikkelervaring, plus sterke SQL-vaardigheden voor transformatie en troubleshooting
- Praktische kennis van dimensionele modellering en datawarehouse-concepten, inclusief star schema-ontwerp en conformed dimensions
- Aangetoond vermogen om als technical lead op te treden: code reviews, architecturale vertaling en cross-team coördinatie
- Sterke communicator die technische beslissingen kan toelichten aan niet-technische stakeholders en engineeringteams kan coachen
Gewenste vaardigheden
- Ervaring met Power BI en semantische datamodellering voor consumptielagen
Talen
- Engels, CEFR C1 of hoger
- Frans, CEFR C1 of hoger
- Nederlands, CEFR B2