Een Belgische organisatie voor volksgezondheid en wetenschappelijk onderzoek bouwt aan een multi-user data- en analyticsplatform voor gezondheids-, dier- en milieugegevens. Als Senior Solution Architect voor het lakehouse-dataplatform geeft u vorm aan de opslaglaag, waaronder SQL-databases en objectopslag, en verbindt u die met data ingestion, core systemen en data science-omgevingen.
De missie
Het platform moet data ingestion, verwerking, governance, analyse en verspreiding ondersteunen binnen het Belgische ecosysteem van gezondheids-, dier- en milieugegevens. U bepaalt open-source en soevereine technologieën voor een schaalbare opslagarchitectuur, met data lakes, relationele en NoSQL-databases, data warehouses, back-up en archivering. De architectuur moet voldoen aan de vereisten van GDPR en NIS2, aan de vereisten inzake informatiebeveiliging en aan die van de European Health Data Space.
In samenwerking met het Data Office, technische teams en externe partners verbindt u de organisatiearchitectuur met gedetailleerde implementatiebeslissingen. Uw scope omvat een dataplatformarchitectuur voor gezondheidsgegevens, medallion-lagen van bronze tot gold en interoperabiliteit met data science workbenches, business intelligence, data service gateways en beveiligde verwerkingsomgevingen.
Uw verantwoordelijkheden
- Definieer de doelarchitectuur voor opslag en lakehouse, voor BLOB-opslag, S3-compatibele objectopslag, SQL RDBMS-omgevingen, data warehouses en NoSQL-systemen.
- Ontwerp de implementatie van bronze-, silver- en gold-datalagen, inclusief retentie, archivering, back-up en herstel voor verschillende datastromen.
- Evalueer en test technologieën zoals PostgreSQL, MinIO, OpenStack, Apache Iceberg, Spark, dbt, Kubernetes en Docker aan de hand van vereisten inzake interoperabiliteit, gebruik door meerdere gebruikers en productie.
- Zorg ervoor dat data-architecturen en -stromen voldoen aan de vereisten van GDPR en NIS2, aan de vereisten inzake datagovernance en vertrouwelijkheid, en aan die van de European Health Data Space.
- Begeleid engineeringteams bij design reviews, codebeoordelingen, technische beslissingen en implementatiepraktijken en los integratieproblemen proactief op.
- Documenteer architectuurbeslissingen en fungeer als technisch aanspreekpunt voor interne diensten, het management en externe partners.
Uw profiel
Essentiële vaardigheden
- Beschik over minstens 10 jaar ervaring met engineering van dataplatformen, solution architecture, datastorage, datamodellering, databasetechnologieën en moderne analyticsplatformen, inclusief ervaring als Data Platform Engineer.
- Heb een grondige expertise in architectuur van dataplatformen, data ingestion, data lakes, data warehousing en ETL/ELT-pipelines.
- Beheer SQL-databaseomgevingen en adviseer hierover, met inbegrip van applicatiebeheer en operationele activiteiten in productie.
- Ontwerp een open-source dataplatformarchitectuur zonder afhankelijkheid van één leverancier, met praktische kennis van lakehouse-architectuur en Europese initiatieven voor digitale soevereiniteit.
- Selecteer en implementeer technologieën zoals PostgreSQL, MinIO, NoSQL, Spark, Iceberg, dbt, Docker, Kubernetes, Helm, Keycloak, Vault, Terraform en OpenStack.
- Communiceer complexe onderwerpen rond architectuur en datagovernance helder met technische en niet-technische stakeholders en werk daarbij zowel zelfstandig als in teamverband.
Talen
- Nederlands of Frans, CEFR-niveau B2 of hoger.
- Engels, CEFR-niveau C1 of hoger.
Opleiding
- Masterdiploma in computerwetenschappen, ingenieurswetenschappen, datamanagement of een aanverwante richting, of gelijkwaardige relevante ervaring.