CONTEXTE DU POSTE :
- Titre : Data Technical Lead
- Lieu : Bruxelles
Une grande compagnie d’assurance fait évoluer sa plateforme de données Azure et renforce les standards techniques appliqués par ses équipes de Data Engineering. En tant que Data Technical Lead, vous guiderez les ingénieurs qui travaillent avec Azure Synapse, Azure Data Factory, Mapping Data Flow, Databricks, PySpark et SQL, tout en restant directement impliqué dans les pipelines critiques et les nouveaux développements.
La mission
Les équipes de Data Engineering conçoivent et exploitent des pipelines au sein des différentes couches d’ingestion, de transformation et de consommation de l’écosystème Azure. La plateforme s’appuie sur Azure Synapse, Azure Data Factory, Mapping Data Flow, Databricks, PySpark et SQL pour prendre en charge les traitements de données structurées et les opérations de data warehouse. Ces activités fournissent des structures de données fiables et évolutives pour le reporting, l’analytics et d’autres processus métier.
Vous serez la référence technique senior des Data Engineers et le principal interlocuteur des Data Platform Architects. Votre rôle couvre la prise de décision technique, l’alignement architectural, la mise en œuvre, les revues par les pairs et le coaching auprès de plusieurs équipes. Vous concevrez, développerez et optimiserez également des pipelines de données, assurerez la maintenance des composants existants et contribuerez à l’évolution des pratiques de Data Engineering.
Vos responsabilités
- Définir l’orientation technique des Data Engineers et veiller à ce que la mise en œuvre respecte l’architecture et les standards d’ingénierie convenus.
- Traduire les lignes directrices de l’architecture de la plateforme en consignes techniques claires pour les pipelines d’ingestion, de transformation et de consommation.
- Concevoir, développer et optimiser des pipelines de données Azure à l’aide d’Azure Data Factory, de Mapping Data Flow, d’Azure Synapse, de Databricks, de PySpark et de SQL.
- Valider les pull requests et les revues de code entre pairs afin d’améliorer la qualité du code, sa maintenabilité et sa conformité aux standards de Data Engineering.
- Renforcer les performances, la qualité des données, la fiabilité opérationnelle et l’amélioration continue de la plateforme de données.
- Accompagner les ingénieurs juniors et leur fournir un feedback structuré favorisant des pratiques cohérentes entre les équipes.
Votre profil
Compétences essentielles
- Intervenir à un niveau senior en Data Engineering, avec le discernement technique nécessaire pour prendre des décisions de conception et les expliquer.
- Concevoir, développer et optimiser des pipelines de données au sein de l’écosystème Azure.
- Démontrer une solide expertise pratique d’Azure Synapse, d’Azure Data Factory, de Mapping Data Flow, de Databricks, de PySpark et de SQL.
- Appliquer les principes de la modélisation dimensionnelle, notamment la conception en étoile et les concepts de data warehouse, afin de construire des structures robustes et évolutives.
- Collaborer efficacement avec les data modelers et les Data Platform Architects afin d’aligner la mise en œuvre sur l’architecture cible.
- Communiquer clairement avec les parties prenantes techniques et non techniques, à l’écrit comme à l’oral.
- Guider plusieurs équipes grâce au coaching, à un feedback constructif et à une orientation technique concrète.
- Travailler de manière autonome, avec une approche structurée et analytique ainsi qu’un grand souci du détail.
Compétences souhaitées
- Utiliser Power BI pour répondre aux besoins en matière de reporting et d’analytics.
- Comprendre la modélisation sémantique des données et son lien avec les structures physiques de données.
Langues
- Anglais : C1
- Français : C1
- Néerlandais : B2