Description du poste
Nous recherchons un Azure Data Engineer pour développer et améliorer une plateforme data après la migration des données non SAP vers Azure. L'équipe développe des cas d'usage pour le reporting, l'analytics et la data science, tout en renforçant la gouvernance et l'accès en self-service avec Databricks Unity Catalog. La mission porte aussi sur la performance, la fiabilité et l'utilisation efficace des ressources de la plateforme.
Votre rôle
- Concevoir et développer des pipelines de données avec Azure Data Factory, Databricks et d'autres services Azure.
- Mettre en place des architectures Data Lake, Delta Lake et Lakehouse et industrialiser de nouveaux cas d'usage.
- Contribuer à la gestion de Unity Catalog : catalogues, schémas, permissions, partage et gouvernance des données.
- Soutenir le développement des capacités data en self-service.
- Suivre et optimiser les performances, la consommation et les coûts de la plateforme.
- Automatiser l'ingestion, la transformation et le déploiement des données.
- Collaborer avec les data analysts, les data scientists et les stakeholders métier.
- Documenter les flux de données, l'architecture et les pratiques, et contribuer à l'amélioration continue de la plateforme.
Vous avez
- Une expertise en architecture data Azure.
- Une expertise en Azure Data Factory.
- Une expertise en Databricks.
- Une expertise en Databricks Unity Catalog.
- Une maîtrise avancée de Power BI.
- Une expertise en Python.
- Une expertise en Spark.
- Une expertise en SQL.
- Anglais de niveau C1.
- Néerlandais ou français de niveau C2.
Atouts
- Au moins sept ans d'expérience comme Data Engineer, dont une expérience au cours de l'année écoulée.
- Un diplôme en informatique, en data engineering ou dans un domaine apparenté.
- Une expérience avec Azure Storage.
- Une expérience avec Azure SQL.
- Une expérience avec Azure Key Vault.
- Une expérience avec Azure DevOps.
- Une connaissance de l'architecture Azure Databricks, notamment du design Lakehouse, de la scalabilité et de la sécurité.
- Une expérience avec PySpark.
- Une expérience avec Delta Lake.
- Une expérience du monitoring d'Azure et de Databricks.
- Une expérience de l'optimisation des performances d'Azure et de Databricks.
- Une expérience de l'optimisation des coûts d'Azure et de Databricks.
- Une connaissance des principes CI/CD appliqués au data engineering.
- Une connaissance des patterns d'intégration REST API.
- Une connaissance des patterns d'intégration AMQP.
- Un esprit analytique.
- Une approche autonome du travail.
- Des capacités de résolution de problèmes.
- Un esprit de collaboration.
- De solides compétences en communication.
- La capacité à expliquer clairement des concepts techniques.
- Une certification Microsoft Azure ou une certification Databricks.
- Une expérience de l'administration de Power BI.
- Une expérience de la gouvernance Power BI.
- Une expérience du streaming de données en temps réel.
- Une expérience avec Terraform ou en infrastructure as code.
- Une connaissance d'Azure Monitor.
- Une connaissance de Log Analytics.
- Une connaissance de base de SAP S/4HANA ou de SAP BW/4HANA comme source de données.
- Une expérience dans un environnement Agile.
- Une expérience dans un environnement Scrum.
Travailler chez Neurho
Fondée en 1998, Neurho est une société belge de consultance IT et business. Depuis plus de 25 ans, nous accompagnons des banques, assureurs, acteurs du secteur de l'énergie et institutions publiques en Belgique et au Luxembourg dans leurs projets de transformation. Chez Neurho, vous travaillez sur des missions variées et stimulantes, où votre expertise est reconnue et votre évolution encouragée. En plus de votre salaire, vous bénéficiez de nombreux avantages extra-légaux pensés pour correspondre à votre fonction, à vos besoins et envies personnels.
Neurho s'engage pour l'égalité des chances et accueille toutes les candidatures, sans distinction d'âge, d'origine, de nationalité, de genre, de milieu social, de convictions ou de handicap.