Medior AI Engineer - LLMOps et RAG

Nous recherchons un Medior AI Engineer pour exploiter des assistants et agents IA lors de leur mise en production. Ces services combinent le RAG et des agents capables d'appeler des outils et des systèmes métier. Vous reprendrez les services développés par l'équipe Build et veillerez à leur fiabilité, leur sécurité, leur qualité mesurable et leurs coûts, à mesure que de nouveaux services seront lancés.

Votre rôle

• Surveiller la disponibilité, la latence et les erreurs, gérer les incidents et analyser leurs causes.
• Maintenir les jeux d'évaluation avec les responsables de contenu et suivre la qualité des réponses, les retours et les régressions.
• Exploiter les pipelines d'ingestion et surveiller les intégrations des agents, les erreurs et les journaux d'action.
• Valider les changements de modèles, de prompts, de configuration et de sécurité avant leur release.
• Suivre la consommation de tokens et les coûts des services, et proposer des améliorations.
• Maintenir les artefacts Terraform, Helm et Azure DevOps dans les différents environnements.
• Appliquer les règles de protection des données, tenir les runbooks à jour et rendre compte de l'état des services.
• Réaliser de petites corrections et améliorations en collaboration avec les ingénieurs, les responsables de contenu et les équipes d'exploitation.

Vous avez

• 4 à 6 ans d'expérience avec Azure DevOps, utilisé au cours des 12 derniers mois.
• 4 à 6 ans d'expérience avec Azure Kubernetes Service, utilisé au cours des 12 derniers mois.
• 4 à 6 ans d'expérience avec Azure OpenAI Service, utilisé au cours des 12 derniers mois.
• 4 à 6 ans d'expérience avec LangChain.
• 4 à 6 ans d'expérience avec les large language models, utilisés au cours des 12 derniers mois.
• 4 à 6 ans d'expérience avec Python, utilisé au cours des 12 derniers mois.
• 4 à 6 ans d'expérience avec le RAG, utilisé au cours des 12 derniers mois.
• 4 à 6 ans d'expérience avec Terraform, utilisé au cours des 12 derniers mois.
• 4 à 6 ans d'expérience avec les bases de données vectorielles, utilisées au cours des 12 derniers mois.
• Néerlandais ou français de niveau C2.
• Anglais de niveau C1.

Atouts

• 4 à 6 ans d'expérience en tant qu'AI engineer, dont une expérience au cours des 12 derniers mois.
• Une expérience avec Microsoft Azure.
• Une expérience avec Microsoft Foundry.
• Une expérience avec Azure AI Search.
• Une expérience avec Azure API Management.
• Une expérience avec Azure AI Content Safety.
• Une expérience avec Databricks.
• Une expérience avec MLflow.
• Une expérience du tracing avec OpenTelemetry.
• Une expérience avec Helm.
• Une expérience de l'infrastructure as code.
• Une expérience de l'incident management et de l'analyse des causes racines.
• Une expérience de la maintenance de jeux d'évaluation LLM et du suivi de la qualité des réponses.
• Une expérience de l'exploitation de pipelines d'ingestion de contenu.
• Une expérience de l'exploitation d'intégrations d'agents IA avec des systèmes métier.
• Une expérience du suivi des coûts des services IA et de la consommation de tokens.