Medior AI Engineer - LLMOps en RAG

We zoeken een Medior AI Engineer om AI-assistenten en -agenten te beheren zodra ze in productie gaan. De diensten combineren RAG met agenten die tools en bedrijfssystemen aanroepen. U neemt diensten over van het buildteam en zorgt voor hun betrouwbaarheid, veiligheid, meetbare kwaliteit en kostenefficiëntie terwijl nieuwe diensten live gaan.

Uw rol

• Beschikbaarheid, latency en fouten opvolgen, incidenten behandelen en oorzaken onderzoeken.
• Evaluatiesets onderhouden met content owners en antwoordkwaliteit, feedback en regressies opvolgen.
• Ingestion pipelines beheren en integraties, fouten en actielogs van agenten opvolgen.
• Wijzigingen aan modellen, prompts, configuratie en beveiliging valideren vóór een release.
• Tokenverbruik en servicekosten opvolgen en verbeteringen voorstellen.
• Terraform-, Helm- en Azure DevOps-artefacten onderhouden in de verschillende omgevingen.
• Regels voor gegevensbescherming toepassen, runbooks bijhouden en rapporteren over de servicestatus.
• Kleine correcties en verbeteringen uitvoeren samen met engineers, content owners en operationele teams.

U hebt

• 4 tot 6 jaar ervaring met Azure DevOps, gebruikt in de afgelopen 12 maanden.
• 4 tot 6 jaar ervaring met Azure Kubernetes Service, gebruikt in de afgelopen 12 maanden.
• 4 tot 6 jaar ervaring met Azure OpenAI Service, gebruikt in de afgelopen 12 maanden.
• 4 tot 6 jaar ervaring met LangChain.
• 4 tot 6 jaar ervaring met large language models, gebruikt in de afgelopen 12 maanden.
• 4 tot 6 jaar ervaring met Python, gebruikt in de afgelopen 12 maanden.
• 4 tot 6 jaar ervaring met RAG, gebruikt in de afgelopen 12 maanden.
• 4 tot 6 jaar ervaring met Terraform, gebruikt in de afgelopen 12 maanden.
• 4 tot 6 jaar ervaring met vectordatabases, gebruikt in de afgelopen 12 maanden.
• Nederlands of Frans op niveau C2.
• Engels op niveau C1.

Pluspunten

• 4 tot 6 jaar ervaring als AI engineer, met ervaring in de afgelopen 12 maanden.
• Ervaring met Microsoft Azure.
• Ervaring met Microsoft Foundry.
• Ervaring met Azure AI Search.
• Ervaring met Azure API Management.
• Ervaring met Azure AI Content Safety.
• Ervaring met Databricks.
• Ervaring met MLflow.
• Ervaring met tracing via OpenTelemetry.
• Ervaring met Helm.
• Ervaring met infrastructure as code.
• Ervaring met incident management en oorzaakanalyse.
• Ervaring met het onderhouden van LLM-evaluatiesets en het opvolgen van de antwoordkwaliteit.
• Ervaring met het beheren van content ingestion pipelines.
• Ervaring met het beheren van AI-agentintegraties met bedrijfssystemen.
• Ervaring met het opvolgen van AI-servicekosten en tokenverbruik.