22 Nov
|
Publicis Groupe Holdings
|
Canada
22 Nov
Publicis Groupe Holdings
Canada
Fiabilisez des agents IA par les tests, l’observabilité et l’analyse des échecs, avec Python, les API et les LLM.
MOOV recherche un ingénieur IA capable de mesurer la qualité des systèmes agentiques plutôt que de la juger à l’œil. Vous travaillerez avec les experts métier pour définir des critères, automatiser les évaluations et corriger les problèmes de contexte, données, outils ou architecture. Vous accompagnerez aussi les équipes clientes.
Responsabilités clés :
Définir la qualité avec les experts métierMettre en place des évaluations automatisées, notamment LLM-as-a-judgeAnalyser hallucinations, mauvais outils et contextes manquantsImplanter traces, observabilité et guardrails en productionFormer les équipes à maintenir leurs propres skillsExigences :
Formation ou expérience en ingénierie IA ou développement logicielExpérience de solutions LLM utilisées par des utilisateursMaîtrise de Python, des API et du code de productionApproche structurée de l’évaluation de la qualitéCapacité à transformer un processus flou en spécification claireContribuez à des systèmes agentiques plus fiables en combinant évaluation, observabilité, Python et compréhension des processus.
📌 Ingénieur Ia Évaluation Et Fiabilité (Canada)
🏢 Publicis Groupe Holdings
📍 Canada