Stage-Ingénieur Logiciel -Tests de Validation et Sécurité pour Agents IA H/F - 92

Vous rejoindrez Orange Innovation, au sein du département dédié à l'ingénierie des plateformes IoT du groupe Orange. Cette équipe dynamique et innovante conçoit et développe des solutions technologiques avancées, intégrant notamment l'intelligence artificielle, pour accompagner la transformation digitale du groupe.Relevez le défi de rendre les agents IA fiables !
Vos missions quotidiennes
Vous prenez en main les outils et les tests déjà réalisés pour valider le fonctionnement des agents basés sur des modèles de langage naturel (LLM).
Vous montez en compétence sur le fonctionnement de nos plateformes ainsi que sur les techniques et outils de tests spécifiques à ce domaine.
Vous développez des tests de validation en Python, notamment pour la validation des conversations des agents.
Vous construisez des métriques d'évaluation et développez des outils de visualisation pour affiner et améliorer les tests.
Vous automatisez ces tests dans nos infrastructures cloud, principalement sur GCP.
Vous constituez une liste d'exemples de prompts utiles pour démontrer les capacités et possibilités des agents.