Stage - Vérification de l'alignement éthique des agents IA (réseau/tel) F/H

Quel environnement de travail ?
Au sein d'Orange Innovation (INNOV) et de la direction «?Customer Experience & Services Ecosystem?» (CESE), le département «?Business Communications and Collaboration?» (BCC), conçoit, développe et opère les services voix et collaboration sur l'ensemble des marchés : grand-public, professionnels et entreprises. Son périmètre couvre notamment les solutions de cloud téléphonie, de trunking IPBX qui utilisent nos réseaux fixes et mobiles en s'appuyant sur les solutions de grands fournisseurs (Cisco, ...) et plus récemment d'une plateforme de Voix sur IP Open Source progressivement déployé sur l'ensemble des marchés et permettra demain de construire les 1ers services de Voice-AI.
Le département couvre également les services de protection de nos clients avec le développement d'applications mobiles et enablers techniques dans le réseau : anti-spam, verified caller et l'expertise QoS audio des terminaux et les travaux de recherche et de normalisation sur les futurs codecs audio.
Le stage se déroulera à Caen, au sein de l'équipe TBCS (Transformation of Business Communications & Services) qui porte des activités de recherches dans le programme Trustworthy and Sustainable AI. Le candidat sera encadré par des chercheurs et ingénieurs de l'équipe. Il bénéficiera d'un environnement permettant de combiner étude bibliographique, développement logiciel et expérimentation.

À quoi ressemble le poste ?
Les agents d'IA pourraient accompagner certaines activités liées aux réseaux et aux services télécoms. Leur utilisation suppose toutefois de mieux comprendre leurs limites : un bon résultat à un test standardisé ne garantit pas un comportement approprié dans la diversité des situations rencontrées en pratique.
Ce stage vise à explorer des méthodes d'évaluation complémentaires aux benchmarks classiques, afin de mieux apprécier la fiabilité des agents d'IA au regard de principes tels que la confidentialité, l'équité, la transparence ou l'autonomie des utilisateurs. L'objectif n'est pas d'attribuer un " score d'éthique " à un modèle, mais de repérer des fragilités, de documenter les conditions dans lesquelles elles apparaissent et d'identifier des points de vigilance pour des usages télécoms.
Le ou la stagiaire aura pour missions de :
réaliser un état de l'art des approches d'évaluation comportementale des agents d'IA, en examinant leurs apports et leurs limites ;
définir, avec l'équipe d'accueil, un périmètre d'étude et des situations d'usage représentatives ;
concevoir et mettre en oeuvre une expérimentation sur un ou plusieurs agents, à partir de scénarios permettant d'observer leurs réponses dans différents contextes ;
analyser les résultats de manière qualitative et, lorsque cela est pertinent, quantitative, en tenant compte de la variabilité des réponses et des limites de l'expérimentation ;
proposer une méthode de restitution sous forme de cartographie des fragilités et de recommandations pour leur suivi dans le temps.
Les travaux donneront lieu à une synthèse bibliographique et à un prototype expérimental, en étroite coopération avec l'équipe projet.

Qui recherchons-nous ?
Il s'agit d'un stage de 6 mois à partir de mars 2027.
Vous préparez un diplôme de niveau Bac+5 dans une université ou une école d'ingénieur, spécialisé en développement logiciel ou réseau ou data/data IA ou machine learning ou IA générative.
Vous êtes à l'aise avec l'anglais (B2/C1). Vous avez une capacité à développer des expérimentations, notamment en Python, et à analyser leurs résultats. Vous avez :
idéalement des connaissances en software (Docker, Kubernetes),
de bonnes bases en apprentissage automatique et connaissance des modèles de langage ou des systèmes agentiques,
un intérêt pour les méthodes d'évaluation de l'IA, leurs limites et la reproductibilité des travaux,
une aptitude à lire et synthétiser des publications scientifiques en anglais,
une rigueur méthodologique, esprit critique et capacité à expliciter les hypothèses d'une étude,
une aisance dans le travail en équipe et dans la communication de résultats à des interlocuteurs de profils variés.
Une familiarité avec les enjeux de confidentialité, d'équité ou de facteurs humains serait appréciée.
Vous faites preuve de curiosité, de créativité, de rigueur et de persévérance.
Pour information, nous ne proposons pas de stage alterné (ni de stage avec trois interruptions ou plus) et nos stages ne peuvent pas être convertis en alternance (la campagne d'alternance commencera vers mars).