Emplois actuels liés à STAGE 2026 - IA / NPL - Détection et gestion d'incertitude dans les réponses d'agents IA - F/H - Labège, Occitanie - BERGER-LEVRAULT


  • Labège, Occitanie, France BERGER-LEVRAULT Temps plein

    Informations généralesSTAGE Recherche Opérationnelle et IA - F/HLabège, FRANCECARL BERGER-LEVRAULT : 30 ANNEES DE SPECIALISATION EN GMAO ET ASSET MANAGEMENTCARL, marque de Berger-Levrault est un éditeur de logiciel spécialisé dans la gestion de la maintenance industrielle et tertiaire, numéro 1 en France et leader européen.L'entreprise accompagne...


  • Labège, Occitanie, France Thales Temps plein

    Lieu : Toulouse Labege, FranceConstruisons ensemble un avenir de confianceThales est un leader mondial des hautes technologies spécialisé dans trois secteurs d'activité : Défense & Sécurité, Aéronautique & Spatial, et Cyber & Digital. Il développe des produits et solutions qui contribuent à un monde plus sûr, plus respectueux de l'environnement et...


  • Labège, Occitanie, France Thales Temps plein

    Lieu : Toulouse Labege, FranceConstruisons ensemble un avenir de confianceThales est un leader mondial des hautes technologies spécialisé dans trois secteurs d'activité : Défense & Sécurité, Aéronautique & Spatial, et Cyber & Digital. Il développe des produits et solutions qui contribuent à un monde plus sûr, plus respectueux de l'environnement et...


  • Labège, Occitanie, France Thales Temps plein

    Lieu : Toulouse, FranceConstruisons ensemble un avenir de confianceThales est un leader mondial des hautes technologies spécialisé dans trois secteurs d'activité : Défense & Sécurité, Aéronautique & Spatial, et Cyber & Digital. Il développe des produits et solutions qui contribuent à un monde plus sûr, plus respectueux de l'environnement et plus...

  • Stage Management projet

    il y a 2 semaines


    Labège, Occitanie, France Thales Temps plein

    Lieu : Toulouse, FranceConstruisons ensemble un avenir de confianceThales est un leader mondial des hautes technologies spécialisé dans trois secteurs d'activité : Défense & Sécurité, Aéronautique & Spatial, et Cyber & Digital. Il développe des produits et solutions qui contribuent à un monde plus sûr, plus respectueux de l'environnement et plus...


  • Labège, Occitanie, France ABGi France Temps plein

    ABGi, Expert reconnu en conseil, accompagne ses clients en France et à l'international afin de concevoir, financer et exécuter leurs transformations stratégiques.Depuis 35 ans, nous accompagnons, nos clients, Grands Comptes, ETI et PME à travers notre présence nationale(6 agences)et internationale (Etats-Unis – Canada – Brésil – Pologne –...


  • Labège, Occitanie, France HBF SAS Temps plein

    À propos du posteDans le cadre du développement de notre activité et de ses marques consommateur, vous assisterez l'équipe présente du pole E-commerce.Missions principales :Gestion de la relation client : Réponse aux messages SAV (dans les délais impartis), réponse au standard téléphonique, traitement de la boite mailAssister et conseiller les...

  • Consultant GRC Senior

    il y a 2 jours


    Labège, Occitanie, France Thales Temps plein

    Lieu : Toulouse, FranceConstruisons ensemble un avenir de confianceThales est un leader mondial des hautes technologies spécialisé dans trois secteurs d'activité : Défense & Sécurité, Aéronautique & Spatial, et Cyber & Digital. Il développe des produits et solutions qui contribuent à un monde plus sûr, plus respectueux de l'environnement et plus...

  • Stage Développeur Python

    il y a 2 semaines


    Labège, Occitanie, France Lyra Temps plein

    À propos de nousVous êtes-vous déjà demandé ce qu'il se passe au moment où vous validez votre paiement en magasin ou en ligne ?C'est (en partie) Lyra, qui se cache derrière Comment ? En sécurisant vos transactions et en s'assurant qu'elles transitent. Nos solutions s'adaptent à tous les besoins paiement (marketplace, mobilité, omnicanalité,...

  • stage gratifie

    il y a 1 semaine


    Labège, Occitanie, France SICOVAL Temps plein

    1200 agents engagés autour des valeurs de solidarités, d'innovation et de cohésionEn juillet 2023, le Conseil de Communauté du Sicoval a validé une stratégie de promotion et de développement de l'Economie Sociale et Solidaire (ESS) associant les 36 communes du territoire, les citoyens, les acteurs de l'ESS et les partenaires opérationnels et...

STAGE 2026 - IA / NPL - Détection et gestion d'incertitude dans les réponses d'agents IA - F/H

il y a 3 semaines


Labège, Occitanie, France BERGER-LEVRAULT Temps plein 25 000 € - 50 000 € par an
Informations générales

STAGE IA / NPL - Détection et gestion d'incertitude dans les réponses d'agents IA - F/H

Labège, FRANCE

Label Pro Vélo - Niveau Argent : nous sommes en selle… vous venez ? (site de Labège)

BERGER-LEVRAULT : L'EDITEUR QUI BOULEVERSE L'UNIVERS DES LOGICIELS

Berger-Levrault est un éditeur de logiciel international basé en France qui s'adresse aux collectivités et administrations locales, aux établissements de santé, au monde de l'éducation et à l'industrie. Le Groupe implanté en Europe, au Maroc et au Canada compte clients sur les 5 continents.

Berger-Levrault est le leader des solutions logicielles de Ressources Humaines et de Gestion Financière pour les secteurs public et parapublic en France et en Espagne, ainsi que le leader européen des solutions de gestion de maintenance.

Acteur de proximité solide et pérenne, Berger-Levrault collabore avec ses clients et partenaires pour rendre le monde plus simple et plus sûr grâce à un numérique sécurisé et accessible à tous.

Engagés dans une transformation numérique responsable, les 2 200 collaborateurs de Berger-Levrault agissent au quotidien pour être à la hauteur des enjeux sociétaux, économiques et environnementaux de leurs clients par la création de solutions digitales de confiance.

VOS PRINCIPALES RESPONSABILITES

Sujet : Détection et gestion d'incertitude dans les réponses d'agents IA

Contexte :

Au sein de la Direction de la Recherche et de l'Innovation Technologique (DRIT), le Lab IA explore les nouveaux paradigmes d'intelligence artificielle, et en particulier l'intégration des modèles de langage de grande taille (LLM) dans des systèmes multi-agents intelligents.

L'un des défis majeurs de ces systèmes concerne la fiabilité et la transparence des réponses générées : les modèles peuvent produire des affirmations incorrectes tout en affichant une confiance élevée. Cette « illusion de certitude » nuit à la confiance des utilisateurs et à la robustesse globale du système.

Le stage s'inscrit dans une démarche de R&D exploratoire, visant à concevoir et expérimenter des mécanismes d'auto-évaluation et de calibration de confiance pour des agents conversationnels intégrant des LLM. Ce travail contribuera à l'amélioration de la fiabilité, de la traçabilité et de l'ergonomie cognitive de l'assistant IA développé dans le cadre du projet Athena de Berger-Levrault.

Missions :

  • Étudier les approches existantes de détection d'incertitude et de calibration de confiance dans les modèles de langage : estimation probabiliste, self-consistency, chain-of-thought scoring, contradiction detection, LLM uncertainty estimation.
  • Concevoir un module d'évaluation de fiabilité, capable d'estimer la fiabilité d'une réponse générée à partir d'indicateurs sémantiques : évaluation de similarité de la réponse principale avec des réponses candidates, cohérence inter-agent, vérification de sources externes (API sur sites web de référence ou corpus métier de référence, etc.).
  • Mettre en place un système de scoring sémantique pour évaluer la cohérence interne des réponses et identifier les contradictions ou divergences logiques.
  • Prototyper un mécanisme de retour d'incertitude dans l'interface agentique : visualisation de la confiance (barres, couleurs, reformulations automatiques), feedback utilisateur.
  • Évaluer scientifiquement le dispositif, via un protocole expérimental mesurant précision, robustesse, calibrage et perception utilisateur.

Selon l'avancement de la mission d'autres pistes comme la suggestion de correction seraient envisageable.

Approches et technologies envisagées :

  • LLM : Modèles de Mistral AI
  • Frameworks : LangChain
  • Méthodes : self-consistency, contradiction-check, semantic similarity scoring (SBERT, Cosine distance), combinaison de métriques
  • Stack possible : Python, FastAPI, Streamlit pour les tests, VectorDB (Weaviate).

Livrables attendus :

  • Une étude comparative des méthodes d'estimation de confiance pour les LLM.
  • Un prototype fonctionnel d'agent capable de produire un score de confiance accompagné d'une visualisation explicite.
  • Un protocole d'évaluation et un rapport scientifique présentant les résultats.
  • Des recommandations pour l'intégration de ce module

CETTE OFFRE EST FAITE POUR VOUS ?

  • Vous êtes étudiant(e) en Master 2, école d'ingénieurs ou formation universitaire en intelligence artificielle, data science, NLP ou informatique. Et vous recherchez un stage de 6 mois débutant au printemps 2026.
  • Vous présentez un intérêt marqué pour la recherche appliquée et les modèles de langage (LLM).
  • Vous maîtrisez Python ainsi que la manipulation de modèles de langage et d'embeddings.
  • Vous faites preuve de curiosité scientifique, de rigueur méthodologique et d'un réel goût pour l'expérimentation.

VOTRE FUTURE DREAM TEAM

Intégré(e) à la Direction de la Recherche et de l'Innovation Technologique (DRIT) de Berger Levrault, vous rejoindrez une équipe innovante qui valorise la curiosité, la collaboration et l'expérimentation. Chercheurs, doctorants, étudiants et ingénieurs collaborent quotidiennement pour concevoir des solutions innovantes et préparer les usages technologiques de demain.

NOTRE PROCESSUS DE RECRUTEMENT : UNE EXPERIENCE CANDIDAT UNIQUE ET AUTHENTIQUE

1 - Postulez via notre espace candidat.

2 - Si votre profil nous fait lever un sourcil, attendez-vous à recevoir un appel pour un premier échange téléphonique.

3 - Vous avez réussi à piquer notre curiosité. Attendez-vous à ce qu'on vous propose un deuxième échange, que ce soit à distance ou dans nos locaux. Parce qu'un bon échange, c'est avant tout un échange bien préparé, dites-nous si vous avez besoin d'aménagements spécifiques. Nous ferons en sorte que tout se passe au mieux.

4 - En fin d'entretien, notre Talent Acquisition Partner prendra le temps de vous partager un retour personnalisé sur votre CV : vos forces, les aspects à peaufiner, et des tips personnalisés pour vous aider à avancer sereinement vers vos objectifs.

L'idée ? Que chaque échange soit utile, bienveillant et constructif, et que vous repartiez toujours avec un feedback.

5 - Rassurez-vous, nous reviendrons vers vous avec une réponse, qu'elle soit positive ou non.

Recruteuse : Camille PERUSIN, Talent Acquisition Partner

Ne laissez pas cette occasion vous filer entre les doigts, postulez dès maintenant en cliquant sur "postuler via l'espace candidat"

DIVERSITE ET INCLUSION : CHEZ NOUS, C'EST PLUS QU'UNE POLITIQUE, C'EST UNE FORCE

Nous nous engageons à :

  • Accueillir et intégrer les talents uniques des personnes en situation de handicap. Nos offres sont ouvertes aux personnes en situation de handicap et nous mettons en place les aménagements nécessaires pour garantir un environnement de travail adapté à chacun.
  • Cultiver une culture d'inclusion où la différence est valorisée
  • Sensibiliser et accompagner nos équipes aux enjeux de diversité

Parce que la singularité de chacun est une richesse, nous mettons tout en place pour que chaque collaboratrice et collaborateur puisse s'exprimer et s'épanouir pleinement.

BIEN PLUS QU'UN JOB, UNE AVENTURE