QA IA

il y a 1 semaine

Rue du Temple Paris France Skapa Temps plein

Rôle et mission générale

Le QA IA est responsable de la qualité, de la fiabilité, de la robustesse et de la conformité des systèmes IA avant, pendant et après la mise en production.

Il conçoit et exécute les tests multi-couches :

  • Data testing

  • Model testing

  • System testing

  • Tests spécifiques GenAI / RAG / Agents

  • Tests de sécurité, biais, dérive et conformité (CT-AI)

Ce rôle devient crucial avec la montée des systèmes GenAI, agentiques et RAG.

Responsabilités clés

1. Stratégie de test IA

  • Définir la méthodologie QA adaptée au type de modèle : ML, LLM, RAG, agents.

  • Construire les plans de test IA : data tests, model tests, risk tests, behavior tests.

  • Définir la couverture de test en accord avec le PO et les Data Scientists.

2. Tests Data & Features

  • Vérifier la qualité, cohérence, fraîcheur, représentativité des données.

  • Détecter les biais potentiels.

  • Définir des tests de drift data.

3. Tests Modèle

  • Tester la performance (metrics ML), la robustesse, l'explicabilité.

  • Tester la stabilité selon différents jeux de données.

  • Tester la sensibilité du modèle aux perturbations (adversarial tests).

4. Tests systèmes IA

  • Tests end-to-end (réception → prédiction → action → logs).

  • Tests UX pour les assistants IA / agents.

  • Tests de charge, latence, disponibilité, escalade.

5. Tests spécifiques GenAI / RAG / Agents

  • Détection et mesure des hallucinations.

  • Tests de pertinence des sources RAG (grounding testing).

  • Tests multi-agents (cohérence, coordination, divergence).

  • Vérification du respect des garde-fous (ton, contraintes métier, RGPD).

6. Documentation & conformité

  • Contribution au dossier d'évaluation IA (CT-AI).

  • Collaboration avec DPO sur les risques et RGPD.

  • Mise à jour des registres IA et des reports d'audit.

Types de missions réalisées

  • Test d'un chatbot multi-agents avant mise en production

  • Qualification d'un modèle CLV / churn

  • Analyse des hallucinations dans un modèle RAG

  • Définition des seuils d'alerte drift pour modèles ML

  • Tests de sécurité / robustesse (prompt injection, jailbreaking)

  • Mise en place d'un protocole d'explicabilité (LIME, SHAP, PDP)

  • Ingénieur QA Mobile | Automatisation

    il y a 1 semaine

    Paris, France Groupe La centrale Temps plein

    Une entreprise innovante dans le domaine automobile recherche un(e) étudiant(e) pour participer à la stratégie de tests mobiles et à l'automatisation. Vous rejoindrez une équipe dynamique pour développer des tests pour des applications mobiles tout en intégrant des outils d'IA modernes. Ce poste vous permettra de vous immerger dans le monde du mobile,...

  • Ingénieur QA Web

    il y a 1 semaine

    Paris, France Groupe La centrale Temps plein

    Une société technologique basée à Paris cherche un étudiant(e) en Bac+5 pour rejoindre l'équipe QA. Le candidat participera à l'amélioration de la qualité du site Web et à l'automatisation des tests. Les compétences requises incluent des connaissances en tests logiciels et des notions en JavaScript/TypeScript. Ce poste offre une opportunité...

  • QA Senior

    il y a 3 jours

    Rue Robert Doisneau, Angoulême, France Fasst Temps plein

    En tant que Testeur·se Senior, vous serez un pilier de la qualité logicielle au sein de FASST.Vous interviendrez sur l'ensemble du cycle de vie de nos produits digitaux, en collaboration étroite avec les Product Owners, les développeurs et les autres QA.Votre mission : garantir que chaque version livrée reflète le haut niveau d'exigence et la qualité...

  • QA Engineer

    il y a 1 semaine

    Paris, Île-de-France Wirk Temps plein

    QA Engineer (Intermédiaire) — Applications & Plateformes Data / IA Paris (2ᵉ arrondissement) – Sur site / Langue de travail: Francais À propos de WIRKWIRK conçoit desplateformes d'extraction et de compréhension de documentsà forte valeur ajoutée.Nos produits traitent des flux complexes, des pipelines data/IA, des APIs métier critiques et des...

  • QA Manager

    il y a 6 heures

    Paris, Île-de-France Free-Work Temps plein

    CITECH recrute Vous souhaitez mettre vos talents au service d'un groupe de renom dans le secteur de la culture et du loisir ? Nous avons LA mission qu'il vous faut Nous recherchons un(e)QA Manager (H/F)pour rejoindre l'équipe Digitale & Tech et jouer un rôle clé au sein du groupe. Description Du Poste Vos principales missions seront les suivantes :...

  • Stage - Ingénieur Quality Assurance (QA) test webH/F

    il y a 1 semaine

    Paris, France La Centrale Temps plein

    Au sein de l’équipe QA de La Centrale, tu participeras activement à l’amélioration de la qualité du site Web principal (LaCentrale.fr). Tu accompagneras au quotidien les features teams dans leurs besoins en QA, tout en contribuant à la stratégie d’automatisation des tests Web incluant l’usage de l’IA.Environnement technique : AWS – GitHub...

  • QA Manager

    il y a 7 jours

    Paris, Île-de-France Citech Temps plein

    Description de l'entrepriseCITECH recrute Vous souhaitez mettre vos talents au service d'un groupe de renom dans le secteur de la culture et du loisir ? Nous avons LA mission qu'il vous faut Nous recherchons un(e) QA Manager (H/F) pour rejoindre l'équipe Digitale & Tech et jouer un rôle clé au sein du groupe.Description du posteVos principales missions...

  • QA Manager

    il y a 7 jours

    Paris, Île-de-France CITECH Temps plein 50 000 € - 60 000 €

    Description de l'entreprise CITECH recrute Vous souhaitez mettre vos talents au service d'un groupe de renom dans le secteur de la culture et du loisir ? Nous avons LA mission qu'il vous faut Nous recherchons un(e) QA Manager (H/F) pour rejoindre l'équipe Digitale & Tech et jouer un rôle clé au sein du groupe. Description du poste Vos principales...

  • Stage - Ingénieur Quality Assurance (QA) test web H/F

    il y a 1 semaine

    Paris, France Groupe La centrale Temps plein

    Contexte du poste Au sein de l’équipe QA de La Centrale, tu participeras activement à l’amélioration de la qualité du site Web principal (LaCentrale.fr). Tu accompagneras au quotidien les features teams dans leurs besoins en QA, tout en contribuant à la stratégie d’automatisation des tests Web incluant l’usage de l’IA. Environnement technique...

  • QA Engineer

    il y a 2 semaines

    Paris, Île-de-France ChapsVision Temps plein

    PRÉSENTATION DE CHAPSVISIONFondé en 2019, ChapsVision est un éditeur de logiciels en forte croissance, membre duNEXT40de la French Tech, regroupant les 40 start-ups françaises les plus prometteuses.Avec plus de 1200 collaborateurs et plus de 1000 clients grands comptes et régaliens, notre ambition est de devenir un leader européen du traitement...