Dév IA/LLM

Découvrez un environnement de travail stimulant, où l'humain est au centre et où votre potentiel peut pleinement s'exprimer.

CAPFI est une ESN 2.0 basée à Paris (8ème) rassemblant moins de 200 passionnés intervenant pour 70 clients grands comptes (CAC 40, SBF 250) dans les secteurs suivants :

• Industrie, Médias, Cosmétique, Énergie
• Banque & Assurance
• Banque d'investissement & Asset Management

Nos expertises couvrent :

• L'infrastructure IT & la cybersécurité
• Les projets digitaux et data/IA
• La gestion de projet & maîtrise d'ouvrage

Incarner une ESN qui repose sur 2 piliers : le développement humain et l'expertise où l'innovation passe par la passion et la rigueur technique. Nous sommes reconnus pour notre capacité à répondre à des projets critiques, complexes et à forte valeur ajoutée.

Un de nos clients dont l'activité principale réside dans la défense d'intérêts, met en œuvre un Système d’Information unifié, incluant un socle CRM/ERP, un CMS léger et un Hub IA. L'ambition est de bâtir une plateforme souveraine, sécurisée et industrialisée, pour soutenir durablement l'exploitation, les corrections et l'évolution continue du produit. Le rôle se concentre sur l’ opérabilité du Hub IA, la maîtrise des coûts et la qualité mesurable, à travers la gestion des prompts, le déploiement, le monitoring et l'exploitation en continu.

• Dispositif de gestion des prompts : Mettre en place et documenter un système industrialisé pour la gestion des prompts (versioning, rollback, templates).
• Maîtrise des coûts : Établir des mécanismes de contrôle des coûts (caching, routing, quotas) pilotés par des indicateurs clairs.
• Monitoring et exploitation : Déployer un monitoring complet (qualité, latence, erreurs, coûts, dérive) et fournir les runbooks opérationnels associés.
• Quality Gates IA : Définir et mettre en œuvre des quality gates spécifiques à l'IA, incluant des golden sets, des tests automatiques, des seuils d’acceptation et un suivi dans le temps.

Compétences techniques et Expérience :

• Compétences LLMOps :
  • Évaluation continue, monitoring et gestion des déploiements.
  • Capacité à intégrer l’IA dans un CI/CD.
  • Mise en place de Quality Gates IA (golden sets, tests automatiques, seuils d’acceptation).
  • Gestion des prompts : versioning, templates, rollback et A/B testing.
  • Optimisation des coûts : caching, routing de modèles, quotas et mesures de consommation par profil.
  • Monitoring : latence, erreurs, coûts, dérive ; avec alerting et runbooks d’exploitation.
• Qualité mesurable et réduction des sorties non fiables.
• Application des règles de citation.
• • Compétences LLMOps :
    • Évaluation continue, monitoring et gestion des déploiements.
    • Capacité à intégrer l’IA dans un CI/CD.
    • Mise en place de Quality Gates IA (golden sets, tests automatiques, seuils d’acceptation).
    • Gestion des prompts : versioning, templates, rollback et A/B testing.
    • Optimisation des coûts : caching, routing de modèles, quotas et mesures de consommation par profil.
    • Monitoring : latence, erreurs, coûts, dérive ; avec alerting et runbooksd’exploitation.
  • Culture Produit :
    • Qualité mesurable et réduction des sorties non fiables.
    • Application des règles de citation.

  2. Socle Technique Cible

  • Stack Backend : Symfony 7, API Platform, PostgreSQL, Doctrine, Messenger.
  • Front-end : Angular (prioritaire).
  • DevOps/Infra : CI/CD et Docker constituent le socle commun.

  3. Exigences Transverses (Qualité et Sécurité)

  • Qualité :
    • Contribution active à la qualité du produit et respect de la Definition of Done commune (non-régression, quality gates, documentation utile).
    • Pratiques d’équipe : PR de taille maîtrisée, revues systématiques, conventions partagées, et usage de feature flags.
  • Sécurité :
    • Sécurité applicative pragmatique.
    • Gestion rigoureuse des secrets.
    • Validations côté serveur et côté client.
    • Journaux et traces d’audit.
    • Chiffrement si nécessaire.

  4. Expérience Générale

  • Capacité à produire, expliciter les choix, documenter et transmettre dans un contexte multi-acteurs et multi-fournisseurs.
  • Sécurité : journaux/audit, politiques, gestion des données sensibles.
  • Pérennisation : capacité à intégrer le runbooks, le transfert de compétences et la réversibilité dès la phase build.

  CAPFI est une entreprise vivante qui place le collectif et le partage entre pairs au cœur de sa culture. No