Stage - Exploiting End-to-end Multi-modal Models

**Missions, équipe et environnement de travail, ça donne quoi ?**

BNP Paribas Cardif est un assureur présent dans plus de 30 pays, fort de 50 ans d’histoire et d’une position centrale au sein des activités du Groupe BNP Paribas.

Vous rejoindrez l’équipe « Traitement d’images de documents » du DataLab.

Cette équipe développe un service combinant Reconnaissance Optique de Caractères (OCR), extraction et classification d’informations appropriées pour automatiser le traitement de dizaines de millions de documents reçus par BNP Paribas CARDIF chaque année.

Le service utilise actuellement des modèles basés sur des Transformers pour l’extraction d’informations.

L’objectif du stage est d’évaluer le type de tâches qui pourraient être effectuées avec un modèle plus grand que ceux actuellement utilisés et de quantifier sa contribution.

Vous aurez l’occasion de travailler sur les objectifs suivants:
Revue de la littérature : Continuez à explorer l’état de l’art des MLLM pour les tâches OCR, y compris le « zero-shot learning», le «few-shot learning » et le découpage des flux de documents.

Évaluation MLLM : Comparez les architectures MLLM récentes adaptées aux tâches d’OCR, telles que Vision-and Language Transformers (ViLT), VisualBert et LLaMA.

Évaluation des méthodes PEFT : Quantifiez le gain de performance des méthodes PEFT (Lora, QLora, etc ) pour les MLLM sur les tâches OCR.

Tâche de division de flux de documents : Évaluez les performances des MLLM sur cette tâche, pour la division des flux de documents de manière appropriée.

Génération automatique d’annotations : Estimez les performances d’un modèle classique entraîné sur des annotations générées par un MLLM pour des tâches OCR.

Mise en œuvre et tests : Implémentez les techniques MLLM choisies en Python à l’aide de bibliothèques de Deep Learning open-source et d’outils internes et effectuez des tests pour en évaluer les performances sur les données disponibles.

Communication et intégration : Communiquez clairement vos avancées et vos résultats à l’équipe, et potentiellement ensuite les intégrez dans notre service.

Nos tuteurs et tutrices se forment en continu pour mieux vous accompagner dans toutes les composantes de votre stage, toujours avec bienveillance. Une partie de leur temps de travail est d'ailleurs dédiée à votre encadrement : conseils de méthodes de travail, aide à la maîtrise du temps, développement d’une posture professionnelle... De quoi vous sentir bien dès votre arrivée

Ce stage basé à Nanterre est à pourvoir à partir de 2025 pour une durée de 6 mois.

**Vos perspectives d’évolution**

Ce stage vous permettra d'évoluer dans un environnement technique complexe et d’acquérir des connaissances sur l’IA.

D’autres opportunités pourront s’offrir à vous, favorisant votre insertion professionnelle:

- Le Graduate Programme vous permet de booster votre avenir, de développer vos compétences et votre leadership grâce à des missions à responsabilité ;
- Le Volontariat International en Entreprise vous donne l’opportunité d’enrichir votre parcours avec une expérience internationale unique de 12 à 24 mois.

**Travailler chez BNP Paribas c’est**

Un package et des avantages:
Une gratification mensuelle brute attractive, supérieure au minimum prévu par la loi

Accès au restaurant d’entreprise et /ou tickets restaurant, activités sociales et culturelles via le comité d’entreprise,

En fonction de l’environnement, télétravail possible à organiser avec le tuteur selon les règles de l’entreprise

Rejoindre un Groupe engagé et prenez part à notre grand projet de transformation vers la construction d’un monde plus durable.

Découvrez nos engagements

(Opens in a new tab)

pour notre clientèle et la société.

**ETES-VOUS NOTRE PROCHAIN STAGIAIRE EXPLOITING END-TO-END MULTI-MODAL MODELS FOR DOCUMENT INFORMATION PROCESSING H/F ?**:
Vous préparez un diplôme Master 2 ou équivalent reconnu RNCP, en école d’ingénieur ou équivalent universitaire avec une spécialité en Data Science, Machine Learning, IA.

Vos niveaux en Français et Anglais sont Bilingue.

Et vous maitrisez les outils PACK MS OFFICE MICROSOFT EXCEL, PACK MS OFFICE MICROSOFT WORD, PACK MS OFFICE MICROSOFT POWERPOINT

Votre adaptabilité et votre capacité à collaborer vous permettent de créer des liens de confiance et satisfaire vos clients. Ajoutez à cela un bon sens de l'organisation et une bonne capacité d'analyse pour finir de nous convaincre

**Processus de recrutement**

Si votre CV est retenu par notre équipe de recrutement, vous passerez un à deux entretiens au maximum avec des managers opérationnels.

N'oubliez pas d'indiquer sur votre CV:
**La formation que vous préparez dans le cadre de votre stage**

**La durée et vos disponibilités**

**Votre mobilité géographique**

(Opens in a new tab)



(O