Efficient and Robust Benchmarking for Ai with Benchopt

Le descriptif de l’offre ci-dessous est en Anglais_

**Niveau de diplôme exigé**: Bac + 5 ou équivalent

**Fonction**: Ingénieur scientifique contractuel

**A propos du centre ou de la direction fonctionnelle**:

- Le centre de recherche Inria de Saclay a été créé en 2008. Sa dynamique s’inscrit dans le développement du plateau de Saclay, en partenariat étroit d’une part avec le pôle de l’_**_Université Paris-Saclay_**_ et d’autre part avec le pôle de l’_**_Institut Polytechnique de Paris_**_. Afin de construire une politique de site ambitieuse, le centre Inria de Saclay a signé en 2021 des accords stratégiques avec ces deux partenaires territoriaux privilégiés._
- Le centre compte _**_40 équipes-projets_**_ _, dont 32 sont communes avec l’Université Paris-Saclay ou l’Institut Polytechnique de Paris. Son action mobilise _**_plus de 600 personnes_**_, scientifiques et personnels d’appui à la recherche et à l’innovation, issues de 54 nationalités._
- Le centre Inria Saclay - Île-de-France est un acteur essentiel de la recherche en sciences du numérique sur le plateau de Saclay. Il porte les valeurs et les projets qui font l’originalité d’Inria dans le paysage de la recherche : l’excellence scientifique, le transfert technologique, les partenariats pluridisciplinaires avec des établissements aux compétences complémentaires aux nôtres, afin de maximiser l’impact scientifique, économique et sociétal d’Inria._

**Contexte et atouts du poste**:
Numerical evaluation of novel methods, a.k.a. benchmarking, is a pillar of the scientific method in machine learning. However, due to practical and statistical obstacles, the reproducibility of published results is currently insufficient: many details can invalidate numerical comparisons, from insufficient uncertainty quantification to improper methodology. In 2022, the benchopt initiative provided an open source Python package together with a framework to seamlessly run, reuse, share and publish benchmarks in numerical optimization. With this project, we aim at making benchopt a new standard in benchmarking by empowering researchers and practitioners with efficient and valid benchmarking methods.

**Mission confiée**:

- Develop novel tools to better customize the HTML rendering of the benchmarks
- Improve the parallelization capabilities for the benchmarks

For the novel reference benchmark, a particular focus will be set on developing reference benchmarks for deep learning optimization, in particular with nanoGPT speed run optimization challenges, coupled with imagenet challenges.

**Principales activités**:
Main activities:

- Participate in the development of the team's open source software benchopt
- Develop novel benchmarks in deep learning optimisation.

Additional activity: Participate to the team's research by providing support on how to evaluate novel methods on reference benchmarks.

**Compétences**:

- Strong mathematical background. Knowledge in machine learning is a plus.
- Good programming skills in Python. Knowledge of a deep learning framework is a plus.

**Avantages**:

- Subsidized meals
- Partial reimbursement of public transport costs
- Leave: 7 weeks of annual leave + 10 extra days off due to RTT (statutory reduction in working hours) + possibility of exceptional leave (sick children, moving home, etc.)
- Possibility of teleworking and flexible organization of working hours
- Professional equipment available (videoconferencing, loan of computer equipment, etc.)
- Social, cultural and sports events and activities
- Access to vocational training

**Rémunération**:
According to profile

**Informations générales**:

- **Thème/Domaine**: Neurosciences et médecine numériques
Ingénierie logicielle (BAP E)
- **Ville**: Palaiseau
- **Centre Inria**: Centre Inria de Saclay
- **Date de prise de fonction souhaitée**: 2025-10-01
- **Durée de contrat**: 12 mois
- **Date limite pour postuler**: 2025-09-30

**Consignes pour postuler**:
**Sécurité défense**:
Ce poste est susceptible d’être affecté dans une zone à régime restrictif (ZRR), telle que définie dans le décret n°2011-1425 relatif à la protection du potentiel scientifique et technique de la nation (PPST). L’autorisation d’accès à une zone est délivrée par le chef d’établissement, après avis ministériel favorable, tel que défini dans l’arrêté du 03 juillet 2012, relatif à la PPST. Un avis ministériel défavorable pour un poste affecté dans une ZRR aurait pour conséquence l’annulation du recrutement.

**Politique de recrutement**:
Dans le cadre de sa politique diversité, tous les postes Inria sont accessibles aux personnes en situation de handicap.

**Contacts**:

- **Équipe Inria**: MIND
- **Recruteur**:
**L'essentiel pour réussir**:
**A propos d'Inria**:
Inria est l’institut national de recherche dédié aux sciences et technologies du numérique. Il emploie 2600 personnes. Ses 215 équipes-projets agiles, en général communes avec des partenaires académiques, impliquent plus de 3900 scientifiques pour relever les