Stage - Apprentissage Profond Par Renforcement Pour L’ordonnancement Des Communications Dans Des Réseaux de Type 5g/6g (F/H)

Lieu : Gennevilliers, France

**Construisons ensemble un avenir de confiance**:
Thales est un leader mondial des hautes technologies spécialisé dans trois secteurs d’activité : Défense & Sécurité, Aéronautique & Spatial, et Cyber & Digital. Il développe des produits et solutions qui contribuent à un monde plus sûr, plus respectueux de l’environnement et plus inclusif. Le Groupe investit près de 4 milliards d’euros par an en Recherche & Développement, notamment dans des domaines clés de l’innovation tels que l’IA, la cybersécurité, le quantique, les technologies du cloud et la 6G. Thales compte près de 81 000 collaborateurs dans 68 pays.

**Nos engagements, vos avantages**:

- Notre savoir-faire technologique
- Notre attention portée à l’équilibre des collaborateurs
- Un environnement inclusif et bienveillant
- Un engagement sociétal et environnemental reconnu (Thales Solidarity, indice CAC 40 ESG )

**Votre quotidien**: Le Campus de Gennevilliers est le cœur des activités de conception, de développement et de soutien des grands systèmes de défense : radiocommunications, réseaux et systèmes d’infrastructure résilients, communications par satellite, combat collaboratif et cybersécurité. Situé au nord de Paris, il est rapidement accessible en transports en commun.

**Contexte**:
Le **Centre de Compétences Hardware & Logiciel embarqué** de **Thales SIX GTS France SAS** recherche un/une:
**Stagiaire - Apprentissage profond par renforcement pour l’ordonnancement des communications dans des réseaux de type 5G/6G - 6 mois**

Basé à Gennevilliers.

**Vos missions**:
Une des missions du centre de compétence Hardware Technologies, Tools & Engineering, consiste à définir des protocoles radio et des traitements numériques du signal qui seront utilisés dans les équipements, leur implémentation et leurs évolutions.

Dans le contexte des réseaux de communication sans fil, nous étudions des solutions pour ordonnancer les communications des utilisateurs, c’est-à-dire leur attribuer des ressources temporelles et/ou fréquentielles pour communiquer. Ce problème a été historiquement traité à l’aide d’heuristiques ayant des capacités limitées. Depuis 2017, de nombreuses solutions d’ordonnancement basées sur du DRL ont été proposées dans la littérature.

Nous avons proposé dans une solution utilisant une architecture neuronale de type transformer, entrainée à l’aide d’un algorithme de Deep Q-Learning, et nous souhaiterions enrichir ces travaux via l’intégration de mécanismes de communication avancés tels que les hybrid automatic repeat request (HARQ).

Votre mission sera d’abord de comprendre le modèle du système ainsi que la solution proposée dans [1] et de prendre en main le simulateur existant. Ensuite, l’objectif sera d’enrichir le simulateur, et de proposer des modifications dans l’algorithme d’apprentissage pour intégrer les nouveaux mécanismes envisagés. La mission s’organisera comme suit:

- Une analyse du modèle du système de [1] et la prise en main du simulateur existant.
- La proposition et l’implémentation de modifications pour intégrer les nouveaux mécanismes.
- L’évaluation par simulations des solutions proposées.

**Mon profil**:
Vous êtes en dernière année d’un cursus grande école ou en **Master 2** avec une forte composante **mathématique** et idéalement un volet d’**initiation à la recherche**?

Vous avez abordé dans votre formation l’apprentissage profond par **renforcement (DRL)** ? Vous avez réalisé des projets ou stages dans un de ses domaines ?

Vous avez une forte motivation pour la recherche ?

Vous aimez étudier et résoudre des problèmes nouveaux ?

Vous êtes reconnu pour votre autonomie, votre proactivité votre créativité ?

Vous avez des bases solides en apprentissage profond, en **Python**, et des compétences en communications numérique ?

Alors ce stage est fait pour vous

Tous nos stages sont conventionnés et soumis à une gratification dont le montant est déterminé selon votre niveau d’études.

Thales, entreprise Handi-Engagée, reconnait tous les talents. La diversité est notre meilleur atout. Postulez et rejoignez nous