Doctorant en Conception FPGA pour l'IA embarquée

il y a 3 semaines


Palaiseau, France THALES Temps plein

Poste : CE QUE NOUS POUVONS ACCOMPLIR ENSEMBLE :

Récemment, un nouveau type de réseaux de neurones nommé « Transformer » a révolutionné les applications de traitement de langage naturel. Ce sont ces réseaux que l'on retrouve au cur de BERT, GPT. Depuis, plusieurs travaux ont permis d'adapter ces réseaux aux données issues de capteurs optiques, de radars ou de LiDAR, là aussi avec un gain en performance significatif par rapport à l'état de l'art et les réseaux convolutifs.

Une des difficultés d'exploitation de ces réseaux Transformer est l'absence d'accélérateurs dédiés : l'accélération se fait principalement via GPU, ce qui limite leurs utilisations dans des environnements embarqués (e.g. drones, capteurs intelligents, objets connectés, ...). Or, les FPGA représentent des solutions intéressantes pour accélérer les applications embarquées à fortes contraintes temporelles et énergétiques, ceci grâce à leurs nombreux atouts (e.g. composants reconfigurables, rapport performance/consommation, faible latence, ...).

L'objectif de cette thèse est de poser les bases d'un accélérateur FPGA innovant pour réseaux de neurones Transformers, ce qui permettrait d'intégrer ces réseaux dans une multitude d'applications embarquées, permettant de nouvelles utilisations des Transformers dans des domaines variés comme les télécommunications, l'aéronautique ou le spatiale.

Dans ce contexte, vos missions seront les suivantes :

1ère étape : étude bibliographique des réseaux Transformers et de l'accélération neuronale sur FPGA ; prise en main des moyens de développement et de simulation nécessaires pour la thèse (carte électronique, logiciels, langages de développement, ...).

2ème étape : analyse détaillée de la topologie d'un réseau Transformer et identification des points durs pour leur accélération sur FPGA (e.g. opérations mathématiques complexes ou non adaptées aux FPGA, contraintes mémoires, dépendances des données).

3ème étape : optimisation des opérations et proposition d'une architecture de calcul FPGA scalable et flexible pour l'accélération des calculs d'un Transformer.

4ème étape : implémentation et évaluation de l'architecture proposée selon plusieurs critères (précision numérique, précision d'inférence, temps de calcul, ressources logiques, consommation énergétique).

5ème étape : synthèse de l'expérience accumulée dans le cadre de l'étude pour poser les bases d'une accélérateur FPGA dédié aux Transformers.
Profil : Vous êtes diplômé d'une grande école d'ingénieur ou d'une formation équivalente (Bac+5) spécialisée dans les architectures de calcul, en systèmes embarqués ou en électronique numérique ?

Votre formation vous a permis d'acquérir les compétences suivantes :

Architectures de calcul et architectures microprocesseur.

Techniques d'optimisation algorithmiques (e.g. pipelining, parallélisation, vectorisation).

Implémentation pour environnement embarqué (microcontrôleur et/ou FPGA).

Développement et simulation FPGA en VHDL, (System)Verilog ou autre

Vous êtes de nature curieuse et vous vous intéressez aux dernières innovations et avancées technologiques dans le domaine du calcul haute performance ?

Vous aimez le travail en équipe et savez faire preuve d'une bonne autonomie ?

Enfin, vous avez un excellent niveau d'anglais vous permettant de travailler dans un contexte international ?

Les compétences suivantes pourraient également être un plus :

Programmation logicielle en C/C++, Python...

Connaissances en réseaux de neurones convolutionnels (CNN) ou Transformers

Vous vous reconnaissez ? Alors découvrez votre future thèse
Entreprise : Chez Thales, nous sommes fiers de travailler ensemble pour imaginer des solutions innovantes qui contribuent à construire un avenir plus sûr, plus vert et plus inclusif. Un avenir de confiance. Mais ces technologies ne viennent pas de nulle part. L'intelligence humaine est le moteur derrière la technologie qui fait la renommée de Thales. Les projets que nous conduisons sont complexes et nos clients exigeants. Pour répondre aux besoins actuels et futurs de nos clients, nous maîtrisons plus d'une centaine de disciplines, de l'optique à la physique quantique, du traitement du signal à la connectivité et à l'intelligence artificielle. Rejoindre Thales, c'est repousser les limites de la technologie et la mettre au service du progrès et du développement durable de nos sociétés. C'est donc être au coeur d'une formidable aventure technique. Une attention portée à l'équilibre des collaborateurs au service de leur réussite. C'est pourquoi, notamment, nous nous efforçons de créer un environnement de travail accueillant et d'accorder la flexibilité nécessaire à l'équilibre entre vie professionnelle et vie personnelle. Nous savons que cet équilibre est essentiel à votre épanouissement et à la réussite des projets que nous vous confierons. Des parcours professionnels riches. Chez Thales, nous jouons collectif. Ce qui signifie travailler en équipe, côtoyer des experts et donc apprendre et développer ses compétences en permanence tout en faisant bénéficier le Groupe de son savoir-faire. C'est aussi la possibilité d'évoluer, de changer de fonction ou d'activité, voire de pays.



  • Palaiseau, France Thales Temps plein

    QUI SOMMES-NOUS ? Situé sur le campus de l’École polytechnique, au cœur du pôle scientifique et technologique d’envergure mondiale de Paris-Saclay, à Palaiseau, Thales Research & Technology (TRT) France constitue le centre de recherche et technologies français du Groupe Thales, au service des activités mondiales de Thales. Grâce à une...


  • Palaiseau, France THALES Temps plein

    QUI SOMMES-NOUS ?Situé sur le campus de l'École polytechnique, au cœur du pôle scientifique et technologique d'envergure mondiale de Paris-Saclay, à Palaiseau, Thales Research & Technology (TRT) France constitue le centre de recherche et technologies français du Groupe Thales, au service des activités mondiales de Thales. Grâce à une politique de...


  • Palaiseau, France THALES Temps plein

    QUI SOMMES-NOUS ?Situé sur le campus de l'École polytechnique, au cœur du pôle scientifique et technologique d'envergure mondiale de Paris-Saclay, à Palaiseau, Thales Research & Technology (TRT) France constitue le centre de recherche et technologies français du Groupe Thales, au service des activités mondiales de Thales. Grâce à une politique de...


  • Palaiseau, France THALES Temps plein

    QUI SOMMES-NOUS ?Situé sur le campus de l'École polytechnique, au cœur du pôle scientifique et technologique d'envergure mondiale de Paris-Saclay, à Palaiseau, Thales Research & Technology (TRT) France constitue le centre de recherche et technologies français du Groupe Thales, au service des activités mondiales de Thales. Grâce à une politique de...


  • Palaiseau, Île-de-France THALES Temps plein

    Quelles sont les missions ?CE QUE NOUS POUVONS ACCOMPLIR ENSEMBLE :Récemment, un nouveau type de réseaux de neurones nommé « Transformer » a révolutionné les applications de traitement de langage naturel. Ce sont ces réseaux que l'on retrouve au cœur de BERT, GPT. Depuis, plusieurs travaux ont permis d'adapter ces réseaux aux données issues de...


  • Palaiseau, Île-de-France THALES Temps plein

    Quelles sont les missions ?CE QUE NOUS POUVONS ACCOMPLIR ENSEMBLE :Récemment, un nouveau type de réseaux de neurones nommé « Transformer » a révolutionné les applications de traitement de langage naturel. Ce sont ces réseaux que l'on retrouve au cœur de BERT, GPT. Depuis, plusieurs travaux ont permis d'adapter ces réseaux aux données issues de...


  • Palaiseau, France THALES Temps plein

    Quelles sont les missions ?CE QUE NOUS POUVONS ACCOMPLIR ENSEMBLE :Récemment, un nouveau type de réseaux de neurones nommé « Transformer » a révolutionné les applications de traitement de langage naturel. Ce sont ces réseaux que l’on retrouve au cœur de BERT, GPT. Depuis, plusieurs travaux ont permis d’adapter ces réseaux aux données...


  • Palaiseau, France THALES Temps plein

    Poste : CE QUE NOUS POUVONS ACCOMPLIR ENSEMBLE :Récemment, un nouveau type de réseaux de neurones nommé « Transformer » a révolutionné les applications de traitement de langage naturel. Ce sont ces réseaux que l'on retrouve au cœur de BERT, GPT. Depuis, plusieurs travaux ont permis d'adapter ces réseaux aux données...


  • Palaiseau, France Thales Temps plein

    **QUI SOMMES-NOUS ?** Situé sur le campus de l’École polytechnique, au cœur du pôle scientifique et technologique d’envergure mondiale de Paris-Saclay, à Palaiseau, Thales Research & Technology (TRT) France constitue le centre de recherche et technologies français du Groupe Thales, au service des activités mondiales de Thales. Grâce à une...


  • PALAISEAU, France CEA Temps plein

    Un des axes de travail du LIAE concerne l'adéquation entre les algorithmes et les architectures de calcul. Dans ce cadre, le laboratoire s'intéresse au domaine novateur de l'IA spatiale et plus particulièrement des Neural Fields (NeRF) et souhaite proposer des mécanismes permettant l'exécution en temps réel de réseau de neurones de ce...


  • PALAISEAU, France Télécom Paris Temps plein

    Nous sommes à la recherche d'une Post doctorante ou d'un Post doctorant en Intelligence Artificielle adaptative pour rejoindre notre équipe dynamique au sein du département de recherche Communications et Électronique de Télécom Paris.CONTEXTE SCIENTIFIQUEDans le paysage technologique actuel, qui évolue rapidement, la demande de systèmes...


  • PALAISEAU, 91120, Palaiseau, France CEA Temps plein

    Un des axes de travail du LIAE concerne l'adéquation entre les algorithmes et les architectures de calcul. Dans ce cadre, le laboratoire s'intéresse au domaine novateur de l'IA spatiale et plus particulièrement des Neural Fields (NeRF) et souhaite proposer des mécanismes permettant l'exécution en temps réel de réseau de neurones de ce...


  • PALAISEAU, 91120, Palaiseau, France Télécom Paris Temps plein

    Nous sommes à la recherche d'une Post doctorante ou d'un Post doctorant en Intelligence Artificielle adaptative pour rejoindre notre équipe dynamique au sein du département de recherche Communications et Électronique de Télécom Paris.CONTEXTE SCIENTIFIQUEDans le paysage technologique actuel, qui évolue rapidement, la demande de systèmes...


  • PALAISEAU, France Télécom Paris Temps plein

    Nous sommes à la recherche d'une Post doctorante ou d'un Post doctorant en Imagerie Biomedicale & IA pour rejoindre notre équipe dynamique au sein du département Image, Données et Signal (IDS) de Télécom Paris.CONTEXTE SCIENTIFIQUEDéveloppements de méthodes de transformations d'images et de métriques dédiées documentant le niveau de...


  • Palaiseau, Île-de-France Cea Temps plein

    Dans le cadre de son activité de conception de solution matérielle embarquée pour l'inférence de modèles IA, le LIAE s'intéresse en particulier aux réseaux Transformers. A la base de nombreux modèles de fondations actuels, l'embarquabilité de ces réseaux pour une exécution sur une cible matérielle contrainte est un enjeu fort de par leur taille...


  • Palaiseau, France CEA Temps plein

    Description de l'offre Un des axes de travail du LIAE concerne l’adéquation entre les algorithmes et les architectures de calcul. Dans ce cadre, le laboratoire s’intéresse au domaine novateur de l’IA spatiale et plus particulièrement des Neural Fields (NeRF) et souhaite proposer des mécanismes permettant l’exécution en temps réel de...


  • Palaiseau, France CEA Temps plein

    Description de l'offre Un des axes de travail du LIAE concerne l’adéquation entre les algorithmes et les architectures de calcul. Dans ce cadre, le laboratoire s’intéresse au domaine novateur de l’IA spatiale et plus particulièrement des Neural Fields (NeRF) et souhaite proposer des mécanismes permettant l’exécution en temps réel de...


  • Palaiseau, France Cea Temps plein

    Dans le cadre de son activité de conception de solution matérielle embarquée pour l’inférence de modèles IA, le LIAE s’intéresse en particulier aux réseaux Transformers. A la base de nombreux modèles de fondations actuels, l’embarquabilité de ces réseaux pour une exécution sur une cible matérielle contrainte est un enjeu fort de par leur...


  • Palaiseau, France Cea Temps plein

    Dans le cadre de son activité de conception de solution matérielle embarquée pour l’inférence de modèles IA, le LIAE s’intéresse en particulier aux réseaux Transformers. A la base de nombreux modèles de fondations actuels, l’embarquabilité de ces réseaux pour une exécution sur une cible matérielle contrainte est un enjeu fort de par leur...


  • PALAISEAU, 91120, Palaiseau, France Télécom Paris Temps plein

    Nous sommes à la recherche d'une Post doctorante ou d'un Post doctorant en Imagerie Biomedicale & IA pour rejoindre notre équipe dynamique au sein du département Image, Données et Signal (IDS) de Télécom Paris.CONTEXTE SCIENTIFIQUEDéveloppements de méthodes de transformations d'images et de métriques dédiées documentant le niveau de...