Stage de fin d'études

il y a 3 jours

BoulogneBillancourt, Île-de-France AUDENSIEL TECHNOLOGIES Temps plein

Sujet de stage : Traitement des données IoT en streaming dans une architecture Big Data

Encadrant : Dr. Emna CHEBBI

E-mail :

Contexte

DIHAIoT (Design and Implementation of an Hybrid Big Data Architecture over IoT) vise à traiter en continu des flux de données hétérogènes issus de capteurs (robots, météo, drones, etc.) au sein d'une architecture Big Data type Kappa basée sur Kafka et Spark. Le PoC actuel dispose déjà de producteurs Kafka et d'un cluster Spark conteneurisé.

Le stage consiste à concevoir et implémenter une chaîne de traitement en streaming robuste pour ces flux IoT, afin de calculer des indicateurs (KPIs) en temps quasi réel ou réel et de les exposer au dashboard existant.

Objectifs du stage

  • Réaliser un état de l'art sur les méthodes de traitement de flux streaming pour l'IoT (spark streaming, flink, ...).
  • Analyser les topics Kafka du projet DIHAIoT (RobotPosition, WeatherData, OdometryData, CropData, …) : structure des messages, fréquence, volumétrie.
  • Etudier et choisir le cas d'usage le plus adéquat à DIHAIoT entre les solutions quasi temps réel et temps réel.
  • Développer un job lisant les topics, normalisant les messages et appliquant des fenêtres temporelles pour calculer des KPIs par source de données en temps réel ou quasi temps réel.
  • Adapter le dashboard.

Supports fournis

  • Code source du PoC.
  • Jeux de données simulés pour robots et météo, et images.
  • Documentation interne de l'architecture et des conteneurs.

Livrables

  • Job de streaming opérationnel intégré au cluster.
  • Table analytique de KPIs.
  • Dashboard enrichi avec les données ainsi les KPIs temps-réel.
  • Rapport de stage et présentation.

Profil recherché

  • Master 2 ou dernière année d'école d'ingénieurs (informatique, data engineering, systèmes d'information).
  • Bon niveau en Python et traitement de données, intérêt pour le Big Data et le temps-réel.

Compétences

  • Python Spark et Kafka.
  • Bases en SQL et en modélisation de données.
  • Connaissances de Docker/Linux.
  • Expérience avec des dashboards web appréciée.

Rémunération :

Le montant de la gratification est fixé à 4,35 euros Net / heure(s)

Mots-clés

Big Data, IoT, Streaming, Spark Structured Streaming, Kafka, Kappa, Dashboard, DIHAIoT

Informations pratiques

  • Durée : 5 à 6 mois, besoin immédiat
  • Lieu : Boulogne-Billancourt (Laboratoire d'innovation Audensiel).

Type d'emploi : Stage

Durée du contrat : 6 mois

Rémunération : 4,35€ par heure

Avantages :

  • Travail à domicile occasionnel

Lieu du poste : Télétravail hybride Boulogne-Billancourt)

  • Stage BAC+5 Etude du vieillissement des bâtiments nucléaires H/F

    il y a 2 semaines

    Boulogne-Billancourt, Île-de-France ASNR Temps plein

    Informations générales Entité de rattachement L'Autorité de sûreté nucléaire et de radioprotection est une autorité administrative indépendante créée par la loi du 21 mai 2024 relative à l'organisation de la gouvernance de la sûreté nucléaire et de la radioprotection pour répondre au défi de la relance de la filière nucléaire.Elle...

  • Ingénieur charge d'études

    il y a 2 semaines

    Boulogne-Billancourt, Île-de-France IDEX Temps plein

    Premier groupe français indépendantde services à l'énergie et à l'environnement, nous sommes présents sur l'ensemble de la chaîne de valeur énergétique. Notre ambition,décarboner les territoiresau travers nos activités :La production d'énergie (usines de valorisation énergétique des déchets, méthaniseurs, centrales biomasse, géothermie,...

  • STAGE S6P2 INFIRMIER EN CARDIOLOGIE

    il y a 3 jours

    Boulogne-Billancourt, Île-de-France Choisir le Service Public Temps plein

    Informations générales Organisme de rattachement Hôpital Ambroise Paré   Référence APHP_ Date de début de diffusion /01/2026 Date de parution /01/2026 Domaine / MétierMédical et paramédical - Infirmière / Infirmier en soins généraux Intitulé du posteSTAGE S6P2 INFIRMIER EN CARDIOLOGIE / USIC F/H jour/nuit Descriptif du profil...

  • Stage - Chargé de mission Pilotage de Performance H/F

    il y a 2 semaines

    Boulogne-Billancourt, Île-de-France TF1 Temps plein

    Stage - Chargé de mission Pilotage de Performance H/FType de contrat: StageMétier: Finance/AchatSociété: TF1 SAFaisons connaissancePremière chaîne de télévision généraliste française, TF1 est un groupe média intégré qui se développe dans l'édition TV linéaire et non-linéaire avec le digital, les activités de production audiovisuelle en...

  • Stage S6P2 Infirmier En Medecine Intensive

    il y a 3 jours

    Boulogne-Billancourt, Île-de-France Choisir le Service Public Temps plein

    Informations générales Organisme de rattachement Hôpital Ambroise Paré   Référence APHP_ Date de début de diffusion /01/2026 Date de parution /01/2026 Domaine / MétierMédical et paramédical - Infirmière / Infirmier en soins généraux Intitulé du posteSTAGE S6P2 INFIRMIER EN MEDECINE INTENSIVE /REANIMATION F/H Descriptif du profil...

  • Stage IA – Deep Learning – Computer Vision

    il y a 3 jours

    Boulogne-Billancourt, Île-de-France Aubay Temps plein

    STAGE : RECONNAITRE LES CORAUX PAR L'IADeep Learning, Computer Vision, Ecologie, Science4ReefsAfin de mieux comprendre et protéger le récif corallien, la fondation Science4Reefs et Aubay conçoivent des outils d'IA capables d'identifier les coraux à partir d'une photo et de quantifier leur blanchissement.SUJET :Les récifs coralliens sont essentiels à la...

  • Stage S6P2 Infirmier Au Bloc Operatoire F/H

    il y a 3 jours

    Boulogne-Billancourt, Île-de-France Choisir le Service Public Temps plein

    Informations générales Organisme de rattachement Hôpital Antoine-Béclère   Référence APHP_ Date de début de diffusion /01/2026 Date de parution /01/2026 Localisation Clamart cedex Domaine / MétierMédical et paramédical - Infirmière / Infirmier en soins généraux Intitulé du posteSTAGE S6P2 INFIRMIER AU BLOC OPERATOIRE F/H...

  • Stage S6P2 Infirmier En Unite De Medecine Ambulatoire

    il y a 3 jours

    Boulogne-Billancourt, Île-de-France Choisir le Service Public Temps plein

    Informations générales Organisme de rattachement Hôpital Ambroise Paré   Référence APHP_ Date de début de diffusion /01/2026 Date de parution /01/2026 Domaine / MétierMédical et paramédical - Infirmière / Infirmier en soins généraux Intitulé du posteSTAGE S6P2 INFIRMIER EN UNITE DE MEDECINE AMBULATOIRE (UMA) F/H Descriptif du profil...

  • STAGE S6P2 INFIRMIER EN CARDIOLOGIE

    il y a 3 jours

    Boulogne-Billancourt, Île-de-France Ap-Hp Temps plein

    Informations générales Entité de rattachement du publieur Situé à Boulogne-Billancourt, l'hôpital Ambroise-Paré est l'un des premiers centres d'urgence des Hauts-de-Seine (adultes/enfants). Il dispose d'une expertise reconnue dans le domaine cardiovasculaire, en gériatrie et en imagerie, ainsi qu'en chirurgie (orthopédie, digestif,...

  • STAGE S6P2 INFIRMIER EN NEPHROLOGIE F/H jour/nuit

    il y a 3 jours

    Boulogne-Billancourt, Île-de-France Choisir le Service Public Temps plein

    Informations générales Organisme de rattachement Hôpital Ambroise Paré   Référence APHP_ Date de début de diffusion /01/2026 Date de parution /01/2026 Domaine / MétierMédical et paramédical - Infirmière / Infirmier en soins généraux Intitulé du posteSTAGE S6P2 INFIRMIER EN NEPHROLOGIE F/H jour/nuit Descriptif du profil...