Stage de fin d'études

il y a 4 jours

BoulogneBillancourt, Île-de-France AUDENSIEL TECHNOLOGIES Temps plein

Sujet de stage : Traitement des données IoT en streaming dans une architecture Big Data

Encadrant : Dr. Emna CHEBBI

E-mail :

Contexte

DIHAIoT (Design and Implementation of an Hybrid Big Data Architecture over IoT) vise à traiter en continu des flux de données hétérogènes issus de capteurs (robots, météo, drones, etc.) au sein d'une architecture Big Data type Kappa basée sur Kafka et Spark. Le PoC actuel dispose déjà de producteurs Kafka et d'un cluster Spark conteneurisé.

Le stage consiste à concevoir et implémenter une chaîne de traitement en streaming robuste pour ces flux IoT, afin de calculer des indicateurs (KPIs) en temps quasi réel ou réel et de les exposer au dashboard existant.

Objectifs du stage

  • Réaliser un état de l'art sur les méthodes de traitement de flux streaming pour l'IoT (spark streaming, flink, ...).
  • Analyser les topics Kafka du projet DIHAIoT (RobotPosition, WeatherData, OdometryData, CropData, …) : structure des messages, fréquence, volumétrie.
  • Etudier et choisir le cas d'usage le plus adéquat à DIHAIoT entre les solutions quasi temps réel et temps réel.
  • Développer un job lisant les topics, normalisant les messages et appliquant des fenêtres temporelles pour calculer des KPIs par source de données en temps réel ou quasi temps réel.
  • Adapter le dashboard.

Supports fournis

  • Code source du PoC.
  • Jeux de données simulés pour robots et météo, et images.
  • Documentation interne de l'architecture et des conteneurs.

Livrables

  • Job de streaming opérationnel intégré au cluster.
  • Table analytique de KPIs.
  • Dashboard enrichi avec les données ainsi les KPIs temps-réel.
  • Rapport de stage et présentation.

Profil recherché

  • Master 2 ou dernière année d'école d'ingénieurs (informatique, data engineering, systèmes d'information).
  • Bon niveau en Python et traitement de données, intérêt pour le Big Data et le temps-réel.

Compétences

  • Python Spark et Kafka.
  • Bases en SQL et en modélisation de données.
  • Connaissances de Docker/Linux.
  • Expérience avec des dashboards web appréciée.

Rémunération :

Le montant de la gratification est fixé à 4,35 euros Net / heure(s)

Mots-clés

Big Data, IoT, Streaming, Spark Structured Streaming, Kafka, Kappa, Dashboard, DIHAIoT

Informations pratiques

  • Durée : 5 à 6 mois, besoin immédiat
  • Lieu : Boulogne-Billancourt (Laboratoire d'innovation Audensiel).

Type d'emploi : Stage

Durée du contrat : 6 mois

Rémunération : 4,35€ par heure

Avantages :

  • Travail à domicile occasionnel

Lieu du poste : Télétravail hybride Boulogne-Billancourt)

  • Stage de fin d'études

    il y a 9 heures

    Boulogne-Billancourt, Île-de-France ADENTIS Temps plein

    Tu rêves d'un stage où tu peux entreprendre, apprendre vite et avoir de vraies missions ?Tu veux relever des défis et développer ton propre portefeuille clients, construire des relations solides avec nos partenaires, tout en étant soutenu par une structure solide et innovante ?Alors cette opportunité est faite pour toi RejoinsAdentis, une société en...

  • STAGE BAC+5 Étude Thermo/Méca du choc froid H/F

    il y a 12 heures

    Boulogne-Billancourt, Île-de-France ASNR Temps plein

    Informations générales Entité de rattachement L'Autorité de sûreté nucléaire et de radioprotection est une autorité administrative indépendante créée par la loi du 21 mai 2024 relative à l'organisation de la gouvernance de la sûreté nucléaire et de la radioprotection pour répondre au défi de la relance de la filière nucléaire.Elle...

  • STAGE S6P2 INFIRMIER EN CARDIOLOGIE

    il y a 4 jours

    Boulogne-Billancourt, Île-de-France Choisir le Service Public Temps plein

    Informations générales Organisme de rattachement Hôpital Ambroise Paré   Référence APHP_ Date de début de diffusion /01/2026 Date de parution /01/2026 Domaine / MétierMédical et paramédical - Infirmière / Infirmier en soins généraux Intitulé du posteSTAGE S6P2 INFIRMIER EN CARDIOLOGIE / USIC F/H jour/nuit Descriptif du profil...

  • Stage Assistant chargé d'études sponsoring TV H/F

    il y a 8 heures

    Boulogne-Billancourt, Île-de-France TF1 Temps plein

    Stage Assistant chargé d'études sponsoring TV H/FType de contrat: StageMétier: Régie Publicitaire (Commerce, Revenue Management..Société: TF1 PUBLICITEFaisons connaissanceAu sein du Groupe TF1, nous poursuivons l'ambition de s'établir comme la destination premium de référence sur l'écran de télévision pour le divertissement et l'information de...

  • Stage S6P2 Infirmier En Medecine Intensive

    il y a 4 jours

    Boulogne-Billancourt, Île-de-France Choisir le Service Public Temps plein

    Informations générales Organisme de rattachement Hôpital Ambroise Paré   Référence APHP_ Date de début de diffusion /01/2026 Date de parution /01/2026 Domaine / MétierMédical et paramédical - Infirmière / Infirmier en soins généraux Intitulé du posteSTAGE S6P2 INFIRMIER EN MEDECINE INTENSIVE /REANIMATION F/H Descriptif du profil...

  • Stage Cesure/ Tfe

    il y a 10 heures

    Boulogne-Billancourt, Île-de-France Icade Temps plein

    Informations générales Référence Date de création de l'offre29/10/2025 Intitulé du posteSTAGE CESURE/ TFE - CHARGE DE DEVELOPPEMENT IDF H/F ContratContrat de stage StatutEmployé Temps de travailTemps complet Mission principale Tu rêves de rejoindre une entreprise engagée, ambitieuse et à taille humaine ?La communauté des Icadiens et...

  • Stage IA – Deep Learning – Computer Vision

    il y a 4 jours

    Boulogne-Billancourt, Île-de-France Aubay Temps plein

    STAGE : RECONNAITRE LES CORAUX PAR L'IADeep Learning, Computer Vision, Ecologie, Science4ReefsAfin de mieux comprendre et protéger le récif corallien, la fondation Science4Reefs et Aubay conçoivent des outils d'IA capables d'identifier les coraux à partir d'une photo et de quantifier leur blanchissement.SUJET :Les récifs coralliens sont essentiels à la...

  • Stage S6P2 Infirmier Au Bloc Operatoire F/H

    il y a 4 jours

    Boulogne-Billancourt, Île-de-France Choisir le Service Public Temps plein

    Informations générales Organisme de rattachement Hôpital Antoine-Béclère   Référence APHP_ Date de début de diffusion /01/2026 Date de parution /01/2026 Localisation Clamart cedex Domaine / MétierMédical et paramédical - Infirmière / Infirmier en soins généraux Intitulé du posteSTAGE S6P2 INFIRMIER AU BLOC OPERATOIRE F/H...

  • Stage S6P2 Infirmier En Unite De Medecine Ambulatoire

    il y a 4 jours

    Boulogne-Billancourt, Île-de-France Choisir le Service Public Temps plein

    Informations générales Organisme de rattachement Hôpital Ambroise Paré   Référence APHP_ Date de début de diffusion /01/2026 Date de parution /01/2026 Domaine / MétierMédical et paramédical - Infirmière / Infirmier en soins généraux Intitulé du posteSTAGE S6P2 INFIRMIER EN UNITE DE MEDECINE AMBULATOIRE (UMA) F/H Descriptif du profil...

  • STAGE S6P2 INFIRMIER EN NEPHROLOGIE F/H jour/nuit

    il y a 4 jours

    Boulogne-Billancourt, Île-de-France Choisir le Service Public Temps plein

    Informations générales Organisme de rattachement Hôpital Ambroise Paré   Référence APHP_ Date de début de diffusion /01/2026 Date de parution /01/2026 Domaine / MétierMédical et paramédical - Infirmière / Infirmier en soins généraux Intitulé du posteSTAGE S6P2 INFIRMIER EN NEPHROLOGIE F/H jour/nuit Descriptif du profil...