Data Engineer

il y a 6 jours


Paris, France Interstellar Lab Temps plein

Our mission is to build a future full of life, on Earth and beyond. Our vision: a future where technology is enabling humans to live in harmony with their environment. A future where biodiversity thrives on Earth and life expands in space. To do so we design and build environment-controlled modules able to create ideal conditions for plants to grow efficiently everywhere - making possible durable farming and biodiversity conservation on Earth, and optimized life-support in space..

**Job Description and key responsibilities**
We are seeking a skilled and experienced Data Engineer to join our team. As a Data Engineer, you will play a crucial role in the design, development, and maintenance of our data infrastructure in an IoT environment. Your expertise will revolve around managing data generated by various sources (sensors, actuators, manual measurement, etc.) and implementing efficient data pipelines, ensuring the smooth flow of data for analysis and visualization.

**Responsibilities**
- Design and develop robust and scalable data architectures and pipelines for handling IoT data streams
- Monitor data pipelines, perform troubleshooting, and implement proactive measures to identify and resolve any issues related to data ingestion, processing, or storage
- Setup data lifecycle management
- Aggregate data from disparate sources (IoT sensors, cameras, manual input)
- Help streamline our data science workflows, adding value to our product offerings
- Work closely with the data science and business intelligence teams to develop data models and pipelines for research, reporting, and machine learning
- Be an advocate for best practices and continued learning

**Basic Qualification**
- Master's degree in software engineering or related field and 2+ years professional experience in software engineering; OR 6+ years of experience in software engineering in lieu of a degree
- Significant experience as a Data Engineer or in a similar software engineering role
- Development experience with high level programming language (preference for Python and Go)

**Preferred skills ans experience**
- Familiarity with the AWS ecosystem
- Experience in building or maintaining ETL processes
- Strong proficiency in working with IoT protocols and technologies, such as MQTT, CoAP, or AMQP
- Experience with time-series databases, preferably InfluxDB, for efficiently storing and retrieving IoT data
- Experience with SQL databases
- Solid programming skills in languages such as Python, Java, or Scala for data manipulation and ETL processes
- Familiarity with cloud platforms such as AWS (preferred), Azure, or GCP
- Understanding of data governance, security, and compliance practices in an IoT context

**Soft skills**:

- Passionate and curious about space technologies, green technologies, software engineering
- Problem-solving attitude
- Collaborative team spirit
- Ability to rapidly change roles/responsibilities while working in a high-paced, challenging work environment

**Location**:
Paris Area (France)


  • Data Engineer

    il y a 2 semaines


    Paris, France MP DATA Temps plein

    Généraliste des RH et chargée de recrutementEn tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l’optimisation et la fiabilisation de nos pipelines de données à grande échelle, au cœur de notre plateforme analytique. Votre expertise sur Databricks et l’environnement Spark sera essentielle pour garantir des...

  • Data Engineer On Premise

    il y a 1 semaine


    Paris, Île-de-France Craftman data Temps plein

    Localisation : Région parisienne (2 à 3 jours par semaine sur site)Budget indicatif : Niveau seniorDémarrage : Début février 2026Durée : 6 moisProfil recherché : Data Engineer On-Premise expérimentéPrincipales missions :Conception et développement de services orientés dataIntégration de composants techniquesRéalisation de tests, benchmarks et...

  • Data Engineer Dbt

    il y a 1 semaine


    Paris, France Craftman data Temps plein

    5/10 ans d?Exp Pour un client dans le domaine du Retail Le client recherche un Data Engineer dans le cadre de la mise en place d'un projet ambitieux autours de la DATA. le Data engineer devra avoir une culture du Software Engineering. Maitrise de DBT et Fabric Bonne maitrise de la CI/CD ( GitAction, Outils CI moderne ) Une connaissance de Airflow et des...


  • Paris, France Data Recrutement Temps plein

    L’ENTREPRISE : CABINET DE CONSEIL Cabinet de conseil en Architectiure management SI créé en 2009 50 collaborateurs Organisation en mode agile CA : 8 Millions Grande diversité de client LA MISSION : ACCOMPAGNER LES CLIENTS DANS LEURS STRATEGIES BIG DATA Sous la responsabilité d'un manager du département Architecture et Engineering Big Data, vous...

  • Senior AWS Data Engineer

    il y a 2 semaines


    Paris, Île-de-France Data Reply Temps plein

    Senior AWS Data EngineerTasksImplement new use cases and data pipelines on AWSMap data and data flows across cloud platformsDevelop and industrialize data pipelines and processing workflowsDesign and build dashboards and reporting toolsPerform unit and integration testing of data flowsParticipate in Data Reply events (Reply Xchange, hackathons, AWS summits,...

  • Data Engineer

    il y a 6 jours


    Paris, France MP Data Temps plein

    En tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l'optimisation et la fiabilisation de nos pipelines de données à grande échelle, au coeur de notre plateforme analytique. Votre expertise sur Databricks et l'environnement Spark sera essentielle pour garantir des traitements performants, sécurisés et scalables. Vos...


  • Paris, France MP DATA Temps plein

    Data Engineer Confirmé Databricks - IDF (H/F) En tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l’optimisation et la fiabilisation de nos pipelines de données à grande échelle, au cœur de notre plateforme analytique. Votre expertise sur Databricks et l’environnement Spark sera essentielle pour garantir des...

  • Lead Data engineer

    il y a 7 jours


    Paris, France Data Recrutement Temps plein

    L'ENTREPRISE : PROPTECH QUI DISRUPTE SON MARCHÉ GRÂCE À LA DATAPourquoi j’ai sélectionné cette société ? Projet révolutionnant son marché Une première levée de fonds finalisée et bientôt rendue publique, Break Even dans 14 mois, Série A dans moins de 2 ans Sujets très Data Un rôle clé et responsabilisant avec un impact direct sur le...

  • Consultant Data

    il y a 7 jours


    Paris, France Data Recrutement Temps plein

    L'ENTREPRISE : UNE STARTUP QUI ACCOMPAGNE SES CLIENTS DANS LA CRÉATION DE SES ARCHITECTURES DATA Startup d'une bonne dizaine de personnes Un pipe de clients solides et en forte croissance (plusieurs postes ouverts en interne) Un framework de pointe et des solutions de dataviz à la page  Locaux en plein coeur de Paris  Pour en savoir plus sur le nom de...


  • Paris, France Data Recrutement Temps plein

    L'ENTREPRISE : SOCIÉTÉ DE CONSEIL TECHNIQUE ET INNOVANTE Magnifique société de conseil, experte en accompagnement numérique et en réalisation technique !Elle intervient sur l’ensemble du cycle de vie des projets – du cadrage à la mise en production – pour des clients prestigieux dans les secteurs de la mobilité, du service public, des médias...