Data Engineer
il y a 6 jours
Our mission is to build a future full of life, on Earth and beyond. Our vision: a future where technology is enabling humans to live in harmony with their environment. A future where biodiversity thrives on Earth and life expands in space. To do so we design and build environment-controlled modules able to create ideal conditions for plants to grow efficiently everywhere - making possible durable farming and biodiversity conservation on Earth, and optimized life-support in space..
**Job Description and key responsibilities**
We are seeking a skilled and experienced Data Engineer to join our team. As a Data Engineer, you will play a crucial role in the design, development, and maintenance of our data infrastructure in an IoT environment. Your expertise will revolve around managing data generated by various sources (sensors, actuators, manual measurement, etc.) and implementing efficient data pipelines, ensuring the smooth flow of data for analysis and visualization.
**Responsibilities**
- Design and develop robust and scalable data architectures and pipelines for handling IoT data streams
- Monitor data pipelines, perform troubleshooting, and implement proactive measures to identify and resolve any issues related to data ingestion, processing, or storage
- Setup data lifecycle management
- Aggregate data from disparate sources (IoT sensors, cameras, manual input)
- Help streamline our data science workflows, adding value to our product offerings
- Work closely with the data science and business intelligence teams to develop data models and pipelines for research, reporting, and machine learning
- Be an advocate for best practices and continued learning
**Basic Qualification**
- Master's degree in software engineering or related field and 2+ years professional experience in software engineering; OR 6+ years of experience in software engineering in lieu of a degree
- Significant experience as a Data Engineer or in a similar software engineering role
- Development experience with high level programming language (preference for Python and Go)
**Preferred skills ans experience**
- Familiarity with the AWS ecosystem
- Experience in building or maintaining ETL processes
- Strong proficiency in working with IoT protocols and technologies, such as MQTT, CoAP, or AMQP
- Experience with time-series databases, preferably InfluxDB, for efficiently storing and retrieving IoT data
- Experience with SQL databases
- Solid programming skills in languages such as Python, Java, or Scala for data manipulation and ETL processes
- Familiarity with cloud platforms such as AWS (preferred), Azure, or GCP
- Understanding of data governance, security, and compliance practices in an IoT context
**Soft skills**:
- Passionate and curious about space technologies, green technologies, software engineering
- Problem-solving attitude
- Collaborative team spirit
- Ability to rapidly change roles/responsibilities while working in a high-paced, challenging work environment
**Location**:
Paris Area (France)
-
Data Engineer
il y a 2 semaines
Paris, France MP DATA Temps pleinGénéraliste des RH et chargée de recrutementEn tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l’optimisation et la fiabilisation de nos pipelines de données à grande échelle, au cœur de notre plateforme analytique. Votre expertise sur Databricks et l’environnement Spark sera essentielle pour garantir des...
-
Data Engineer On Premise
il y a 1 semaine
Paris, Île-de-France Craftman data Temps pleinLocalisation : Région parisienne (2 à 3 jours par semaine sur site)Budget indicatif : Niveau seniorDémarrage : Début février 2026Durée : 6 moisProfil recherché : Data Engineer On-Premise expérimentéPrincipales missions :Conception et développement de services orientés dataIntégration de composants techniquesRéalisation de tests, benchmarks et...
-
Data Engineer Dbt
il y a 1 semaine
Paris, France Craftman data Temps plein5/10 ans d?Exp Pour un client dans le domaine du Retail Le client recherche un Data Engineer dans le cadre de la mise en place d'un projet ambitieux autours de la DATA. le Data engineer devra avoir une culture du Software Engineering. Maitrise de DBT et Fabric Bonne maitrise de la CI/CD ( GitAction, Outils CI moderne ) Une connaissance de Airflow et des...
-
Paris, France Data Recrutement Temps pleinL’ENTREPRISE : CABINET DE CONSEIL Cabinet de conseil en Architectiure management SI créé en 2009 50 collaborateurs Organisation en mode agile CA : 8 Millions Grande diversité de client LA MISSION : ACCOMPAGNER LES CLIENTS DANS LEURS STRATEGIES BIG DATA Sous la responsabilité d'un manager du département Architecture et Engineering Big Data, vous...
-
Senior AWS Data Engineer
il y a 2 semaines
Paris, Île-de-France Data Reply Temps pleinSenior AWS Data EngineerTasksImplement new use cases and data pipelines on AWSMap data and data flows across cloud platformsDevelop and industrialize data pipelines and processing workflowsDesign and build dashboards and reporting toolsPerform unit and integration testing of data flowsParticipate in Data Reply events (Reply Xchange, hackathons, AWS summits,...
-
Data Engineer
il y a 6 jours
Paris, France MP Data Temps pleinEn tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l'optimisation et la fiabilisation de nos pipelines de données à grande échelle, au coeur de notre plateforme analytique. Votre expertise sur Databricks et l'environnement Spark sera essentielle pour garantir des traitements performants, sécurisés et scalables. Vos...
-
Data Engineer Confirmé Databricks
il y a 2 semaines
Paris, France MP DATA Temps pleinData Engineer Confirmé Databricks - IDF (H/F) En tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l’optimisation et la fiabilisation de nos pipelines de données à grande échelle, au cœur de notre plateforme analytique. Votre expertise sur Databricks et l’environnement Spark sera essentielle pour garantir des...
-
Lead Data engineer
il y a 7 jours
Paris, France Data Recrutement Temps pleinL'ENTREPRISE : PROPTECH QUI DISRUPTE SON MARCHÉ GRÂCE À LA DATAPourquoi j’ai sélectionné cette société ? Projet révolutionnant son marché Une première levée de fonds finalisée et bientôt rendue publique, Break Even dans 14 mois, Série A dans moins de 2 ans Sujets très Data Un rôle clé et responsabilisant avec un impact direct sur le...
-
Consultant Data
il y a 7 jours
Paris, France Data Recrutement Temps pleinL'ENTREPRISE : UNE STARTUP QUI ACCOMPAGNE SES CLIENTS DANS LA CRÉATION DE SES ARCHITECTURES DATA Startup d'une bonne dizaine de personnes Un pipe de clients solides et en forte croissance (plusieurs postes ouverts en interne) Un framework de pointe et des solutions de dataviz à la page Locaux en plein coeur de Paris Pour en savoir plus sur le nom de...
-
Data Engineer | Consulting High Level | Paris | 50K à 55K
il y a 7 jours
Paris, France Data Recrutement Temps pleinL'ENTREPRISE : SOCIÉTÉ DE CONSEIL TECHNIQUE ET INNOVANTE Magnifique société de conseil, experte en accompagnement numérique et en réalisation technique !Elle intervient sur l’ensemble du cycle de vie des projets – du cadrage à la mise en production – pour des clients prestigieux dans les secteurs de la mobilité, du service public, des médias...