Data Engineer
il y a 4 jours
Notre client bancaire recherche un consultant Data engineer - GCP BigQuery Spark Scala (H/F) pour renforcer l'équipe au sein de laquelle preste déjà un consultant de NEXORIS.
Récupérer, traiter et mettre à disposition des agrégats de données via un datalake en utilisant des technologies et pratiques modernes de gestion de données.
Tâches et activités de la mission:
- Récupérer les données issues de sources externes
- Utiliser la puissance du datalake pour le traitement des données
- Produire et mettre à disposition automatiquement des agrégats journaliers, hebdomadaires et mensuels
- Mettre en ?uvre la chaîne d'ingestion, validation, croisement et déversement des données dans le datalake
- Développer en respectant les règles d?architecture définies
- Développer et documenter les user stories avec l?assistance du Product Owner
- Produire les scripts de déploiement
- Prioriser les corrections des anomalies
- Assister les équipes d?exploitation
- Participer à la mise en ?uvre de la chaîne de delivery continue
- Automatiser les tests fonctionnels
Développeur Data / Data Engineer-5 ans dans des rôles similaires
- Plateforme et environnement GCP (indispensable)
- Environnement GKE
- Développement d'API REST
- Stockage : HDFS / GCS
- Traitement : Maîtrise indispensable de l?écosystème Spark, Scala, et si possible Kafka
- Planification : Airflow / Composer
- Méthodologies : Scrum, Kanban, Git
- DWH : SQL, BigQuery, BigTable
- Delivery : Git, Ansible, Docker, Terraform, Jenkins / Cloud Build
Expérience en développement dans un environnement Scrum / Kanban
Sensibilité et information sur les évolutions technologiques des piles logicielles utilisées
La maitrise de l'anglais est un plus
Longue mission
50 % de télétravail
-
Data Engineer
il y a 1 heure
Paris, Île-de-France MP DATA Temps pleinEn tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l'optimisation et la fiabilisation de nos pipelines de données à grande échelle, au cœur de notre plateforme analytique. Votre expertise sur Databricks et l'environnement Spark sera essentielle pour garantir des traitements performants, sécurisés et scalables.Vos...
-
Data Engineer
il y a 2 semaines
Paris, France MP DATA Temps pleinGénéraliste des RH et chargée de recrutementEn tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l’optimisation et la fiabilisation de nos pipelines de données à grande échelle, au cœur de notre plateforme analytique. Votre expertise sur Databricks et l’environnement Spark sera essentielle pour garantir des...
-
Data Engineer Expérimenté
il y a 4 heures
Paris, Île-de-France MP DATA Temps pleinNous recherchons un(e)Data Engineer expérimenté(e)pour intervenir sur lamise en production, la fiabilisation et l'évolutiond'une plateforme data moderne basée surAWS, Spark et Dataiku.Vous participerez activement à laconstruction et l'optimisationdes environnements de traitement de données à grande échelle, en lien étroit avec les équipes Data...
-
Data Engineer
il y a 19 heures
Paris, France MP DATA Temps pleinEn tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l'optimisation et la fiabilisation de nos pipelines de données à grande échelle, au cœur de notre plateforme analytique. Votre expertise sur Databricks et l'environnement Spark sera essentielle pour garantir des traitements performants, sécurisés et scalables.Vos...
-
Data Engineer On Premise
il y a 2 semaines
Paris, Île-de-France Craftman data Temps pleinLocalisation : Région parisienne (2 à 3 jours par semaine sur site)Budget indicatif : Niveau seniorDémarrage : Début février 2026Durée : 6 moisProfil recherché : Data Engineer On-Premise expérimentéPrincipales missions :Conception et développement de services orientés dataIntégration de composants techniquesRéalisation de tests, benchmarks et...
-
Data Engineer Dbt
il y a 2 semaines
Paris, France Craftman data Temps plein5/10 ans d?Exp Pour un client dans le domaine du Retail Le client recherche un Data Engineer dans le cadre de la mise en place d'un projet ambitieux autours de la DATA. le Data engineer devra avoir une culture du Software Engineering. Maitrise de DBT et Fabric Bonne maitrise de la CI/CD ( GitAction, Outils CI moderne ) Une connaissance de Airflow et des...
-
Paris, France Data Recrutement Temps pleinL’ENTREPRISE : CABINET DE CONSEIL Cabinet de conseil en Architectiure management SI créé en 2009 50 collaborateurs Organisation en mode agile CA : 8 Millions Grande diversité de client LA MISSION : ACCOMPAGNER LES CLIENTS DANS LEURS STRATEGIES BIG DATA Sous la responsabilité d'un manager du département Architecture et Engineering Big Data, vous...
-
Data Engineer
il y a 7 jours
Paris, France MP Data Temps pleinEn tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l'optimisation et la fiabilisation de nos pipelines de données à grande échelle, au coeur de notre plateforme analytique. Votre expertise sur Databricks et l'environnement Spark sera essentielle pour garantir des traitements performants, sécurisés et scalables. Vos...
-
Data Engineer Confirmé Databricks
il y a 2 semaines
Paris, France MP DATA Temps pleinData Engineer Confirmé Databricks - IDF (H/F) En tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l’optimisation et la fiabilisation de nos pipelines de données à grande échelle, au cœur de notre plateforme analytique. Votre expertise sur Databricks et l’environnement Spark sera essentielle pour garantir des...
-
Data Scientist NLP/LLM Engineer confirmé(e)
il y a 5 heures
Paris, Île-de-France Mp Data Temps pleinESN spécialisée Data & IA pour les environnements industriels. Pour l'un de nos clients, nous recherchons un LLM Engineer chargé d'industrialiser les POC GenAI développés par les équipes Data Science et de déployer des solutions robustes et scalables en production.Développement et Industrialisation des POC LLM / GenAI.Conception et optimisation de...
