Data Engineer Spark
il y a 1 mois
- Analyser, comprendre et cadrer une architecture permettant de répondre aux besoins métiers des clients
- Concevoir et mettre en place des plateformes Data en tenant compte des contraintes tant techniques que fonctionnelles
- Intervenir sur la conception et le déploiement d’environnements « clusterisés » (Hadoop sur des distributions telles que Cloudera ou Hortonworks) ou Cloud public
- Développement de pipelines d’ingestion et de préparation
- Gestion du stockage de données (systèmes de fichiers comme HDFS, bases SQL ou NoSQL)
- Alimentation d’entrepôts de données (Hive, Impala, Hbase, Snowflake, BigQuery, …)
- Développer des applications d’exploration et de manipulation de données (SPARK / pySpark, Scala) afin d’alimenter les flux sortants, les reporting et d’exposer les données
- Evoluer sur l’ordonnancement des traitements de données (Oozie, Bash / Shell)
- Assurer le maintien en conditions opérationnelles des plateformes produites
- Etablir, formaliser, et promouvoir les best practices
- Hadoop et ses distributions
- Les solutions Cloud (Azure, AWS, GPC)
- Spark, Scala, Python, Unix, SQL.
- Une connaissance de Dataiku serait fortement appréciée
- Une connaissance de : Docker, ELK, Kubernetes, Cassandra, Kafka, … serait un plus, de même que des fondamentaux DevOps (CI / CD).
-
Data Engineer
il y a 4 semaines
Paris, France Data Recrutement Temps pleinOffre publiée le 20-03-2024.- Paris - Fonction Data engineer hadoop spark - Taille entreprise de 21 à 50 - Télétravail partiel - Technologies Azure - Technologies Etl - Technologies Spark - Expérience 3 à 5 ans - Statut CDI - Min 60k€ - Max 70k€ - Why: - **Entreprise rentable**: - **Challenger sur son marché**: - **Entreprise à...
-
Data Engineer Spark
il y a 1 mois
Paris, France UCASE CONSULTING Temps pleinJe recherche pour l?un de mes clients dans le domaine Banque/Assurance un Data Engineer. Contexte: En tant que Data Engineer vous participerez à la continuité du déploiement de notre architecture BigData: Missions: - Maintenir le code existant - Concevoir et développer de nouvelles fonctions - Mettre en place des pipelines de données. - Metttre en...
-
Data Engineer Spark
il y a 1 mois
Paris, France UCASE CONSULTING Temps pleinBonjour, Pour le compte de notre client, nous recherchons un data engineer spark / scala. **Mission**: **Livrables n 1**: Sprint n 1 **+ Lot 1**: développement des US et tests associés ; **+ Lot 2**: Documentation projet, mapping des données, modélisation des pipelines, documents d?exploitation ; **+ Lot 3**: Mise en place du CI/CD sur notre usine...
-
DATA ENGINEER SPARK
il y a 2 semaines
Paris, France UCASE CONSULTING Temps pleinBonjour, Pour le compte de notre client, nous recherchons un data engineer spark / scala. Mission : Livrables n 1 : Sprint n 1 + Lot 1 : développement des US et tests associés ; + Lot 2 : Documentation projet, mapping des données, modélisation des pipelines, documents d?exploitation ; + Lot 3 : Mise en place du CI/CD sur notre usine logicielle ; + Lot 4...
-
DATA ENGINEER SPARK
il y a 1 mois
Paris, France UCASE CONSULTING Temps pleinBonjour,Pour le compte de notre client, nous recherchons un data engineer spark / scala.Mission : Livrables n 1 : Sprint n 1+ Lot 1 : développement des US et tests associés ;+ Lot 2 : Documentation projet, mapping des données, modélisation des pipelines, documents d?exploitation ;+ Lot 3 : Mise en place du CI/CD sur notre usine logicielle ;+ Lot 4 : Mise...
-
Data Engineer
il y a 1 mois
Paris, France Data Recrutement Temps pleinOffre publiée le 20-03-2023.- Paris - Fonction Data engineer hadoop spark - Taille entreprise de 51 à 200 - Télétravail partiel - Technologies Data studio - Technologies Gcp - Technologies Python - Technologies Sql - Expérience 3 à 5 ans - Expérience 6 à 10 ans - Statut CDI - Min 60k€ - Max 80k€ - Why: - **Croissance à deux chiffres**: -...
-
Senior Data Engineer
il y a 2 semaines
Paris, France Pulsover Temps pleinÀ propos de Pulsover : Pulsover est un cabinet de conseil spécialisé dans la data, le cloud et le delivery. La mission de nos consultants Pulsover est d'accompagner des entreprises de toutes tailles dans leur transformation digitale grâce à la combinaison de leur expertise technique et de leur capacité à gérer des projets internationaux et...
-
Senior Data Engineer
il y a 2 semaines
Paris, France Pulsover Temps pleinÀ propos de Pulsover : Pulsover est un cabinet de conseil spécialisé dans la data, le cloud et le delivery. La mission de nos consultants Pulsover est d'accompagner des entreprises de toutes tailles dans leur transformation digitale grâce à la combinaison de leur expertise technique et de leur capacité à gérer des projets internationaux et à...
-
Senior Data Engineer
il y a 2 semaines
Paris, Ile-de-France Pulsover Temps pleinÀ propos de Pulsover : Pulsover est un cabinet de conseil spécialisé dans la data, le cloud et le delivery. La mission de nos consultants Pulsover est d'accompagner des entreprises de toutes tailles dans leur transformation digitale grâce à la combinaison de leur expertise technique et de leur capacité à gérer des projets internationaux et...
-
DATA ENGINEER SPARK
il y a 2 semaines
Paris, 75001, Ile-de-France, Paris UCASE CONSULTING Temps pleinBonjour, Pour le compte de notre client, nous recherchons un data engineer spark / scala. Mission : Livrables n 1 : Sprint n 1 + Lot 1 : développement des US et tests associés ; + Lot 2 : Documentation projet, mapping des données, modélisation des pipelines, documents d?exploitation ; + Lot 3 : Mise en place du CI/CD sur notre usine logicielle ; + Lot 4...
-
Data Engineer Spark
il y a 1 mois
Paris, France UCASE CONSULTING Temps pleinDans le cadre d?un renfort équipe le client serait à la recherche de profil Data Engineer / Mission: - Maintenir le code existant - Concevoir et développer de nouvelles fonctions au travers de sprint - Interagir avec le PO pour partager une vision claire et détaillée des besoins - Contribuer à la vision globale produit moyen terme et long terme - Run...
-
Data Engineer senior Spark
il y a 2 semaines
Paris, France Sibylone Temps pleinSIBYLONE, société de conseil spécialisée dans les systèmes d’information de synthèse et de pilotage, aide ses clients à tirer toute la valeur de leur patrimoine de données, levier stratégique majeur de développement et de rentabilité.Notre ambition : rendre les différents acteurs de l’entreprise autonomes dans l’exploitation des données,...
-
Data Engineer senior Spark
il y a 4 semaines
Paris, France Sibylone Temps pleinSIBYLONE , société de conseil spécialisée dans les systèmes d’information de synthèse et de pilotage, aide ses clients à tirer toute la valeur de leur patrimoine de données, levier stratégique majeur de développement et de rentabilité. Notre ambition : rendre les différents acteurs de l’entreprise autonomes dans l’exploitation des...
-
Data Engineer senior Spark
il y a 2 semaines
Paris, Ile-de-France Sibylone Temps pleinSIBYLONE, société de conseil spécialisée dans les systèmes d’information de synthèse et de pilotage, aide ses clients à tirer toute la valeur de leur patrimoine de données, levier stratégique majeur de développement et de rentabilité.Notre ambition : rendre les différents acteurs de l’entreprise autonomes dans l’exploitation des données,...
-
Data Engineer senior Spark
il y a 4 semaines
Paris, France Sibylone Temps pleinSIBYLONE, société de conseil spécialisée dans les systèmes d’information de synthèse et de pilotage, aide ses clients à tirer toute la valeur de leur patrimoine de données, levier stratégique majeur de développement et de rentabilité.Notre ambition : rendre les différents acteurs de l’entreprise autonomes dans l’exploitation des données,...
-
Data engineer
il y a 3 semaines
Paris, France Alter Solutions Temps pleinDescription du posteVous intégrez, au sein de notre Pôle Transformation Numérique, une équipe d'experts en développement de solutions logicielles en charge d'accompagner nos clients.Vous serez détaché(e) chez un acteur majeur du secteur de la banque. Vos missions seront les suivantes :Passer de la donnée brute à de la donnée exploitable, exposée...
-
Data Engineer Talend
il y a 2 semaines
Paris, France Sibylone Temps pleinSIBYLONE, société de conseil spécialisée dans les systèmes d’information de synthèse et de pilotage, aide ses clients à tirer toute la valeur de leur patrimoine de données, levier stratégique majeur de développement et de rentabilité.Notre ambition : rendre les différents acteurs de l’entreprise autonomes dans l’exploitation des données,...
-
Data Engineer Talend
il y a 4 semaines
Paris, France Sibylone Temps pleinSIBYLONE , société de conseil spécialisée dans les systèmes d’information de synthèse et de pilotage, aide ses clients à tirer toute la valeur de leur patrimoine de données, levier stratégique majeur de développement et de rentabilité. Notre ambition : rendre les différents acteurs de l’entreprise autonomes dans l’exploitation des...
-
Data Engineer Talend
il y a 2 semaines
Paris, Ile-de-France Sibylone Temps pleinSIBYLONE, société de conseil spécialisée dans les systèmes d’information de synthèse et de pilotage, aide ses clients à tirer toute la valeur de leur patrimoine de données, levier stratégique majeur de développement et de rentabilité.Notre ambition : rendre les différents acteurs de l’entreprise autonomes dans l’exploitation des données,...
-
Data Engineer Talend
il y a 1 mois
Paris, France Sibylone Temps pleinSIBYLONE, société de conseil spécialisée dans les systèmes d’information de synthèse et de pilotage, aide ses clients à tirer toute la valeur de leur patrimoine de données, levier stratégique majeur de développement et de rentabilité.Notre ambition : rendre les différents acteurs de l’entreprise autonomes dans l’exploitation des données,...