Data Engineer Spark/scala
il y a 4 semaines
Développement et l?implémentation de solutions Big Data Analytics
Analyse du besoin, étude d?impacts et conception de la solution technique
Conception et modélisation des données au niveau d?un Data Lake (format Parquet, Delta table, )
Construction des pipelines de données pour collecter, transformer et traiter des données dans le Data Lake
**Développements de notebooks (ex**: Databricks) de traitements avancés des données
Cloud Datawarehousing (tuning, optimisation de traitements et requêtes SQL)
Rédaction de documentation technique (Dossier d?Analyse Technique, release delivery note,.)
Revue de code
Réalisation de tests unitaires
Maintenance corrective et évolutive
Livraison dans un environnement Devops, CI/CD et outils associés
Un profil avec une forte expérience sur Azure data bricks, Spark ,Scala
-
Data Engineer Spark
il y a 1 mois
Paris, France UCASE CONSULTING Temps pleinBonjour, Pour le compte de notre client, nous recherchons un data engineer spark / scala. **Mission**: **Livrables n 1**: Sprint n 1 **+ Lot 1**: développement des US et tests associés ; **+ Lot 2**: Documentation projet, mapping des données, modélisation des pipelines, documents d?exploitation ; **+ Lot 3**: Mise en place du CI/CD sur notre usine...
-
DATA ENGINEER SPARK
il y a 2 semaines
Paris, France UCASE CONSULTING Temps pleinBonjour, Pour le compte de notre client, nous recherchons un data engineer spark / scala. Mission : Livrables n 1 : Sprint n 1 + Lot 1 : développement des US et tests associés ; + Lot 2 : Documentation projet, mapping des données, modélisation des pipelines, documents d?exploitation ; + Lot 3 : Mise en place du CI/CD sur notre usine logicielle ; + Lot 4...
-
DATA ENGINEER SPARK
il y a 1 mois
Paris, France UCASE CONSULTING Temps pleinBonjour,Pour le compte de notre client, nous recherchons un data engineer spark / scala.Mission : Livrables n 1 : Sprint n 1+ Lot 1 : développement des US et tests associés ;+ Lot 2 : Documentation projet, mapping des données, modélisation des pipelines, documents d?exploitation ;+ Lot 3 : Mise en place du CI/CD sur notre usine logicielle ;+ Lot 4 : Mise...
-
DATA ENGINEER SPARK
il y a 2 semaines
Paris, 75001, Ile-de-France, Paris UCASE CONSULTING Temps pleinBonjour, Pour le compte de notre client, nous recherchons un data engineer spark / scala. Mission : Livrables n 1 : Sprint n 1 + Lot 1 : développement des US et tests associés ; + Lot 2 : Documentation projet, mapping des données, modélisation des pipelines, documents d?exploitation ; + Lot 3 : Mise en place du CI/CD sur notre usine logicielle ; + Lot 4...
-
Data engineer scala spark
il y a 2 semaines
Paris, France CELAD Temps pleinAu sein de l'équipe projet Business Intelligence & Big Data, l'expert SPARK/SCALA aura les activités suivantes :- Conception détaillée, fonctionnelle et technique.- Développements SPARK / SCALA- Contribution à la formalisation des plans de tests, exécution des tests unitaires et d'un premier niveau de tests d'intégration.- Résolution des anomalies...
-
Data engineer scala spark
il y a 2 semaines
Paris, France Celad Temps pleinAu sein de l'équipe projet Business Intelligence & Big Data, l'expert SPARK/SCALA aura les activités suivantes : - Conception détaillée, fonctionnelle et technique. - Développements SPARK / SCALA - Contribution à la formalisation des plans de tests, exécution des tests unitaires et d'un premier niveau de tests d'intégration. -...
-
Data engineer scala spark
il y a 2 semaines
Paris, 75001, Ile-de-France, Paris Celad Temps pleinAu sein de l'équipe projet Business Intelligence & Big Data, l'expert SPARK/SCALA aura les activités suivantes : - Conception détaillée, fonctionnelle et technique. - Développements SPARK / SCALA - Contribution à la formalisation des plans de tests, exécution des tests unitaires et d'un premier niveau de tests d'intégration. -...
-
Ingénieur Data SPARK/SCALA
il y a 2 semaines
Paris, Île-de-France DHM IT Temps pleinAu sein de l'équipe projet Business Intelligence & Big Data, l'expert SPARK/SCALA aura les activités suivantes : Conception détaillée, fonctionnelle et technique. Développements SPARK / SCALA Contribution à la formalisation des plans de tests, exécution des tests unitaires et d'un premier niveau de tests d'intégration. Résolution des anomalies...
-
Data Engineer senior Spark
il y a 2 semaines
Paris, France Sibylone Temps pleinSIBYLONE, société de conseil spécialisée dans les systèmes d’information de synthèse et de pilotage, aide ses clients à tirer toute la valeur de leur patrimoine de données, levier stratégique majeur de développement et de rentabilité.Notre ambition : rendre les différents acteurs de l’entreprise autonomes dans l’exploitation des données,...
-
Data Engineer senior Spark
il y a 4 semaines
Paris, France Sibylone Temps pleinSIBYLONE, société de conseil spécialisée dans les systèmes d’information de synthèse et de pilotage, aide ses clients à tirer toute la valeur de leur patrimoine de données, levier stratégique majeur de développement et de rentabilité.Notre ambition : rendre les différents acteurs de l’entreprise autonomes dans l’exploitation des données,...
-
Data Engineer senior Spark
il y a 2 semaines
Paris, Ile-de-France Sibylone Temps pleinSIBYLONE, société de conseil spécialisée dans les systèmes d’information de synthèse et de pilotage, aide ses clients à tirer toute la valeur de leur patrimoine de données, levier stratégique majeur de développement et de rentabilité.Notre ambition : rendre les différents acteurs de l’entreprise autonomes dans l’exploitation des données,...
-
Data Engineer senior Spark
il y a 4 semaines
Paris, France Sibylone Temps pleinSIBYLONE , société de conseil spécialisée dans les systèmes d’information de synthèse et de pilotage, aide ses clients à tirer toute la valeur de leur patrimoine de données, levier stratégique majeur de développement et de rentabilité. Notre ambition : rendre les différents acteurs de l’entreprise autonomes dans l’exploitation des...
-
Data engineer
il y a 3 semaines
Paris, France Alter Solutions Temps pleinDescription du posteVous intégrez, au sein de notre Pôle Transformation Numérique, une équipe d'experts en développement de solutions logicielles en charge d'accompagner nos clients.Vous serez détaché(e) chez un acteur majeur du secteur de la banque. Vos missions seront les suivantes :Passer de la donnée brute à de la donnée exploitable, exposée...
-
ingenieur data spark scala f/h
il y a 2 semaines
Paris, Île-de-France GENIOUS Temps pleinGenious Systèmes recherche pour un de ses clients un Ingénieur Data Spark Scala F/HContexte Mission:Sur une architecture Big Data permettant de collecter les données de l'ensemble des Back Office dans un Datalake (cluster Hadoop), le projet consiste à exploiter ces données pour alimenter un Dataware communautaire stockée sur une base Exadata.Cette...
-
Data engineer
il y a 2 jours
Paris, France NEXORIS Travail à distance Freelance Temps pleinNotre client bancaire recherche un Data engineer - GCP BigQuery Spark Scala (H/F) pour renforcer l'équipe au sein de laquelle preste déjà un consultant de NEXORIS.Récupérer, traiter et mettre à disposition des agrégats de données via un datalake en utilisant des technologies et pratiques modernes de gestion de données.Tâches et activités de...
-
Data Engineering
il y a 4 semaines
Paris, France Digistrat consulting Temps plein? Contexte /Objectifs: L'entité a pour charge la maintenance, le support et l'évolution de l'outil concernant le pilotage financier de la banque, des directions centrales et de la facturation interne du groupe. Les outils sont basés sur les technologies Big Data pour le stockage, Talend et Spark/Scala pour les traitements, la suite MSBI SQL Server et...
-
Data Engineer Talend
il y a 2 semaines
Paris, France Sibylone Temps pleinSIBYLONE, société de conseil spécialisée dans les systèmes d’information de synthèse et de pilotage, aide ses clients à tirer toute la valeur de leur patrimoine de données, levier stratégique majeur de développement et de rentabilité.Notre ambition : rendre les différents acteurs de l’entreprise autonomes dans l’exploitation des données,...
-
Data Engineer Talend
il y a 1 mois
Paris, France Sibylone Temps pleinSIBYLONE, société de conseil spécialisée dans les systèmes d’information de synthèse et de pilotage, aide ses clients à tirer toute la valeur de leur patrimoine de données, levier stratégique majeur de développement et de rentabilité.Notre ambition : rendre les différents acteurs de l’entreprise autonomes dans l’exploitation des données,...
-
Data Engineer Talend
il y a 4 semaines
Paris, France Sibylone Temps pleinSIBYLONE , société de conseil spécialisée dans les systèmes d’information de synthèse et de pilotage, aide ses clients à tirer toute la valeur de leur patrimoine de données, levier stratégique majeur de développement et de rentabilité. Notre ambition : rendre les différents acteurs de l’entreprise autonomes dans l’exploitation des...
-
Data Engineer Talend
il y a 2 semaines
Paris, Ile-de-France Sibylone Temps pleinSIBYLONE, société de conseil spécialisée dans les systèmes d’information de synthèse et de pilotage, aide ses clients à tirer toute la valeur de leur patrimoine de données, levier stratégique majeur de développement et de rentabilité.Notre ambition : rendre les différents acteurs de l’entreprise autonomes dans l’exploitation des données,...