Développeur Spark Scala AWS
il y a 1 mois
Dans ce cadre la prestation consiste à contribuer à/au(x) :
? Garantir l?accès aux données liées à l?activité .
? Implémenter et industrialiser des traitements pour collecter, nettoyer et synthétiser des données afin de
les rendre accessibles.
? Concevoir des moyens pour collecter, transformer et exploiter des gros volumes de données
? l?industrialisation des traitements et à leur amélioration continue pour qu?ils soient fiables, robustes,
performants et résilients afin de répondre aux exigences des partenaires métiers.
? La maintenances et l?évolution des différents pipelines de traitement.
? La qualité de la conception technique, de sa mise en place et de sa documentation.
? Conduite du changement .
? Assurer une veille technologique (data).
? A la communauté des tech leads pour s'assurer d'une bonne capitalisation entre entité et de
l'harmonisation des pratiques de développement.
SCALA et SPARK
Certificat AWS
? Mise en place des moyens pour collecter, transformer et exploiter des gros volumes de données
? Contribuer à l?industrialisation des traitements et à leur amélioration continue pour qu?ils soient fiables,
robustes, performants et résilients afin de répondre aux exigences des partenaires métiers.
? La maintenances et l?évolution des différents pipelines de traitement.
? Garantir la qualité de la conception technique, de sa mise en place et de sa documentation.
? Mettre en place des bonnes pratiques de développement et s'assurer qu'elles sont bien mises en ?uvre.
? Conduite du changement.
? Assurer une veille technologique (data).
? A la communauté des tech leads pour s'assurer d'une bonne capitalisation entre entité et de
l'harmonisation des pratiques de développement.
-
Développeur SPARK/SCALA
il y a 5 jours
Île-de-France MLMCONSEIL Travail à distance Freelance Temps pleinDéveloppeur spark /scala dans le secteur de l'assurance ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;; ;;;;;; ;;;;; ;;;;; ;;;;;; ;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;; ;;;;;; ;;;;; ;;;;; ;;;;;; ;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;;...
-
Développeur SPARK/SCALA
il y a 6 jours
Île-de-France MLMCONSEIL Temps pleinDéveloppeur spark /scala dans le secteur de l'assurance ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;; ;;;;;; ;;;;; ;;;;; ;;;;;; ;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;; ;;;;;; ;;;;; ;;;;; ;;;;;; ;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;;...
-
Ingénieur Data SPARK/SCALA
il y a 2 semaines
Île-de-France DHM IT Travail à distance Freelance Temps pleinAu sein de l'équipe projet Business Intelligence & Big Data, l'expert SPARK/SCALA aura les activités suivantes :Conception détaillée, fonctionnelle et technique.Développements SPARK / SCALAContribution à la formalisation des plans de tests, exécution des tests unitaires et d'un premier niveau de tests d'intégration.Résolution des...
-
Ingénieur Data Spark
il y a 2 semaines
Île-de-France HN SERVICES Travail à distance Freelance Temps pleinLa Direction des Systèmes d’Information a pour missions de mettre au quotidien à disposition des 25 000 utilisateurs les données et les traitements nécessaires à leur activité, dans le respect des contrats de service; de garantir la sécurité et la pérennité des actifs informatiques du Groupe; d’accompagner le développement commercial du Groupe...
-
ingénieur informatique Data SPARK/SCALA
il y a 2 semaines
Île-de-France DHM IT Temps pleinAu sein de l'équipe projet Business Intelligence & Big Data, l'expert SPARK/SCALA aura les activités suivantes : Conception détaillée, fonctionnelle et technique. Développements SPARK / SCALA Contribution à la formalisation des plans de tests, exécution des tests unitaires et d'un premier niveau de tests...
-
ingénieur informatique Data Spark
il y a 2 semaines
Île-de-France HN Services Temps pleinLa Direction des Systèmes d?Information a pour missions de mettre au quotidien à disposition des 25 000 utilisateurs les données et les traitements nécessaires à leur activité, dans le respect des contrats de service; de garantir la sécurité et la pérennité des actifs informatiques du Groupe; d?accompagner le développement commercial du Groupe en...
-
ingenieur informatique DATA SPARK SCALA F/H
il y a 2 semaines
Île-de-France GENIOUS Temps pleinGenious Systèmes recherche pour un de ses clients un Ingénieur Data Spark Scala F/H Contexte Mission: Sur une architecture Big Data permettant de collecter les données de l?ensemble des Back Office dans un Datalake (cluster Hadoop), le projet consiste à exploiter ces données pour alimenter un Dataware communautaire stockée sur une base...
-
Puteaux, 92800, Ile-de-France, Nanterre Cat-Amania Temps pleinNotre client du domaine de l'Assurance recherche un profil Ingénieur Développement Spark Scala Expérimenté (+10 ans d'expérience). Sur une architecture Big Data permettant de collecter les données de l?ensemble des Back Office dans un Datalake (cluster Hadoop), le projet consiste à exploiter ces données pour alimenter un Dataware...
-
ingénieur informatique Data SPARK/SCALA
il y a 2 semaines
France, FR DHM IT Temps pleinAu sein de l'équipe projet Business Intelligence & Big Data, l'expert SPARK/SCALA aura les activités suivantes : Conception détaillée, fonctionnelle et technique. Développements SPARK / SCALA Contribution à la formalisation des plans de tests, exécution des tests unitaires et d'un premier niveau de tests d'intégration. Résolution des...
-
Data Engineer GCP Scala Spark
il y a 6 jours
Île-de-France DATSUP Temps pleinPrincipales responsabilités : - Collecte de données provenant de sources externes - Exploitation des capacités du Datalake (GCP) - Implémentation de la chaîne de traitement - Développement en conformité avec les normes architecturales établies - Élaboration et documentation des user stories - Création de scripts de déploiement -...
-
Data engineer scala spark
il y a 2 semaines
Paris, 75001, Ile-de-France, Paris Celad Temps pleinAu sein de l'équipe projet Business Intelligence & Big Data, l'expert SPARK/SCALA aura les activités suivantes : - Conception détaillée, fonctionnelle et technique. - Développements SPARK / SCALA - Contribution à la formalisation des plans de tests, exécution des tests unitaires et d'un premier niveau de tests d'intégration. -...
-
spark scala
il y a 2 semaines
Puteaux, 92800, Ile-de-France, Nanterre Innov and Co Temps pleinSur une architecture Big Data permettant de collecter les données de l?ensemble des Back Office dans un Datalake (cluster Hadoop), le projet consiste à exploiter ces données pour alimenter un Dataware communautaire stockée sur une base Exadata. Cette exploitation est réalisée par la conception de nouveaux traitements Spark/Scala manipulant les données...
-
Data Engineer AWS
il y a 2 semaines
Ile-de-France, France 4 Impact Temps pleinNous recherchons pour l?un de nos clients un Data Engineer AWS. Contexte de la mission : Au sein de l'équipe chargée de développer des outils internes d?une entité, constituée de 10 personnes : Développeurs back/frond end et Ingénieurs Data, le Data Engineer AWS est en charge de mener à bien un besoin clé du Groupe autour du sujet Zéro Carbone....
-
Data Engineer Spark/Scala
il y a 2 semaines
Puteaux, 92800, Ile-de-France, Nanterre Citech Temps pleinCITECH recrute ! ? ? Si vous souhaitez apporter vos compétences dans la réalisation de différents projets, nous avons LA mission pour vous ! Nous recherchons en effet un(e) Data Engineer Spark/Scala (H/F) ? ? Votre mission est pour un client du secteur banque et assurance qui dispose de 3000 caisses locales sur l?ensemble du territoire ainsi que de 8000...
-
tech lead Spark/Scala
il y a 2 semaines
Fontenay-sous-Bois, 94120, Ile-de-France, Nogent-sur-Marne Innov and Co Temps plein- Développement Spark/Scala et HIVE - Une bonne expertise des environnements hadoop- Environnement Anglophone 2 - Livrables attendus Les livrables attendus sont :- Revue de code et re-factoring - Projet agile (Scrum) - Traitement d'un gros volume de données - L'application des normes de développements 3 - Expertise(s) / technologie(s) Les...
-
ingenieur informatique DATA SPARK SCALA F/H
il y a 2 semaines
France, FR Genious Temps pleinGenious Systèmes recherche pour un de ses clients un Ingénieur Data Spark Scala F/H Contexte Mission: Sur une architecture Big Data permettant de collecter les données de l?ensemble des Back Office dans un Datalake (cluster Hadoop), le projet consiste à exploiter ces données pour alimenter un Dataware communautaire stockée sur une base Exadata. Cette...
-
DATA ENGINEER SPARK
il y a 2 semaines
Paris, 75001, Ile-de-France, Paris UCASE CONSULTING Temps pleinBonjour, Pour le compte de notre client, nous recherchons un data engineer spark / scala. Mission : Livrables n 1 : Sprint n 1 + Lot 1 : développement des US et tests associés ; + Lot 2 : Documentation projet, mapping des données, modélisation des pipelines, documents d?exploitation ; + Lot 3 : Mise en place du CI/CD sur notre usine logicielle ; + Lot 4...
-
Data Engineering
il y a 2 semaines
Paris, 75001, Ile-de-France, Paris Digistrat consulting Temps plein? Contexte /Objectifs : L'entité a pour charge la maintenance, le support et l'évolution de l'outil concernant le pilotage financier de la banque, des directions centrales et de la facturation interne du groupe. Les outils sont basés sur les technologies Big Data pour le stockage, Talend et Spark/Scala pour les traitements, la suite MSBI SQL...
-
Data engineer Scala/Python
il y a 2 semaines
Nanterre, 92000, Ile-de-France, Ile-de-France VISIAN Temps pleinLes applications, gérées par l?équipe du Delivery Center Gas, sont structurées de la manière suivante : ?Application client/serveur pour la gestion des tous les contrats gaz et opérationnellement du mois M/M+1 et le plus finement de J/J+1 ?Bus de communication assuré par FEDEX ?Service web pour la récupération de données connexes ?Solution Big DATA...
-
Data Engineer GCP Scala Spark
il y a 7 jours
France, FR DATSUP Temps pleinPrincipales responsabilités : - Collecte de données provenant de sources externes - Exploitation des capacités du Datalake (GCP) - Implémentation de la chaîne de traitement - Développement en conformité avec les normes architecturales établies - Élaboration et documentation des user stories - Création de scripts de déploiement - Priorisation de la...