Développeur Spark Scala AWS

il y a 1 mois


ÎledeFrance, France HIGHTEAM Temps plein
A ce titre, le Bénéficiaire souhaite bénéficier de l'expertise du Prestataire en termes de Data Engineering

Dans ce cadre la prestation consiste à contribuer à/au(x) :

? Garantir l?accès aux données liées à l?activité .

? Implémenter et industrialiser des traitements pour collecter, nettoyer et synthétiser des données afin de

les rendre accessibles.

? Concevoir des moyens pour collecter, transformer et exploiter des gros volumes de données

? l?industrialisation des traitements et à leur amélioration continue pour qu?ils soient fiables, robustes,

performants et résilients afin de répondre aux exigences des partenaires métiers.

? La maintenances et l?évolution des différents pipelines de traitement.

? La qualité de la conception technique, de sa mise en place et de sa documentation.

? Conduite du changement .

? Assurer une veille technologique (data).

? A la communauté des tech leads pour s'assurer d'une bonne capitalisation entre entité et de

l'harmonisation des pratiques de développement.

SCALA et SPARK

Certificat AWS

? Mise en place des moyens pour collecter, transformer et exploiter des gros volumes de données

? Contribuer à l?industrialisation des traitements et à leur amélioration continue pour qu?ils soient fiables,

robustes, performants et résilients afin de répondre aux exigences des partenaires métiers.

? La maintenances et l?évolution des différents pipelines de traitement.

? Garantir la qualité de la conception technique, de sa mise en place et de sa documentation.

? Mettre en place des bonnes pratiques de développement et s'assurer qu'elles sont bien mises en ?uvre.

? Conduite du changement.

? Assurer une veille technologique (data).

? A la communauté des tech leads pour s'assurer d'une bonne capitalisation entre entité et de

l'harmonisation des pratiques de développement.


  • Développeur SPARK/SCALA

    il y a 5 jours


    Île-de-France MLMCONSEIL Travail à distance Freelance Temps plein

    Développeur spark /scala dans le secteur de l'assurance ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;; ;;;;;; ;;;;; ;;;;; ;;;;;; ;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;; ;;;;;; ;;;;; ;;;;; ;;;;;; ;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;;...

  • Développeur SPARK/SCALA

    il y a 6 jours


    Île-de-France MLMCONSEIL Temps plein

    Développeur spark /scala dans le secteur de l'assurance ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;; ;;;;;; ;;;;; ;;;;; ;;;;;; ;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;; ;;;;;; ;;;;; ;;;;; ;;;;;; ;;;;;; ;;;;;;;;;; ;;;;;;;;;; ;;;;;;;;;;...

  • Ingénieur Data SPARK/SCALA

    il y a 2 semaines


    Île-de-France DHM IT Travail à distance Freelance Temps plein

    Au sein de l'équipe projet Business Intelligence & Big Data, l'expert SPARK/SCALA aura les activités suivantes :Conception détaillée, fonctionnelle et technique.Développements SPARK / SCALAContribution à la formalisation des plans de tests, exécution des tests unitaires et d'un premier niveau de tests d'intégration.Résolution des...

  • Ingénieur Data Spark

    il y a 2 semaines


    Île-de-France HN SERVICES Travail à distance Freelance Temps plein

    La Direction des Systèmes d’Information a pour missions de mettre au quotidien à disposition des 25 000 utilisateurs les données et les traitements nécessaires à leur activité, dans le respect des contrats de service; de garantir la sécurité et la pérennité des actifs informatiques du Groupe; d’accompagner le développement commercial du Groupe...


  • Île-de-France DHM IT Temps plein

    Au sein de l'équipe projet Business Intelligence & Big Data, l'expert SPARK/SCALA aura les activités suivantes : Conception détaillée, fonctionnelle et technique. Développements SPARK / SCALA Contribution à la formalisation des plans de tests, exécution des tests unitaires et d'un premier niveau de tests...


  • Île-de-France HN Services Temps plein

    La Direction des Systèmes d?Information a pour missions de mettre au quotidien à disposition des 25 000 utilisateurs les données et les traitements nécessaires à leur activité, dans le respect des contrats de service; de garantir la sécurité et la pérennité des actifs informatiques du Groupe; d?accompagner le développement commercial du Groupe en...


  • Île-de-France GENIOUS Temps plein

    Genious Systèmes recherche pour un de ses clients un Ingénieur Data Spark Scala F/H Contexte Mission: Sur une architecture Big Data permettant de collecter les données de l?ensemble des Back Office dans un Datalake (cluster Hadoop), le projet consiste à exploiter ces données pour alimenter un Dataware communautaire stockée sur une base...


  • Puteaux, 92800, Ile-de-France, Nanterre Cat-Amania Temps plein

    Notre client du domaine de l'Assurance recherche un profil Ingénieur Développement Spark Scala Expérimenté (+10 ans d'expérience). Sur une architecture Big Data permettant de collecter les données de l?ensemble des Back Office dans un Datalake (cluster Hadoop), le projet consiste à exploiter ces données pour alimenter un Dataware...


  • France, FR DHM IT Temps plein

    Au sein de l'équipe projet Business Intelligence & Big Data, l'expert SPARK/SCALA aura les activités suivantes : Conception détaillée, fonctionnelle et technique. Développements SPARK / SCALA Contribution à la formalisation des plans de tests, exécution des tests unitaires et d'un premier niveau de tests d'intégration. Résolution des...


  • Île-de-France DATSUP Temps plein

    Principales responsabilités : - Collecte de données provenant de sources externes - Exploitation des capacités du Datalake (GCP) - Implémentation de la chaîne de traitement - Développement en conformité avec les normes architecturales établies - Élaboration et documentation des user stories - Création de scripts de déploiement -...

  • Data engineer scala spark

    il y a 2 semaines


    Paris, 75001, Ile-de-France, Paris Celad Temps plein

    Au sein de l'équipe projet Business Intelligence & Big Data, l'expert SPARK/SCALA aura les activités suivantes : - Conception détaillée, fonctionnelle et technique. - Développements SPARK / SCALA - Contribution à la formalisation des plans de tests, exécution des tests unitaires et d'un premier niveau de tests d'intégration. -...

  • spark scala

    il y a 2 semaines


    Puteaux, 92800, Ile-de-France, Nanterre Innov and Co Temps plein

    Sur une architecture Big Data permettant de collecter les données de l?ensemble des Back Office dans un Datalake (cluster Hadoop), le projet consiste à exploiter ces données pour alimenter un Dataware communautaire stockée sur une base Exadata. Cette exploitation est réalisée par la conception de nouveaux traitements Spark/Scala manipulant les données...

  • Data Engineer AWS

    il y a 2 semaines


    Ile-de-France, France 4 Impact Temps plein

    Nous recherchons pour l?un de nos clients un Data Engineer AWS. Contexte de la mission : Au sein de l'équipe chargée de développer des outils internes d?une entité, constituée de 10 personnes : Développeurs back/frond end et Ingénieurs Data, le Data Engineer AWS est en charge de mener à bien un besoin clé du Groupe autour du sujet Zéro Carbone....

  • Data Engineer Spark/Scala

    il y a 2 semaines


    Puteaux, 92800, Ile-de-France, Nanterre Citech Temps plein

    CITECH recrute ! ? ? Si vous souhaitez apporter vos compétences dans la réalisation de différents projets, nous avons LA mission pour vous ! Nous recherchons en effet un(e) Data Engineer Spark/Scala (H/F) ? ? Votre mission est pour un client du secteur banque et assurance qui dispose de 3000 caisses locales sur l?ensemble du territoire ainsi que de 8000...

  • tech lead Spark/Scala

    il y a 2 semaines


    Fontenay-sous-Bois, 94120, Ile-de-France, Nogent-sur-Marne Innov and Co Temps plein

    - Développement Spark/Scala et HIVE - Une bonne expertise des environnements hadoop- Environnement Anglophone 2 - Livrables attendus Les livrables attendus sont :- Revue de code et re-factoring - Projet agile (Scrum) - Traitement d'un gros volume de données - L'application des normes de développements 3 - Expertise(s) / technologie(s) Les...


  • France, FR Genious Temps plein

    Genious Systèmes recherche pour un de ses clients un Ingénieur Data Spark Scala F/H Contexte Mission: Sur une architecture Big Data permettant de collecter les données de l?ensemble des Back Office dans un Datalake (cluster Hadoop), le projet consiste à exploiter ces données pour alimenter un Dataware communautaire stockée sur une base Exadata. Cette...

  • DATA ENGINEER SPARK

    il y a 2 semaines


    Paris, 75001, Ile-de-France, Paris UCASE CONSULTING Temps plein

    Bonjour, Pour le compte de notre client, nous recherchons un data engineer spark / scala. Mission : Livrables n 1 : Sprint n 1 + Lot 1 : développement des US et tests associés ; + Lot 2 : Documentation projet, mapping des données, modélisation des pipelines, documents d?exploitation ; + Lot 3 : Mise en place du CI/CD sur notre usine logicielle ; + Lot 4...

  • Data Engineering

    il y a 2 semaines


    Paris, 75001, Ile-de-France, Paris Digistrat consulting Temps plein

    ? Contexte /Objectifs : L'entité a pour charge la maintenance, le support et l'évolution de l'outil concernant le pilotage financier de la banque, des directions centrales et de la facturation interne du groupe. Les outils sont basés sur les technologies Big Data pour le stockage, Talend et Spark/Scala pour les traitements, la suite MSBI SQL...

  • Data engineer Scala/Python

    il y a 2 semaines


    Nanterre, 92000, Ile-de-France, Ile-de-France VISIAN Temps plein

    Les applications, gérées par l?équipe du Delivery Center Gas, sont structurées de la manière suivante : ?Application client/serveur pour la gestion des tous les contrats gaz et opérationnellement du mois M/M+1 et le plus finement de J/J+1 ?Bus de communication assuré par FEDEX ?Service web pour la récupération de données connexes ?Solution Big DATA...


  • France, FR DATSUP Temps plein

    Principales responsabilités : - Collecte de données provenant de sources externes - Exploitation des capacités du Datalake (GCP) - Implémentation de la chaîne de traitement - Développement en conformité avec les normes architecturales établies - Élaboration et documentation des user stories - Création de scripts de déploiement - Priorisation de la...