ingénieur informatique Data Spark

il y a 3 semaines


ÎledeFrance, France HN Services Temps plein
La Direction des Systèmes d?Information a pour missions de mettre au quotidien à disposition des 25 000 utilisateurs les données et les traitements nécessaires à leur activité, dans le respect des contrats de service; de garantir la sécurité et la pérennité des actifs informatiques du Groupe; d?accompagner le développement commercial du Groupe en France et à l?international ; d?élaborer de nouveaux systèmes d?information, de nouvelles infrastructures techniques et de maintenir les systèmes existants.

Sur une architecture Big Data permettant de collecter les données de l?ensemble des Back Office dans un Datalake (cluster Hadoop), le projet consiste à exploiter ces données pour alimenter un Dataware communautaire stockée sur une base Exadata.

Cette exploitation est réalisée par la conception de nouveaux traitements Spark/Scala manipulant les données raffinées du DataLake avec des règles métiers décisionnelles.

Au sein de l'équipe projet Business Intelligence & Big Data, l'expert SPARK/SCALA aura les activités suivantes :

- Conception détaillée, fonctionnelle et technique.

- Développements SPARK / SCALA

- Contribution à la formalisation des plans de tests, exécution des tests unitaires et d'un premier niveau de tests d'intégration.

- Résolution des anomalies pendant les phases d?intégration fonctionnelle et de recette utilisateur.

- Packaging et déploiement en pre-production et production.

- Optimisation des traitements afin de garantir la qualité de service standards du DWG.

- Mise en ?uvre des solutions industrielles et de réentrance permettant une reprise optimum des traitements en cas d?incident en production.

- Mise en service et accompagnement au déploiement.

- Suivi des environnements.

Le consultant devra travailler en étroite collaboration avec le Chef de Projet, responsable du lot et l'équipe de développement du Programme.



  • Île-de-France GENIOUS Temps plein

    Genious Systèmes recherche pour un de ses clients un Ingénieur Data Spark Scala F/H Contexte Mission: Sur une architecture Big Data permettant de collecter les données de l?ensemble des Back Office dans un Datalake (cluster Hadoop), le projet consiste à exploiter ces données pour alimenter un Dataware communautaire stockée sur une base...

  • Ingénieur Data Spark

    il y a 3 semaines


    Île-de-France HN SERVICES Travail à distance Freelance Temps plein

    La Direction des Systèmes d’Information a pour missions de mettre au quotidien à disposition des 25 000 utilisateurs les données et les traitements nécessaires à leur activité, dans le respect des contrats de service; de garantir la sécurité et la pérennité des actifs informatiques du Groupe; d’accompagner le développement commercial du Groupe...


  • Île-de-France SMARTPOINT Temps plein

    Le bénéficiaire souhaite mettre en oeuvre plusieurs évolutions de son socle technique. A ce titre, le Bénéficiaire souhaite bénéficier de l'expertise du Prestataire en termes de data Engineering Dans ce cadre la prestation consiste à contribuer à/au(x) : ? Recueil et à l'analyse des besoins métier et des processus de bout en bout ? La...

  • Data Engineer Spark

    il y a 15 heures


    Île-de-France KUBE Partners S.L. Pixie Services Temps plein

    Contexte de la mission Sur une architecture Big Data permettant de collecter les données de l?ensemble des Back Office dans un Datalake (cluster Hadoop), le projet consiste à exploiter ces données pour alimenter un Dataware communautaire stockée sur une base Exadata. Cette exploitation est réalisée par la conception de nouveaux traitements...


  • France, FR Thales Temps plein

    QUI SOMMES-NOUS ? Thales est un leader mondial des hautes technologies comptant plus de 81 000 collaborateurs présents sur tous les continents. Le Groupe investit dans les innovations du numérique et de la « deep tech » – big data, intelligence artificielle, connectivité, cybersécurité et quantique – pour construire un avenir de confiance,...

  • Data Engineer GCP Scala Spark

    il y a 2 semaines


    Île-de-France DATSUP Temps plein

    Principales responsabilités : - Collecte de données provenant de sources externes - Exploitation des capacités du Datalake (GCP) - Implémentation de la chaîne de traitement - Développement en conformité avec les normes architecturales établies - Élaboration et documentation des user stories - Création de scripts de déploiement -...

  • Senior Data Engineer

    il y a 2 semaines


    France Pulsover Temps plein

    À propos de Pulsover :    Pulsover est un cabinet de conseil spécialisé dans la data, le cloud et le delivery . La mission de nos consultants Pulsover est d'accompagner des entreprises de toutes tailles dans leur transformation digitale grâce à la combinaison de leur expertise technique et de leur capacité à gérer des projets...


  • Île-de-France, France SOFTEAM Temps plein

    Vous évoluez dans le domaine de la Data et souhaitez intégrer un leader de la transformation numérique spécialisé dans les secteurs de la Banque, du Luxe, de l'Assurance, de la Finance, de l'Energie et la possibilité d'évoluer au sein du Groupe Docaposte !Softeam est labellisé "HappyIndex® AtWork " 2022 pour la 5ème année consécutive...


  • Île-de-France SOFTEAM Temps plein

    Vous évoluez dans le domaine de la Data et souhaitez intégrer un leader de la transformation numérique spécialisé dans les secteurs de la Banque, du Luxe, de l'Assurance, de la Finance, de l'Energie et la possibilité d'évoluer au sein du Groupe Docaposte !Softeam est labellisé "HappyIndex® AtWork " 2022 pour la 5ème année consécutive...


  • Île-de-France GRADIANT Temps plein

    Nous recherchons pour le compte de notre client un profil Data Quality Analyst avec plus de 5 ans d'expérience et une bonne maitrise Python, SQL et une expérience en Data Quality. Diplôme de niveau BAC +4 à 5, en école d?ingénieurs ou université spécialisé en statistiques, data science, informatique décisionnelle ou data management Une...


  • Île-de-France VISIAN Temps plein

    Intégré au sein du domaine SYD (Synthèse et Data), vous serez amené à travailler sur la plateforme de données PISA (Plateforme Information Synthèse Affacturage). Elle a pour objectif de disposer d'une couverture fonctionnelle complète et sécurisée des fonctions de synthèse (finance et risque) et d?assurer le pilotage d?entreprise pour les...

  • Data Engineer

    il y a 1 mois


    Île-de-France OMICRONE Travail à distance Freelance Temps plein

    Chers consultants,Nous sommes à la recherche d'un Ingénieur Data - Développeur JAVA / DevOps Senior pour rejoindre notre client, une banque leader à Paris.MissionsLa prestation aura lieu au sein de la banque exerce une responsabilité mondiale sur le Système d’Information contribuant à la réalisation des objectifs des métiers de la banque...

  • Data Engineer

    il y a 4 jours


    Île-de-France STHREE SAS pour COMPUTER FUTURES Temps plein

    Principaux défis:La donnée analysée par nos algorithmes et nos plateformes est essentiellement de la donnée textuelle. Nous mobilisons donc essentiellement des techniques de NLP, aujourd'hui grandement renouvelées par l'IA générative et les LLM. En tant que Data Ingénieur vous serez amené à déployer les algorithmes développés par les...

  • Data Engineer

    il y a 1 mois


    Île-de-France OMICRONE Temps plein

    Chers consultants, Nous sommes à la recherche d'un Ingénieur Data - Développeur JAVA / DevOps Senior pour rejoindre notre client, une banque leader à Paris. Missions La prestation aura lieu au sein de la banque exerce une responsabilité mondiale sur le Système d?Information contribuant à la réalisation des objectifs des métiers de la banque...

  • Lead Data Scientist

    il y a 1 jour


    France MP DATA Temps plein

    MP DATA est une société spécialisée dans l’acquisition, le traitement, et la valorisation des données. Depuis sa création en 2015, MP DATA accompagne ses clients, majoritairement industriels, dans le management de leur performance, l’exploitation de leurs données et leur décarbonation. Nous recherchons un(e) Tech Lead IA Gen / Data Scientist...


  • France Visian Temps plein

    Visian, société de conseil spécialisée en design produit , gestion de projet IT et développement Data , filiale du groupe Neurones (7000+ personnes), est à la recherche de Data Engineers confirmés pour une embauche sur profil en CDI . Vous serez amenés à réaliser des missions en tant que consultant chez nos clients grands comptes dans...

  • Data Engineer Senior H/F

    il y a 3 semaines


    Île-de-France HARDIS GROUP Temps plein

    GCP, Python, Data Pipeline, MicroServices, CI/CD, Machine learning, ces mots vous parlent, alors lisez la suite ! MISSIONAu sein de notre entité Business Applications parisienne et intégré(e) au sein d’une équipe projet, vous contribuez à l’élaboration et l’évolution des couches métiers des applications que nous réalisons pour nos clients.En...

  • Data Engineer Senior H/F

    il y a 3 semaines


    Île-de-France, France HARDIS GROUP Temps plein

    GCP, Python, Data Pipeline, MicroServices, CI/CD, Machine learning, ces mots vous parlent, alors lisez la suite ! MISSIONAu sein de notre entité Business Applications parisienne et intégré(e) au sein d’une équipe projet, vous contribuez à l’élaboration et l’évolution des couches métiers des applications que nous réalisons pour nos clients.En...

  • Big Data Engineer

    il y a 6 jours


    Île-de-France, France LINCOLN Temps plein

    Poste CDI : Consultant Big Data Engineer - H/F (Hadoop, Spark, PySpark, Databricks, Kafka, Python, Scala, Java, Hive, MongoDB, etc.)Lincoln Pure Player Data : Réinventant l'analyse depuis 30 ans. Experts en Modern BI, Big Data et Science des données . Nous transformons les données en solutions pour les grands comptes, des secteurs bancaire, retail,...

  • Big Data Engineer

    il y a 5 jours


    Île-de-France LINCOLN Temps plein

    Poste CDI : Consultant Big Data Engineer - H/F (Hadoop, Spark, PySpark, Databricks, Kafka, Python, Scala, Java, Hive, MongoDB, etc.)Lincoln Pure Player Data : Réinventant l'analyse depuis 30 ans. Experts en Modern BI, Big Data et Science des données . Nous transformons les données en solutions pour les grands comptes, des secteurs bancaire, retail,...