data engineer spark

il y a 4 semaines


Paris, Île-de-France Onyx-Conseil Temps plein

Bonjour,Pour le compte de notre client, nous recherchons un data engineer spark / scala / databricks.S'agissant d'un projet mené en agilité, le découpage des livrables est réalisé par sprints.Le contenu de chaque sprint est identique, seul le détail des User Stories (US) change. À noter que ces livrables sont réalisés par l'équipe projet, il n'y a pas de responsabilité de production individuelle.Livrables n°1 : Sprint n°1Lot 1 : développement des US et tests associésLot 2 : Documentation projet, mapping des données, modélisation des pipelines, documents d'exploitationLot 3 : Mise en place du CI/CD sur notre usine logicielleLot 4 : Mise en place du monitoringCompétences technologiques attendues :Indispensables : maîtrise de l'API Scala Spark (batch principalement), maîtrise des techniques d'optimisation Spark, expérience dans le traitement de volumétries importantes / complexes, développement et bonnes pratiques Scala, build Maven, travail en environnement cloud (idéalement Azure).Appréciées : écosystème Databricks, briques Azure Function et Azure Data Factory, monitoring sous Datadog, déploiement Ansible.
#J-18808-Ljbffr



  • Paris, Île-de-France VISIAN Temps plein

    Bonjour, Dans le cadre de ses projets clients, Visian est à la recherche d'un Data Engineer Python/Spark/Deltalake.Tâches: Conception, de?veloppement et de?ploiement des pipelines de donne?es efficaces pour l?extraction, la transformation et le chargement (ETL) des donne?es,- Collaboration avec les e?quipes me?tier pour comprendre les besoins en matie?re...


  • Paris, Île-de-France HIGHTEAM Temps plein

    Pour l?un de nos clients, nous recherchons un Data Engineer / Développeur Python passionné(e) pour contribuer à la création de pipelines d'orchestration des modèles ML (préparation des features, entraînement, tuning et inférence).Missions :Développer et optimiser des pipelines de données pour industrialiser l'utilisation des modèles ML...

  • Lead Data Engineer

    il y a 4 semaines


    Paris, Île-de-France Data Engineer - Lead - Data Platforms Temps plein

    Titre du poste: Data ArchitectDans le contexte de l'enseigne E.Leclerc, SIPLEC est chargé du développement, de l'achat et de la commercialisation de services et de produits porteurs des valeurs et engagements du Mouvement E.Leclerc dans les domaines de l'énergie et de l'industrie manufacturière.Le PosteRattaché(e) au Responsable Data Engineering, vous...

  • DATA ENGINEER GCP SPARK SCALA

    il y a 2 semaines


    Paris, Île-de-France DATSUP Temps plein

    Nous recherchons un data engineer GCP Spark/Scala avec pour missions principales : Collecter des données provenant de diverses sources externes.Exploiter les capacités du Datalake sur GCP.Implémenter l?ensemble du processus incluant :L?ingestion des données,La validation des données,Le croisement des données,L?intégration des données enrichies dans...

  • Big Data Engineer Lead

    il y a 4 semaines


    Paris, Île-de-France Data Engineer - Lead - Data Platforms Temps plein

    Titre du poste: Data ArchitectDans le contexte de l'enseigne E.Leclerc, SIPLEC est chargé du développement, de l'achat et de la commercialisation de services et de produits porteurs des valeurs et engagements du Mouvement E.Leclerc dans les domaines de l'énergie et de l'industrie manufacturière.Le PosteRattaché(e) au Responsable Data Engineering, vous...

  • Data Engineer Spark Scala GCP

    il y a 4 semaines


    Paris, Île-de-France Sibylone Temps plein

    SIBYLONE, société de conseil spécialisée dans les systèmes d'information de synthèse et de pilotage, aide ses clients à tirer toute la valeur de leur patrimoine de données, levier stratégique majeur de développement et de rentabilité. Notre ambition : rendre les différents acteurs de l'entreprise autonomes dans l'exploitation des données,...

  • Data Engineer Spark Scala

    il y a 4 semaines


    Paris, Île-de-France Sopra Steria Temps plein

    Data Engineer Spark Scala - Services Financiers - Ile de FranceSopra Steria, acteur majeur de la Tech en Europe, est reconnu pour ses activités de conseil, de services numériques et d'édition de logiciels. Le Groupe aide ses clients à mener leur transformation digitale et à obtenir des bénéfices concrets et durables.Chez notre client, une grande...


  • Paris, Île-de-France C:yllene Temps plein

    Dans le cadre de notre croissance, nous sommes à la recherche d'un(e) Développeur(se) Data – H/F.Vous êtes Développeur(se) Data et cherchez de nouveaux challenges ? Et si vous décidiez de travailler dans le marketing digital : un des secteurs qui génère le plus de données aujourd'hui ?Vous participez à la mise en place de solutions Data (« on...

  • Data Engineer

    il y a 2 semaines


    Paris, Île-de-France OBJECTWARE MANAGEMENT GROUP Temps plein

    Poste :Nous recherchons un Data Engineer (H/F) afin de renforcer notre pôle AI Experts qui intervient sur des sujets impactant directement notre business et l'expérience client, afin d'optimiser la personnalisation, le taux de conversion et les assets.Grâce à ses compétences alliant développement bigdata, appétences pour les modèles d?IA et...

  • Data Engineer Spark Scala

    il y a 4 semaines


    Paris, Île-de-France Sopra Steria Temps plein

    Data Engineer Spark Scala - Services Financiers - Ile de FranceSopra Steria, acteur majeur de la Tech en Europe avec 56000 collaborateurs dans près de 30 pays, est reconnu pour ses activités de conseil, de services numériques et d'édition de logiciels. Il aide ses clients à mener leur transformation digitale et à obtenir des bénéfices concrets et...

  • Data Engineer Spark Scala

    il y a 4 semaines


    Paris, Île-de-France Sopra Steria Temps plein

    Data Engineer Spark Scala - Services Financiers - Ile de FranceSopra Steria, acteur majeur de la Tech en Europe avec 56000 collaborateurs dans près de 30 pays, est reconnu pour ses activités de conseil, de services numériques et d'édition de logiciels. Il aide ses clients à mener leur transformation digitale et à obtenir des bénéfices concrets et...

  • Data Engineer

    il y a 1 semaine


    Paris, Île-de-France NEXORIS Temps plein

    Notre client recherche un Data Engineer RiskLake (H/F) dans le cadre d'une longue mission.Le Data Engineer interviendra sur RiskLake, un datalake dédié à la gestion des risques de crédit, avec une architecture hybride entre Oracle et Hadoop, et connecté à de nombreuses applications Risk (y compris TRR pour la notation).L?objectif de la mission est...

  • Senior data engineer

    il y a 4 semaines


    Paris, Île-de-France SOFTEAM Expertise Data & IA Temps plein

    Vous évoluez dans le domaine de la Data et souhaitez intégrer un leader de la transformation numérique spécialisé dans les secteurs de la Banque, du Luxe, de l'Assurance, de la Finance, de l'Energie et la possibilité d'évoluer au sein du Groupe Docaposte Nos collaborateurs travaillent en « mode projet » autour des Modern DATA Platform et...

  • Lead Data Engineer

    il y a 2 semaines


    Paris, Île-de-France Harnham Temps plein

    LEAD DATA ENGINEER PARIS - HYBRIDE UP TO 75K EUR FIXE + Variable Spark – Scala – Databricks - SQL Rejoignez une entreprise leader de l'assurance en tant que Lead Data Engineer afin d'appuyer le Head of Data et de gérer une équipe sur le plan technique VOTRE MISSION : Gestion et accompagnement d'une équipe de Data Engineers avec un appui au...

  • Lead Data Engineer

    il y a 3 semaines


    Paris, Île-de-France Harnham Temps plein

    LEAD DATA ENGINEERPARIS - HYBRIDEUP TO 75K EUR FIXE + Variable Spark – Scala – Databricks - SQLRejoignez une entreprise leader de l'assurance en tant que Lead Data Engineer afin d'appuyer le Head of Data et de gérer une équipe sur le plan technique VOTRE MISSION : Gestion et accompagnement d'une équipe de Data Engineers avec un appui au Head of Data...

  • Data Engineer

    il y a 4 semaines


    Paris, Île-de-France Onyx-Conseil Temps plein

    Bonjour,Pour le compte de notre client, nous recherchons un data engineer spark / scala / databricks.S'agissant d'un projet mené en agilité, le découpage des livrables est réalisé par sprints.À noter que ces livrables sont réalisés par l'équipe projet, il n'y a pas de responsabilité de production individuelle.Livrables n°1 : Sprint n°1Lot 1 :...


  • Paris, Île-de-France VISIAN Temps plein

    Contexte & ObjectifsAu sein du service Gouvernance, Administration et Monitoring de la DSI Finance, la mission vise à développer et optimiser une brique applicative de monitoring des flux et traitements de données, en lien avec le programme GASPARD. L?objectif est d?assurer la qualité de service et le respect des délais de mise à disposition des...

  • Lead Data Engineer

    il y a 3 semaines


    Paris, Île-de-France Harnham Temps plein

    LEAD DATA ENGINEER PARIS - HYBRIDE UP TO 75K EUR FIXE + Variable Spark – Scala – Databricks - SQL Rejoignez une entreprise leader de l'assurance en tant que Lead Data Engineer afin d'appuyer le Head of Data et de gérer une équipe sur le plan technique VOTRE MISSION : Gestion et accompagnement d'une équipe de Data Engineers avec un appui au...

  • Lead Data Engineer

    il y a 2 semaines


    Paris, Île-de-France Harnham Temps plein

    LEAD DATA ENGINEERPARIS - HYBRIDEUP TO 75K EUR FIXE + Variable Spark – Scala – Databricks Rejoignez une entreprise leader de l'assurance en tant que Lead Data Engineer afin d'appuyer le Head of Data et de gérer une équipe sur le plan technique VOTRE MISSION : Encadrer et accompagner une équipe pluridisciplinaire, tout en appuyant et collaborant le...

  • Data Engineer AWS

    il y a 2 semaines


    Paris, Île-de-France PARTECK INGENIERIE Temps plein

    Contexte :Nous recherchons pour l'un de nos clients, un Data Engineer (H/F) afin de renforcer son pôle AI Experts, qui intervient sur des sujets impactant directement son business et l'expérience client, afin d'optimiser la personnalisation, le taux de conversion et les assets. Description :Grâce à ses compétences alliant Développement Big Data,...