data engineer spark
il y a 4 semaines
Bonjour,Pour le compte de notre client, nous recherchons un data engineer spark / scala / databricks.S'agissant d'un projet mené en agilité, le découpage des livrables est réalisé par sprints.Le contenu de chaque sprint est identique, seul le détail des User Stories (US) change. À noter que ces livrables sont réalisés par l'équipe projet, il n'y a pas de responsabilité de production individuelle.Livrables n°1 : Sprint n°1Lot 1 : développement des US et tests associésLot 2 : Documentation projet, mapping des données, modélisation des pipelines, documents d'exploitationLot 3 : Mise en place du CI/CD sur notre usine logicielleLot 4 : Mise en place du monitoringCompétences technologiques attendues :Indispensables : maîtrise de l'API Scala Spark (batch principalement), maîtrise des techniques d'optimisation Spark, expérience dans le traitement de volumétries importantes / complexes, développement et bonnes pratiques Scala, build Maven, travail en environnement cloud (idéalement Azure).Appréciées : écosystème Databricks, briques Azure Function et Azure Data Factory, monitoring sous Datadog, déploiement Ansible.
#J-18808-Ljbffr
-
Data Engineer Python/Spark/Deltalake
il y a 2 semaines
Paris, Île-de-France VISIAN Temps pleinBonjour, Dans le cadre de ses projets clients, Visian est à la recherche d'un Data Engineer Python/Spark/Deltalake.Tâches: Conception, de?veloppement et de?ploiement des pipelines de donne?es efficaces pour l?extraction, la transformation et le chargement (ETL) des donne?es,- Collaboration avec les e?quipes me?tier pour comprendre les besoins en matie?re...
-
Data Engineer Python, Spark, Databricks
il y a 2 semaines
Paris, Île-de-France HIGHTEAM Temps pleinPour l?un de nos clients, nous recherchons un Data Engineer / Développeur Python passionné(e) pour contribuer à la création de pipelines d'orchestration des modèles ML (préparation des features, entraînement, tuning et inférence).Missions :Développer et optimiser des pipelines de données pour industrialiser l'utilisation des modèles ML...
-
Lead Data Engineer
il y a 4 semaines
Paris, Île-de-France Data Engineer - Lead - Data Platforms Temps pleinTitre du poste: Data ArchitectDans le contexte de l'enseigne E.Leclerc, SIPLEC est chargé du développement, de l'achat et de la commercialisation de services et de produits porteurs des valeurs et engagements du Mouvement E.Leclerc dans les domaines de l'énergie et de l'industrie manufacturière.Le PosteRattaché(e) au Responsable Data Engineering, vous...
-
DATA ENGINEER GCP SPARK SCALA
il y a 2 semaines
Paris, Île-de-France DATSUP Temps pleinNous recherchons un data engineer GCP Spark/Scala avec pour missions principales : Collecter des données provenant de diverses sources externes.Exploiter les capacités du Datalake sur GCP.Implémenter l?ensemble du processus incluant :L?ingestion des données,La validation des données,Le croisement des données,L?intégration des données enrichies dans...
-
Big Data Engineer Lead
il y a 4 semaines
Paris, Île-de-France Data Engineer - Lead - Data Platforms Temps pleinTitre du poste: Data ArchitectDans le contexte de l'enseigne E.Leclerc, SIPLEC est chargé du développement, de l'achat et de la commercialisation de services et de produits porteurs des valeurs et engagements du Mouvement E.Leclerc dans les domaines de l'énergie et de l'industrie manufacturière.Le PosteRattaché(e) au Responsable Data Engineering, vous...
-
Data Engineer Spark Scala GCP
il y a 4 semaines
Paris, Île-de-France Sibylone Temps pleinSIBYLONE, société de conseil spécialisée dans les systèmes d'information de synthèse et de pilotage, aide ses clients à tirer toute la valeur de leur patrimoine de données, levier stratégique majeur de développement et de rentabilité. Notre ambition : rendre les différents acteurs de l'entreprise autonomes dans l'exploitation des données,...
-
Data Engineer Spark Scala
il y a 4 semaines
Paris, Île-de-France Sopra Steria Temps pleinData Engineer Spark Scala - Services Financiers - Ile de FranceSopra Steria, acteur majeur de la Tech en Europe, est reconnu pour ses activités de conseil, de services numériques et d'édition de logiciels. Le Groupe aide ses clients à mener leur transformation digitale et à obtenir des bénéfices concrets et durables.Chez notre client, une grande...
-
Scala/Spark/Java Data Developer
il y a 4 semaines
Paris, Île-de-France C:yllene Temps pleinDans le cadre de notre croissance, nous sommes à la recherche d'un(e) Développeur(se) Data – H/F.Vous êtes Développeur(se) Data et cherchez de nouveaux challenges ? Et si vous décidiez de travailler dans le marketing digital : un des secteurs qui génère le plus de données aujourd'hui ?Vous participez à la mise en place de solutions Data (« on...
-
Data Engineer
il y a 2 semaines
Paris, Île-de-France OBJECTWARE MANAGEMENT GROUP Temps pleinPoste :Nous recherchons un Data Engineer (H/F) afin de renforcer notre pôle AI Experts qui intervient sur des sujets impactant directement notre business et l'expérience client, afin d'optimiser la personnalisation, le taux de conversion et les assets.Grâce à ses compétences alliant développement bigdata, appétences pour les modèles d?IA et...
-
Data Engineer Spark Scala
il y a 4 semaines
Paris, Île-de-France Sopra Steria Temps pleinData Engineer Spark Scala - Services Financiers - Ile de FranceSopra Steria, acteur majeur de la Tech en Europe avec 56000 collaborateurs dans près de 30 pays, est reconnu pour ses activités de conseil, de services numériques et d'édition de logiciels. Il aide ses clients à mener leur transformation digitale et à obtenir des bénéfices concrets et...
-
Data Engineer Spark Scala
il y a 4 semaines
Paris, Île-de-France Sopra Steria Temps pleinData Engineer Spark Scala - Services Financiers - Ile de FranceSopra Steria, acteur majeur de la Tech en Europe avec 56000 collaborateurs dans près de 30 pays, est reconnu pour ses activités de conseil, de services numériques et d'édition de logiciels. Il aide ses clients à mener leur transformation digitale et à obtenir des bénéfices concrets et...
-
Data Engineer
il y a 1 semaine
Paris, Île-de-France NEXORIS Temps pleinNotre client recherche un Data Engineer RiskLake (H/F) dans le cadre d'une longue mission.Le Data Engineer interviendra sur RiskLake, un datalake dédié à la gestion des risques de crédit, avec une architecture hybride entre Oracle et Hadoop, et connecté à de nombreuses applications Risk (y compris TRR pour la notation).L?objectif de la mission est...
-
Senior data engineer
il y a 4 semaines
Paris, Île-de-France SOFTEAM Expertise Data & IA Temps pleinVous évoluez dans le domaine de la Data et souhaitez intégrer un leader de la transformation numérique spécialisé dans les secteurs de la Banque, du Luxe, de l'Assurance, de la Finance, de l'Energie et la possibilité d'évoluer au sein du Groupe Docaposte Nos collaborateurs travaillent en « mode projet » autour des Modern DATA Platform et...
-
Lead Data Engineer
il y a 2 semaines
Paris, Île-de-France Harnham Temps pleinLEAD DATA ENGINEER PARIS - HYBRIDE UP TO 75K EUR FIXE + Variable Spark – Scala – Databricks - SQL Rejoignez une entreprise leader de l'assurance en tant que Lead Data Engineer afin d'appuyer le Head of Data et de gérer une équipe sur le plan technique VOTRE MISSION : Gestion et accompagnement d'une équipe de Data Engineers avec un appui au...
-
Lead Data Engineer
il y a 3 semaines
Paris, Île-de-France Harnham Temps pleinLEAD DATA ENGINEERPARIS - HYBRIDEUP TO 75K EUR FIXE + Variable Spark – Scala – Databricks - SQLRejoignez une entreprise leader de l'assurance en tant que Lead Data Engineer afin d'appuyer le Head of Data et de gérer une équipe sur le plan technique VOTRE MISSION : Gestion et accompagnement d'une équipe de Data Engineers avec un appui au Head of Data...
-
Data Engineer
il y a 4 semaines
Paris, Île-de-France Onyx-Conseil Temps pleinBonjour,Pour le compte de notre client, nous recherchons un data engineer spark / scala / databricks.S'agissant d'un projet mené en agilité, le découpage des livrables est réalisé par sprints.À noter que ces livrables sont réalisés par l'équipe projet, il n'y a pas de responsabilité de production individuelle.Livrables n°1 : Sprint n°1Lot 1 :...
-
Data Engineer Spark Scala Kafka- Monitoring Datalake Finance
il y a 2 semaines
Paris, Île-de-France VISIAN Temps pleinContexte & ObjectifsAu sein du service Gouvernance, Administration et Monitoring de la DSI Finance, la mission vise à développer et optimiser une brique applicative de monitoring des flux et traitements de données, en lien avec le programme GASPARD. L?objectif est d?assurer la qualité de service et le respect des délais de mise à disposition des...
-
Lead Data Engineer
il y a 3 semaines
Paris, Île-de-France Harnham Temps pleinLEAD DATA ENGINEER PARIS - HYBRIDE UP TO 75K EUR FIXE + Variable Spark – Scala – Databricks - SQL Rejoignez une entreprise leader de l'assurance en tant que Lead Data Engineer afin d'appuyer le Head of Data et de gérer une équipe sur le plan technique VOTRE MISSION : Gestion et accompagnement d'une équipe de Data Engineers avec un appui au...
-
Lead Data Engineer
il y a 2 semaines
Paris, Île-de-France Harnham Temps pleinLEAD DATA ENGINEERPARIS - HYBRIDEUP TO 75K EUR FIXE + Variable Spark – Scala – Databricks Rejoignez une entreprise leader de l'assurance en tant que Lead Data Engineer afin d'appuyer le Head of Data et de gérer une équipe sur le plan technique VOTRE MISSION : Encadrer et accompagner une équipe pluridisciplinaire, tout en appuyant et collaborant le...
-
Data Engineer AWS
il y a 2 semaines
Paris, Île-de-France PARTECK INGENIERIE Temps pleinContexte :Nous recherchons pour l'un de nos clients, un Data Engineer (H/F) afin de renforcer son pôle AI Experts, qui intervient sur des sujets impactant directement son business et l'expérience client, afin d'optimiser la personnalisation, le taux de conversion et les assets. Description :Grâce à ses compétences alliant Développement Big Data,...