Data Engineer Spark

Bonjour, Dans le cadre de ses projets clients, Visian est à la recherche d'n Data Engineer Python/Spark. Les missions de la prestation notamment seront: Remplacement des pipelines Informatica par des pipelines spark, pyspark et python Ordonnancement : Remplacement du DAC de OBIEE par Dagster Restitution : Création de rapports sur Apache SuperSet sur la...

En tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l'optimisation et la fiabilisation de nos pipelines de données à grande échelle, au coeur de notre plateforme analytique. Votre expertise sur Databricks et l'environnement Spark sera essentielle pour garantir des traitements performants, sécurisés et scalables. Vos...

Bonjour, Pour le compte de notre client nous recherchons un data engineer spark / python / databricks / azure. Attentes: - Spark/Python (API dataframe, dataset, rdd) + Librairie ScalaTest - Expérience Azure, incluant les composants Azure : ADLS, DataBricks, Azure Data Factory, Azure), DevOps (terraform, docker, kubernetes), Azure Functions, KeyVault -...

Nous recherchons un **Data Engineer (H/F)** expérimenté pour rejoindre notre équipe en pleine expansion. Vous serez responsable de la conception, de l'optimisation et de la gestion des pipelines de données dans un environnement Big Data complexe. Vous travaillerez avec une large gamme de technologies, notamment **Spark**, **Kafka**, et la stack **Hadoop...

Publiée le 05/09/2024 Venez rejoindre une équipe dynamique ! **Mission**: Nous recherchons un **Data Engineer (H/F)** expérimenté pour rejoindre notre équipe en pleine expansion. Vous serez responsable de la conception, de l'optimisation et de la gestion des pipelines de données dans un environnement Big Data complexe. Vous travaillerez avec une...

Dans le cadre d?un renfort équipe le client serait à la recherche de profil Data Engineer / Mission: - Maintenir le code existant - Concevoir et développer de nouvelles fonctions au travers de sprint - Interagir avec le PO pour partager une vision claire et détaillée des besoins - Contribuer à la vision globale produit moyen terme et long terme - Run...

Data Engineer Python Spark - Confirmé client Banque basé à Paris Gare de Lyon, un Data Engineer - Confirmé avec un minimum de 4 ans d?expériences. Localisation Paris 12e/ Télétravail **Durée de la mission**: 2 ans **Projet**: Contribuer à la Fabrication des Produits des équipes dans un environnement Cloudera - en utilisant un framework interne...

Cherry Pick est à la recherche d'un Data Engineer pour l'un de ses clients dans le secteur du luxe. **Missions**: Concevoir et développer des pipelines de données performants pour répondre aux besoins spécifiques du secteur du luxe. Traiter et transformer des données massives en utilisant Spark et Scala. Implémenter et maintenir des modèles de...

CONTEXTE L'entité a donc également un but humain en assurant la réussite des développeurs en reconversion. La mission consiste à renforcer une équipe de Data Engineers pour réaliser des projets Scala/Spark pour le compte de l?un de nos clients. MISSIONS Vous assurerez le pilotage de plusieurs projets basés majoritairement sur les technologies Python...

Au regard du planning projet, nous recherchons une ressource expérimentée opérationnelle dès la prise de mission (pas de montée en compétence nécessaire) Expertises nécessaires: - Spark/Pyspark : Expertise à mínima 4-5 ans (configuration/utilisation) - Dataiku : expertise à mínima 2-3 ans (configuration/utilisation) - Data Science : une...