Data Engineer Spark
il y a 12 heures
Vos missions En tant que Data Engineer , vos missions seront les suivantes : Analyser, comprendre et cadrer une architecture permettant de répondre aux besoins métiers des clients Concevoir et mettre en place des plateformes Data en tenant compte des contraintes tant techniques que fonctionnelles Intervenir sur la conception et le déploiement d’environnements Cloud Développer des pipelines d’ingestion et de préparation Gérer le stockage de données (systèmes de fichiers comme HDFS, bases SQL ou NoSQL) Alimenter les entrepôts de données ( Hive, Impala, Hbase, Snowflake, BigQuery , …) Développer des applications d’exploration et de manipulation de données ( SPARK / pySpark, Scala ) afin d’alimenter les flux sortants, les reporting et d’exposer les données Evoluer sur l’ordonnancement des traitements de données (Oozie, Bash / Shell) Assurer le maintien en conditions opérationnelles des plateformes produites Etablir, formaliser, et promouvoir les best practices Pourquoi pas vous ? Profil recherché : De formation supérieure ingénieur en Informatique, vous justifiez d’une première expérience réussie (minimum 3 ans) en data engineering acquise dans un contexte projet au sein d’une start-up, d’un pure player, ou d’une ESN. Vous disposez d’une bonne maitrise des langages propres aux environnements Big Data tels que : Solution Cloud GCP Spark, Scala, Python, Unix, SQL Hadoop ETL Une connaissance de : Docker, ELK, Kubernetes, Cassandra, Kafka, … serait un plus Vous avez déjà évolué dans un contexte projet agile ou scrum et faites preuve de flexibilité, d’adaptabilité et savez être force de proposition. Au-delà de vos compétences techniques, vous êtes curieux, autonome, organisé, doté d’un bon sens relationnel et d’un esprit de synthèse. Les Sibylone Evoluer au sein d’une société qui exige le meilleur de ses collaborateurs tout en cultivant la cohésion et l’esprit d’équipe S’engager dans une politique RSE exigeante : labellisation Ecovadis Avoir un Partenariat EcoTree France : 1 recrutement = 1 arbre planté Un Lab RSE ouvert à tous, pour améliorer la qualité de vie au travail des collaborateurs et nos engagements environnementaux au sein de SIBYLONE Contribuer activement au bien‑être de ses collaborateurs : participation aux frais d’abonnements activités ou achat 2 roues Avoir de nombreux moments de convivialités : séminaires, afterworks, conférences et petits déjeuners, sports en groupe via l’application Gymlib Les actions et missions solidaires : notre partenariat avec la start-up spécialisée en RSE Vendredi permet à nos collaborateurs de réaliser des missions auprès d’associations Donner une offre de formation innovante et à la pointe des nouvelles technologies Accord de télétravail en vigueur Vous vous reconnaissez dans la description du poste? Vous souhaitez travailler dans un environnement stimulant et dynamique? Vous souhaitez rejoindre une société ambitieuse? Venez nous rencontrer : La Team Talent Acquisition sera ravied’échanger avec vous Ce poste est ouvert aux personnes en situation de handicap. #J-18808-Ljbffr
-
Data Platform Engineer
il y a 15 heures
Paris, France Data Recrutement Temps pleinUne entreprise de services numériques est à la recherche d'un Data Platform Engineer pour travailler sur des plateformes critiques dans le secteur bancaire. Le poste require environ 3 ans d'expérience, une expertise en Kubernetes et des connaissances en outils Big Data comme Spark et Airflow. Ce rôle offre une rémunération compétitive de 55-60K€ et...
-
data engineer spark
il y a 1 jour
Paris, Île-de-France UCASE CONSULTING Temps pleinBonjour ?,Pour le compte de notre client, nous recherchons un data engineer Spark / Scala / Pyspark / Databricks / Azure.Missions principales :Participer au développement des User Stories (US) et réalisation des tests associés.Produire et maintenir la documentation projet : mapping des données, modélisation des pipelines, documents d?exploitation.Mettre...
-
Data Engineer Python/spark/deltalake
il y a 7 jours
Paris, France VISIAN Temps pleinBonjour, Dans le cadre de ses projets clients, Visian est à la recherche d'un Data Engineer Python/Spark/Deltalake. Tâches: Conception, de?veloppement et de?ploiement des pipelines de donne?es efficaces pour l?extraction, la transformation et le chargement (ETL) des donne?es, - Collaboration avec les e?quipes me?tier pour comprendre les besoins en...
-
Data Engineer
il y a 1 jour
Paris, Île-de-France MP DATA Temps pleinEn tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l'optimisation et la fiabilisation de nos pipelines de données à grande échelle, au cœur de notre plateforme analytique. Votre expertise sur Databricks et l'environnement Spark sera essentielle pour garantir des traitements performants, sécurisés et scalables.Vos...
-
Data Engineer – Spark Specialist
il y a 2 semaines
Paris, France Dataiku Temps pleinDataiku is The Universal AI Platform giving organizations control over their AI talent processes and technologies to unleash the creation of analytics models and agents. Providing no- low- and full-code capabilities Dataiku meets teams where they are today allowing them to begin building with AI using their existing skills and knowledge. About the Role...
-
Data Engineer Expérimenté
il y a 1 jour
Paris, Île-de-France MP DATA Temps pleinNous recherchons un(e)Data Engineer expérimenté(e)pour intervenir sur lamise en production, la fiabilisation et l'évolutiond'une plateforme data moderne basée surAWS, Spark et Dataiku.Vous participerez activement à laconstruction et l'optimisationdes environnements de traitement de données à grande échelle, en lien étroit avec les équipes Data...
-
Data Engineer Spark/ Scala
il y a 5 jours
Paris, France Datapy Group Temps pleinVous travaillerez en tant que data engineer sur l?environnement technique suivant: - Spark - Scala Les plus : Kafka, avoir travaillé dans un environnement cloud Vous vous différencierez également par vos qualités humaines, votre savoir-être Le processus de sélection comprend un entretien avec un responsable Datapy, un entretien avec notre client...
-
Spark & PySpark Data Engineer | Lakehouse & Pipelines
il y a 2 semaines
Paris, France Dataiku Temps pleinA leading AI platform company in Paris is seeking a skilled Data Engineer specialized in Spark (PySpark). You will work closely with clients to troubleshoot and enhance data pipelines, ensuring efficient performance and reliability. Responsibilities include optimizing Spark environments and integrating various data workflows. The ideal candidate has...
-
Data Engineer
il y a 2 jours
Paris, France MP DATA Temps pleinEn tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l'optimisation et la fiabilisation de nos pipelines de données à grande échelle, au cœur de notre plateforme analytique. Votre expertise sur Databricks et l'environnement Spark sera essentielle pour garantir des traitements performants, sécurisés et scalables.Vos...
-
Data Engineer – Spark Specialist
il y a 1 semaine
Paris, Île-de-France Dataiku Temps pleinDataiku is The Universal AI Platform, giving organizations control over their AI talent, processes, and technologies to unleash the creation of analytics, models, and agents. Providing no-, low-, and full-code capabilities, Dataiku meets teams where they are today, allowing them to begin building with AI using their existing skills and knowledge.About the...
