Data Engineer Pyspark
il y a 5 jours
**Expertises spécifiques**:
Nous recherchons un profil Hadoop / PySpark qui sera en charge, en lien avec l'équipe de production applicative / devops, de mettre en ?uvre techniquement les évolutions du datalake. Passionné par les données, capable de s?adapter à un environnement dynamique et en constante évolution, le prestataire doit faire preuve d'autonomie, d'initiative et d'une forte capacité d'analyse pour résoudre des problèmes complexes.
**Les tâches suivantes seront confiés au consultant**:
? Mettre en ?uvre de nouvelles ingestions de données, data prep/transformation
? Maintenir et faire évoluer nos outils de gestion des pipeline de données (Pyspark + shell scripting)
? Adresser à l'équipe devops les demandes relatives aux évolutions de la plateforme
? Eventuellement mettre en ?uvre une couche d'APIs afin d'exposer nos données
**Le consultant idéal devra posséder les compétences suivantes**:
? Excellente maîtrise de la plateforme Hadoop, ainsi que du développement en Python/PySpark et Hive. Une bonne connaissance de SQL, GIT, Jenkins, Jira, et du shell scripting sous Unix/Linux est également nécessaire.
? Maîtrise de l'anglais, tant à l'écrit qu'à l'oral, pour faciliter les échanges avec nos interlocuteurs basés à Porto, qui représentent une part importante de notre équipe IT.
? Expérience dans des environnements agiles, en particulier avec la méthodologie SCRUM.
? Connaissances et expériences avec des outils et technologies tels que Indexima, Alteryx, Altair, GCP/Big Query, ainsi que des bibliothèques Python orientées API seraient des atouts appréciables.
? Capacité à rédiger des spécifications techniques claires et précises.
? Dynamisme, excellent relationnel et capacité à travailler en équipe.
? Force de proposition et curiosité technique pour explorer de nouvelles solutions et technologies.
-
Data Engineer
il y a 2 semaines
Paris, France KEONI CONSULTING Temps pleinCONTEXTE Métiers Fonctions : Data Management, Data Engineer Spécialités technologiques : Big Data Compétences Technologies et Outils : HadoopPyspark (2 ans) Dans le cadre d?un projet stratégique autour du recouvrement et de la lutte contre la fraude, nous recherchons un Data Engineer confirmé spécialisé en PySpark, pour rejoindre une équipe...
-
Data Engineer/ Analyst – PySpark
il y a 3 jours
Paris, Île-de-France ABSIS CONSEIL Temps pleinDans le cadre d?un programme de transformation Data, un acteur du secteur assurantiel recherche un Data Engineer / Data Analyst confirmé et développeur Pyspark et PowerBI pour intervenir sur un projet de modernisation et d?harmonisation de la plateforme Data.Contexte de la missionLe projet vise à :moderniser l?infrastructure Data,optimiser le modèle de...
-
Data Engineer Python/PySpark/Databricks
il y a 2 jours
Paris, Île-de-France Free-Work Temps pleinMission Freelance – Data Engineer Pas de sous-traitanceJe recherche un·e Data Engineer (Python / PySpark / Databricks / AWS) pour une mission stratégique au sein d'un grand groupe international dans l'énergie Paris – 3 jours sur site / 2 jours remote Démarrage : 08/12/2025 TJM selon profilProcess : Codingame puis live coding Ce qui t'attend :...
-
Senior Data Engineer PySpark
il y a 2 jours
Paris, Île-de-France AMD BLUE Temps pleinQui sommes-nous ?Chez AMD Blue, l'innovation est notre passion, et nous sommes fiers de présenter Blue Data. Avec une présence établie sur l'ensemble du territoire français et une récente expansion aux États-Unis, nous sommes résolument tournés vers l'avenir.Dans le cadre d?un besoin client, nous avons l'opportunité d'accueillir un nouveau membre au...
-
Data Engineer Aws/python/pyspark/databricks/kinesis
il y a 7 jours
Paris, France Cherry Pick Temps pleinNous recherchons une prestation de Data Engineering avec des compétences sur Python/Pandas/Pyspark/Databricks/Kinesis/MongoDB sous un environnement AWS Cloud. Le Data Engineer doit avoir des connaissances solides du langage de programmation Python et avoir travaillé avec ce langage pendant au moins les 4 dernières années. Le data engineer évoluera dans...
-
Data Engineer Python/pyspark/databricks
il y a 3 jours
Paris, France Comet Temps plein? Mission Freelance ? Data Engineer ? ? Pas de sous-traitance Je recherche un-e Data Engineer (Python / PySpark / Databricks / AWS) pour une mission stratégique au sein d?un grand groupe international dans l?énergie ? ? Paris ? 3 jours sur site / 2 jours remote **? Démarrage**: 08/12/2025 ? TJM selon profil **Process**: Codingame puis live coding **? Ce...
-
Data Engineer
il y a 22 heures
Paris, France Zenika Temps pleinUne entreprise innovante dans le secteur tech recherche un Data Engineer expert en Python et pyspark pour intégrer des solutions data. Le candidat idéal doit avoir au moins 6 ans d'expérience et un Bac +5. Vous travaillerez sur des projets complexes dans un environnement agile, avec un fort accent sur la qualité et l'innovation. Rejoignez une équipe...
-
Data Engineer Python/PySpark/Microsoft Fabric
il y a 1 jour
Paris, France Collective.work Temps pleinObjectifs et livrables Nous recherchons 2 prestations de Data Engineer avec des compétences sur Python/PySpark/Microsoft Fabric sous un environnement Azure Cloud. Budget Selon Profil Responsabilités Le prestataire Data Engineer sera responsable de la conception, du développement et de la mise en production de l'architecture de données. Il Devra Notamment...
-
Spark & PySpark Data Engineer | Lakehouse & Pipelines
il y a 2 semaines
Paris, France Dataiku Temps pleinA leading AI platform company in Paris is seeking a skilled Data Engineer specialized in Spark (PySpark). You will work closely with clients to troubleshoot and enhance data pipelines, ensuring efficient performance and reliability. Responsibilities include optimizing Spark environments and integrating various data workflows. The ideal candidate has...
-
Data Engineer Python
il y a 2 semaines
Paris, France K2 Partnering Solutions Temps pleinNous recherchons un Data Engineer freelance pour intervenir sur une mission de longue durée (minimum 12 mois) dans le secteur de l?assurance. Vous rejoindrez une direction data structurée et en pleine croissance, au c?ur d?une transformation digitale d?envergure. **? Objectifs et contexte de la mission**: En tant que Data Engineer, vous intégrerez une...