Data Engineer Spark/Scala F/H
il y a 16 heures
* L\ *\*'optimisation de la performance\ *\*, temps d'exécution, utilisation des ressources machines afin de tenir les délais de traitement des informations et de leurs distributions vers les consommateurs avals (Calculateurs et reporting) dans le cadre des arrêtés mais également des besoins quotidiens. Notamment afin de faire face à l'augmentation significative de la volumétrie de données sur S2 2024 et 2025 en lien avec les déploiements GASPARD * La contribution à la **mise en place des outils de monitoring technique** et fonctionnelle **Compétences techniques requises :
**\ - Spark / Scala:
confirmé\ - Kafka:
connaissance ++\ - à l'aise avec la programmation fonctionnelle (connaissance des librairies ZIO, MONIX, CATS appréciée)L’équipe est principalement localisée à Paris mais dispose de ressources à Porto. L’anglais est donc d’usage dans l’équipe.
Votre profil nous intéresse Découvrez notre processus de recrutement :
* Premier échange avec un recruteur pour en savoir plus sur vous * Codingame à réaliser à la maison * Un entretien RH via teams ou en présentiel * Un entretien opérationnel avec un Directeur/Responsable d’agence, c’est la dernière étape pour rejoindre l’aventure Size Up Consulting
**Vous êtes :
*** diplômé d'un BAC+5 type Diplôme d'Ingénieur / Master * confirmé sur le métier avec une expérience professionnelle d'environ 6-9 ans **Compétences professionnelles :
*** Expérience significative sur des travaux d'optimisation de la performance, temps d'exécution des traitements dans la distribution des données basées sur une plateforme de distribution Cloudera Hadoop (cluster on premise) * Expérience dans la mise en œuvre de technologies et frameworks Big Data et NoSQL (Hadoop, Kafka, Spark, Scala, Hive, SolR, HBase, Kerberos) * Expérience de travail dans un environnement Agile ;
avec outils et méthodologies associés (Confluence, Jira, Scrum) **Soft skills :
*** Curiosité, agilité d’esprit, goût pour l’innovation * Capacité à s’organiser et travailler en autonomie, rigueur * Esprit d’équipe * Esprit d’initiative, pro-actif * Capacité à comprendre les enjeux techniques nombreux sur le projet et dialoguer avec les autres développeurs * Bonne communication orale et écrite (Français et Anglais)
-
Data Engineer Scala
Il y a 2 mois
Issy-les-Moulineaux, France SCALIAN Temps pleinContribuez à des projets data complexes avec des technologies avancées. Quel sera votre rôle ? Nous recherchons un(e) Data Engineer Scala / Spark. Vous rejoignez l?équipe d?ingénierie data pour concevoir des pipelines de traitement de données à grande échelle. **Au quotidien, vos missions seront les suivantes**: Développer et optimiser des pipelines...
-
Data Engineer Confirmé Scala
il y a 3 jours
Issy-les-Moulineaux, France SCALIAN Temps pleinContribuez à des projets data complexes avec des technologies avancées.Quel sera votre rôle ?Nous recherchons un(e) Data Engineer Scala / Spark. Vous rejoignez l?équipe d?ingénierie data pour concevoir des pipelines de traitement de données à grande échelle.Au quotidien, vos missions seront les suivantes :Développer et optimiser des pipelines de...
-
Data Engineer Scala
Il y a 2 mois
Issy-les-Moulineaux, France SCALIAN Temps plein**Quel sera votre rôle ?** Nous recherchons un(e) Data Engineer Scala / Spark. Vous rejoignez l’équipe d’ingénierie data pour concevoir des pipelines de traitement de données à grande échelle. **Au quotidien, vos missions seront les suivantes**: - Développer et optimiser des pipelines de données en utilisant Scala et Spark, dans un...
-
Data Engineer
Il y a 6 mois
Issy-les-Moulineaux, France AGIL IT Temps pleinEn tant que consultant Data Engineer, vous interviendrez dans le cadre de projets Big Data en cours ou From Scratch. Vous contribuerez : Aux études, à la conception et à l'implémentation des projets A l'intégration de nouveaux flux en mode batch ou streaming A la configuration et optimisation des programmes applicatifs A la configuration des outils de...
-
Consultant Lead Big Data Spark Scala HF
il y a 2 jours
Neuilly-sur-Seine, France ami consulting Temps pleinPrsentation du cabinet :a.m.i consulting est une entreprise familiale innovante (Le cabinet a obtenu en2019 la bourse InnovUP de BPI France) qui exploite pour vous la data afin de vous fournir des consultants experts dans ces domaines. Soucieux du bientre de nos collaborateurs et conscient des enjeux environnementaux nous nous engageons rduire notre...
-
3x Senior Data Engineer Azure- Python/etl/anglais
Il y a 6 mois
Issy-les-Moulineaux, France CAPPUCCINO CONSULTING Temps pleinEquipe produit de 5/10 personnes **Compétences requises**: Développement Python **Data Pipeline**: ETL SQL **Compétences souhaitées**: Azure Devops Azure data factory Azure Datalake Storage Azure Machine Learning Services Azure Cloud architectures Azure Security (indentity, keyvault,...) Spark avec PySpark Databricks Scrum Profil Data engineer mais...
-
Consultant Lead Big Data Spark
il y a 1 semaine
Neuilly-sur-Seine, France ami consulting Temps pleinDescription du poste à pourvoirPrésentation du cabinet :a.m.i consulting est une entreprise familiale innovante (Le cabinet a obtenu en 2019 la bourse Innov'UP de BPI France) qui exploite pour vous la data, afin de vous fournir des consultants experts dans ces domaines. Soucieux du bien-être de nos collaborateurs et conscient des enjeux environnementaux,...
-
Data Engineer
Il y a 6 mois
Issy-les-Moulineaux, France Omnilog Temps plein**Que recherchons-nous ?** Nous recherchons un(e) Ingénieur Data H/F pour intervenir auprès de l'un de nos clients, l'un des principaux médias Français situé à Issy-les-Moulineaux, au sein de l'équipe Data, dans un écosystème Cloud en AWS. Vous interviendrez par exemple au sein du groupe sur des problématiques liées à l'analyse des profils...
-
Chef de projet Data Spark
il y a 1 semaine
Neuilly-sur-Seine, Île-de-France Recooty Temps pleinPrésentation du poste : Nous recherchons un Chef de projet expérimenté en Big Data pour rejoindre notre équipe pluridisciplinaire. La mission consiste à concevoir, développer et optimiser des pipelines de données à grande échelle en utilisant Spark et Scala.Missions principales :Conception et architecture : Définir et mettre en œuvre des solutions...
-
Data Engineer Spark/Scala/Python
Il y a 2 mois
Île-de-France Apside Temps pleinOPPORTUNITE A POURVOIR : Data Engineer Découvrez la Vie Apsidienne et vous aussi, devenez ApsidienOn aurait pu demander à Chat GPT de vous démontrer en quoi Apside est l'ESN qu'il vous faut, mais on préfère que vous le découvriez vous-mêmes Découvrez votre future mission ContexteEn tant que Data Engineer, vous serez intégré chez l'un...
-
Data Engineer Spark/Scala/Python
Il y a 2 mois
Île-de-France, France Apside Temps pleinOPPORTUNITE A POURVOIR : Data Engineer Découvrez la Vie Apsidienne et vous aussi, devenez ApsidienOn aurait pu demander à Chat GPT de vous démontrer en quoi Apside est l'ESN qu'il vous faut, mais on préfère que vous le découvriez vous-mêmes Découvrez votre future mission ContexteEn tant que Data Engineer, vous serez intégré chez l'un...
-
Data Engineer
Il y a 6 mois
Issy-les-Moulineaux, France Niji Temps pleinCDI - Temps plein - De 2 à 5 ans d’expérience - Master, DESS, DEA, Bac+5 - Conseil Data Intégrez le nouveau Pôle Data de Niji ! **Mission**: Le pôle Data de Niji c'est avant tout une équipe à taille humaine et pluridisciplinaire, composée de consultants et experts qui conseillent et appuient nos clients sur toutes les étapes du cycle des...
-
Data Engineer
Il y a 6 mois
Issy-les-Moulineaux, France Niji Temps pleinLe pôle Data de Niji c'est avant tout une équipe à taille humaine et pluridisciplinaire, composée de consultants et experts qui conseillent et appuient nos clients sur toutes les étapes du cycle des données: - de la collecte à la valorisation dans des services innovants, - en passant par les architectures de stockage et de services. Nos consultants...
-
Lead Big Data Engineer H/F
il y a 4 jours
Suresnes, Hauts-de-Seine, France Direct Assurance Temps pleinL'équipe " Big Data " a pour mission principale de contribuer à la dynamique continue d'innovation et de perfectionnement de l'entreprise en résolvant des problématiques business concrètes par la mise en place d'une plateforme Data dans le Cloud, ainsi que la conception et la réalisation de solutions techniques de data science en s'appuyant sur des...
-
Senior Data Engineer
il y a 4 jours
Malakoff, Hauts-de-Seine, France Safran Temps pleinSafran est un groupe international de haute technologie opérant dans les domaines de l'aéronautique (propulsion, équipements et intérieurs), de l'espace et de la défense. Sa mission : contribuer durablement à un monde plus sûr, où le transport aérien devient toujours plus respectueux de l'environnement, plus confortable et plus accessible. Safran...
-
Lead Azure Data Engineer
il y a 4 jours
Levallois-Perret, Hauts-de-Seine, France SQLI Temps pleinDescription de l'entreprise Rejoignez SQLI et faites partie de l'équipe Data, au sein d’une société à taille humaine, mais avec de grandes ambitions. Au sein du pôle Data de SQLI , pour rejoindre une équipe dynamique de +40 passionnés. Des projets digitaux pour des clients grands comptes : notamment dans les secteurs des services...
-
Senior Data Engineer, Information Services
il y a 4 jours
Malakoff, Hauts-de-Seine, France Safran Temps pleinSafran est un groupe international de haute technologie opérant dans les domaines de l'aéronautique (propulsion, équipements et intérieurs), de l'espace et de la défense. Sa mission : contribuer durablement à un monde plus sûr, où le transport aérien devient toujours plus respectueux de l'environnement, plus confortable et plus accessible. Safran...
-
Data Engineer H/F
il y a 4 semaines
Île-de-France NEXTON Temps pleinDescription de l'entreprise Qui sommes-nous ?Rejoindre NEXTON, c'est intégrer une entreprise où convergent l'esprit d'un cabinet de conseil, la créativité d'une agence et la dynamique d'une ESN ! Grâce à notre expertise, nous accompagnons des clients grands comptes et des pure players tels que SNCF, Orange, et BNP Paribas dans...
-
Data Engineer H/F
il y a 4 semaines
Île-de-France, France NEXTON Temps pleinDescription de l'entreprise Qui sommes-nous ?Rejoindre NEXTON, c'est intégrer une entreprise où convergent l'esprit d'un cabinet de conseil, la créativité d'une agence et la dynamique d'une ESN ! Grâce à notre expertise, nous accompagnons des clients grands comptes et des pure players tels que SNCF, Orange, et BNP Paribas dans...
-
Data Engineer
Il y a 6 mois
Neuilly-sur-Seine, France OPENVALUE Temps pleinDescriptif du poste - Pour relever les défis de nos métiers et de notre arrivée au sein du pôle Data & IA de Docaposte, nous recrutons des Data Engineers pour des projets exclusivement data. Nous souhaitons intégrer à nos équipes un profil Data Engineer junior ou senior ayant parmi ses compétences: - Maîtrise de langages de programmation (Java...