Data Engineer Spark/Scala F/H

il y a 16 heures


IssylesMoulineaux HautsdeSeine, France Size Up Consulting Temps plein
Au sein du chantier concerné, travaillant en mode agile (SCRUM), la mission consistera à prendre part aux développements sur l'outil, tout en étant garant de la pérennité et la non régression de l’outillage déjà en place, sur les deux sujets ci-dessous :
* L\ *\*'optimisation de la performance\ *\*, temps d'exécution, utilisation des ressources machines afin de tenir les délais de traitement des informations et de leurs distributions vers les consommateurs avals (Calculateurs et reporting) dans le cadre des arrêtés mais également des besoins quotidiens. Notamment afin de faire face à l'augmentation significative de la volumétrie de données sur S2 2024 et 2025 en lien avec les déploiements GASPARD * La contribution à la **mise en place des outils de monitoring technique** et fonctionnelle **Compétences techniques requises :
**\ - Spark / Scala:
confirmé\ - Kafka:
connaissance ++\ - à l'aise avec la programmation fonctionnelle (connaissance des librairies ZIO, MONIX, CATS appréciée)L’équipe est principalement localisée à Paris mais dispose de ressources à Porto. L’anglais est donc d’usage dans l’équipe.
Votre profil nous intéresse Découvrez notre processus de recrutement :
* Premier échange avec un recruteur pour en savoir plus sur vous * Codingame à réaliser à la maison * Un entretien RH via teams ou en présentiel * Un entretien opérationnel avec un Directeur/Responsable d’agence, c’est la dernière étape pour rejoindre l’aventure Size Up Consulting
**Vous êtes :
*** diplômé d'un BAC+5 type Diplôme d'Ingénieur / Master * confirmé sur le métier avec une expérience professionnelle d'environ 6-9 ans **Compétences professionnelles :
*** Expérience significative sur des travaux d'optimisation de la performance, temps d'exécution des traitements dans la distribution des données basées sur une plateforme de distribution Cloudera Hadoop (cluster on premise) * Expérience dans la mise en œuvre de technologies et frameworks Big Data et NoSQL (Hadoop, Kafka, Spark, Scala, Hive, SolR, HBase, Kerberos) * Expérience de travail dans un environnement Agile ;
avec outils et méthodologies associés (Confluence, Jira, Scrum) **Soft skills :
*** Curiosité, agilité d’esprit, goût pour l’innovation * Capacité à s’organiser et travailler en autonomie, rigueur * Esprit d’équipe * Esprit d’initiative, pro-actif * Capacité à comprendre les enjeux techniques nombreux sur le projet et dialoguer avec les autres développeurs * Bonne communication orale et écrite (Français et Anglais)
  • Data Engineer Scala

    Il y a 2 mois


    Issy-les-Moulineaux, France SCALIAN Temps plein

    Contribuez à des projets data complexes avec des technologies avancées. Quel sera votre rôle ? Nous recherchons un(e) Data Engineer Scala / Spark. Vous rejoignez l?équipe d?ingénierie data pour concevoir des pipelines de traitement de données à grande échelle. **Au quotidien, vos missions seront les suivantes**: Développer et optimiser des pipelines...


  • Issy-les-Moulineaux, France SCALIAN Temps plein

    Contribuez à des projets data complexes avec des technologies avancées.Quel sera votre rôle ?Nous recherchons un(e) Data Engineer Scala / Spark. Vous rejoignez l?équipe d?ingénierie data pour concevoir des pipelines de traitement de données à grande échelle.Au quotidien, vos missions seront les suivantes :Développer et optimiser des pipelines de...

  • Data Engineer Scala

    Il y a 2 mois


    Issy-les-Moulineaux, France SCALIAN Temps plein

    **Quel sera votre rôle ?** Nous recherchons un(e) Data Engineer Scala / Spark. Vous rejoignez l’équipe d’ingénierie data pour concevoir des pipelines de traitement de données à grande échelle. **Au quotidien, vos missions seront les suivantes**: - Développer et optimiser des pipelines de données en utilisant Scala et Spark, dans un...

  • Data Engineer

    Il y a 6 mois


    Issy-les-Moulineaux, France AGIL IT Temps plein

    En tant que consultant Data Engineer, vous interviendrez dans le cadre de projets Big Data en cours ou From Scratch. Vous contribuerez : Aux études, à la conception et à l'implémentation des projets A l'intégration de nouveaux flux en mode batch ou streaming A la configuration et optimisation des programmes applicatifs A la configuration des outils de...


  • Neuilly-sur-Seine, France ami consulting Temps plein

    Prsentation du cabinet :a.m.i consulting est une entreprise familiale innovante (Le cabinet a obtenu en2019 la bourse InnovUP de BPI France) qui exploite pour vous la data afin de vous fournir des consultants experts dans ces domaines. Soucieux du bientre de nos collaborateurs et conscient des enjeux environnementaux nous nous engageons rduire notre...


  • Issy-les-Moulineaux, France CAPPUCCINO CONSULTING Temps plein

    Equipe produit de 5/10 personnes **Compétences requises**: Développement Python **Data Pipeline**: ETL SQL **Compétences souhaitées**: Azure Devops Azure data factory Azure Datalake Storage Azure Machine Learning Services Azure Cloud architectures Azure Security (indentity, keyvault,...) Spark avec PySpark Databricks Scrum Profil Data engineer mais...


  • Neuilly-sur-Seine, France ami consulting Temps plein

    Description du poste à pourvoirPrésentation du cabinet :a.m.i consulting est une entreprise familiale innovante (Le cabinet a obtenu en 2019 la bourse Innov'UP de BPI France) qui exploite pour vous la data, afin de vous fournir des consultants experts dans ces domaines. Soucieux du bien-être de nos collaborateurs et conscient des enjeux environnementaux,...

  • Data Engineer

    Il y a 6 mois


    Issy-les-Moulineaux, France Omnilog Temps plein

    **Que recherchons-nous ?** Nous recherchons un(e) Ingénieur Data H/F pour intervenir auprès de l'un de nos clients, l'un des principaux médias Français situé à Issy-les-Moulineaux, au sein de l'équipe Data, dans un écosystème Cloud en AWS. Vous interviendrez par exemple au sein du groupe sur des problématiques liées à l'analyse des profils...

  • Chef de projet Data Spark

    il y a 1 semaine


    Neuilly-sur-Seine, Île-de-France Recooty Temps plein

    Présentation du poste : Nous recherchons un Chef de projet expérimenté en Big Data pour rejoindre notre équipe pluridisciplinaire. La mission consiste à concevoir, développer et optimiser des pipelines de données à grande échelle en utilisant Spark et Scala.Missions principales :Conception et architecture : Définir et mettre en œuvre des solutions...


  • Île-de-France Apside Temps plein

    OPPORTUNITE A POURVOIR : Data Engineer Découvrez la Vie Apsidienne et vous aussi, devenez ApsidienOn aurait pu demander à Chat GPT de vous démontrer en quoi Apside est l'ESN qu'il vous faut, mais on préfère que vous le découvriez vous-mêmes Découvrez votre future mission ContexteEn tant que Data Engineer, vous serez intégré chez l'un...


  • Île-de-France, France Apside Temps plein

    OPPORTUNITE A POURVOIR : Data Engineer Découvrez la Vie Apsidienne et vous aussi, devenez ApsidienOn aurait pu demander à Chat GPT de vous démontrer en quoi Apside est l'ESN qu'il vous faut, mais on préfère que vous le découvriez vous-mêmes Découvrez votre future mission ContexteEn tant que Data Engineer, vous serez intégré chez l'un...

  • Data Engineer

    Il y a 6 mois


    Issy-les-Moulineaux, France Niji Temps plein

    CDI - Temps plein - De 2 à 5 ans d’expérience - Master, DESS, DEA, Bac+5 - Conseil Data Intégrez le nouveau Pôle Data de Niji ! **Mission**: Le pôle Data de Niji c'est avant tout une équipe à taille humaine et pluridisciplinaire, composée de consultants et experts qui conseillent et appuient nos clients sur toutes les étapes du cycle des...

  • Data Engineer

    Il y a 6 mois


    Issy-les-Moulineaux, France Niji Temps plein

    Le pôle Data de Niji c'est avant tout une équipe à taille humaine et pluridisciplinaire, composée de consultants et experts qui conseillent et appuient nos clients sur toutes les étapes du cycle des données: - de la collecte à la valorisation dans des services innovants, - en passant par les architectures de stockage et de services. Nos consultants...


  • Suresnes, Hauts-de-Seine, France Direct Assurance Temps plein

    L'équipe " Big Data " a pour mission principale de contribuer à la dynamique continue d'innovation et de perfectionnement de l'entreprise en résolvant des problématiques business concrètes par la mise en place d'une plateforme Data dans le Cloud, ainsi que la conception et la réalisation de solutions techniques de data science en s'appuyant sur des...

  • Senior Data Engineer

    il y a 4 jours


    Malakoff, Hauts-de-Seine, France Safran Temps plein

    Safran est un groupe international de haute technologie opérant dans les domaines de l'aéronautique (propulsion, équipements et intérieurs), de l'espace et de la défense. Sa mission : contribuer durablement à un monde plus sûr, où le transport aérien devient toujours plus respectueux de l'environnement, plus confortable et plus accessible. Safran...

  • Lead Azure Data Engineer

    il y a 4 jours


    Levallois-Perret, Hauts-de-Seine, France SQLI Temps plein

    Description de l'entreprise Rejoignez  SQLI  et faites partie de l'équipe Data, au sein d’une société à taille humaine, mais avec de grandes ambitions. Au sein du pôle Data de SQLI , pour rejoindre une équipe dynamique de +40 passionnés. Des projets digitaux pour des clients grands comptes  : notamment dans les secteurs des services...


  • Malakoff, Hauts-de-Seine, France Safran Temps plein

    Safran est un groupe international de haute technologie opérant dans les domaines de l'aéronautique (propulsion, équipements et intérieurs), de l'espace et de la défense. Sa mission : contribuer durablement à un monde plus sûr, où le transport aérien devient toujours plus respectueux de l'environnement, plus confortable et plus accessible. Safran...

  • Data Engineer H/F

    il y a 4 semaines


    Île-de-France NEXTON Temps plein

    Description de l'entreprise Qui sommes-nous ?Rejoindre NEXTON, c'est intégrer une entreprise où convergent l'esprit d'un cabinet de conseil, la créativité d'une agence et la dynamique d'une ESN ! Grâce à notre expertise, nous accompagnons des clients grands comptes et des pure players tels que SNCF, Orange, et BNP Paribas dans...

  • Data Engineer H/F

    il y a 4 semaines


    Île-de-France, France NEXTON Temps plein

    Description de l'entreprise Qui sommes-nous ?Rejoindre NEXTON, c'est intégrer une entreprise où convergent l'esprit d'un cabinet de conseil, la créativité d'une agence et la dynamique d'une ESN ! Grâce à notre expertise, nous accompagnons des clients grands comptes et des pure players tels que SNCF, Orange, et BNP Paribas dans...

  • Data Engineer

    Il y a 6 mois


    Neuilly-sur-Seine, France OPENVALUE Temps plein

    Descriptif du poste - Pour relever les défis de nos métiers et de notre arrivée au sein du pôle Data & IA de Docaposte, nous recrutons des Data Engineers pour des projets exclusivement data. Nous souhaitons intégrer à nos équipes un profil Data Engineer junior ou senior ayant parmi ses compétences: - Maîtrise de langages de programmation (Java...