Expert Big Data – Spark

il y a 5 jours

Montreuil, Île-de-France Free-Work Temps plein

Dans le cadre de notre développement, nous recherchons un
Expert Big Data
pour accompagner un acteur majeur du
secteur bancaire
sur des projets stratégiques liés à la transformation et à l'optimisation de ses plateformes de données.

Le consultant aura un rôle clé dans l'architecture et la mise en œuvre des pipelines Big Data, garantissant performance, scalabilité et conformité aux exigences métier et réglementaires.

Objectifs de la mission :

  • Conception et développement de pipelines Big Data

  • Définir et mettre en place des architectures de traitement de données complexes.

  • Développer et optimiser des workflows Spark et Airflow pour des traitements batch et temps réel.

  • Assurer la qualité, la fiabilité et la performance des pipelines.

  • Support stratégique et technique

  • Conseiller les équipes sur les choix technologiques et les bonnes pratiques Big Data.

  • Participer à la définition de la stratégie de données et à la roadmap technique.

  • Collaborer étroitement avec les équipes métier et IT pour anticiper les besoins et prioriser les évolutions.

  • Gouvernance et qualité des données

  • Garantir la conformité des pipelines aux normes de sécurité et réglementaires du secteur bancaire.

  • Mettre en place des mécanismes de supervision, de monitoring et d'alerte.
  • Assurer la documentation technique et fonctionnelle des solutions déployées.

Profil candidat:

Profil recherché :

  • Expertise solide sur Spark et Airflow pour la conception et l'optimisation de pipelines Big Data.
  • Expérience significative dans des environnements bancaires ou financiers.
  • Bonne connaissance des architectures Big Data : ETL, data lake, data warehouse, flux batch et temps réel.
  • Capacité à concevoir des solutions robustes, scalables et performantes.
  • Sensibilité à la sécurité, la confidentialité et la conformité des données.
  • Esprit d'analyse, autonomie et capacité à travailler sur des projets stratégiques.
  • Excellente communication et aptitude à collaborer avec des équipes techniques et métiers.

  • Data Ingénieur Pyspark Big data Python

    il y a 3 jours

    Montreuil, Île-de-France Collective Temps plein

    Je recherche pour un client un Data Ingénieur expérimentéExpérience en ETL et restitution de donnéesCompétence technique: Pyspark, Big Data, PythonMission longue dans le 93 (RER A)

  • Data Engineer

    il y a 3 jours

    Montreuil, Île-de-France Free-Work Temps plein

    Nous sommes à la recherche d'un Développeur Big Data Java/Scala –Projet Migration DataHub V2Objectif de la mission :Assurer un service de développement Big Data dans un environnement distribué à forte volumétrie. Accompagnement sur les phases de conception, développement, industrialisation et maintien des traitements.Stack et compétences techniques...

  • Architecte Big Data

    il y a 5 jours

    Montreuil, Île-de-France Sécurité sociale Temps plein

    Architecte Big Data & IA (MLOps) F/HPublié aujourd'hui • Date limite de candidature 30/11/2025CDIMontreuilde € à € par anNIVEAU VITélétravail possibleNVHADD116507URSSAF CAISSE NATIONALEAvec vous, agir pour une protection sociale durable et solidaireTravailler au sein du réseau des URSSAF, c'est faire partie d'un collectif qui s'engage où chacun...

  • data ingenieur expert h/f

    il y a 3 heures

    Montreuil, Île-de-France KLESIA Temps plein

    CE POSTE EST OUVERT A TOUT TYPE DE HANDICAPKLESIA s'engage à assurer un avenir serein et contribuer à la qualité de vie pour tous.KLESIA s'engage pour la société en apportant des solutions de prévention d'assurance de personnes et de services simples, innovantes, solidaires et durables, adaptées aux besoins de nos clients et à ceux de leurs proches,...

  • Data Privacy and Protection Expert f/h GDO

    il y a 3 jours

    Montreuil, Île-de-France BNP Paribas Temps plein

    Votre missionVous contribuerez au développement, à l'adaptation et à l'adoption des directives, politiques, méthodologies et outils au niveau du Groupe en matière de protection et d'éthique des données. Votre travail quotidien implique une coordination permanente avec des partenaires majeurs tels que LEGAL, RISK ou IT Group.Vous faciliterez...

  • STAGE - Data Engineering Platform Automation Ops H/F - 6 mois

    il y a 2 semaines

    Montreuil, Île-de-France BNP Paribas Temps plein

    Au sein de l'IT Group Production, la division Stability and Resilience (STA) comprend environ 220 personnes.Les équipes STA se composent d'experts de la Data aux compétences variées : Data Viz, BI, Big Data, Data science, ...Ses interlocuteurs sont tous les acteurs de l'IT Group Production, les DSI des périmètres métiers (BCEF, PF, AM, Cardif...) ainsi...

  • STAGE - Data Engineering Ops & Admin Kafka - Elasticsearch (H/F) - 6 mois

    il y a 2 semaines

    Montreuil, Île-de-France BNP Paribas Temps plein

    Au sein de l'IT Group Production, la division Stability and Resilience (STA) comprend environ 220 personnes.Les équipes STA se composent d'experts de la Data aux compétences variées : Data Viz, BI, Big Data, Data science, ...Ses interlocuteurs sont tous les acteurs de l'IT Group Production, les DSI des périmètres métiers (BCEF, PF, AM, Cardif...) ainsi...

  • Expert CDP

    il y a 1 semaine

    Montreuil, Île-de-France MA (Montreal Associates) Temps plein

    Objectifs principauxGarantir la fiabilité, la performance et la sécurité des plateformes CDP & HDPAutomatiser et industrialiser les opérations d'exploitationPiloter et traiter les incidents de productionContribuer à la modernisation et l'évolution des environnements Big DataResponsabilitésExploitation & amélioration continueOptimiser les...

  • Data Engineer IA

    il y a 5 jours

    Montreuil, Île-de-France Sécurité sociale Temps plein

    Data Engineer IA / MLOps F/HPublié aujourd'hui • Date limite de candidature 15/01/2026CDIMontreuilde € à € par anNIVEAU VATélétravail possibleNVHADD116510URSSAF CAISSE NATIONALEAvec vous, agir pour une protection sociale durable et solidaireTravailler au sein du réseau des URSSAF, c'est faire partie d'un collectif qui s'engage où chacun met ses...

  • Data Steward H/F

    il y a 2 jours

    Montreuil, Île-de-France INGENIUM ANIMALIS Temps plein

    Envie de vous développer dans un environnement dynamique et qui a du sens ? Rejoignez une entreprise à taille humaine Expert français de la donnée des animaux de compagnie, Ingenium animalis collecte, traite et analyse les données de plus de 48 millions d'animaux*.Ingenium animalis intervient notamment au travers de délégations de service public,...