Data Engineer Spark

il y a 1 mois


Paris IledeFrance, Paris, France VISIAN Temps plein

Travailler sur la plateforme data permettant à tous les domaines producteurs de données de mettre à disposition dans un datalake de la donnée brute ou retravaillée. Cette plateforme data permet notamment de gérer les fonctions et données du périmètre métier. A ce titre elle permet de : - Intégrer et mettre en qualité des données brutes reçues des distributeurs - Mettre à disposition les données GRD exploitables pour toute utilisation par l'entité du client: besoins portés par tous les domaines métiers de nature opérationnelle ou analytique Profil candidat: - Maîtrise des outils Databricks (création de jobs, cluster, notebook) et pouvoir requêter efficacement avec SQL - Maintien en condition opérationnelle de la plateforme en production (analyse et correction d?incidents, de defects) - Développement des jobs d'ingestion et transformation data Python avec Spark sur de gros volumes de données - Fournir une vision long terme, tant opérationnelle qu?en terme de stratégie de plateforme data - Accompagner et promouvoir les bonnes pratiques - Participer aux ateliers de conception techniques et fonctionnels - Rédaction et actualisation de la documentation technique Une excellente maîtrise de Spark est recherchée


  • Data Engineer

    il y a 1 mois


    Paris, 75001, Ile-de-France, Paris Hanson Regan Limited Temps plein

    Hanson Reganis recherche actuellement un Data Engineer (Python Azure) pour travailler avec une équipe de données existante sur une gamme de nouveaux projets passionnants et essentiels à l'entreprise. 2 jours par semaine sur site à Paris sont requis pour ce poste. Les candidats devront maîtriser Python (Spark), SQL et les requêtes SQL, les...


  • Paris, 75001, Ile-de-France, Paris Cherry Pick Temps plein

    Cherry Pick est à la recherche d'un Analytics Engineer/Data Engineer pour l'un de ses clients dans le secteur du sport. Vos responsabilités: ? Implémenter des solutions, à partir des règles fonctionnelles établies par le Product Manager / Data Owner ? Vous documentez les règles de qualités décrites dans Collibra au préalable pour valider...

  • Data engineer

    il y a 1 mois


    Paris, 75001, Ile-de-France, Paris Hn Groupe Temps plein

    La mission sera de prendre part aux travaux de rendus nécessaires par le maintien en condition opérationnel (MCO) des modules du HUB tout en étant garant de la pérennité et la non régression de l?outillage déjà en place. Travail en méthode Agile avec les acteurs métiers et l'équipe Datalake. Nous recherchons un Data Engineer de 3 ans 6 ans...

  • Data engineer

    il y a 1 mois


    Paris, 75001, Ile-de-France, Paris R&S TELECOM Temps plein

    Nous sommes à la recherche d'un Data engineer : Vous avez une expérience concrète dans la création et la mise en ?uvre de solutions Big Data, de préférence sur des plateformes Cloud. Vous maîtrisez des langages et outils de programmation tels que Spark, Scala, SQL, et Python. Vous possédez de fortes capacités d?analyse et êtes capable de...

  • Data Engineer

    il y a 1 mois


    Paris, 75001, Ile-de-France, Paris Savane Temps plein

    Au sein de la Data Factory de notre client, vous travaillerez au côté d?un Data Architecte, d?une petite équipe internationale de Data Engineer, et de DevOps. Lot 1 : -Animation et Coaching d?une équipe de Data Engineer Junior -Transfert des connaissances / rédaction documentaire des pipelines data (chaine de traitement des données) Lot 2 : -Evolution...

  • Data Engineer Python

    il y a 1 mois


    Paris, 75001, Ile-de-France, Paris GRADIANT Temps plein

    Nous recherchons pour l'un de nos clients, une entreprise du CAC 40, un(e) Data Engineer senior pour intégrer une mission longue de 3 ans. Le rôle du Data Engineer senior dans ce projet impliquera la conception et la mise en ?uvre des composants de plateforme suivants : ? Ingestion de données ? Traitement et normalisation des données. ? Distribuer...


  • Paris, 75001, Ile-de-France, Paris Worldwide People Ltd Temps plein

    Data ingénieur sénior spark, scala, HQL CI/CD client banque basé à Paris, un Data ingénieur sénior. Projet : Le projet consiste à industrialiser et rationnaliser les cas d?usage data de la BFI autour des capacités Big Data (Datalake et Qliksense) afin de décommissionner les développements métiers SAS. Mission : Développements de traitements SPARK...

  • Data Engineer H/F

    Il y a 3 mois


    Paris, 75001, Paris, France CHALLENGE MEDIA MANAGEMENT Temps plein

    Depuis 18 ans, C2m fournit du conseil stratégique et technologique dans les métiers liés aux médias et à l’audiovisuel en France et à l’international, et est devenu le leader de son domaine. Au cœur de la convergence digitale, C2m accompagne les plus grands acteurs du secteur, tels que Canal+, TF1, M6, Orange, Microsoft, Technicolor, Bouygues...

  • Data engineer

    il y a 1 mois


    Paris, 75001, Ile-de-France, Paris Anywr freelance Temps plein

    Description de la mission : Vous intégrez une équipe agile situé à Paris, composé de 2 data ing, d?un dataViz, d?un Dev Front et d?un PO. Mission : - Contribuer à la vie d?équipe, dans un esprit d?équipe et dans un cadre agile, - Réaliser des livrables de qualité (participer à la rédaction des US, aux développements, aux estimations, à...


  • Paris, 75001, Ile-de-France, Paris WE + Temps plein

    Contexte de la mission Dans le cadre de la construction de la stratégie data centric de l?entreprise, nous recherchons une personne pouvant nous aider à développer notre solution ESB sur AWS. Cette solution nécessitera le développement de services (webservices) au sein de l?ESB et de solution d?abonnements pour que les utilisateurs puissent s?abonner à...


  • Paris, 75001, Ile-de-France, Paris Smarteo Temps plein

    Smarteo recherche pour l'un de ses clients, grand compte, Un Data ingénieur sénior sur Paris Projet : Le projet consiste à industrialiser et rationnaliser les cas d'usage data de la BFI autour des capacités Big Data (Datalake et Qliksense) afin de décommissionner les développements métiers SAS. Mission : Développements de traitements SPARK...


  • Paris, 75001, Ile-de-France, Paris Groupe Aptenia Temps plein

    Poste Nous recherchons un Data Analyst Senior (5-10 ans d'expérience) disponible immédiatement pour une mission freelance à Paris. Vos missions : Analyse de données complexes et création de rapports avancés. Automatisation de processus via Python. Collaboration avec les équipes techniques et business. Compétences requises : 5-10 ans...


  • Paris, 75001, Ile-de-France, Paris Hn Groupe Temps plein

    Vous êtes expert en informatique avec plus de dix ans d?expérience professionnelle et vous êtes passionné par le secteur d?activité de la Data. Au sein d?une équipe d?expertise technique de 10 personnes vous contribuez à la construction du socle data. Dans une mission de longue durée : > Vous maitrisez ou connaissez les technologies suivantes :...


  • Paris, 75001, Ile-de-France, Paris 4 Impact Temps plein

    En tant que Data Engineer spécialisé en Snowflake, DBT et Power BI, vous jouerez un rôle clé dans la conception, la mise en ?uvre et l'optimisation de l'infrastructure de données de l'entreprise. Vous serez en charge de garantir la qualité, la disponibilité et l'intégrité des données, tout en collaborant étroitement avec les...


  • Paris, 75001, Ile-de-France, Paris Cherry Pick Temps plein

    Cherry Pick est à la recherche d'un "Consultant Data" pour un client dans le secteur de la banque Missions : Vous maîtrisez ou connaissez les technologies suivantes : Elasticsearch, Logstash, Kibana, JupyterHub, Apache Spark, Open Metadata Vous assurez le maintien en condition opérationnelle des différentes technologies du socle Data Vous assurez le...


  • Paris, 75001, Ile-de-France, Paris Digistrat consulting Temps plein

    ? Contexte /Objectifs : Dans ce cadre, la prestation consiste à contribuer à/au(x) : La production et au monitoring de la roadmap d'architecture du Socle Big data sur ses composantes on prem (écosystème autour de la distribution Cloudera Data Platform) et on cloud (Microsoft Azure /Power BI / AWS). La mise en place et aux validations des normes et...

  • Data Engineer

    il y a 1 mois


    Paris, 75001, Ile-de-France, Paris Nexoris Temps plein

    Pour le compte de l'un de nos client, un grand groupe bancaire, nous recherchons un Data Engineer (H/F) pour l'accompagner dans la réalisation d'un POC. Vous rejoignez l?équipe Compliance & System - Sanctions AML-CFT-FT, dansd l'accompagnement d'un grand groupe bancaire dans la réalisation d'un POC de détection d'opérations...

  • Administrateur Data

    il y a 1 mois


    Paris, 75001, Ile-de-France, Paris FIRST CONSEIL Temps plein

    Votre Mission Sera De : Maintenir en condition opérationnelle les infrastructures actuelles Assurer un rôle de conseil, d'assistance, d'information, de formation et d'alerte sur le périmètre de la plateforme DATA Conduire tout ou partie de projets techniques qui relèvent du domaine d'expertise Effectuer une veille technologique et...

  • Tech Lead Data H/F

    il y a 1 mois


    Paris, 75001, Ile-de-France, Paris NORGAY Temps plein

    Afin d'accompagner l'un de nos clients, Norgay recrute un Tech Lead Data H/F, dont les missions seront les suivantes : Piloter et coordonner les projets data depuis la conception jusqu?à la mise en production Définir les roadmaps, les plannings et les priorités en fonction des besoins métiers Assurer la liaison entre les équipes techniques et...


  • Paris, 75001, Ile-de-France, Paris Phaidon London- Glocomms Temps plein

    Rôle hybride : 2-3 jours sur site En tant qu'expert Apache Flink, vous serez responsable du développement et de la maintenance des applications Flink. À propos de l'optimisation des performances Résolution des problèmes qui peuvent survenir Développement et maintenance des applications Apache Flink Optimiser les performances et assurer...