Data Engineer AWS

il y a 4 semaines


IledeFrance, France 4 Impact Temps plein

Nous recherchons pour l?un de nos clients un Data Engineer AWS. Contexte de la mission : Au sein de l'équipe chargée de développer des outils internes d?une entité, constituée de 10 personnes : Développeurs back/frond end et Ingénieurs Data, le Data Engineer AWS est en charge de mener à bien un besoin clé du Groupe autour du sujet Zéro Carbone. Affecté à l'équipe métier, nous travaillons en mode Scrum en collaboration avec un autre Data Engineer et un PO pour réaliser les tâches et mener à bien le projet à terme. Missions : - Créer des fonctions AWS Lambda et pour consommer des APIs provenant de l'extérieur (données Gas/Power) et alimenter nos buckets S3 dédiés. - Développer des jobs AWS Batch pour alimenter nos buckets S3 avec des données pré-calculées de l'intensité Carbon du Groupe et de ses clients. - Mettre en place des dashboards sur Quicksight pour visualiser les résultats. - Développer une API Flask et exposer les calculs via Swagger. - Exploration des données via AWS Athena. - Mise en place de Jupyter Notebooks pour exposer et valider nos premiers résultats de calculs aux métiers. - Scheduler des jobs via CloudWatch et StepFunctions. - Archiver l'ensemble du code dans Git et mettre en place un déploiement automatique via Azure Devops - Mise en place de WebApps sur Azure pour héberger nos API Flask. - Collaborer avec nos clients pour présenter nos calculs et les accompagner. Environnement technique : Spark, Python, Jupyter/ Pytest, Flask, Swagger, AWS Lambda/ Athena/ CloudWatch/ QuickSight/ Batch / S3/ Partionning/ Bucketing, Azure Devops/ Functions/ AppService/ Web Apps. Profil candidat: Vous avez acquis entre 3 et 5 ans d'expérience dans un poste similaire. Vous maîtrisez le Cloud AWS, Spark & Scala. Idéalement, vous avez une certification AWS.


  • Data engineer AWS Sénior

    il y a 4 semaines


    Île-de-France, France Apside Temps plein

    Découvrez la Vie Apsidienne et vous aussi, devenez ApsidienOn aurait pu demander à Chat GPT de vous démontrer en quoi Apside est l’ESN qu’il vous faut, mais on préfère que vous le découvriez vous-mêmes Découvrez votre future mission Contexte Rejoignez notre Practise Cloud/Data, afin d’intervenir sur des sujets à haute valeur ajoutée !...

  • Data engineer AWS/Azure

    il y a 4 semaines


    Île-de-France, France Apside Temps plein

    Découvrez la Vie Apsidienne et vous aussi, devenez ApsidienOn aurait pu demander à Chat GPT de vous démontrer en quoi Apside est l’ESN qu’il vous faut, mais on préfère que vous le découvriez vous-mêmes Découvrez votre future mission ContexteRejoignez notre Practise Cloud/Data, afin d’intervenir sur des sujets à haute valeur ajoutée !...

  • Data Engineer Senior H/F

    il y a 4 semaines


    Île-de-France, France HARDIS GROUP Temps plein

    GCP, Python, Data Pipeline, MicroServices, CI/CD, Machine learning, ces mots vous parlent, alors lisez la suite ! MISSIONAu sein de notre entité Business Applications parisienne et intégré(e) au sein d’une équipe projet, vous contribuez à l’élaboration et l’évolution des couches métiers des applications que nous réalisons pour nos clients.En...

  • Data Engineer H/F

    il y a 4 semaines


    Hauts-de-France, France LINCOLN Temps plein

    DATA ENGINEER H/FCDI3 ans minimumChez Lincoln, nous formons une communauté d'innovateurs passionnés qui redéfinissent l'analyse de données depuis plus de 30 ans. En tant que Pure Player Data, notre expertise est reconnue dans les domaines de la Modern BI, du Big Data et de la Science des données.Notre mission ? Transformer les données en...

  • Data Engineer AWS

    Il y a 2 mois


    Paris, France, 75000, Ile-de-France Gentis Recruitment SAS Temps plein

    L?objectif est de développer une plateforme appelée Supply data lake basée sur des technologies Big Data robustes et évolutives. Cette plateforme sera capable de traiter un volume substantiel de données dans les différents pays où Engie opère. Son objectif principal est de capturer divers indicateurs dans un référentiel centralisé, permettant...

  • Senior Data Engineer H/F

    il y a 4 jours


    Hauts-de-Seine - 92, Ile-de-France SNCF Connect & Tech Temps plein

    Au sein de l'équipe Business&Client, les Data Engineers répondent aux besoins de reporting de l'activité commerciale de notre plateforme e-commerce : SNCF Connect, application de réservation de billets de train en ligne.En lien direct avec les équipes Marketing et la Direction Générale, vous collectez et transformez la donnée. Dans un...

  • Data engineer/python

    il y a 2 jours


    Île-de-France, France ASTRELYA Temps plein

    DATA ENGINEER/PYTHON ASTRELYA est un groupe de conseil et d’expertise IT fondé en 2017, présent en France (Paris et régions) et en Suisse (Genève). Aujourd'hui plus de 280 collaborateurs accompagnent nos clients dans l’accélération et la transformation de leurs organisations.Dans le cadre de notre développement, nous recherchons pour l'un...

  • DATA Engineer Azure F/H

    il y a 4 semaines


    Île-de-France, France SOFTEAM Temps plein

    Vous évoluez dans le domaine de la Data et souhaitez intégrer un leader de la transformation numérique spécialisé dans les secteurs de la Banque, du LGuxe, de l'Assurance, de la Finance, de l'Energie et la possibilité d'évoluer au sein du Groupe Docaposte !Softeam est labellisé "HappyIndex® AtWork " 2022 pour la 5ème année consécutive...

  • DATA Engineer GCP F/H

    il y a 4 semaines


    Île-de-France, France SOFTEAM Temps plein

    Vous évoluez dans le domaine de la Data et souhaitez intégrer un leader de la transformation numérique spécialisé dans les secteurs de la Banque, du Luxe, de l'Assurance, de la Finance, de l'Energie et la possibilité d'évoluer au sein du Groupe Docaposte !Softeam est labellisé "HappyIndex® AtWork " 2022 pour la 5ème année consécutive...

  • Lead Data Engineer F/H

    il y a 2 semaines


    Île-de-France, France Bpifrance Temps plein

    Bpifrance, une entreprise pas comme les autresBpifrance, Banque publique d'investissement est une banque citoyenne qui accompagne les entreprises, de l'amorçage jusqu'à la cotation en bourse, du crédit aux fonds propres.Si nous sommes une structure historique, organisée et reconnue, nous avons l’esprit agile et rapide et les moyens de...

  • Consultant Data Engineer F/H

    il y a 4 semaines


    Île-de-France, France SOFTEAM Temps plein

    Vous évoluez dans le domaine de la Data et souhaitez intégrer un leader de la transformation numérique spécialisé dans les secteurs de la Banque-Finance-Assurance ?Rejoignez notre communauté et développez vos compétences chez SOFTEAM DATA !VOTRE MISSIONPour le compte d'un client grand compte, vos missions seront :A comprendre le besoin de nos...

  • Big Data Engineer

    il y a 1 semaine


    Île-de-France, France LINCOLN Temps plein

    Poste CDI : Consultant Big Data Engineer - H/F (Hadoop, Spark, PySpark, Databricks, Kafka, Python, Scala, Java, Hive, MongoDB, etc.)Lincoln Pure Player Data : Réinventant l'analyse depuis 30 ans. Experts en Modern BI, Big Data et Science des données . Nous transformons les données en solutions pour les grands comptes, des secteurs bancaire, retail,...

  • Senior Data Engineer

    il y a 4 semaines


    Île-de-France, France RSight® Temps plein

    Nous recherchons activement un(e) Data Engineer confirmé, pour le compte de l’un de nos clients, une ESN, leader de l’Ingénierie et du Conseil en Technologies. Vous interviendrez sur des projets à forte valeur ajoutée d’une Leader mondial du secteur de la réassurance.ResponsabilitésConstruire, livrer et maintenir les produits de données...

  • Cloud Data Engineer

    il y a 1 semaine


    Île-de-France, France Devoteam G Cloud Temps plein

    Rejoignez la Team Devoteam GCloud en tant que Data Engineer GCP ! Êtes-vous prêt à plonger dans l'univers passionnant de la gestion des données sur Google Cloud Platform ? Êtes-vous un expert en matière de traitement de données et de solutions d'ingénierie ? Si oui, nous avons besoin de vous pour rejoindre notre équipe dynamique et...

  • Data Engineer Senior

    il y a 4 semaines


    Hauts-de-Seine, Ile-de-France AXA en France Temps plein

    EnvironnementEn tant que Senior Data Engineer F/H, vous allez contribuer directement aux projets des directions métier (ex : fraude santé, multiéquipements, pricing IARD, optimisation du lead management, fragilité auto, …) d’AXA France et à la construction du socle technique Big Data.Vous allez intégrer une équipe d'une dizaine de personne...

  • Data engineer GCP Sénior

    il y a 4 semaines


    Île-de-France, France Apside Temps plein

    Découvrez la Vie Apsidienne et vous aussi, devenez ApsidienOn aurait pu demander à Chat GPT de vous démontrer en quoi Apside est l’ESN qu’il vous faut, mais on préfère que vous le découvriez vous-mêmes Découvrez votre future mission Contexte Rejoignez notre Practise Cloud/Data, afin d’intervenir sur des sujets à haute valeur ajoutée !...

  • data engineer

    Il y a 2 mois


    Paris, France, 75000, Ile-de-France Gentis Recruitment SAS Temps plein

    2.1 Le contexte Pour accroître sa compétitivité et poursuivre son développement dans les meilleures conditions, GEMS IS investit de manière significative dans son système d?information. Au sein de l?équipe Digital & Data Accelerator nous développons des outils et applications et accompagnons l?ensemble des équipes dans leur digitalisation,...

  • Tech Lead Data Engineer

    il y a 4 semaines


    Hauts-de-Seine, Ile-de-France AXA en France Temps plein

    EnvironnementEn tant que Tech Lead Data Engineer F/H, vous allez contribuer directement aux projets des directions métier (ex : fraude santé, multiéquipements, pricing IARD, optimisation du lead management, fragilité auto, …) d’AXA France et à la construction du socle technique Big Data.Vous allez intégrer une équipe d'une dizaine de personne...

  • Data engineer MSBI

    il y a 4 semaines


    Île-de-France, France Apside Temps plein

    Découvrez la Vie Apsidienne et vous aussi, devenez ApsidienOn aurait pu demander à Chat GPT de vous démontrer en quoi Apside est l’ESN qu’il vous faut, mais on préfère que vous le découvriez vous-mêmes Découvrez votre future mission Contexte Rejoignez notre Practise Cloud/Data, afin d’intervenir sur des sujets à haute valeur ajoutée !...


  • Île-de-France, France SOFTEAM Temps plein

    Vous évoluez dans le domaine de la Data et souhaitez intégrer un leader de la transformation numérique spécialisé dans les secteurs de la Banque, du Luxe, de l'Assurance, de la Finance, de l'Energie et la possibilité d'évoluer au sein du Groupe Docaposte !Softeam est labellisé "HappyIndex® AtWork " 2022 pour la 5ème année consécutive...