Data Engineer

il y a 2 semaines

Lyon, France LeHibou Temps plein

La mission s'inscrit dans le cadre d'un projet visant à remplacer le système actuel de gestion des actifs d'entreprise (EAM), utilisé pour la maintenance des centrales nucléaires. L'ingénieur Data intervient auprès du responsable du périmètre maitrise et innovations techniques du projet, au sein d'une équipe composée d'environ 8 personnes. Il joue un rôle crucial dans l'analyse des solutions proposées par les éditeurs. Il est chargé d'analyser les solutions EAM proposées par les éditeurs et d'évaluer leur impact sur les données. Il conçoit des stratégies de migration (initiale et delta), en garantissant la qualité, la sécurité et l'intégrité des données lors de leur transition vers le nouveau système, tout en minimisant l'impact sur les processus métiers. Il assure également la mise en place des outils de reporting et de tableaux de bord pour suivre et piloter la migration en temps réel.

Missions:

- Évaluer l'impact des solutions EAM des éditeurs sur les données.
- Garantir la qualité, la sécurité et l'intégrité des données lors de la migration.Réaliser des mappings complexes pour assurer la fluidité des flux de données.Orchestrer la migration des données dans un environnement Cloud AWS.
- Réaliser un Proof of Concept (POC) pour aider la capacité à migrer les données sans altération.
- Automatiser le déploiement et les contrôles : Faciliter le déploiement et assurer des contrôles rigoureux.
- Mettre en place des outils de reporting pour suivre et piloter la migration en temps réel.
- Minimiser l'impact de la migration sur les opérations métiers grâce à des contrôles de qualité/quantité des processus d'intégrité à chaque étape de la migration

Compétences requises:

- Expertise ETL : Maîtrise des outils ETL pour gérer les volumes importants de données et les transformations complexes.
- Expérience AWS : Expérience confirmée dans l'utilisation des services managés AWS (DMS, Glue, SCT,...) pour assurer une migration efficace et sécurisée des données.
- Pilotage par reporting : Conception de tableaux de bord de suivi en temps réel pour s'assurer du contrôle qualité et de la bonne exécution de la migration.
- Automatisation et contrôle : Capacité à automatiser les processus de migration et à implémenter des contrôles à chaque étape du déploiement.

  • Senior Data Engineer

    il y a 2 semaines

    Lyon, France Devoteam Data Driven France Temps plein

    Une entreprise innovante à Lyon recherche un Data Engineer pour concevoir des pipelines de données robustes et optimiser les flux de données. Vous devez maîtriser Databricks, PySpark, Python et SQL, et avoir une connaissance en Cloud (AWS, Azure ou GCP). Le candidat devra aussi avoir un niveau B2 en anglais et être capable de travailler en méthode...

  • Senior Data Engineer Spark

    il y a 2 semaines

    Lyon, France Devoteam Data Driven Temps plein

    Agence multi spécialiste composée de 350 collaborateurs répartis en communautés d’experts, Devoteam Lyon accompagne les DSI dans leur transformation digitale, avec un focus sur les nouvelles technologies comme le cloud (AWS, Microsoft Google), l'intelligence artificielle, la cybersécurité, la data, et l'automatisation des processus métiers. Data...

  • Senior Databricks Data Engineer — Cloud and AI Impact

    il y a 2 semaines

    Lyon, France Devoteam Data Driven Temps plein

    Une entreprise de transformation digitale recherche un(e) Data Engineer pour concevoir des pipelines de données sur Databricks et optimiser les flux de données pour des grands comptes. Ce rôle nécessite des compétences en PySpark, Python, SQL, ainsi qu'une bonne maîtrise des environnements Cloud. Une expérience en méthode Agile et un bon niveau...

  • Data Engineer

    il y a 2 semaines

    Lyon, France Sword Services Temps plein

    Nous ouvrons un poste de Data Engineer basé à Lyon, l mission s’inscrit dans une logique de renforcement des équipes d’un de nos clients et dans le cadre d’un vaste chantier de modernisation d’architecture data. Dans ce cadre, nous recherchons un Data Engineer pour concevoir, construire et optimiser une nouvelle architecture data robuste et...

  • Data Engineer

    il y a 3 jours

    Lyon, France Kéoni Consulting Temps plein

    **Data Engineer** **Contexte de la mission**: LA DSI du client final a mis en place une Data Plateforme pour faciliter la mise en œuvre des projets Data. Elle souhaite aujourd’hui mettre en place en son sein une équipe d’experts compétents pour développer les projets Data et la piloter directement. **MISSIONS**: - Participation aux ateliers de...

  • Data Analyst

    il y a 5 jours

    Lyon, France JEMS Temps plein

    JEMS recrute un(e) Data Analyst / Data Engineer Senior – Power BI & Databricks (CDI – Lyon)Vous êtes un profil Data senior, à l’aise aussi bien avec les métiers Finance & Marketing qu’avec des environnements techniques exigeants ?Vous souhaitez intervenir sur des projets data stratégiques pour de grands comptes du secteur Transport et Industrie ?...

  • Data Engineer

    il y a 2 semaines

    Lyon, Auvergne-Rhône-Alpes, France Ideal Match Temps plein

    Présentation de la société Nous recherchons un Data Engineer (F/H) pour intervenir sur un projet d'envergure et contribuer à la gestion et l'optimisation des flux de données.Description Vos missionsConcevoir et optimiser les pipelines de traitement des données avec Spark et Scala.Travailler sur des volumes de données massifs et assurer leur qualité...

  • Data Engineer

    il y a 2 semaines

    Lyon, Auvergne-Rhône-Alpes, France Ethic Technology Temps plein

    Intitulé du poste : Data EngineerLocalisation : LyonExpérience souhaitée : 5 à 7 ans en Data Engineering, idéalement avec une expérience en analyse de donnéesRôle et responsabilités du consultant recherché : Data Engineer confirméGarantir l?intégration des sources de données nécessaires à la continuité du reporting interne et externeAssurer...

  • Data Engineer

    il y a 7 jours

    Lyon, Auvergne-Rhône-Alpes, France Collective Temps plein

    Budget: jusqu'à 45K€ brut annuelNous recherchons un Data Engineer pour intervenir en mission longue durée chez un client grand compte du secteur de l'énergie, basé à Lyon.La mission s'inscrit dans un contexte de valorisation et d'exploitation d'un entrepôt de données (Data Warehouse) pour répondre aux besoins métiers et d'analyse. Le poste est...

  • Senior Data Engineer Databricks H/F

    il y a 2 semaines

    Lyon, France Devoteam Data Driven Temps plein

    Agence multi spécialiste composée de 350 collaborateurs répartis en communautés d’experts, Devoteam Lyon accompagne les DSI dans leur transformation digitale, avec un focus sur les nouvelles technologies comme le cloud (AWS, Microsoft Google), l'intelligence artificielle, la cybersécurité, la data, et l'automatisation des processus métiers. Data...