Data Engineer Sénior Etl Cloud Aws

il y a 2 jours


Lyon, France Insitoo Temps plein

Basée à Lille, Lyon, Nantes, Grenoble et Bruxelles, Insitoo Freelances est une société du groupe Insitoo, spécialisée dans le placement et le sourcing des Freelances IT et Métier. Depuis 2007, Insitoo Freelances a su s’imposer comme une référence en matière de freelancing par son expertise dans l’IT et ses valeurs de transparence et de proximité. Actuellement, afin de répondre aux besoins de nos clients, nous recherchons un Data Engineer sénior ETL Cloud AWS (H/F) à Lyon, France.

Contexte:
**Fonctionnement : 2 jours présentiel + 3 jours télétravail**

Les missions attendues par le Data Engineer sénior ETL Cloud AWS (H/F):
**Responsabilités confiées**:
Garantir la qualité, la sécurité et l’intégrité des données lors de la migration. Réaliser des mappings complexes pour assurer la fluidité des flux de données. Orchestrer la migration des données dans un environnement Cloud AWS.

Réaliser un Proof of Concept (POC) pour aider la capacité à migrer les données sans altération. Automatiser le déploiement et les contrôles : Faciliter le déploiement et assurer des contrôles rigoureux. Mettre en place des outils de reporting pour suivre et piloter la migration en temps réel.

Minimiser l’impact de la migration sur les opérations métiers grâce à des contrôles de qualité/quantité des processus d’intégrité à chaque étape de la migration

**Prestations attendues (principales et secondaires)**:
**Analyse des solutions éditeurs**: Évaluer les solutions proposées par les éditeurs, notamment en ce qui concerne l’impact sur les données (structure, volume, qualité), et identifier les risques et opportunités.

**Conception des stratégies de migratio**n : Définir des stratégies pour les migrations initiale et delta, garantissant une intégrité des données tout au long du processus et minimisant l’impact métier.

**Maîtrise des outils ETL**: Utiliser des outils ETL performants pour réaliser des mappings complexes entre le système existant et le système cible, en assurant la fluidité et l’exactitude des flux de données.

**Expertise AWS**: Exploiter les services managés AWS (DMS, Glue, SCT, etc.) pour orchestrer la migration des données dans un environnement Cloud AWS en toute sécurité.

**Mise en œuvre d’un POC**: Réaliser un Proof of Concept afin de valider la capacité à migrer les données tout en tenant compte des contraintes du SI actuel et cible. Ce POC garantit que la migration se fait sans altération des données.

**Automatisation du déploiement et des contrôles**: Mettre en œuvre des mécanismes d’automatisation pour faciliter le déploiement et des contrôles rigoureux à chaque étape du processus de

migration.

**Mise en place du reporting et tableaux de bord**: Concevoir et mettre en place des tableaux de bord et des rapports de suivi qui permettent de piloter et superviser la qualité de la migration à chaque étape. Ces outils offrent une vision en temps réel de l’avancement, des anomalies éventuelles et de la qualité des données migrées.

**Réduction de l’impact métier**: Veiller à ce que la migration ait un impact mínimal sur les opérations métiers grâce à des contrôles de qualité/quantité et des processus d’intégrité à chaque étape de la migration.

**Réversibilité entrante et/ou sortante**:
10 jours de passation

**Livrables attendus**:
**Stratégie de migration**: Plan détaillé décrivant les étapes d’extraction, transformation et chargement (ETL) des données.

**POC de migration**: Preuve de concept validant la faisabilité de la migration en termes de qualité et d’intégrité des données.

**Rapport de suivi qualité**: Outils de reporting et tableaux de bord pour suivre la qualité des données migrées, les erreurs potentielles, et l’avancement du processus.

**Documentations**: Livrables de contrôle qualité/quantité, garantissant une migration transparente et intégrée dans l’environnement cible.

Compétences:
**Expertise ETL**: Maîtrise des outils ETL pour gérer les volumes importants de données et les transformations complexes.

**Expérience AWS**: Expérience confirmée dans l’utilisation des services managés AWS (DMS, Glue, SCT,) pour assurer une migration efficace et sécurisée des données.

**Pilotage par reporting**: Conception de tableau

Compétences techniques et fonctionnelles attendues:
Cette mission vous intéresse?

Vous justifiez d’une expérience significative comme Data Engineer sénior ETL Cloud AWS (H/F) ?
Vous êtes rigoureux, méthodique, organisé et vous savez faire preuve d’autonomie et de réactivité ?
Vous êtes à l’aise à l’écrit comme à l’oral ?
Vous maîtrisez les périmètres techniques cités avec les niveaux adéquats ?
Vous aimez évoluer dans un univers où l’autonomie, la prise d’initiatives, le partage et le travail en équipe sont porteurs de la réussite collective ?
Vous pensez que votre profil pourrait correspondre au besoin de notre client ?

Référence : 02-DATETLAWS-LY



  • Lyon, France Devoteam | AWS Partner Temps plein

    OverviewAvec près de 11 000 collaborateurs à travers le monde, nous accompagnons les entreprises dans leur transformation numérique. Nous imaginons et concretisons leurs ambitions grâce aux possibilités infinies des plateformes digitales, pour faire évoluer leur culture et leur mode de travail, et créer de la valeur dans leurs organisations. Présent...


  • Lyon, France Devoteam | AWS Partner Temps plein

    Avec près de 11 000 collaborateurs à travers le monde, nous accompagnons les entreprises dans leur transformation numérique. Nous imaginons et concrétisons leurs ambitions grâce aux possibilités infinies des plateformes digitales, pour faire évoluer leur culture et leur mode de travail, et créer de la valeur dans leurs organisations. Présent dans 18...

  • Data Engineer Aws

    il y a 8 heures


    Lyon, France HR-TEAM Temps plein

    **Domaine**: Energie Vous souhaitez évoluer dans le domaine passionnant du traitement de données ? Nous recherchons un Data Engineer pour intégrer notre équipe Data en pleine croissance, travaillant sous la supervision directe du Responsable du Développement. **À propos de nous**: **Responsabilités**: En binôme avec notre Data Engineer Sénior,...


  • Lyon, France Devoteam Temps plein

    Devoteam A Cloud aide ses clients à se transformer en véritables entreprises plateformes grâce à l'adoption du Cloud AWS, tout en participant à la construction d'une économie numérique plus durable. Notre ambition est de repousser les limites de l'innovation pour les organisations confrontées aux enjeux technologiques actuels, en tirant parti des...

  • Data Engineer Aws

    il y a 8 heures


    Lyon, France HR-TEAM Temps plein

    Data Engineer AWS H/F - Lyon **Domaine**: Energie Vous souhaitez évoluer dans le domaine passionnant du traitement de données ? Nous recherchons un Data Engineer pour intégrer notre équipe Data en pleine croissance, travaillant sous la supervision directe du Responsable du Développement. **À propos de nous**: **Responsabilités**: En binôme avec...

  • Senior Data Engineer Spark

    il y a 2 semaines


    Lyon, Auvergne-Rhône-Alpes, France Devoteam Data Driven Temps plein

    Agence multi spécialiste composée de 350 collaborateurs répartis en communautés d'experts, Devoteam Lyon accompagne les DSI dans leur transformation digitale, avec un focus sur les nouvelles technologies comme le cloud (AWS, Microsoft Google), l'intelligence artificielle, la cybersécurité, la data, et l'automatisation des processus métiers.Data Driven...

  • Mission Freelance

    il y a 9 heures


    Lyon, France NaxoTech Temps plein

    Nous recherchons un Data Engineer Sénior pour une mission longue (+6 mois) en régie, dans le secteur de l'énergie. Vous serez intégré(e) à une équipe technique où vous aurez pour rôle principal de concevoir, développer et optimiser des pipelines de données complexes. Vous interviendrez sur des projets stratégiques, avec des enjeux business...


  • Lyon, France Devoteam Data Driven Temps plein

    À propos de Devoteam Agence multi spécialiste composée de 350 collaborateurs répartis en communautés d’experts, Devoteam Lyon accompagne les DSI dans leur transformation digitale, avec un focus sur les nouvelles technologies comme le cloud (aws, microsoft google), l'intelligence artificielle, la cybersécurité, la data, et l'automatisation des...


  • Lyon, France Devoteam Data Driven Temps plein

    Agence multi spécialiste composée de 350 collaborateurs répartis en communautés d’experts, Devoteam Lyon accompagne les DSI dans leur transformation digitale, avec un focus sur les nouvelles technologies comme le cloud (aws, microsoft google), l'intelligence artificielle, la cybersécurité, la data, et l'automatisation des processus métiers....


  • Lyon, France Devoteam Temps plein

    Devoteam A Cloud aide ses clients à se transformer en véritables entreprises plateformes grâce à l'adoption du Cloud AWS, tout en participant à la construction d'une économie numérique plus durable. Notre ambition est de repousser les limites de l'innovation pour les organisations confrontées aux enjeux technologiques actuels, en tirant parti des...