Data Engineer

il y a 3 jours

Lyon, France Sword Services Temps plein

Nous ouvrons un poste de **Data Engineer** basé à Lyon, la mission s’inscrit dans une logique de renforcement des équipes d’un de nos clients et dans le cadre d’un vaste chantier de modernisation d’architecture data.

Dans ce cadre, nous recherchons un Data Engineer pour concevoir, construire et optimiser une nouvelle architecture data robuste et évolutive, capable d’alimenter l’ensemble de l’écosystème analytique de l’organisation.

**Responsabilités du poste**:

- Développer une architecture data évolutive, performante et sécurisée, adaptée aux besoins analytiques et business en s’appuyant sur les concepts des architectures Medaillon.
- Collaborer avec les data scientists, analystes et autres équipes pour comprendre les besoins métiers et techniques.
- Participer à la sélection et à l’intégration des technologies et outils les plus appropriés (bases de données, outils ETL, plateformes cloud).
- Apporter support et expertise pour la conception, la mise en œuvre et la cohérence des bases de données et des flux inter-systèmes.
- Créer et maintenir des pipelines de données pour l’ingestion, le nettoyage, la transformation et le stockage de données issues de sources variées.
- Optimiser les bases de données et les processus de traitement pour garantir des performances optimales, automatiser les flux de données et assurer la résilience des systèmes.
- Monitorer les coûts liés au traitement des données dans le cloud.
- Garantir l’intégrité, la qualité et la confidentialité des données en conformité avec les réglementations (notamment RGPD) et l’accès à la donnée personnalisée d’après le modèle RBAC.
- Expérience avérée dans la mise en place d’infrastructures data complexes et évolutives.
- Bac+5 en informatique, data science ou ingénierie, avec 3 à 5 ans d’expérience en tant que Data Engineer.
- Maîtrise des bases de données SQL et NoSQL.
- Expertise en outils ETL / ELT. La connaissance de dbt cloud & Workato serait un +.
- Expérience avec la data platform Snowflake.
- Excellente maîtrise de SQL et idéalement de Python.
- Maîtrise de Power BI serait un +.
- Capacité à travailler en équipe, excellente communication, esprit analytique, rigueur, proactivité et autonomie.
- ** Démarrage courant Septembre

  • Data Engineer Alternance

    il y a 1 jour

    Lyon, France Data ScienceTech Institute Temps plein

    Data ScienceTech Institute (DSTI) a été créé avec une ambition principale : former des experts du big data et de l'Intelligence Artificielle pour répondre aux besoins de l'industrie 4.0. Depuis 2015, DSTI forme des Data Analyst, Data Engineer et Data Scientist opérationnels, en offrant les programmes les plus internsifs du marché et les plus reconnus...

  • Senior Data Engineer Spark

    il y a 2 semaines

    Lyon, Auvergne-Rhône-Alpes, France Devoteam Data Driven Temps plein

    Agence multi spécialiste composée de 350 collaborateurs répartis en communautés d'experts, Devoteam Lyon accompagne les DSI dans leur transformation digitale, avec un focus sur les nouvelles technologies comme le cloud (AWS, Microsoft Google), l'intelligence artificielle, la cybersécurité, la data, et l'automatisation des processus métiers.Data Driven...

  • Data Engineer F/H migration Databricks

    il y a 15 heures

    Lyon, France Devoteam Data Driven Temps plein

    Consultant Data Engineer Databricks - Confirmé - H/F Agence multi spécialiste composée de 350 collaborateurs répartis en communautés d’experts, Devoteam Lyon accompagne les DSI dans leur transformation digitale, avec un focus sur les nouvelles technologies comme le cloud (AWS, Microsoft, Google), l'intelligence artificielle, la cybersécurité, la...

  • Data Engineer: Databricks Migration

    il y a 2 semaines

    Lyon, France Devoteam Data Driven Temps plein

    Une société de services en ingénierie recherche un Data Engineer à Lyon pour intégrer une équipe et participer à la migration des données de Cloudera vers Databricks. Le candidat idéal possède un Bac +5, 2 ans d’expérience minimum et maîtrise Python et SQL. Des formations et certifications sont proposées pour accompagner votre développement....

  • Databricks Data Engineer

    il y a 15 heures

    Lyon, France Devoteam Data Driven Temps plein

    Une entreprise spécialisée en technologies à Lyon recherche un Consultant Data Engineer pour intégrer une équipe d'ingénieurs. Le candidat idéal devra avoir une solide expérience en migration de données et en automatisation de déploiements. La maîtrise de Python, SQL et Databricks est essentielle, tout comme une certification Databricks comme...

  • Data Engineer: Databricks Migration

    il y a 2 semaines

    Lyon, France Devoteam Data Driven Temps plein

    Une entreprise de transformation digitale recherche un Data Engineer pour intégrer une équipe d'experts. Le poste implique la migration des données de Cloudera Hadoop vers Databricks et l'automatisation des déploiements via CI/CD. Le candidat idéal possède au moins 2 ans d'expérience, maîtrise Python (pyspark) et SQL, et a un niveau d'anglais minimum...

  • Data Engineer

    il y a 5 jours

    Lyon, Auvergne-Rhône-Alpes, France Ideal Match Temps plein

    Présentation de la société Nous recherchons un Data Engineer (F/H) pour intervenir sur un projet d'envergure et contribuer à la gestion et l'optimisation des flux de données.Description Vos missionsConcevoir et optimiser les pipelines de traitement des données avec Spark et Scala.Travailler sur des volumes de données massifs et assurer leur qualité...

  • Data Engineer

    il y a 1 semaine

    Lyon, Auvergne-Rhône-Alpes, France Free-Work Temps plein

    CITECH recrute Dans le cadre du renforcement de son pôle dédié à l'architecture, la valorisation et l'exploitation de la donnée, une grande entreprise nationale du secteur de l'énergie recherche unData Engineer / Data Analyst (H/F).L'objectif : contribuer à la fiabilité, la qualité et l'analyse des données nécessaires à la gestion des réseaux,...

  • Data Engineer F/H migration Databricks

    il y a 2 semaines

    Lyon, France Devoteam Data Driven Temps plein

    Agence multi spécialiste composée de 350 collaborateurs répartis en communautés d’experts, Devoteam Lyon accompagne les DSI dans leur transformation digitale, avec un focus sur les nouvelles technologies comme le cloud (AWS, Microsoft, Google), l'intelligence artificielle, la cybersécurité, la data, et l'automatisation des processus métiers. Data...

  • Data Engineer F/H migration Databricks

    il y a 4 jours

    Lyon, Auvergne-Rhône-Alpes, France Devoteam Data Driven Temps plein

    Agence multi spécialiste composée de 350 collaborateurs répartis en communautés d'experts, Devoteam Lyon accompagne les DSI dans leur transformation digitale, avec un focus sur les nouvelles technologies comme le cloud (AWS, Microsoft, Google), l'intelligence artificielle, la cybersécurité, la data, et l'automatisation des processus métiers.Data...