Data Engineer

il y a 11 heures

Lyon, Auvergne-Rhône-Alpes, France Free-Work Temps plein

Ton quotidien chez Komeet sera rythmé par :

Animation des ateliers afin d'étudier et cadrer les besoins clients

Préconisation, conception et mise en œuvre des plateformes Data (datawarehouse, datalake/lakehouse )

Rédaction de dossiers d'architecture et spécifications techniques

Mise en œuvre des stratégies d'exploitation de plateformes Data

Construction et déploiement des pipelines de données (ETL / ELT) à l'aide de langage de programmation ou d'outils de type Low-Code

Mis en œuvre des flux d'intégration (en batch ou streaming) de données structurées/non structurées et volumineuses.

Tests, validation et documentation des développements

Réalisation d'audits et projets d'optimisation

Nos choix technologiques :

  • Talend
  • DataBricks
  • Snowflake
  • DBT
  • Starburst
  • Tableau / Power BI / Looker
  • AWS, Azure et GCP

Profil candidat:

Tu corresponds au/à la Data Engeneer que nous recherchons si :

  • Tu maîtrises au minimum un langage de programmation appliqué à l'analyse de données (Spark, Python, Java ).
  • Tu possèdes une bonne expérience sur au moins un des Cloud Providers principaux (AWS, Azure, GCP) et les services Data associés.
  • Tu as de bonnes compétences dans l'architecture des systèmes, bases de données, méthodologies d'analyse.
  • Maîtrise des data design pattern et principalement le modèle médaillon
  • Tu maîtrises les fondamentaux DevOps (CI/CD) et as au moins une expérience dans ce domaine
  • Tu maîtrise la mise en place de pipeline et l'orchestration des workflows dans Databricks
  • Tu es sensible à la Business Intelligence, au Big Data et au Machine Learning
  • Tu es autonome et sais travailler en équipe notamment dans des contextes Scrum/Agile
  • Enfin, tu sais être force de proposition et as un esprit de synthèse.
  • Une certification Databricks Certified Data Engineer Associate est un plus

Ton quotidien chez Komeet sera rythmé par :

  • Animation des ateliers afin d'étudier et cadrer les besoins clients en collaboration avec le Data Platform Architect
  • Analyser, conseiller, et faire des recommandations de façon à améliorer l'efficience et l'efficacité de la solution Databricks chez ton client.
  • Préconisation, conception et mise en œuvre du LakeHouse Databricks
  • Rédaction de dossiers d'architecture et spécifications techniques
  • Mise en œuvre des stratégies d'exploitation de la plateforme Databricks
  • Mis en œuvre des flux d'intégration (en batch ou streaming) de données structurées/non structurées et volumineuses.
  • Tests, validation et documentation des développements
  • Réalisation d'audits et projets d'optimisation

  • Data Engineer

    il y a 10 heures

    Lyon, Auvergne-Rhône-Alpes, France Collective Temps plein

    Budget: 450/500Data EngineerÀ propos du rôleNous recherchons un Data Engineer pour rejoindre notre équipe et participer activement à la structuration de notre pôle Data Engineering.Expérience requise5 à 7 ans en Data EngineeringStack techniqueCloud : Microsoft AzureData Platform : DatabricksLangages : Python, PySpark, SQLActivités &...

  • Data Engineer

    il y a 12 heures

    Lyon, Auvergne-Rhône-Alpes, France Sword Group Temps plein

    Nous ouvrons un poste deData Engineerbasé à Lyon, la mission s'inscrit dans une logique de renforcement des équipes d'un de nos clients et dans le cadre d'un vaste chantier de modernisation d'architecture data.Dans ce cadre, nous recherchons un Data Engineer pour concevoir, construire et optimiser une nouvelle architecture data robuste et évolutive,...

  • Data Engineer

    il y a 18 heures

    Lyon, Auvergne-Rhône-Alpes, France Ideal Match Temps plein

    Présentation de la société Nous recherchons un Data Engineer (F/H) pour intervenir sur un projet d'envergure et contribuer à la gestion et l'optimisation des flux de données.Description Vos missionsConcevoir et optimiser les pipelines de traitement des données avec Spark et Scala.Travailler sur des volumes de données massifs et assurer leur qualité...

  • Data Engineer

    il y a 15 heures

    Lyon, Auvergne-Rhône-Alpes, France Free-Work Temps plein

    CITECH recrute Dans le cadre du renforcement de son pôle dédié à l'architecture, la valorisation et l'exploitation de la donnée, une grande entreprise nationale du secteur de l'énergie recherche unData Engineer / Data Analyst (H/F).L'objectif : contribuer à la fiabilité, la qualité et l'analyse des données nécessaires à la gestion des réseaux,...

  • Data Engineer

    il y a 11 heures

    Lyon, Auvergne-Rhône-Alpes, France Ethic Technology Temps plein

    Intitulé du poste : Data EngineerLocalisation : LyonExpérience souhaitée : 5 à 7 ans en Data Engineering, idéalement avec une expérience en analyse de donnéesRôle et responsabilités du consultant recherché : Data Engineer confirméGarantir l?intégration des sources de données nécessaires à la continuité du reporting interne et externeAssurer...

  • Data Engineer

    il y a 12 heures

    Lyon, Auvergne-Rhône-Alpes, France Collective Temps plein

    Budget: jusqu'à 45K€ brut annuelNous recherchons un Data Engineer pour intervenir en mission longue durée chez un client grand compte du secteur de l'énergie, basé à Lyon.La mission s'inscrit dans un contexte de valorisation et d'exploitation d'un entrepôt de données (Data Warehouse) pour répondre aux besoins métiers et d'analyse. Le poste est...

  • Data Engineer

    il y a 16 heures

    Lyon, Auvergne-Rhône-Alpes, France CITECH Temps plein

    CITECH recrute Dans le cadre du renforcement de son pôle dédié à l'architecture, la valorisation et l'exploitation de la donnée, une grande entreprise nationale du secteur de l'énergie recherche unData Engineer / Data Analyst (H/F).L'objectif : contribuer à la fiabilité, la qualité et l'analyse des données nécessaires à la gestion des réseaux,...

  • Senior Data Engineer Databricks H/F

    il y a 16 heures

    Lyon, Auvergne-Rhône-Alpes, France Devoteam Data Driven Temps plein

    Agence multi spécialiste composée de 350 collaborateurs répartis en communautés d'experts, Devoteam Lyon accompagne les DSI dans leur transformation digitale, avec un focus sur les nouvelles technologies comme le cloud (AWS, Microsoft Google), l'intelligence artificielle, la cybersécurité, la data, et l'automatisation des processus métiers.Data Driven...

  • Data Engineer Databricks

    il y a 13 heures

    Lyon, Auvergne-Rhône-Alpes, France KOMEET TECHNOLOGIES Temps plein

    En tant que Data Engineer, vous intervenez sur la conception, le développement et l?optimisation de pipelines de données robustes et scalables. Vous travaillez au c?ur des plateformes Data afin de garantir la qualité, la disponibilité et la performance des données utilisées par les équipes métiers, BI et Data Science.Expérience attendue : 3 à 8+...

  • Data Engineer

    il y a 11 heures

    Lyon, Auvergne-Rhône-Alpes, France CIORANE Temps plein

    Nous recherchons un Data Engineer pour intervenir en mission longue durée chez un client grand compte du secteur de l'énergie, basé à Lyon.La mission s'inscrit dans un contexte de valorisation et d'exploitation d'un entrepôt de données (Data Warehouse) pour répondre aux besoins métiers et d'analyse. Le poste est ouvert à un profil disposant d'une...