Data Engineer

il y a 4 semaines

Lille, France Collective Temps plein

Nous recherchons un Data Engineer pour travailler sur des projets de collecte, transformation et gestion des flux de données au sein de notre équipe. Le poste requiert des compétences techniques en Data Bricks, Python, SQL et Azure DevOps pour assurer le bon déroulement des pipelines de données. De plus, des connaissances de base dans l’utilisation de Power BI et une approche agile basée sur Scrum sont attendues. Le Data Engineer jouera un rôle clé dans la mise en place et l'optimisation des processus de gestion des données, en s'assurant de la qualité, de la transformation et de l'intégration des données dans des environnements Azure. Responsabilités : Collecte et transformation des données : Concevoir et développer des pipelines de collecte de données et de transformation (ETL) à l’aide des technologies adaptées (notamment Data Bricks). Gestion des flux de données : Assurer l’intégration et la gestion fluide des flux de données entre les différentes sources et plateformes. Développement Python & SQL : Créer des scripts Python et des requêtes SQL pour manipuler, nettoyer et transformer les données. Support Azure DevOps : Utiliser Azure DevOps pour gérer les processus de déploiement et d’intégration continue (CI/CD). Participation aux projets Power BI : Fournir un soutien de base pour les projets Power BI, notamment au niveau sémantique (compréhension des données et modèles). Méthodologie Agile : Travailler en étroite collaboration avec l'équipe produit dans un cadre Agile (méthodologie Scrum) pour assurer la livraison rapide et efficace des projets. Compétences requises : Techniques : Maîtrise des technologies Data Bricks, Python, SQL. Expérience avec Azure DevOps pour la gestion des déploiements et de l’intégration continue. Power BI : Connaissances de base en sémantique des données et modèle de données dans Power BI. Connaissance des processus ETL pour la gestion de la collecte, transformation et stockage des données. Agilité : Bonne maîtrise des méthodes Agile, avec une expérience en Scrum. Compétences en communication : Capacité à travailler efficacement en équipe, à échanger et à comprendre les besoins fonctionnels pour traduire ces besoins en solutions techniques. Profil recherché : Formation : Bac+5 en informatique, data science, ou dans un domaine similaire. Expérience : Minimum 2 à 3 ans d’expérience en tant que Data Engineer ou sur un poste similaire avec des compétences en développement Python, SQL et gestion des données. Autonomie et capacité à travailler dans un environnement dynamique et en constante évolution. Compétences appréciées : Expérience avec Azure Synapse, Azure Data Lake, ou autres outils cloud pour la gestion des données. Bonne capacité à comprendre et à travailler avec des données complexes et variées. Connaissance approfondie des bonnes pratiques en data engineering (qualité, transformation, gestion des données).

  • Senior Data Engineer — Big Data Architect for Cloud

    il y a 3 jours

    Lille, France Devoteam Data Driven France Temps plein

    Une entreprise spécialisée en ingénierie des données recherche un Data Engineer Senior à Lille. Vous serez responsable de la conception de l'architecture Big Data, du développement de modules ETL, ainsi que de la supervision de déploiements Agile. Le candidat idéal possède plus de 5 ans d'expérience et maîtrise des technologies tels que SQL,...

  • Data Engineer Confirmé H/F

    il y a 3 jours

    Lille, Hauts-de-France Data in Motion Temps plein

    Contrainte forte du projet : Maîtrise des services Google Cloud Livrables- Compétences techniques Maîtrise des infra 100% Cloud (GoogleCloud…)  - Confirmé Maîtrise du SQL - ExpertEvent sourcing et temps réel - Confirmé API rest - Confirmé - ImportantConnaissances linguistiques Anglais Professionnel (Impératif)Description détaillée :Au sein...

  • Data Engineer

    il y a 2 semaines

    Lille, Hauts-de-France Free-Work Temps plein

    La mission consiste à :Maîtrise de la donnée et garant de la qualité de son utilisationAnalyser les besoins des utilisateurs et proposer des solutions innovantesDévelopper les solutions dataMaintenir les solutions existantesMettre en oeuvre des pipelines de donnéesCompétences attendues :Expériences significatives comme Data Engineer / Data...

  • Data Engineer

    il y a 7 jours

    Lille, France Infogene Temps plein

    Lille - CDI - Publiée il y a plus de 3 heures **+5ans d'expérience demandée** **Description du poste**: En tant que Data Engineer (F/H), vous rejoindrez la squad data de notre client sur un périmètre fonctionnel dédié. Au cours votre mission, vous interviendrez sur les activités suivantes: - Participation aux rituels agiles de l'équipe - Analyse...

  • Senior Data engineer H/F

    il y a 1 jour

    Lille, Hauts-de-France Devoteam Data Driven Temps plein

    Présentation de l'agenceUne agence multi spécialiste de plus de 40 collaborateurs qui forment des communautés d'experts sur le Cloud & DevOps, la data et la gestion de projet. Devoteam Lille accompagne ses clients dans une transformation digitale durable. A l'agence de Lille, les consultants peuvent intégrer nos clubs happiness Running, Gastronomy,...

  • Data Engineer

    il y a 3 jours

    Lille, Hauts-de-France Amiltone Temps plein

    Vos missions  ?Intégré à nos équipes sur nos projets en Factory ou chez nos clients vous interviendrez en tant que data Engineer.En tant que data Engineer (H/F), vous assurez les missions suivantes :Conception de solutions permettant le traitement de volumes importants de pipelines données. Ceux-ci doivent être suffisamment sécurisés et lisibles...

  • Data Engineer

    il y a 3 jours

    Lille, Hauts-de-France Sapiens Group Temps plein

    Nous recherchons un Data Engineer pour travailler sur des projets de collecte, transformation et gestion des flux de données au sein de notre équipe. Le poste requiert des compétences techniques en Data Bricks, Python, SQL et Azure DevOps pour assurer le bon déroulement des pipelines de données. De plus, des connaissances de base dans l?utilisation de...

  • Data Engineer

    il y a 5 jours

    Lille, Hauts-de-France Collective Temps plein

    Nous recherchons un Data Engineer pour travailler sur des projets de collecte, transformation et gestion des flux de données au sein de notre équipe. Le poste requiert des compétences techniques en Data Bricks, Python, SQL et Azure DevOps pour assurer le bon déroulement des pipelines de données. De plus, des connaissances de base dans l'utilisation de...

  • Senior Data engineer H/F

    il y a 3 jours

    Lille, France Devoteam Data Driven France Temps plein

    Description du posteEn tant que Data Engineer Senior, vous rejoignez notre équipe lilloise pour mener la transformation des systèmes d’information de nos clients. Vos missions principales seront :La conception de l’architecture des chaînes de traitement Big Data pour des environnements de grande échelle, en garantissant leur robustesse et leur...

  • Data engineer/ Data platform

    il y a 6 jours

    Lille, France WOLSOME Temps plein

    DATA ENGINEER/ DATA PLATFORMDans le cadre du renforcement de sa plateforme data et du développement de projets à forte valeur ajoutée, nous recherchons pour l'un de nos clients du secteur retail / e-commerce un(e) Data Engineer. Vous intégrerez une équipe Data dynamique, travaillant sur des enjeux stratégiques liés à la valorisation, la fiabilité et...