Lead Data Engineer

il y a 4 semaines

LevalloisPerret, France SIKIA Temps plein

Nous recherchons un lead Data Engineer pour rejoindre nos équipes. Vous disposez de plus de 5 ans d’expérience dans la conception, le développement et l’industrialisation de pipelines Data en environnements Big Data et Cloud.Vous maîtrisez Spark, Databricks, NiFi, Kafka ainsi que les écosystèmes Azure, et vous avez une expérience confirmée en lead technique et en pilotage de projets data.La connaissance de Dataiku constitue un atout complémentaire pour l’orchestration et la gestion des flux de transformation.Conception et développement de pipelines Big Data Concevoir et développer des pipelines robustes en Spark (PySpark, Scala ou Java).Mettre en œuvre des flux de transformation et d’ingestion dans Databricks.Construire des workflows de traitement dans NiFi (ingestion, orchestration, transformation).Développer des flux d’ingestion et de préparation de données répondant aux exigences de performance et de qualité.Ingestion & StreamingMettre en place des architectures d’ingestion temps réel via Apache Kafka.Assurer la gestion des topics, partitions, schémas et performances Kafka.Superviser les flux streaming utilisés dans les applications analytiques ou opérationnelles.Industrialisation & OrchestrationDéfinir et automatiser les pipelines sur Apache Airflow (DAGs, scheduling, monitoring).Automatiser les environnements, déploiements et configurations via Ansible.Intégrer les projets data dans une logique CI/CD (Azure DevOps, Git).Déployer des pipelines industrialisés et fiables sur des environnements distribués.Cloud & PlateformesDévelopper et optimiser des solutions data dans un environnement Microsoft Azure, en utilisant Azure Databricks.Intégrer les services Azure dans les workflows (Data Lake, Event Hub, Key Vault…).Outils ETL et transformationExploiter Apache Spark pour les transformations massives.Utiliser NiFi pour les flux d’ingestion et la gestion du cycle de données.Contribuer à des projets utilisant Dataiku (atout apprécié) pour l’orchestration visuelle, la transformation et la gouvernance.CI/CD & DevOps DataMettre en œuvre des pipelines CI/CD pour les projets data (Azure DevOps, Git).Assurer la qualité du code et des déploiements via tests, validations, automatisations.Superviser les versions, les environnements et les déploiements industrialisés.Leadership Technique & GouvernanceDéfinir les standards de développement, les bonnes pratiques et les guidelines architecture.Participer activement à la communauté technique interne (Tech Leads, Lines of Business).Garantir la qualité, la fiabilité, la sécurité et la scalabilité des solutions data.

  • Lead Data Engineer/Senior Data Engineer

    il y a 2 semaines

    Levallois-Perret, France Esmoz Temps plein

    Esmoz Levallois-Perret, Île-de-France, France Localisation : Levallois-Perret (92) — Télétravail : 3 jours en présentiel / 2 jours remote Disponibilité : Immédiate Durée : longue mission Type de contrat : CDI / Freelance Expérience : minimum 5 ans Nous recherchons un Lead Data Engineer pour rejoindre l’équipe en charge de l’ingestion des...

  • Data Engineer

    il y a 2 semaines

    Levallois-Perret, France MP Data Temps plein

    En tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l'optimisation et la fiabilisation de nos pipelines de données à grande échelle, au coeur de notre plateforme analytique. Votre expertise sur Databricks et l'environnement Spark sera essentielle pour garantir des traitements performants, sécurisés et...

  • Tech Lead Data Engineer H/F

    il y a 7 jours

    Levallois-Perret, France JEMS Temps plein

    À propos de nousNous sommes le premier industriel de la donnée en Europe. Notre métier est de créer, manager et exploiter le patrimoine data de nos clients.Nous avons la conviction que chaque entreprise peut adopter une démarche innovante de gestion de la donnée et créer des cas d’usage disruptifs en réduisant l'impact écologique et en diminuant...

  • Tech Lead Data Engineer H/F

    il y a 2 semaines

    Levallois-Perret, Île-de-France JEMS Temps plein

    Nous recherchons un(e) Tech Lead Data Engineer capable de trouver des solutions innovantes et robustes à l'ensemble des problématiques Data.Vous aurez la charge de :? Assurer la mise en ?uvre de l'accès, du référencement et de la qualité de la donnée? Assurer l'industrialisation, la supervision et l'intégration des solutions? Rédiger les normes de...

  • Lead Azure Data Engineer

    il y a 1 jour

    Levallois-Perret, Île-de-France SQLI Temps plein

    Description de l'entreprise Rejoignez SQLI et faites partie de l'équipe Data, au sein d'une société à taille humaine, mais avec de grandes ambitions. Nous sommes plus de 2200 talents sur 13 pays et 3 continents.​Votre futur écosystème :Au sein du pôle Data de SQLI, pour rejoindre une équipe dynamique de +40 passionnés.Des projets digitaux pour...

  • Tech Lead Data Engineer H/F

    il y a 6 jours

    Levallois-Perret, Île-de-France Free-Work Temps plein

    Nous recherchons un(e) Tech Lead Data Engineer capable de trouver des solutions innovantes et robustes à l'ensemble des problématiques Data.Vous aurez la charge de :Assurer la mise en œuvre de l'accès, du référencement et de la qualité de la donnéeAssurer l'industrialisation, la supervision et l'intégration des solutionsRédiger les normes de...

  • Data Engineer

    il y a 2 semaines

    Levallois-Perret, France Devoteam Data Driven Temps plein

    Devoteam Data Driven est l'équipe spécialiste de la Data du Groupe Devoteam. Nous sommes 300 en France et notre ambition est d'accompagner les organisations qui ont décidé de placer les données au cœur de leur stratégie, les aidant à transformer la valeur de leurs données en succès durable. Description Du Poste Expert de l’écosystème...

  • Data Engineer

    il y a 3 jours

    Levallois-Perret, Île-de-France Devoteam Data Driven Temps plein

    Devoteam Data Drivenest l'équipe spécialiste de la Data du Groupe Devoteam. Nous sommes 300 en France et notre ambition est d'accompagner les organisations qui ont décidé de placer les données au cœur de leur stratégie, les aidant à transformer la valeur de leurs données en succès durable.Description Du PosteExpert de l'écosystème Databricks,...

  • Data Engineer H/F

    il y a 2 semaines

    Levallois-Perret, France JEMS Temps plein

    Nous recherchons un(e) data engineer capable de trouver des solutions innovantes et robustes à l'ensemble des problématiques Data. Vous aurez la charge de : Participer à la conception et réalisation d'une solution Data depuis l'acquisition jusqu'à l'exploitation de la donnée en accompagnant la réflexion des directions métiers Identifier, collecter et...

  • Data Engineer H/F

    il y a 2 semaines

    Levallois-Perret, France Jems Group Temps plein

    Join to apply for the Data Engineer H/F role at Jems Group This range is provided by Jems Group. Your actual pay will be based on your skills and experience — talk with your recruiter to learn more. Base pay range À propos de nous Nous sommes le premier industriel de la donnée en Europe. Notre métier est de créer, manager et exploiter le patrimoine...