Data Engineer Airflow

il y a 6 jours

Marseille, France Agap2 It Temps plein

Qui sommes-nous ? Experte et passionnée, notre communauté de consultants accompagne les secteurs industriel et tertiaire à travers quatre grands domaines technologiques : Infrastructure & Cloud, Développement & Applications, Data et Conseil. Grâce à notre approche transversale, nous répondons e­xactement aux enjeux de nos clients dans des domaines clés tels que la gestion de projet, la cybersécurité et l'intelligence artificielle. En collaboration avec les prescripteurs technologiques (éditeurs de logiciels, fournisseurs cloud et intégrateurs) nous contribuons activement à l'évolution professionnelle et à la montée en compétences de nos équipes. Chez agap2IT, la dynamique interne est un pilier essentiel de notre identité. Nous cultivons un esprit collectif fort, ou le partage des connaissances, la curiosité technologique et l'entraide sont au cœur de notre quotidien. Tout au long de l'année, nos équipes se retrouvent lors de temps forts conviviaux et fédérateurs : afterworks, workshops, challenges internes, autant d'occasions d'échanger, d'apprendre et de renforcer la cohésion. Nous croyons profondément au pouvoir de l'intelligence collective. C'est pourquoi nous développons des initiatives permettant a chacun de s'exprimer et de contribuer activement à l'évolution d'agap2it : - Des espaces collaboratifs dédiés au partage d'expertise et a l'innovation, - Des communautés techniques et laboratoires d'idées pour expérimenter, innover et progresser ensemble, - Des dispositifs de reconnaissance valorisant les parcours, les compétences et les réussites, - Et un programme de mentoring favorisant la transmission, l'accompagnement et le développement professionnel. Chez agap2IT, nous avançons ensemble avec audace, exigence et engagement, convaincus que la performance IT passe avant tout par l'épanouissement des femmes et des hommes qui la construisent. Contexte du poste Dans le cadre de projets data à fort volume et à forte criticité, agap2IT recherche un Data Engineer H/F spécialisé Airflow pour intervenir chez des clients grands comptes, au sein d'environnements data industrialisés et internationaux. Missions principales - Concevoir, développer et maintenir des pipelines de données avec Apache Airflow - Orchestrer des flux batch et event-driven à grande échelle - Garantir la qualité, la fiabilité et la performance des traitements data - Intégrer des données provenant de sources multiples (SI internes, APIs, fichiers) - Mettre en œuvre les bonnes pratiques de monitoring, logging et reprise sur incident - Optimiser les temps de traitement et la gestion des dépendances - Collaborer avec les équipes Data, Dev, Ops et Métiers - Documenter les pipelines et participer à l'amélioration continue de la plateforme data Environnement technique Orchestration : Apache Airflow (Docker / Kubernetes) Langages : Python, SQL Data : Data Lake, Data Warehouse Cloud : AWS Traitements : Spark / PySpark CI/CD : GitLab CI / Jenkins Systèmes : Linux Monitoring : Airflow UI, Prometheus, Grafana Profil recherché Formation Bac +5 (école d'ingénieur, université ou équivalent) Minimum 5 ans d'expérience en Data Engineering Expertise confirmée sur Apache Airflow Très bonne maîtrise de Python et du SQL Expérience sur des environnements Cloud et data à grande échelle Sensibilité aux enjeux de qualité, performance et industrialisation Autonomie, rigueur et esprit d'équipe Anglais professionnel requis

  • FREELANCE – Data Engineer Airflow

    il y a 2 semaines

    Marseille, Provence-Alpes-Côte d'Azur, France Jane Hope Temps plein

    Notre client basé à Marseille (13) est à la recherche d?un Data Engineer Airflow (H/F) freelance dans le cadre du renforcement de leur expertise sur les data pipelines de leur plateforme. MISSIONS Développement de data pipelines Airflow extract-loeadDéveloppemlent de dag Airflow d?administrationMaintien et évolution du framework on-top d?AirflowOn...

  • Data Engineer Airflow H/F

    il y a 6 jours

    Marseille, France Agap2 It Temps plein

    Contexte du poste Dans le cadre de projets data à fort volume et à forte criticité, agap2IT recherche un Data Engineer H/F spécialisé Airflow pour intervenir chez des clients grands comptes, au sein d'environnements data industrialisés et internationaux. Missions principales - Concevoir, développer et maintenir des pipelines de données avec Apache...

  • DevOps / Data Engineer - Python, Airflow, Aws

    il y a 2 semaines

    Marseille, France ENOVA Consulting Temps plein

    Dans le cadre de la maintenance et de l’évolution d’une plateforme data, nous recherchons un profil orienté **DevOps/Data Engineer** ayant une forte expertise en **Python** dans des contextes d’automatisation et une appétence pour les problématiques de scalabilité et d’optimisation de pipelines. Le consultant interviendra sur les missions...

  • Product Owner Data Airflow

    il y a 2 semaines

    Marseille, France Ardemis Partners Temps plein

    **Localisation**: Marseille **Métier**: Product Owner **Type de contrat**: mission **Salaire**: 50/70K **Type d'entreprise**: Grand compte **Compétences**: PRODUCT OWNER Description de poste 2-23-14 Mission au sein d’un grand groupe de transport **Mission**: En collaboration avec l’architecte data, les experts data et le gestionnaire produit,...

  • DATA Engineer Databricks H/F

    il y a 2 semaines

    Marseille, Provence-Alpes-Côte d'Azur, France Devoteam Data Driven Temps plein

    Ancrée au coeur de la cité phocéenne, Devoteam rassemble plus de 60 experts qui accompagnent nos clients dans leur transformation digitale. Spécialisés dans le cloud (AWS, Microsoft Azure, Google Cloud), l'IA, la cybersécurité, la data et l'automatisation des processus métiers, nous sommes leur partenaire de choix pour relever les défis de...

  • DATA Engineer Databricks H/F

    il y a 11 heures

    Marseille, France Devoteam Data Driven Temps plein

    Ancrée au coeur de la cité phocéenne, Devoteam rassemble plus de 60 experts qui accompagnent nos clients dans leur transformation digitale. Spécialisés dans le cloud (AWS, Microsoft Azure, Google Cloud), l'IA, la cybersécurité, la data et l'automatisation des processus métiers, nous sommes leur partenaire de choix pour relever les défis de demain....

  • Techlead Airflow

    il y a 2 semaines

    Marseille, France LeHibou Temps plein

    Notre client dans le secteur Transport et logistique recherche un/une TechLead Airflow H/F **Description de la mission**: Airflow est un orchestrateur qui a été choisi par les archi pour optimiser et faire évoluer la data platform du client. Le client a donc monté une team dédiée pour prendre en charge les flux actuel DMS afin de les remplacer. Ce qui...

  • Data Scientist/Engineer IA @eXalt PROVENCE

    il y a 11 heures

    Marseille, France Business At Work Temps plein

    **eXalt Provence** poursuit sa croissance et recherche son/sa prochain(e) **Data Scientist / Data Engineer IA** pour accompagner nos clients grands comptes dans leurs projets de transformation digitale et d’industrialisation de la donnée.## Profil recherché* Vous justifiez d’au moins **5 ans d’expérience** sur des projets **data à fort impact**...

  • Data Engineer

    il y a 3 jours

    Marseille, France NOVAIA SASU Temps plein

    **À propos du poste** Nous recherchons un(e) **Data Engineer / MLOps (H/F)** passionné(e) par l’intelligence artificielle, les données massives et les systèmes temps réel. Vous rejoindrez une équipe dynamique qui développe un **callbot IA francophone** de nouvelle génération, capable de comprendre, traiter et répondre aux appels en temps...

  • Data Engineer SQL

    il y a 6 jours

    Marseille, France MP DATA Temps plein

    Bonjour ! MP DATA est une société spécialisée dans l’acquisition, le traitement, et la valorisation des données. Depuis sa création en 2015, MP DATA accompagne ses clients, majoritairement industriels, dans le management de leur performance, l’exploitation de leur données et leur décarbonation. Les collaborateurs, incarnent au quotidien les...