Data Engineer Airflow Remote
il y a 1 semaine
**Un peu de contexte**:
Choisis ton projet, bâtis la carrière que tu souhaites, deviens un AddixWarrior
Notre client souhaite améliorer l’opérabilité et les performances de ses services autour de la Data basés sur plusieurs plateformes IT : un datalake, un datamart, un datawarehouse, un environnement BI et Data Science.
Ces plateformes, bien que matures et déjà opérées en production, nécessitent la mise en place d’outillage autour de problématiques d’orchestration afin de garantir la performance opérationnelle et la coordination requise par le niveau de service attendu par les métiers de notre client.
En collaboration avec l’architecte data, les experts data et le gestionnaire/propriétaire produit, tu seras amené à participer aux opérations et à l’implémentation de la roadmap technique de la plateforme d’orchestration basé sur le produit Airflow.
Ainsi tu assureras le développement et le support expert des fonctionnalités de la plateforme en elle-même mais aussi de l’outillage DevOps autour du produit dont en priorité, l’observabilité, la gestion de la performance et l’amélioration continue du service Orchestration.
Pour mettre à bien ce projet, tu interviendras en tant que consultant Data Engineer AirFlow. Tu seras en charge de:
1. Participer aux initiatives d’audit des performances IT de la plateforme.
2. Être force de proposition vis-à-vis des nouvelles fonctionnalités produit à mettre en place et des axes d’améliorations en accord avec le propriétaire produit.
3. Participer aux ateliers de recueil de besoins d’utilisation de la plateforme avec l’ensemble des parties prenantes de l’écosystème Data : développement, métier, architecture, opérations IT.
4. Assurer l’implémentation/développement de l’outillage et des fonctionnalités de la plateforme nécessaires avec accord de l’Architecte Data et les experts Data du groupe.
5. Contribuer au développement des graphes orientés acycliques (DAG) nécessaires à la bonne opérabilité des plateformes datalake et datamart (AWS et Snowflake).
6. Assurer le rôle de support technique auprès des end-users lors de leur usage de la plateforme.
7. Assurer les livraisons et déploiement du code.
8. Faire du support niveau 2, expertiser la production et participer aux situations de crises.
9. Contribuer à la Knowledge Base du produit.
10. Reporter au gestionnaire de la plateforme Airflow, les performances IT, l’état de santé temps réel et principaux risques opérationnels de la plateforme.
11. Assurer le relais (Key User) auprès des équipes utilisatrices de la plateforme : BI, projets metiers, Data Science, DataLake, etc
12. Participer aux points réguliers avec les utilisateurs afin d’échanger autour des bonnes pratiques d’usage et de développement.
13. Produire la documentation nécessaire à ce passage de connaissance : tuto, document d’exploitation, etc
14. Assurer et animer les sessions de transfert de connaissances au travers de démos produit.
15. Accompagner les premiers développements de l’équipe de support.
16. Aider l’équipe de support lors de la résolution d’incidents/problèmes.
-
Data Engineer Airflow H/F
il y a 1 semaine
Marseille 13ème, France Agap2 It Temps pleinContexte du poste Dans le cadre de projets data à fort volume et à forte criticité, agap2IT recherche un Data Engineer spécialisé Airflow pour intervenir chez des clients grands comptes, au sein d'environnements data industrialisés et internationaux. Missions principales Concevoir, développer et maintenir des pipelines de données avec Apache Airflow...
-
Tech Lead Airflow
il y a 3 jours
Marseille, France KUBE Partners S.L. Pixie Services Temps pleinNous recherchons actuellement un Techlead Airflow pour une mission dans le sud-est de la france avec un client final. En tant que Tech Lead Airflow, vous aurez pour mission de piloter et d?accompagner les équipes sur l?implémentation et la gestion de solutions Data. Vous serez également chargé de valider le déploiement de notre nouvelle plateforme Data,...
-
DATA Engineer Databricks H/F
il y a 4 jours
Marseille, France Devoteam Data Driven Temps pleinAncrée au coeur de la cité phocéenne, Devoteam rassemble plus de 60 experts qui accompagnent nos clients dans leur transformation digitale. Spécialisés dans le cloud (AWS, Microsoft Azure, Google Cloud), l'IA, la cybersécurité, la data et l'automatisation des processus métiers, nous sommes leur partenaire de choix pour relever les défis de demain....
-
Data Engineer
il y a 2 semaines
Marseille, Provence-Alpes-Côte d'Azur, France DIGWAY Temps pleinOffre d'Emploi : Data Engineer / Data Analyst Polyvalent (H/F)Société :DIGWAY ESN Agile spécialisée dans les Nouvelles TechnologiesPoste :Data Engineer / Data Analyst (Focus Snowflake)Localisation :Paris (Île-de-France) ou Marseille, avec possibilité detélétravail partiel flexible.Secteur :Data Cloud, Big Data, ESNLe Rôle : Construisez l'Avenir de...
-
Data Scientist/Engineer IA @eXalt PROVENCE
il y a 4 jours
Marseille, France Business At Work Temps plein**eXalt Provence** poursuit sa croissance et recherche son/sa prochain(e) **Data Scientist / Data Engineer IA** pour accompagner nos clients grands comptes dans leurs projets de transformation digitale et d’industrialisation de la donnée.## Profil recherché* Vous justifiez d’au moins **5 ans d’expérience** sur des projets **data à fort impact**...
-
Data Engineer Appétence Machine Learning H/F
il y a 4 jours
Marseille, France Amiltone Temps pleinData Engineer Appétence Machine Learning H/F Amiltone, Marseille, Provence-Alpes-Côte d'Azur, France Les missions du poste Intégré à nos équipes sur notre Factory ou chez nos clients, vous interviendrez sur un projet en tant que Data engineer. Dans le cadre d'un projet de transformation Data ambitieux, nous recherchons un Ingénieur Data pour concevoir...
-
Data engineer appétence machine learning
il y a 4 jours
Marseille, France Amiltone Temps pleinData engineer appétence machine learning (H/F) Amiltone Marseille, Provence-Alpes-Côte d'Azur, France Qui sommes-nous ? Nous sommes passionnés par les nouvelles technologies, et vous ? Rejoindre Amiltone, c'est intégrer des équipes dynamiques et soudées dans le cadre de projets novateurs et ambitieux. Nous relevons les challenges techniques de nos...
-
Data Engineer Databricks H/F
il y a 2 semaines
Marseille, France Devoteam France Temps pleinEn tant que Data Engineer Databricks, vous intégrerez une équipe d'ingénieurs expérimentés pour jouer un rôle clé chez nos clients de divers secteurs. - Vous concevrez et développerez des pipelines de données performants et évolutifs. - Vous assurerez la migration des données et des tâches d'environnements existants vers Databricks. - Vous...
-
Data Engineer Databricks H
il y a 2 semaines
Marseille, France Devoteam France Temps pleinEn tant que Data Engineer Databricks, vous intégrerez une équipe d'ingénieurs expérimentés pour jouer un rôle clé chez nos clients de divers secteurs. Vous concevrez et développerez des pipelines de données performants et évolutifs. Vous assurerez la migration des données et des tâches d'environnements existants vers Databricks. Vous...
-
DATA Engineer Databricks H/F
il y a 4 jours
Marseille, France Devoteam Temps pleinOverviewEn tant que Data Engineer Databricks, vous intégrerez une équipe d'ingénieurs expérimentés pour jouer un rôle clé chez nos clients de divers secteurs.ResponsibilitiesVous concevrez et développerez des pipelines de données performants et évolutifs.Vous assurerez la migration des données et des tâches d'environnements existants vers...