Senior Data Ops
Enregistrez cette offre et organisez votre recherche
Créez un compte gratuit pour enregistrer des offres d'emploi, créer des alertes et revenir à cette liste depuis votre tableau de bord.
En continuant, vous acceptez nos Conditions d’utilisation & Politique de confidentialité.
CONTEXTEPour le compte d'un grand groupe, nous recherchons un Senior Data Ops / Data Platform Engineer pour rejoindre une équipe en charge du Datalake et de la plateforme Data.
Cette équipe porte notamment les sujets de stockage, métadonnées, catalogage et gouvernance technique du patrimoine Data. La plateforme est utilisée par différentes populations Data : Data Engineers, Data Analysts, Data Scientists et autres utilisateurs de la donnée.
Un enjeu majeur de la mission concerne l'évolution du modèle actuel de stockage et de catalogage vers une approche davantage unifiée autour de Databricks Unity Catalog.
MISSIONSData Platform & Storage*Garantir la robustesse et la disponibilité de la plateforme Data*Administrer et faire évoluer les environnements de stockage AWS S3*Monitorer la plateforme et mettre en place des actions proactives*Contribuer aux sujets de continuité et de reprise d'activitéInfrastructure & Data Ops*Déployer et maintenir les ressources d'infrastructure via Terraform*Participer à l'industrialisation des déploiements et aux pratiques CI/CD*Assurer le support technique autour de S3, AWS Glue et Databricks*Collaborer étroitement avec les équipes infrastructure et DataMetadata & gouvernance*Participer à l'évolution du metastore et au déploiement de Unity Catalog*Travailler sur les problématiques de catalogage, métadonnées et gestion des accès*Contribuer à l'automatisation de la gouvernance Data*Participer à l'activation et à l'exploitation des fonctionnalités de Unity Catalog : lineage, managed tables, gestion des droits, etc.
Accompagnement des équipes*Définir et promouvoir les bonnes pratiques d'utilisation de la plateforme*Accompagner les équipes Data dans leur utilisation du Datalake*Conseiller les équipes lors de la conception de leurs pipelines et de leurs usages de la plateformeOUTILS & ENVIRONNEMENT*AWS, avec une expertise forte sur S3*Databricks*Terraform / Infrastructure as Code*Unity Catalog ou expérience significative des problématiques de metastore/catalogage*AWS Glue*CI/CD / Git*Monitoring et observabilité d'une plateforme Data*Gouvernance technique de la donnée et gestion des accès*Expérience appréciée sur Hashicorp Vault, IAM, PRA/PCA ou automatisation de la gouvernanceCONDITIONS DE TRAVAIL*Localisation : Métropole Lilloise*Mission longue*Présence sur site : 3 jours pas semaines obligatoires1. Profil senior avec une véritable expérience de Data Platform / Data Ops / infrastructure Data2. Expertise forte sur AWS, notamment S33. Maîtrise de Databricks4. Compétences en Terraform / Infrastructure as Code5. Expérience avec Unity Catalog ou problématiques de metastore/catalogage6. Connaissance de AWS Glue7. Pratique de CI/CD et Git8. Compétences en monitoring et observabilité d'une plateforme Data9. Connaissance de la gouvernance technique de la donnée et gestion des accès10. Un plus : expérience autour de Hashicorp Vault, IAM, PRA/PCA ou automatisation de la gouvernance11. Qualités personnelles : autonome, fiable et proactive, avec une bonne capacité de communication et d'accompagnement des utilisateurs
Type de contrat Profession libérale
Emploi non salarié Salaire
- Rémunération :
- /
Expérience
- Débutant accepté