Senior DataOps Engineer, Datalake
Il y a 5 jours
Lille, Nord-Pas-de-Calais, France
Collective.work
Temps plein
Gratuit avec email ou Google
Enregistrez cette offre et organisez votre recherche
Créez un compte gratuit pour enregistrer des offres d'emploi, créer des alertes et revenir à cette liste depuis votre tableau de bord.
Gratuit avec email ou Google
En continuant, vous acceptez nos Conditions d’utilisation & Politique de confidentialité.
Taux journalier (TJM): 500
Vous intervenez sur une brique essentielle de la stratégie data de l'entreprise. L'équipe met à disposition le stockage (S3) de toute la data platform, garantit sa robustesse et sa scalabilité, et assure la gouvernance technique du patrimoine de données ainsi que la gestion des métadonnées. Elle sensibilise aussi les utilisateurs aux bonnes pratiques d'une modern data stack, pour accompagner le développement des cas d'usage métier.
Missions
Garantir la robustesse et opérer la plateforme
* Assurer la résilience de la plateforme (plans de reprise et de continuité d'activité)
* Monitorer la plateforme de stockage et agir de façon proactive (Storage Lens, CloudTrail)
* Assurer le support et l'accompagnement sur S3, Glue et Unity Catalog
* Déployer et maintenir les ressources d'infrastructure avec Terraform, en étroite collaboration avec les équipes ops et infra centrales Accompagner et former
* Définir et promouvoir les bonnes pratiques au sein de l'équipe
* Participer à la conception des pipelines de données des équipes et les conseiller Développer le futur
* Mettre en place une gouvernance automatisée (registre de data contracts, gestion des accès)
* Déployer Unity Catalog et activer ses nouvelles fonctionnalités (lineage, managed tables, etc.) Stack technique recherchée : AWS S3 AWS Glue HashiCorp Vault Databricks Unity Catalog Terraform AWS GitHub CI/CD
Experience:
Débutant accepté
* Assurer la résilience de la plateforme (plans de reprise et de continuité d'activité)
* Monitorer la plateforme de stockage et agir de façon proactive (Storage Lens, CloudTrail)
* Assurer le support et l'accompagnement sur S3, Glue et Unity Catalog
* Déployer et maintenir les ressources d'infrastructure avec Terraform, en étroite collaboration avec les équipes ops et infra centrales Accompagner et former
* Définir et promouvoir les bonnes pratiques au sein de l'équipe
* Participer à la conception des pipelines de données des équipes et les conseiller Développer le futur
* Mettre en place une gouvernance automatisée (registre de data contracts, gestion des accès)
* Déployer Unity Catalog et activer ses nouvelles fonctionnalités (lineage, managed tables, etc.) Stack technique recherchée : AWS S3 AWS Glue HashiCorp Vault Databricks Unity Catalog Terraform AWS GitHub CI/CD
Experience:
Débutant accepté