DataOps / SRE Datalake
Il y a 7 minutes
Nantes, Pays de la Loire, France
OVHcloud
Temps plein
Au sein de votre équipe #OneTeam
- Intégrer l'équipe Datalake de la squad "Group Platform and Infrastructure Operation - Data" au sein de la DSI.
- Rejoindre une équipe organisée en mode Agile (sprint), composée d'un Squad Leader, d'un Tech Lead, d'un SRE et de deux Data Ops.
- Contribuer au fonctionnement de la plateforme Datalake, centrale chez OVHcloud, qui stocke et valorise les données (calcul de revenu, tendances marketing, etc.).
- Travailler sur une plateforme basée sur des technologies open-sources et 'cloud-natives' (S3, Apache Airflow, Spark, Jupyterhub, Trino, Superset, Dremio, Dataiku), le tout déployé dans Kubernetes.
Vos principales responsabilités
- Assurer le RUN et la MCO de la plateforme Datalake.
- Participer aux évolutions techniques de la plateforme (roadmap trimestrielle).
- Analyser les incidents en production (Niveau 2) et assurer le support applicatif.
- Garantir la sécurité, tester et documenter les nouvelles releases.
- Définir les standards, participer au design des solutions techniques et à la validation (UATs).
- Exécuter des opérations de support client et faire de la veille technologique.
Votre futur impact
Dans 6 mois
- Vous réaliserez le support technique pour les Data Engineers/Scientists.
- Vous serez garant des bonnes pratiques (métiers/sécurité).
- Vous proposerez des résolutions de bugs et des nouvelles fonctionnalités.
Et dans 1 an
- Vous participerez à la rotation d'astreinte pour la production.
- Vous serez force de proposition pour l'évolution de la stack.
- Vous serez autonome sur le RUN de l'écosystème pour garantir les SLO.
Compétences requises :
- Bonnes compétences en IaC, CI/CD, Kubernetes et Linux.
- Vous maîtrisez le design d'architectures data complexes
C'est un +
- Vous rédigez des DAGs Airflow et développez des traitements Spark (Scala ou PySpark) en production.
- Vous avez une expérience prouvée en projets data (datalakes, pipelines) en contexte de production.
- Vous connaissez les concepts de Change Data Capture (CDC).