Data Engineer

Budget:

En quelques mots
Cherry Pick est à la recherche d'un
Data Engineer (H/F)
pour l'un de ses clients qui opère dans le secteur de média.

Description
Contexte de mission
La mission s'inscrit au sein d'une
Direction Data intégrée à une Direction du Numérique
, dont l'ambition est de faire de la
Data un levier stratégique de croissance des offres numériques
.

La Direction Data Intervient Sur Trois Axes Majeurs

• la collecte et la gouvernance des données dans le respect des réglementations,
• l'amélioration de la connaissance et de l'expérience utilisateurs,
• la mise à disposition d'outils de pilotage et d'aide à la décision pour les équipes internes.

Le consultant interviendra au sein d'une
équipe Data transverse
, positionnée au cœur de la
plateforme Data
, et travaillera en étroite collaboration avec les autres équipes data, produit et techniques, dans un environnement
Cloud Google (GCP)
fortement industrialisé.

Missions principales et rôle
Le Data Engineer interviendra sur la
qualité, la structuration et l'industrialisation des données
, avec un rôle clé dans la mise en place de standards et de bonnes pratiques data.

Phase principale – Qualité des données & gouvernance

• Concevoir et développer des contrôles qualité des données sur la plateforme Data.
• Exploiter Dataplex Universal Catalog pour implémenter et piloter la qualité des datasets.
• Industrialiser les contrôles qualité via Terraform et Terragrunt.
• Concevoir et produire les indicateurs de pilotage de la qualité des données.
• Mettre en œuvre la remontée des indicateurs dans le data catalog (via API).

Phase transverse – Data Engineering & plateforme

• Participer aux phases de conception, planification et réalisation avec l'équipe.
• Développer et maintenir des pipelines data robustes et scalables.
• Accompagner les utilisateurs internes dans l'exploitation et le requêtage des données.
• Structurer et organiser le stockage des données.
• Mettre en place et maintenir des infrastructures cloud scalables.
• Concevoir et maintenir les workflows CI/CD.
• Appliquer et partager les bonnes pratiques data engineering.
• Garantir la sécurité, la stabilité et l'évolutivité des environnements.
• Contribuer à la documentation et à la veille technologique.
• Participer aux instances et rituels des data engineers.

Objectifs

• Améliorer significativement la qualité et la fiabilité des données de la plateforme.
• Standardiser et industrialiser les datasets normés sur les data domains.
• Fournir des indicateurs clairs et exploitables pour piloter la qualité des données.
• Renforcer la gouvernance data et l'adoption des outils par les équipes internes.
• Garantir une plateforme data scalable, sécurisée et pérenne.

Compétences requises
Techniques Data

• Data Engineering : structures de données, architecture, pipelines – Confirmé / Expert
• Python & SQL – Expert
• Spark – Confirmé
• BigQuery – Confirmé / Expert
• Dataplex Universal Catalog – Confirmé
• API Collibra – Confirmé

Cloud & Industrialisation

• Google Cloud Platform (GCP) – Confirmé
• Terraform & Terragrunt – Confirmé / Expert
• GitLab & GitLab CI/CD – Confirmé
• Orchestration : Airflow

Méthodologies

• Méthodes Agiles : Scrum ou Kanban
• Travail en équipe produit / data transverse

Communication

• Capacité à vulgariser des sujets techniques complexes
• Très bonnes compétences en communication écrite et orale

Profil

• Data Engineer Senior / Expert avec au moins 5 ans d'expérience dans des environnements data complexes.
• Solide expérience sur des plateformes data cloud à forte volumétrie.
• Habitué aux contextes industrialisation, gouvernance et qualité des données.
• À l'aise dans des environnements collaboratifs et transverses.