Data Engineer GCP Freelance

En quelques mots

Cherry Pick est à la recherche d'un
Data Engineer (H/F)
pour l'un de ses clients qui opère dans le secteur de média.

Description

Contexte de mission

La mission s'inscrit au sein d'une
Direction Data intégrée à une Direction du Numérique
, dont l'ambition est de faire de la
Data un levier stratégique de croissance des offres numériques
.

La Direction Data intervient sur trois axes majeurs :

• la
  collecte et la gouvernance des données
  dans le respect des réglementations,
• l'amélioration de la
  connaissance et de l'expérience utilisateurs
  ,
• la mise à disposition d'
  outils de pilotage et d'aide à la décision
  pour les équipes internes.

Le consultant interviendra au sein d'une
équipe Data transverse
, positionnée au cœur de la
plateforme Data
, et travaillera en étroite collaboration avec les autres équipes data, produit et techniques, dans un environnement
Cloud Google (GCP)
fortement industrialisé.

Missions principales et rôle

Le Data Engineer interviendra sur la
qualité, la structuration et l'industrialisation des données
, avec un rôle clé dans la mise en place de standards et de bonnes pratiques data.

Phase principale – Qualité des données & gouvernance

• Concevoir et développer des
  contrôles qualité des données
  sur la plateforme Data.
• Exploiter
  Dataplex Universal Catalog
  pour implémenter et piloter la qualité des datasets.
• Industrialiser les contrôles qualité
  via
  Terraform et Terragrunt
  .
• Concevoir et produire les
  indicateurs de pilotage de la qualité des données
  .
• Mettre en œuvre la
  remontée des indicateurs dans le data catalog
  (via API).

Phase transverse – Data Engineering & plateforme

• Participer aux phases de
  conception, planification et réalisation
  avec l'équipe.
• Développer et maintenir des
  pipelines data robustes et scalables
  .
• Accompagner les utilisateurs internes dans l'
  exploitation et le requêtage des données
  .
• Structurer et organiser le
  stockage des données
  .
• Mettre en place et maintenir des
  infrastructures cloud scalables
  .
• Concevoir et maintenir les
  workflows CI/CD
  .
• Appliquer et partager les
  bonnes pratiques data engineering
  .
• Garantir la
  sécurité, la stabilité et l'évolutivité
  des environnements.
• Contribuer à la
  documentation
  et à la
  veille technologique
  .
• Participer aux
  instances et rituels des data engineers
  .

Objectifs

• Améliorer significativement la
  qualité et la fiabilité des données
  de la plateforme.
• Standardiser et industrialiser les
  datasets normés
  sur les data domains.
• Fournir des
  indicateurs clairs et exploitables
  pour piloter la qualité des données.
• Renforcer la
  gouvernance data
  et l'adoption des outils par les équipes internes.
• Garantir une
  plateforme data scalable, sécurisée et pérenne
  .

Compétences requises

Techniques Data

• Data Engineering
  : structures de données, architecture, pipelines – Confirmé / Expert
• Python & SQL
  – Expert
• Spark
  – Confirmé
• BigQuery
  – Confirmé / Expert
• Dataplex Universal Catalog
  – Confirmé
• API Collibra
  – Confirmé

Cloud & Industrialisation

• Google Cloud Platform (GCP)
  – Confirmé
• Terraform & Terragrunt
  – Confirmé / Expert
• GitLab & GitLab CI/CD
  – Confirmé
• Orchestration :
  Airflow

Méthodologies

• Méthodes
  Agiles
  : Scrum ou Kanban
• Travail en équipe produit / data transverse

Communication

• Capacité à
  vulgariser des sujets techniques complexes
• Très bonnes compétences en
  communication écrite et orale

Profil

• Data Engineer Senior / Expert
  avec
  au moins 5 ans d'expérience
  dans des environnements data complexes.
• Solide expérience sur des
  plateformes data cloud
  à forte volumétrie.
• Habitué aux contextes
  industrialisation, gouvernance et qualité des données
  .
• À l'aise dans des environnements collaboratifs et transverses.