Data engineer GCP
Il y a 2 semaines
Parisot, Midi-Pyrénées, France
Temps plein
Gratuit avec email ou Google
Enregistrez cette offre et organisez votre recherche
Créez un compte gratuit pour enregistrer des offres d'emploi, créer des alertes et revenir à cette liste depuis votre tableau de bord.
Gratuit avec email ou Google
En continuant, vous acceptez nos Conditions d’utilisation & Politique de confidentialité.
En tant qu'Ingénieur(e) Data Engineer GCP, vous concevez, développez et optimisez les architectures Data sur l'environnement Google Cloud Platform pour traiter des volumes massifs de données (Batch & Real-time).
Vos principales
responsabilités:
Architecture & Déploiement : Concevoir et mettre en œuvre des pipelines Data robustes, évolutifs et sécurisés sur l'écosystème GCP. Développement & Ingestion : Développer des flux d'ingestion et de transformation de données complexes avec Python, Scala ou SQL. Administration GCP : Utiliser les composants clés de la stack GCP : BigQuery, Dataflow, Dataproc, Pub/Sub, Cloud Storage, Composer (Airflow) et Bigtable. Bonnes pratiques & DevOps : Mettre en place les pratiques CI/CD (GitLab, GitHub Actions, Jenkins) et l'Infrastructure as Code (Terraform). Qualité & Gouvernance : Garantir la qualité, la traçabilité et la sécurité des données (Data Governance, IAM, Data Lineage). Accompagnement & Veille : Participer à la définition des architectures cibles avec les Data Architects et apporter votre expertise technique auprès des équipes métiers et Data Scientists.
Experience:
Débutant accepté
responsabilités:
Architecture & Déploiement : Concevoir et mettre en œuvre des pipelines Data robustes, évolutifs et sécurisés sur l'écosystème GCP. Développement & Ingestion : Développer des flux d'ingestion et de transformation de données complexes avec Python, Scala ou SQL. Administration GCP : Utiliser les composants clés de la stack GCP : BigQuery, Dataflow, Dataproc, Pub/Sub, Cloud Storage, Composer (Airflow) et Bigtable. Bonnes pratiques & DevOps : Mettre en place les pratiques CI/CD (GitLab, GitHub Actions, Jenkins) et l'Infrastructure as Code (Terraform). Qualité & Gouvernance : Garantir la qualité, la traçabilité et la sécurité des données (Data Governance, IAM, Data Lineage). Accompagnement & Veille : Participer à la définition des architectures cibles avec les Data Architects et apporter votre expertise technique auprès des équipes métiers et Data Scientists.
Experience:
Débutant accepté