Data Engineer Gcp
il y a 22 heures
**Missions principales**:
Concevoir, développer et maintenir des pipelines de données robustes et scalables sur GCP.
Collecter, transformer et charger des données depuis diverses sources (Oracle, Postgres, MySQL, fichiers plats, API) vers BigQuery.
Mettre en place des contrôles de qualité des données, notamment pour les cas d?usage liés à l?achat-revente.
Réaliser la modélisation des données dans BigQuery (SQL avancé).
Orchestrer les workflows avec Cloud Composer (Airflow).
Assurer une bonne gestion des accès et de la sécurité (IAM / BigQuery).
Participer à la mise en place et au maintien de la chaîne CI/CD sur GitLab.
**Environnement technique**:
**Langages**: Python, SQL
**Cloud**: Google Cloud Platform (BigQuery, Cloud Storage, Cloud Composer)
**Orchestration**: Airflow (via Cloud Composer)
**Sources de données**: Oracle, PostgreSQL, MySQL, fichiers plats, API
**CI/CD**: GitLab
**Sécurité & IAM**: Gestion fine des accès, bonnes pratiques sur BigQuery
Expérience significative en tant que Data Engineer, avec une maîtrise de GCP.
Très bonne connaissance de BigQuery et de l?écosystème GCP.
Solides compétences en Python pour l?extraction et la transformation de données.
Maîtrise du SQL pour la modélisation dans un environnement DWH.
Expérience en orchestration de pipelines de données avec Airflow.
Connaissance des problématiques de gestion des droits d'accès (IAM) et de la sécurité des données dans le cloud.
Autonomie, rigueur, et esprit d'équipe.
**Les plus**:
Expérience sur des projets de Data Platform à l?échelle d?une organisation.
Pratique de GitLab CI/CD dans des environnements data.
Un background développeur est très appréciable
-
Data Engineer Gcp
il y a 22 heures
Paris, France Sfeir Temps plein**Qui sommes-nous ?** SFEIR, partenaire Premier de Google Cloud, est une communauté de 900 experts Tech dont plus de 100 spécialistes Data. **SFEIR c’est aussi** - 140 certifiés sur GCP - 70 Trainers - 7 Google Developers Experts **Notre expertise Data & Cloud** Conception et implémentation de data lakes et data warehouses sur...
-
Data Engineer GCP
il y a 4 jours
Paris, Île-de-France INFOGENE Temps plein[Secteur Beauté & Cosmétique] – Data Engineer / Cloud Engineer GCP (H/F)Paris – Mission long termeUn leader mondial du secteurBeauté / Cosmétiquepoursuit sa transformation digitale et lance unprojet stratégiquedédié à la valorisation de données non structurées (documents, images, audio, vidéo).L'ambition : construire uneplateforme transverse...
-
Data Engineer GCP
il y a 4 jours
Paris, Île-de-France Sfeir Temps pleinQui sommes-nous ? SFEIR, partenaire Premier de Google Cloud, est une communauté de 900 experts Tech dont plus de 100 spécialistes Data. SFEIR c'est aussi • 140 certifiés sur GCP • 70 Trainers • 7 Google Developers Experts Notre expertise Data & Cloud Conception et implémentation de data lakes et data warehouses sur BigQuery...
-
Data Engineer GCP
il y a 6 jours
Paris, Île-de-France Free-Work Temps pleinEn tant que Data Engineer, vous serez responsable de :Conception & Développement (Big Data / Java / Spark) – 40%Développer et optimiser des traitements Big Data en Java et Spark.Créer, maintenir et améliorer des pipelines de données robustes et scalables.Assurer la qualité, la performance et la fiabilité des traitements batch et streaming.Cloud...
-
DATA ENGINEER DATA VAULT GCP
il y a 2 semaines
Paris, France Fabskill Partners Temps pleinDescription Du Poste Description de l'offre: Nous recherchons un(e) Data Engineer Data Vault GCP pour rejoindre notre équipe et nous aider à développer des solutions de données innovantes. Type de Contrat: Freelance ou Prestataire Indépendant Disponibilité: On-site presence: 2–3 days per week (hybrid) 📍 Location: Brussels, Belgium Contract type:...
-
Data Engineer Gcp
il y a 1 semaine
Paris, France KOMEET TECHNOLOGIES Temps pleinTu corresponds au/à la Data Engineer GCP que nous recherchons si: - Tu as une expérience significative de minimum ans ou plus de projets Data : architecture, traitement ou analyse de données. - Tu as une expérience sur GCP et les services Data associés. (Big Query, Dataform, Looker Studio, Pub Sub) - Tu maîtrises au minimum un langage de programmation...
-
Data Engineer GCP
il y a 2 semaines
Paris, Île-de-France SFEIR Temps pleinQui sommes-nous ? SFEIR, partenaire Premier de Google Cloud, est une communauté de 900 experts Tech dont plus de 100 spécialistes Data. SFEIR c'est aussi•140 certifiés sur GCP•70 Trainers •7 Google Developers Experts Notre expertise Data & CloudConception et implémentation de data lakes et data warehouses sur BigQueryDéveloppement de pipelines...
-
Data Engineer Gcp X Python
il y a 1 semaine
Paris, France UCASE CONSULTING Temps pleinJe recherche pour un de mes clients un Data Engineer Python x GCP: **Missions principales**: ? Participer aux analyses, études d?impacts et cadrage techniques ? Concevoir des solutions en respectant les bonnes pratiques d?architecture data et développement ? Réaliser le développement de nouveaux data products et assurer la maintenance évolutive et...
-
Data Engineer GCP
il y a 1 semaine
Paris, Île-de-France TEOLIA CONSULTING Temps pleinDans le cadre du renforcement de la plateforme Data, vous interviendrez sur la qualité, la gouvernance et l?industrialisation des données.Vos missions principalesConcevoir et mettre en ?uvre des contrôles de qualité des données (Dataplex Universal Catalog)Industrialiser les contrôles via Terraform / TerragruntDéfinir et produire des indicateurs de...
-
Data Engineer
il y a 2 semaines
Paris, France Wewyse Temps pleinUne entreprise spécialisée en Data & IA recherche un Data Engineer H/F à Paris. Vous serez responsable de la construction des solutions data pour divers clients, impliquant des tâches telles que la conception d'architectures modernes et l'implémentation de pipelines robustes. Un environnement dynamique, axé sur l'innovation et la collaboration, vous...
