Emplois actuels liés à Data Engineer GCP - Paris, Île-de-France - Collective
-
Data Engineer GCP
Il y a 46 minutes
Paris, Île-de-France KLETA Temps pleinDans le cadre d?un programme de transformation data, nous recherchons un Data Engineer GCP pour concevoir, optimiser et industrialiser des plateformes data cloud natives sur Google Cloud. Vous analyserez des architectures existantes, proposerez des trajectoires d?évolution (refonte des pipelines, migration vers des traitements serverless, optimisation des...
-
Data Engineer GCP
Il y a 38 minutes
Paris, Île-de-France Sfeir Temps pleinQui sommes-nous ? SFEIR, partenaire Premier de Google Cloud, est une communauté de 900 experts Tech dont plus de 100 spécialistes Data. SFEIR c'est aussi • 140 certifiés sur GCP • 70 Trainers • 7 Google Developers Experts Notre expertise Data & Cloud Conception et implémentation de data lakes et data warehouses sur BigQuery...
-
Data Engineer GCP
Il y a 13 minutes
Paris, Île-de-France Free-Work Temps pleinEn tant que Data Engineer, vous serez responsable de :Conception & Développement (Big Data / Java / Spark) – 40%Développer et optimiser des traitements Big Data en Java et Spark.Créer, maintenir et améliorer des pipelines de données robustes et scalables.Assurer la qualité, la performance et la fiabilité des traitements batch et streaming.Cloud...
-
Data Engineer GCP
il y a 2 jours
Paris, Île-de-France SFEIR Temps pleinQui sommes-nous ? SFEIR, partenaire Premier de Google Cloud, est une communauté de 900 experts Tech dont plus de 100 spécialistes Data. SFEIR c'est aussi•140 certifiés sur GCP•70 Trainers •7 Google Developers Experts Notre expertise Data & CloudConception et implémentation de data lakes et data warehouses sur BigQueryDéveloppement de pipelines...
-
Data engineer GCP
Il y a 40 minutes
Paris, Île-de-France Mobiskill | WEFY Group Temps pleinStart-up tech dans le retail qui développe une plateforme Saas pour augmenter la rétention et la satisfaction client.Rôle :En tant que Data Engineer, ton rôle sera prendre part aux enjeux de développements des différents produits de l'entreprise avec les équipes data déjà existantes.Missions principales :Comprendre les besoins métiers en...
-
data engineer gcp
Il y a 13 minutes
Paris, Île-de-France UCASE CONSULTING Temps pleinBonjour,Pour le compte de notre client, nous recherchons un data GCP.ContexteDans un contexte de modernisation des plateformes data, vous intervenez sur la conception, le développement et l?industrialisation de pipelines data cloud natifs sur GCP, au service des équipes métiers et analytics.Missions principalesConcevoir et maintenir des pipelines de...
-
data engineer gcp
Il y a 24 minutes
Paris, Île-de-France Free-Work Temps pleinBonjour,Pour le compte de notre client, nous recherchons un data GCP.ContexteDans un contexte de modernisation des plateformes data, vous intervenez sur la conception, le développement et l'industrialisation de pipelines data cloud natifs surGCP, au service des équipes métiers et analytics.Missions principalesConcevoir et maintenir des pipelines de...
-
Cloud Engineer GCP
Il y a 39 minutes
Paris, Île-de-France Collective Temps pleinBudget: 550 Contexte De La MissionPour le compte d'ungrand groupe international, nous recherchons unCloud Engineer spécialisé GCPpour rejoindre uneéquipe Data & AIen charge de concevoir, déployer et opérer des solutions digitales à forte valeur ajoutée autour de ladata, de l'IA prédictiveet de l'IA générative.Vous interviendrez au sein d'une...
-
Data Engineer
Il y a 36 minutes
Paris, Île-de-France MP DATA Temps pleinEn tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l'optimisation et la fiabilisation de nos pipelines de données à grande échelle, au cœur de notre plateforme analytique. Votre expertise sur Databricks et l'environnement Spark sera essentielle pour garantir des traitements performants, sécurisés et scalables.Vos...
-
Data Engineer Python GCP Snowflake
Il y a 28 minutes
Paris, Île-de-France Smartpoint Temps pleinSmartpoint en bref, qui sommes-nous et en quoi nous sommes différents ?Smartpoint Est Une Société De Conseil Et De Services Numériques, Spécialisée Dans L'ingénierie De La Data Depuis 2006. Nos Compétences Reconnues En Ce Domaine Nous Permettent D'être « Preffered Vendor » Et D'être Référencés Parmi Les Plus Grands Comptes Français Dans Les...
Data Engineer GCP
Il y a 53 minutes
Budget: 620
Définition du besoin
La Direction Technique du Numérique de France Télévisions mène des projets transverses en étroite collaboration avec les autres directions, notamment la direction Data. La Direction Data, au sein de la Direction du Numérique, a été créée avec la volonté de faire de la Data un levier de croissance des offres numériques.
La Direction Data a 3 grandes missions : maximiser la collecte de données tout en respectant les réglementations en vigueur, développer la connaissance et l'expérience utilisateurs et mettre à disposition auprès des équipes internes des outils de pilotage et d'aide à la décision.
Au sein de l'équipe Silver, la prestation se déroulera en collaboration avec les autres équipes de la Data, au cœur de la plateforme Data. Cette équipe est composée d'un product owner, de 3 data stewards et de 2 data ingénieurs.
Notre stack technique est principalement constitué de Python, Spark, SQL, BigQuery, Dataplex pour la qualité des données, Airflow pour l'orchestration des traitements et Terraform ainsi que Terragrunt pour l'industrialisation.
La stack inclut aussi d'autres services de la Google Cloud Platform.
Prestation de cette équipe
- Déployer les datasets normés sur un ou plusieurs des data domain
- Accompagner les utilisateurs des datasets normés dans leurs usages
- Mettre en place le contrôle qualité sur ces datasets
Prestations Attendues
Dans un premier temps, la prestation consiste à :
- Concevoir et réaliser les contrôles qualité sur les données de la plateforme Data, en exploitant Dataplex Universal Catalog
- Industrialiser ces contrôles grâce à Terraform et Terragrunt
- Concevoir et réaliser les indicateurs nécessaires au pilotage de la qualité des données
- Concevoir et réaliser la remontée de ces indicateurs dans notre data catalog Collibra
En Marge De L'objectif De Livraison De Livraison Précédent Et En Interaction Avec Les Membres De L'équipe, La Suite De La Mission Consiste à
- Participer activement aux différentes phases de conception, de planification et de réalisation des tâches avec l'équipe
- Participer aux initiatives de gouvernance des données en développant les contrôles de qualité des données
- Construire et maintenir de pipelines data robustes et scalables
- Accompagner les membres de l'équipe dans l'exploitation et le requêtage des données
- Organiser et structurer le stockage des données
- Mettre en place et maintenir des infrastructures scalables capable de répondre aux besoins et à l'accroissement rapide du volume de données
- Construire et maintenir les workflows de la CI/CD
- Partager avec les autres data ingénieurs pour appliquer les bonnes pratiques en vigueur
- Assurer l'évolutivité, la sécurité, la stabilité des environnements
- Participer aux différentes instances des data ingénieurs
- Contribuer et veiller à la mise à jour de la documentation
- Faire de la veille technologique active dans le domaine
Expertises demandées pour la réalisation de la prestation :
- Au moins 5 ans d'expérience en tant que Data Ingénieur dans un environnement data
- Compétences solides en data : structures de données, code, architecture
- Expériences dans la conception et la réalisation de pipelines data
- Expériences dans un environnement du cloud Google (GCP)
- Expériences intégrant BigQuery et Dataplex Universal Catalog
- Expériences intégrant les langages Python et SQL
- Expériences intégrant Spark
- Expériences intégrant des flux avec l'API Collibra
- Expériences intégrant Terraform et Terragrunt
- Expériences intégrant Gitlab et Gitlab CI/CD
- Expériences intégrant les méthodologies Agile : Scrum ou Kanban
- Capacité à vulgariser et à communiquer sur des aspects purement techniques
Modalités De La Prestation
Présence sur site requise en fonction des besoins de la prestation et a minima équivalente à 50% du temps de la prestation.
Astreintes week-end et jours fériés : Non
Matériel performant à fournir par le prestataire