Data Architect GCP
il y a 1 jour
L'objectif principal est la
conception et la mise en œuvre d'un Data Lake moderne sur GCP
, basé sur une
architecture Médaillon
(Bronze / Silver / Gold) et s'appuyant sur
Apache Iceberg
, avec la capacité de
détacher une brique autonome
pour certains clients manipulant des données sensibles.
Missions principalesArchitecture & Data Platform
- Concevoir et mettre en place un Data Lake sur GCP basé sur Apache Iceberg
- Définir et implémenter une architecture Médaillon (ingestion, transformation, exposition)
- Participer aux choix d'architecture pour une brique data autonome dédiée aux données sensibles
- Contribuer à l'internalisation de la plateforme data (design, outillage, bonnes pratiques)
Data Engineering
Développer des pipelines d'ingestion pour :
Données capteurs issues de drones
Données tabulaires associées
Gérer des pics de charge importants (jusqu'à 10 Go ingérés simultanément)
- Garantir la disponibilité rapide des données après les vols d'essai
- Mettre en place des contrôles de qualité, traçabilité et gouvernance des données
Data & Analytics
- Préparer les données pour des cas d'usage de maintenance prédictive
- Optimiser les performances de lecture et d'écriture (partitionnement, schéma, versioning)
- Collaborer avec les équipes data science / métier
Sécurité & conformité
- Travailler dans un contexte habilitable (données sensibles, clients spécifiques)
- Appliquer les contraintes de sécurité et de cloisonnement des données
Profil candidat:
Profil recherchéExpérience
- 5+ ans d'expérience en Data Engineering / Data Architecture
- Expérience confirmée sur des architectures Data Lake / Lakehouse
- Pratique de volumes de données importants et ingestion en rafale
- Expérience cloud, idéalement GCP
Compétences clés
- Solide compréhension des formats de tables analytiques modernes (Iceberg, Delta, Hudi)
- Modélisation de données et performance
- Connaissance des enjeux de sécurité et de données sensibles
- Capacité à concevoir des briques autonomes et réutilisables
Soft skills
- Autonomie et sens de l'architecture
- Capacité à travailler avec des équipes pluridisciplinaires
- Esprit pragmatique, orienté produit et industrialisation
Contraintes & informations pratiques
- Localisation : Marseille
- Télétravail : 2 jours sur site / 3 jours TT
- Langue : Français requis
- Démarrage : ASAP
-
Architecte Solution Senior – GCP
il y a 4 jours
Marseille, Provence-Alpes-Côte d'Azur, France Klanik Temps pleinNous recherchons un(e) Architecte Solution Senior passionné(e) par les technologies cloud et les architectures data pour rejoindre les équipes de notre équipe. Vous interviendrez sur des projets stratégiques autour de la data et de la transformation numérique, en proposant des solutions robustes et évolutives sur Google Cloud Platform (GCP).Vos...
-
Data Engineer/Architect Apache Iceberg
il y a 1 semaine
Marseille, Provence-Alpes-Côte d'Azur, France Cherry Pick Temps pleinEn quelques motsCherry Pick est à la recherche d'un Data Engineer/Architect(H/F), pour le compte de l'un de ses clients qui opère dans le domaine de la fabrication et la commercialisation des drones.Description? Contexte de la missionDans un contexte de forte croissance des usages data autour de données issues de capteurs drones, la mission vise à...
-
Data Architect
il y a 4 jours
Marseille, Provence-Alpes-Côte d'Azur, France Digway Temps pleinOffre demploi : Data Architect (F/H)Lieu : Full Remote / Avec un déplacement par mois à MarseilleSociété : DIGWAY ESN spécialisée en Data & Cloud EngineeringVotre rôleRejoignez nos équipes Data pour concevoir et valider les architectures data de demain. En tant que Data Architect, vous définirez les standards techniques, garantirez la cohérence et...
-
Data Engineer/Architect Apache Iceberg
il y a 1 semaine
Marseille, Provence-Alpes-Côte d'Azur, France Collective Temps pleinBudget: En quelques motsCherry Pick est à la recherche d'unData Engineer/Architect(H/F), pour le compte de l'un de ses clients qui opère dans le domaine de la fabrication et la commercialisation des drones.Description Contexte de la missionDans un contexte de forte croissance des usages data autour dedonnées issues de capteurs drones, la mission vise à...
-
Data Engineer/Architect Apache Iceberg
il y a 24 heures
Marseille, Provence-Alpes-Côte d'Azur, France Free-Work Temps pleinEn quelques motsCherry Pick est à la recherche d'unData Engineer/Architect(H/F), pour le compte de l'un de ses clients qui opère dans le domaine de la fabrication et la commercialisation des drones.Description Contexte de la missionDans un contexte de forte croissance des usages data autour dedonnées issues de capteurs drones, la mission vise à concevoir...
-
Data Engineer
il y a 4 jours
Marseille, Provence-Alpes-Côte d'Azur, France Devoteam Data Driven Temps pleinAncrée au coeur de la cité phocéenne, Devoteam rassemble plus de 60 experts qui accompagnent nos clients dans leur transformation digitale. Spécialisés dans le cloud (AWS, Microsoft Azure, Google Cloud), l'IA, la cybersécurité, la data et l'automatisation des processus métiers, nous sommes leur partenaire de choix pour relever les défis de...
-
Data Architect SSOT
il y a 4 jours
Marseille, Provence-Alpes-Côte d'Azur, France Digway Temps pleinOffre demploi : Data Architect SSOT / Real-Time (F/H)Lieu : Full Remote / Avec un déplacement par mois à MarseilleSociété : DIGWAY ESN partenaire du groupe CMA CGM dans sa transformation DataContexte & rôleDans le cadre de la stratégie de transformation Data de notre client, DIGWAY recrute un Data Architect SSOT / Real-Time pour concevoir et piloter...
-
Consultant Data Engineer Azure H/F
il y a 24 heures
Marseille, Provence-Alpes-Côte d'Azur, France Devoteam Data Driven Temps pleinAncrée au coeur de la cité phocéenne, Devoteam rassemble plus de 60 experts qui accompagnent nos clients dans leur transformation digitale. Spécialisés dans le cloud (AWS, Microsoft Azure, Google Cloud), l'IA, la cybersécurité, la data et l'automatisation des processus métiers, nous sommes leur partenaire de choix pour relever les défis de...
-
Architecte Cloud
il y a 2 semaines
Marseille, Provence-Alpes-Côte d'Azur, France Ippon Technologies Temps pleinIPPON l'énergie du collectif au service de la technologie positive Qui sommes-nous ? IPPON est une société de conseil et d'expertise spécialisée dans des solutions digitales innovantes. Nous sommes organisés en practices : Fullstack, Cloud, DevOps, Data, Agilité, Architecture, Mobile, Produit. Notre objectif est de relever les challenges de la...
-
Data Engineer
il y a 4 jours
Marseille, Provence-Alpes-Côte d'Azur, France Digway Temps pleinOffre d'Emploi : Data Engineer / Data Analyst Polyvalent (H/F)Société : DIGWAY ESN Agile spécialisée dans les Nouvelles TechnologiesPoste : Data Engineer / Data Analyst (Focus Snowflake)Localisation : Paris (Île-de-France) ou Marseille, avec possibilité de télétravail partiel flexible.Secteur : Data Cloud, Big Data, ESNLe Rôle : Construisez l'Avenir...