Data Engineer Espace de données fédéré
Il y a 2 semaines
Paris, Ile-de-France
Collective.work
Temps plein
Gratuit avec email ou Google
Enregistrez cette offre et organisez votre recherche
Créez un compte gratuit pour enregistrer des offres d'emploi, créer des alertes et revenir à cette liste depuis votre tableau de bord.
Gratuit avec email ou Google
En continuant, vous acceptez nos Conditions d’utilisation & Politique de confidentialité.
Modalités de la mission
* Démarrage : ASAP
* Durée : mission longue
* Rythme : hybride 3/2
* Lieu : Île-de-France Contexte Un grand groupe bancaire construit un espace de données fédéré incluant une Data Marketplace. Le Data Engineer rejoint une squad pour construire, industrialiser et intégrer les composants techniques de la plateforme aux côtés de l'éditeur retenu et des entités du groupe. Ce que vous allez faire
* Concevoir et industrialiser les pipelines d'ingestion, de transformation et d'exposition (qualité, performance, observabilité)
* Mettre en œuvre les connecteurs avec les SI des entités (catalogues, référentiels, plateformes data on-prem et cloud, fédération d'identité)
* Contribuer aux produits de données : contrats de données, métadonnées, qualité, traçabilité
* Industrialiser CI/CD, IaC et DataOps sur les composants livrés
* Garantir la sécurité et la traçabilité des flux (chiffrement, secrets, habilitations, RGPD, DORA, BCBS 239)
* Accompagner les entités et documenter patterns de connecteurs et runbooks Compétences attendues
* Expérience confirmée en ingénierie data sur des flux distribués
* Compréhension des contraintes d'un SI bancaire régulé
* Collaboration en environnement multi-squads, communication claire, pédagogie
* Orientation valeur, performance, sécurité et conformité Compétences techniques Impératif : Spark, Kafka, Airflow, dbt, SQL/NoSQL, formats Iceberg/Delta/Parquet, Docker, Kubernetes, CI/CD, Terraform/Ansible, AWS et on-prem Nice to have : standards Data Spaces (Gaia-X, IDSA, EDC), data catalogues, expérience secteur bancaire
Experience:
Débutant accepté
* Démarrage : ASAP
* Durée : mission longue
* Rythme : hybride 3/2
* Lieu : Île-de-France Contexte Un grand groupe bancaire construit un espace de données fédéré incluant une Data Marketplace. Le Data Engineer rejoint une squad pour construire, industrialiser et intégrer les composants techniques de la plateforme aux côtés de l'éditeur retenu et des entités du groupe. Ce que vous allez faire
* Concevoir et industrialiser les pipelines d'ingestion, de transformation et d'exposition (qualité, performance, observabilité)
* Mettre en œuvre les connecteurs avec les SI des entités (catalogues, référentiels, plateformes data on-prem et cloud, fédération d'identité)
* Contribuer aux produits de données : contrats de données, métadonnées, qualité, traçabilité
* Industrialiser CI/CD, IaC et DataOps sur les composants livrés
* Garantir la sécurité et la traçabilité des flux (chiffrement, secrets, habilitations, RGPD, DORA, BCBS 239)
* Accompagner les entités et documenter patterns de connecteurs et runbooks Compétences attendues
* Expérience confirmée en ingénierie data sur des flux distribués
* Compréhension des contraintes d'un SI bancaire régulé
* Collaboration en environnement multi-squads, communication claire, pédagogie
* Orientation valeur, performance, sécurité et conformité Compétences techniques Impératif : Spark, Kafka, Airflow, dbt, SQL/NoSQL, formats Iceberg/Delta/Parquet, Docker, Kubernetes, CI/CD, Terraform/Ansible, AWS et on-prem Nice to have : standards Data Spaces (Gaia-X, IDSA, EDC), data catalogues, expérience secteur bancaire
Experience:
Débutant accepté