Data Engineer Apache Iceberg
Enregistrez cette offre et organisez votre recherche
Créez un compte gratuit pour enregistrer des offres d'emploi, créer des alertes et revenir à cette liste depuis votre tableau de bord.
En continuant, vous acceptez nos Conditions d’utilisation & Politique de confidentialité.
Ses contenus et son jobboard IT sont mis à disposition 100% gratuitement pour les indépendants et les salariés du secteur. Nous recherchons pour une mission longue chez notre client secteur banque/finance en région parisienne un Data Engineer confirmé. Vous rejoignez une équipe qui construit un hub de données de marchés sur AWS, avec Apache Iceberg comme format de stockage central. Un projet structurant, qui s'inscrit dans la stratégie SI du client et interagit avec plusieurs grands programmes.
Vos missions :
- Concevoir et mettre en ?uvre les pipelines d'ingestion depuis les référentiels de données de marchés.
- Structurer et modéliser des datasets cohérents à partir des référentiels sources.
- Exploiter Apache Iceberg : partitionnement, time travel, évolution de schéma, compaction.
- Développer les traitements de transformation et de chargement en Python / PySpark (EMR ou Glue ETL).
- Garantir la qualité et la traçabilité des données : lineage, contrôles de cohérence, gouvernance.
- Assurer la fiabilité en production : monitoring, alertes, reprises et gestion des incidents.
- Échanger avec les équipes métier, data et infrastructure.
Vous êtes recruté en CDI cadre chez Ingéniance et rejoignez notre communauté d'experts data.
Ref : O-LPXHD Vous avez une formation supérieure (BAC+4/5) et une expérience confirmée en data engineering. Vous maîtrisez Python et PySpark, l'écosystème AWS (S3, Glue, Athena, EMR, IAM, CloudWatch) et Apache Iceberg. Vous connaissez les formats Parquet, Avro et JSON ainsi que les concepts de data product, data contract, lineage et data quality. Une connaissance des données de marchés financiers (instruments, cotations, fournisseurs de données comme Bloomberg ou Refinitiv) serait un plus. Anglais courant, à l'écrit comme à l'oral. Rigoureux, vous aimez fiabiliser vos solutions en production et savez communiquer avec des interlocuteurs métier comme techniques.
-
Data Engineer H/F
Il y a 4 jours
Paris, Île-de-France Lexi / Tailornet Temps plein 62 000 € - 67 000 € ContratCréé en 2003 et adossé au groupe Smart4engineering depuis 2019, nous accompagnons nos clients dans la conception, la gestion et la sécurisation de leurs infrastructures informatiques, pour les aider à relever les défis structurants d’aujourd’hui et de demain. Dans le cadre de projets pour des clients grands comptes, nous recherchons un·e...
-
Site Reliability Engineer- Data Platform
Il y a 4 jours
Paris, Ile-de-France Veepee Temps pleinPionnier des ventes événementielles en ligne depuis 2001 et acteur incontournable du e-commerce en Europe, Veepee collabore avec plus de 7 000 marques pour proposer des produits à forte décote, disponibles sur une durée limitée. Présent dans de nombreux univers parmi lesquels la mode, la maison, le vin, le voyage, ou encore la beauté ... Veepee a...
-
Data Engineer Confirmed
Il y a 3 jours
Paris, Ile-de-France Decathlon Digital FR Temps pleinData Engineer Confirmé.e L'équipe Core Data Product de DECATHLON recherche ses futur-e-s Data Engineers basé·e·s à Lille/Paris. Au cœur de l’entité Decathlon Digital, nous recherchons nos futur.es Data Engineers pour rejoindre les équipes Core Data Products. Rejoignez l'équipe Core Data Products : Au cœur des décisions stratégiques de...
-
Lead Data Engineer
Il y a 3 jours
Paris, Ile-de-France Oventi Temps plein💡 Oventi est un cabinet de conseil en Data et IA qui propulse la performance des entreprises. En unissant une maîtrise technique de pointe et une vision stratégique ancrée dans les enjeux métier, nous transformons les données en leviers de croissance concrets. Issues des meilleures écoles d’ingénieurs et de commerce, nos équipes conçoivent des...
-
Data Engineer
Il y a 3 jours
Paris, Île-de-France Nobori Partners Temps plein 65 000 € - 95 000 € ContratNobori Partners : notre contexte Pour vous donner un aperçu de qui nous sommes et pourquoi nous recrutons. Prêt(e) à transformer le paysage digital ? Bienvenue chez Nobori, l’atelier où l’architecture cloud prend vie ! Depuis notre création en 2021, nous avons rassemblé une équipe passionnée et dynamique, unie par l’envie de relever ensemble...
-
Big Data Engineer
Il y a 3 jours
Paris, Île-de-France Odaseva Temps plein 70 000 € - 120 000 € ContratOdaseva provides enterprise data management and security solutions that help organizations exercise sovereignty over their critical data. Companies representing 10% of global market capitalization trust Odaseva, including Schneider Electric, Volkswagen and Robert Half. Its Excalibur Data Platform enables customers to protect, secure, move, and use data and...
-
Data engineer GCP
Il y a 2 jours
Paris, Île-de-France ALTEN Temps pleinDescription de l'entrepriseLeader mondial de l'Ingénierie et du Conseil en Technologies, ALTEN accompagne depuis plus de 30 ans la stratégie d'innovation, de R&D et de transformation numérique de ses clients grands comptes. Avec plus de 50 000 collaborateurs répartis dans plus de 30 pays, ALTEN place l'humain et l'excellence technique au cœur de sa...
-
Dev/Data engineer DataLake
Il y a 3 jours
Paris, Ile-de-France NEXTON Temps pleinDescription de l'entreprise Qui sommes-nous ? Rejoindre NEXTON, c'est intégrer une entreprise où convergent l'esprit d'un cabinet de conseil, la créativité d'une Factory et la dynamique d'une ESN ! Grâce à notre expertise, nous accompagnons des clients grands comptes et des pure players tels que SNCF, Orange, et BNP Paribas dans leurs stratégies...
-
Senior Data Engineer
Il y a 4 jours
Paris, Île-de-France Signify Technology Temps plein 90 000 € - 120 000 € ContratJob title: Senior Data Engineer Job type: Permanent Salary: Competitive, based on experience Role Location: Onsite in Paris, France The Company An innovative technology company operating in a fast-paced, data-driven environment. The business is focused on building scalable technology and reliable data infrastructure to support a growing range of products and...
-
Big Data Engineer
Il y a 5 jours
Paris, Île-de-France Ultimate VC List Temps pleinOdaseva provides enterprise data management and security solutions that help organizations exercise sovereignty over their critical data.Vérifiez ci-dessous si vous avez ce qu'il faut pour cette opportunité, et si c'est le cas, envoyez votre candidature dès que possible.Companies representing 10% of global market capitalization trust Odaseva, including...
