Databricks Data Engineer: Pipelines, Delta Lake

Nous recherchons un profil Hadoop / PySpark qui sera en charge, en lien avec l'équipe de production applicative / devops, de mettre en œuvre techniquement les évolutions du datalake. Passionné par le développement et le traitement des données, capable de s’adapter à un environnement dynamique et en constante évolution, le candidat doit faire preuve...

ATLANSE recherche un Data Engineer en CDI à Paris pour concevoir et déployer des architectures de données, assurer l’ingestion, le stockage et l’accès aux données stratégiques.Vous travaillerez avec Hadoop, Spark, Kafka et SQL/NoSQL, dans des environnements cloud (AWS/Azure/GCP) et des outils d’orchestration tels que Airflow ou Talend....

What You’ll DoBuild and maintain batch and streaming data pipelines.Move production data into archival/data lake storage safely and observably.Improve quality, reliability, and observability of derived datasets.Design validations for freshness, completeness, schema correctness, and data quality.Build reusable datasets that reduce one-off data extraction...

•Concevoir et implémenter des pipelines d'ingestion et de transformation de données (batch et temps réel), robustes et scalables.•Développer et maintenir les flux ETL Talend qui alimentent le datalake et les systèmes consommateurs.•Développer des traitements Python / PySpark sur Databricks et mettre en œuvre les modèles de données...

Sopra Steria recherche un Data Engineer passionné par la valorisation de la donnée pour rejoindre sa Data Factory à Paris. Vous participerez à des projets clés pour un grand acteur financier et contribuerez à l’ingestion, l’organisation et la distribution des données dans un Data Lake.Vous développez avec SQL/Scala/Python/Java et des technologies...

Missions principalesÊtre force de proposition et participer à la conception des solutions techniques avec les membres de l’équipeComprendre les enjeux métiers afin de concevoir des solutions répondant aux besoins fonctionnelsParticiper aux cérémonies Agile SAFe : PI Planning, macro-chiffrage, raffinements, rétrospectives, etc.Concevoir et faire...

Positionné au sein de la DSI de l'entreprise, le Data Engineer intègrera l'équipe Conso Data qui traite les données de consommation des clients afin de les exposer sur les canaux digitaux. Il devra : Être force de proposition et participer à la conception des solutions techniques en collaboration avec les membres de l'équipe. Comprendre les enjeux...

L'équipe est chargée de la gestion transversale et globale des outils dédiés aux filières éolienne, solaire et hydraulique, en étroite collaboration avec Engie Digital et les systèmes d'information (SI) des différentes zones géographiques ; elle recherche actuellement un ingénieur plateforme de données (Data Platform Engineer). La mission...

Twyce, cabinet de conseil spécialisé en Transformation Digitale, recherche un Data Engineer senior pour accompagner ses clients sur l’intégration et l’orchestration de pipelines de données. Vous travaillerez sur Databricks, PySpark et SQL, avec une forte dimension CI/CD et Azure DevOps.Le rôle exige au moins 6 ans d’expérience en Data Engineering...