Data Engineer

Il y a 2 jours

NeuvillesurSarthe, Pays de la Loire, France SII Group Temps plein 60 000 € - 85 000 € Contrat

Dans le cadre d'un projet de migration de flux de données existants vers une plateforme Data moderne basée sur Spark et les technologies Big Data, vous intervenez sur l'analyse, la conception et l'optimisation des traitements de données.

Analyser et migrer des traitements vers Apache Spark Développer des pipelines ETL/ELT en PySpark Optimiser les requêtes SQL et les performances des traitements Intervenir sur les environnements Cloudera/Hadoop, Hive et Impala Participer aux phases de tests et d