Data Engineer
Il y a 3 jours
Bezons, Ile-de-France
Temps plein
Gratuit avec email ou Google
Enregistrez cette offre et organisez votre recherche
Créez un compte gratuit pour enregistrer des offres d'emploi, créer des alertes et revenir à cette liste depuis votre tableau de bord.
Gratuit avec email ou Google
En continuant, vous acceptez nos Conditions d’utilisation & Politique de confidentialité.
Rejoignez notre équipe en tant que Data Engineer pour concevoir, développer et optimiser des pipelines de données à grande échelle. Vous travaillerez sur des projets innovants en exploitant les technologies AWS, Databricks et Apache Spark pour transformer des données brutes en insights actionnables.
Mission du poste :Concevoir, développer et maintenir des pipelines de données (batch et streaming) avec Apache Spark (PySpark/Scala).
Optimiser les performances des traitements de données sur Databricks (Delta Lake, Spark SQL, etc.).
Déployer et gérer des infrastructures AWS (S3, Glue, EMR, Lambda, Redshift, etc.).
Automatiser les workflows de données avec Airflow ou Step Functions.
Collaborer avec les équipes Data Science et Analytics pour fournir des données fiables et structurées.
Assurer la qualité des données (nettoyage, validation, monitoring).
Participer à l'évolution de l'architecture data (Data Lake, Data Warehouse).
Experience:
Débutant accepté Secteur d'activité: Activités des agences de placement de main-d'œuvre
Mission du poste :Concevoir, développer et maintenir des pipelines de données (batch et streaming) avec Apache Spark (PySpark/Scala).
Optimiser les performances des traitements de données sur Databricks (Delta Lake, Spark SQL, etc.).
Déployer et gérer des infrastructures AWS (S3, Glue, EMR, Lambda, Redshift, etc.).
Automatiser les workflows de données avec Airflow ou Step Functions.
Collaborer avec les équipes Data Science et Analytics pour fournir des données fiables et structurées.
Assurer la qualité des données (nettoyage, validation, monitoring).
Participer à l'évolution de l'architecture data (Data Lake, Data Warehouse).
Experience:
Débutant accepté Secteur d'activité: Activités des agences de placement de main-d'œuvre