Data Engineer Databricks
Enregistrez cette offre et organisez votre recherche
Créez un compte gratuit pour enregistrer des offres d'emploi, créer des alertes et revenir à cette liste depuis votre tableau de bord.
En continuant, vous acceptez nos Conditions d’utilisation & Politique de confidentialité.
Fabskill Partners
Data Engineer Databricks (Hybrid ou Full Remote)
18 Application(s)
À propos de nous:
fabskill partners
Description de l'offre:
Nous recherchons un(e) Data Engineer spécialisé(e) Databricks pour rejoindre Fabskill Partners et contribuer à la conception, au déploiement et à l'optimisation de pipelines de données sur AWS.
Responsabilités:
- Concevoir, développer et maintenir des pipelines de données robustes avec Databricks et Apache Spark.
- Intégrer et orchestrer des flux de données sur AWS en utilisant les meilleures pratiques CI/CD.
- Optimiser les performances des jobs Spark et assurer la scalabilité des solutions.
- Collaborer avec les équipes data science et analytics pour fournir des jeux de données fiables.
- Mettre en place des processus de monitoring, de logging et de gestion des incidents.
Exigences:
- Maîtrise de Databricks, Apache Spark et Python.
- Expérience avec les services AWS (S3, Redshift, EMR, etc.).
- Compétences en CI/CD pour l'automatisation des déploiements.
- 5+ ans d'expérience en ingénierie des données.
- Capacité à travailler en équipe et à résoudre des problèmes complexes.