Data Engineer
Il y a 19 heures
Paris, Île-de-France
SIJO
Temps plein
Gratuit avec email ou Google
Enregistrez cette offre et organisez votre recherche
Créez un compte gratuit pour enregistrer des offres d'emploi, créer des alertes et revenir à cette liste depuis votre tableau de bord.
Gratuit avec email ou Google
En continuant, vous acceptez nos Conditions d’utilisation & Politique de confidentialité.
- Concevoir et implémenter des pipelines d'ingestion et de transformation de données (batch et temps réel), robustes et scalables.
- Développer et maintenir les flux ETL Talend qui alimentent le datalake et les systèmes consommateurs.
- Développer des traitements Python / PySpark sur Databricks et mettre en œuvre les modèles de données cibles.
- Automatiser les transformations, la documentation et les tests de données avec dbt.
- Configurer les pipelines d'acheminement des données, y compris les flux CDC.
- Mettre en place les bonnes pratiques de qualité de données, de monitoring, d'alerting et de logging.
- Développer des modules réutilisables (templates de pipelines, librairies communes, CI/CD) et exploiter les modules existants dans les nouveaux projets. xuezdbg
- Réaliser les développements et les tests associés, et accompagner les mises en production.