Data Engineer

Il y a 3 jours

Paris, Nouvelle-Aquitaine, France Free-Work Temps plein 60 000 € - 90 000 €/an
  • Concevoir et implémenter des pipelines d'ingestion et de transformation de données (batch et temps réel), robustes et scalables.
  • Développer et maintenir les flux ETL Talend qui alimentent le datalake et les systèmes consommateurs.
  • Développer des traitements Python / PySpark sur Databricks et mettre en œuvre les modèles de données cibles.
  • Automatiser les transformations, la documentation et les tests de données avec dbt.
  • Configurer les pipelines d'acheminement des données, y compris les flux CDC.
  • Mettre en place les bonnes pratiques de qualité de données, de monitoring, d'alerting et de logging.
  • Développer des modules réutilisables (templates de pipelines, librairies communes, CI/CD) et exploiter les modules existants dans les nouveaux projets.
  • Réaliser les développements et les tests associés, et accompagner les mises en production.