Data Engineer
Enregistrez cette offre et organisez votre recherche
Créez un compte gratuit pour enregistrer des offres d'emploi, créer des alertes et revenir à cette liste depuis votre tableau de bord.
En continuant, vous acceptez nos Conditions d’utilisation & Politique de confidentialité.
Data Engineer / Développeur ETL Python Sophia Antipolis
Description:
Contexte de la mission
Réalisation technique
- Concevoir, réaliser, tester et livrer les pipelines de données.
- Développer les mécanismes d’injection et de chargement des données en Python.
- Réaliser les transformations et orchestrations de données au moyen d’un outil ETL, idéalement Semarchy.
- Garantir la qualité, la fiabilité, la sécurité et la performance des traitements.
- Assurer la maintenance, le suivi et l’optimisation des flux existants.
- Proposer des améliorations continues et des innovations en matière de gestion et d’analyse des données.
- Documenter les développements, les règles de transformation et les procédures d’exploitation.
Compétences techniques et méthodologiques requises
Compétences indispensables
- Data management : bonnes connaissances en BI et en intégration de données.
- ETL : expérience confirmée et opérationnelle sur au moins un outil ETL. Semarchy est apprécié ; une expertise sur Talend, Informatica, ODI, SSIS ou DataStage peut également convenir.
- SQL : maîtrise obligatoire pour l’exploitation, le contrôle et l’optimisation des données.
- Python : maîtrise obligatoire pour les mécanismes d’injection et de chargement des données. Python n’est pas l’outil principal de transformation.
- Data Engineering : compréhension des concepts de pipelines, de flux, de qualité des données et d’architecture de données.
- Méthodologies Agile : pratique de Scrum et/ou Kanban.
Profil recherché
- 3 à 5 ans d’expérience en Data Engineering, développement ETL ou intégration de données.
- Expérience concrète dans la conception, le développement et la maintenance de flux ETL.
- Capacité à travailler avec des interlocuteurs techniques et fonctionnels.
- Excellentes capacités de communication, d’analyse et de synthèse.
- Autonomie, rigueur, sens du service et capacité à proposer des améliorations.
Point d’attention pour le sourcing
Le besoin ne correspond pas à un développeur Python pur. Le critère principal est une expérience solide sur un outil ETL. Python est utilisé pour l’injection des données, tandis que les transformations sont réalisées via l’ETL. Semarchy constitue un avantage différenciant
- Outils de travail : Jira, VS Code et Git.
Compétences appréciées
- Expérience de Semarchy pour la transformation et l’intégration des données.
- Connaissance de SAS.
- Pratique des méthodologies DevOps et des chaînes CI/CD.
- Expérience de l’industrialisation et de la supervision de pipelines de données