Data Engineer Python

Il y a 2 jours

Tours, Centre, France DIANE CONSULTING Temps plein
Contexte de la mission Vous rejoignez l'équipe de valorisation de la donnée d'un grand groupe industriel. L'équipe conçoit et maintient des cas d'usage BI, Data Science et IA utilisés au quotidien par de nombreux ingénieurs. L'environnement technique combine un datahub historique (SSIS, SQL Server, PowerShell), à maintenir puis décommissionner, et une plateforme data plus récente (Python, Airflow, Iceberg, PostgreSQL, Oracle), elle-même en cours de migration vers le cloud. Vos missions
* Développer de nouveaux pipelines de données.
* Assurer le maintien en condition opérationnelle des traitements existants.
* Participer à la migration des flux vers la nouvelle plateforme.
* Être force de proposition sur les bonnes pratiques : nommage, structuration des DAG, gestion des branches Git, tests unitaires, documentation.
* Au moins 5 ans d'expérience en Data Engineering.
* Maîtrise de Python, d'Airflow (développement et exploitation de DAG), du SQL avancé (Oracle, PostgreSQL, SQL Server) et de GitLab CI/CD.
* Expérience attendue sur Apache Iceberg et l'architecture en médaillon.
* SSIS, PowerShell et GCP sont de vrais atouts.
* Habitude du travail en mode Agile (JIRA).
* Disponibilité pour une présence sur site à Tours au minimum 1 jour par semaine, et ponctuellement davantage selon les ateliers. Diane Consulting est une ESN spécialisée dans les métiers de la data et de l’architecture SI. Forte de plus de 15 ans d’expérience, notre entreprise accompagne ses clients (grands groupes, secteur public, industries) dans la conception et la transformation de leurs systèmes d’information. Notre ADN : exigence technique, agilité, et relation de confiance sur le long terme.