Data Engineer Databricks

Depuis 2011, Mind7 a développé une vision globale et des expertises transversales alliant technologie, méthodes et processus. Nous conseillons, accompagnons et aidons nos clients à améliorer leur performance opérationnelle et à acquérir une meilleure gestion de données de nos clients. Nous souhaitons que nos clients et collaborateurs comptent sur nous. Qu’ils voient en nous, non seulement un expert, mais aussi un partenaire dans la durée. Nous croyons en l’intelligence collective et donnons à nos collaborateurs les opportunités de s’épanouir, de progresser et de prendre des responsabilités (Tech days, Meet-up, formation…) C’est ce qui nous permet de soutenir la dynamique engagée de notre développement. Mind7 Consulting développe son expertise autour de quatre axes :
• Accompagnement et conseil : cadrage et pilotage de projets, excellence opérationnelle, agilité
• Architecture microservices : temps réel, microservices, DevOps, Cloud
• Data engineering : PLM, gestion des données, API et intégration, développement sur mesure
• Green IT : analyse du cycle de vie (ACV), audit et conseil, sensibilisation et formation En plein essor, Mind7 Consulting souhaite renforcer ses équipes et recrute son/sa futur(e) Data Engineer Databricks (PySpark) (H/F). Votre mission :
• Développer et maintenir des pipelines d'ingestion et de transformation de données sur Databricks.
• Concevoir et optimiser les traitements de données en garantissant leur performance et leur fiabilité.
• Participer à l'évolution de l'architecture data et aux choix techniques du projet.
• Assurer la qualité, la traçabilité et la cohérence des données tout au long des chaînes de traitement.
• Mettre en œuvre les bonnes pratiques de développement, de tests et d'industrialisation.
• Participer aux activités de supervision, de monitoring et d'amélioration continue des pipelines.
• Collaborer avec les équipes métiers et techniques pour répondre aux besoins data.
• Réaliser une veille technologique sur l'écosystème Databricks et les technologies associées.

Votre profil
Issu(e) d’une formation supérieure en informatique ou data (Bac +5 ou équivalent), vous justifiez d’une expérience de 5 ans en Data Engineering et 2 ans minimum en conception de pipelines sur Databricks, avec une forte expertise en PySpark. Vous possédez une ou plusieurs des compétences suivantes :
• Développement de pipelines data avec PySpark sur Databricks
• Conception de frameworks ou de patterns data (ELT/ETL, orchestration, supervision)
• Bonne compréhension des problématiques de performance, de qualité et de gouvernance des données Pourquoi nous rejoindre ? #SOLIDAIRE : Dans une entreprise à taille humaine, l’entraide, l’échange et le partage sont indispensables. #IMPLIQUÉ : Parce que nos méthodes de travail sont basées sur l’amélioration et l’optimisation des processus projet, un mindsetter est impliqué et force de proposition. #CRÉATIF : « Think out of the box » ; un mindsetter doit penser différemment, innover et aller au-delà de la pensée unique et conventionnelle. #AGILE : Dans des secteurs en constante mutation, l’agilité de l’esprit et des méthodes de travail est un facteur clé de performance.