Senior Data Engineer Databricks

Il y a 7 jours

MarcqenBarœul, Hauts-de-France Cenova Temps plein
Rejoignez Cenova Cabinet de conseil à taille humaine, spécialisé dans la Data, l’IA et le Digital, Cenova accompagne depuis 2016 ses clients dans leurs projets de transformation digitale et Data. Nos équipes interviennent principalement auprès de grands comptes sur des problématiques mêlant Data Engineering, Data Platform, BI, gouvernance et Intelligence Artificielle. Dans le cadre du développement de notre agence de Lille, nous souhaitons renforcer notre practice Data Tech avec un(e) Senior Data Engineer spécialisé(e) Databricks / Lakehouse. Vous rejoindrez une équipe de consultants Data et interviendrez sur des projets exigeants techniquement, au contact direct des équipes Data, IT, Produit et métiers de nos clients. Selon les projets, vous serez notamment amené(e) à : Concevoir et optimiser des architectures Data sur Databricks Participer à la conception et à l’évolution de plateformes Lakehouse Exploiter les différents composants de l’écosystème Databricks : Delta Lake, Unity Catalog, Workflows, Jobs, Notebooks Travailler sur la performance, la scalabilité et l’optimisation des coûts Concevoir des modèles analytiques et décisionnels robustes Définir les faits, dimensions, granularités et mécanismes d’historisation Traduire les besoins métiers en modèles de données pérennes et maintenables Concevoir, développer et fiabiliser des pipelines ETL / ELT Mettre en place les tests et processus nécessaires à leur industrialisation Participer aux démarches CI/CD Mettre en œuvre des contrôles de Data Quality Structurer la gestion des anomalies et des rejets Garantir la traçabilité des données et contribuer aux démarches de data lineage Utiliser les outils de développement augmentés par l’IA pour accélérer la génération de code, le refactoring, les tests ou la documentation Collaborer avec des Product Owners, Architectes Data, Data Stewards, Data Analysts et équipes IT Participer à la définition et au partage des standards et bonnes pratiques Data Selon vos envies, vous pourrez également contribuer aux sujets internes de Cenova : partage d’expertise, avant-vente, développement de nos offres ou travaux autour de notre Datalab. Diplômé(e) d’une école d’ingénieur ou d’un Master en informatique, Data Science, statistiques ou formation équivalente, vous disposez d’une expérience significative en Data Engineering et avez déjà travaillé sur des environnements Data complexes en production. Nous recherchons un profil suffisamment expérimenté pour être autonome techniquement et force de proposition auprès des équipes avec lesquelles il travaille. COMPÉTENCES INDISPENSABLES Expertise avancée Databricks Très bonne maîtrise des architectures Lakehouse et Delta Lake Très bonne maîtrise de Python Très bonne maîtrise de SQL Solides compétences en modélisation de données Expérience dans le développement et l’industrialisation de pipelines Data Git CI/CD Sensibilité forte aux problématiques de Data Quality Capacité à intervenir dans des environnements Data complexes et transverses SERONT PARTICULIÈREMENT APPRÉCIÉES Unity Catalog Databricks Workflows / Jobs Databricks Genie Azure DevOps Power BI APIs et intégration de systèmes Développement augmenté par l’IA et utilisation d’agents IA Méthodologies Agile / Scrum Connaissances ITIL Connaissance de modèles métiers liés au secteur de retail Anglais professionnel CE QUE NOUS RECHERCHONS AVANT TOUT Nous ne recherchons pas uniquement quelqu’un capable de développer des pipelines. Nous cherchons un(e) consultant(e) capable de comprendre pourquoi une donnée est modélisée d’une certaine manière, comment elle sera consommée et comment garantir sa qualité dans le temps. Vous êtes reconnu(e) pour : votre autonomie, votre rigueur technique, votre capacité de structuration, votre capacité à challenger une architecture ou une pratique existante, votre sens du collectif, votre capacité à collaborer avec des interlocuteurs techniques et métiers, votre goût pour la qualité et l’amélioration continue. Pourquoi rejoindre Cenova ? Rejoindre Cenova, c’est intégrer un cabinet à taille humaine où l’expertise technique, la proximité managériale et le partage de connaissances occupent une place centrale. Depuis notre agence de Lille, vous interviendrez auprès de grands comptes de la région sur des projets Data structurants et bénéficierez d’un accompagnement régulier dans votre évolution. Notre volonté : vous proposer des missions qui correspondent réellement à votre expertise et à la trajectoire que vous souhaitez donner à votre carrière. 1. Entretien de découverte Présentation de Cenova, compréhension de votre parcours et de votre projet professionnel. 2. Entretien Manager / qualification technique Échange approfondi sur vos réalisations, votre maîtrise des environnements Data et Databricks, ainsi que votre posture de consultant. 3. Rencontre avec un Associé Dernier échange afin de nous projeter ensemble et confirmer notre envie commune de travailler ensemble.