Lead Data Engineer Senior - Innovation & Modernisation
Python, SQL,PowerShell, Apache Spark, PySpark, Delta Lake, Parquet, Avro, API REST, Docker, Git, CI,CD, Terraform, Bicep, ETL, ELT, LLM, RAG Chatbots, GenA
I
Pour le compte de l'un de nos clients, une entreprise technologique qui accompagne les acteurs publics dans leurs enjeux de modernisation, d'efficacité opérationnelle et d'innovation, nous recherchons un(e) Lead Data Engineer Senior passionné(e) pour rejoindre une équipe dynamique et contribuer à des projets à fort impact autour des enjeux de modernisatio
n.
Missions - Lead Data Engin
eerEn tant que Lead Data Engineer Senior, vous serez responsable de la conception, de l'industrialisation et de l'évolution des plateformes de données permettant d'alimenter des solutions de Data Science, de Machine Learning et de Gen
AI.Au quotidien, vous serez amené(e)
- à :Concevoir et déployer des architectures Data modernes, robustes et scalables sur Azure pour soutenir des projets de Data Engineering, Machine Learning et GenAI (LLM, RAG, Chatbot
- s).Développer, industrialiser et optimiser des pipelines ETL/ELT afin de garantir la qualité, la disponibilité et la fiabilité des donné
- es.Mettre en place des traitements de données batch et temps réel, ainsi que des architectures orientées événemen
- ts.Collaborer avec les équipes Data, IA, Cloud et les clients afin de transformer les besoins métiers en solutions techniques performant
- es.Définir les bonnes pratiques de développement (CI/CD, Infrastructure as Code, tests automatisés, monitoring, observabilité et gouvernance des donnée
- s).Participer aux choix d'architecture et accompagner les Data Engineers plus juniors à travers des revues de code, du mentorat et le partage de bonnes pratiqu
- es.Assurer une veille technologique continue afin d'identifier les innovations pertinentes et de faire évoluer les plateformes Da
ta.
Profil - Lead Data Engi
neerVous êtes un(e) Lead Data Engineer Senior(e), curieux(se) et orienté(e) qualité, avec une forte culture Cloud et D
ata.Vous disposez
- de :Au moins 5 ans d'expérience en Data Engineering, dont une expérience significative sur des projets Cl
- oud.Une excellente maîtrise de Microsoft Azure, notamment Azure Data Factory, Azure Synapse Analytics, Azure Functions, Azure SQL Database, Azure Data Lake Storage Gen2, Event Grid, Event Hub, Azure Key Vault et Azure Dev
- Ops.Une solide expérience dans la conception de pipelines de données et des architectures Data moder
- nes.Une très bonne maîtrise de Python, SQL et PowerSh
- ell.Une bonne connaissance des frameworks de traitement de données tels que Apache Spark (PySpark) ainsi que des formats Delta Lake, Parquet et A
- vro.Une expérience des outils d'orchestration et d'automatisation des traitements de donn
- ées.Une bonne maîtrise des API REST et des architectures orientées servi
- ces.Une expérience des environnements conteneurisés (Docker) et des orchestrateurs tels que Kubernetes est un p
- lus.Une bonne connaissance des pratiques DevOps : Git, CI/CD, Infrastructure as Code (Terraform ou Bicep), monitoring et observabil
- ité.Une bonne compréhension des problématiques de gouvernance, de sécurité et de qualité des donn
- ées.Une bonne connaissance des environnements GenAI (LLM, RAG, vectorisation, bases vectorielles) constitue un véritable at
- out.Un diplôme d'ingénieur ou un Bac 5 universita
- ire.Un niveau d'anglais profession
nel.Au-delà de vos compétences techniques, vous êtes reconnu(e) pour votre esprit d'équipe, votre rigueur, votre capacité d'analyse ainsi que votre aptitude à accompagner et faire grandir les équi
pes.
Offre - Lead Data Eng
ineerVous évoluerez dans un environnement stimulant, aux côtés d'équipes passionnées, en contribuant à des projets à forte valeur ajoutée qui participent à rendre les services publics plus performants, les villes plus intelligentes et les territoires plus dura
- bles.
Une culture d'entreprise tournée vers l'innovation et l'excellence tech - nique.Des projets variés autour de la Data, du Cloud et de l'Intelligence Artific
- ielle.De réelles perspectives d'évolution vers des fonctions d'architecture ou de management tech
- nique.Un accompagnement continu à travers des formations, certifications Cloud et con