Emplois actuels liés à Tech Lead Data Engineer Pyspark - Paris - UCASE CONSULTING

  • Data Engineer/ Analyst – PySpark

    il y a 2 semaines

    Paris, Île-de-France ABSIS CONSEIL Temps plein

    Dans le cadre d?un programme de transformation Data, un acteur du secteur assurantiel recherche un Data Engineer / Data Analyst confirmé et développeur Pyspark et PowerBI pour intervenir sur un projet de modernisation et d?harmonisation de la plateforme Data.Contexte de la missionLe projet vise à :moderniser l?infrastructure Data,optimiser le modèle de...

  • Data Engineer Python/pandas/pyspark/databricks

    il y a 1 semaine

    Paris, France LeHibou Temps plein

    Notre client, acteur majeur de l'énergie, recherche un Data Engineer avec des compétences sur Python/Pandas/Pyspark/Databricks sous un environnement Azure Cloud. Le Data Engineer doit avoir des connaissances solides du langage de programmation Python et avoir travaillé avec ce langage pendant au moins les 4 dernières années. Le Data Engineer évoluera...

  • Tech Lead Data engineering

    il y a 2 semaines

    Paris, Île-de-France Collective Temps plein

    Budget: 600Contexte De La MissionLe prestataire Tech Lead intègre une de nos 30 squads qui réunit 5 à 10 personnes (data scientists, data engineers, software engineers…). Chacune des squads est dédiée à un projet métier.Le prestataire Tech Lead travaillera dans un environnement transverse à l'organisation et pourra s'appuyer notamment sur :Delivery...

  • Senior Data Engineer PySpark

    il y a 2 semaines

    Paris, Île-de-France AMD BLUE Temps plein

    Qui sommes-nous ?Chez AMD Blue, l'innovation est notre passion, et nous sommes fiers de présenter Blue Data. Avec une présence établie sur l'ensemble du territoire français et une récente expansion aux États-Unis, nous sommes résolument tournés vers l'avenir.Dans le cadre d?un besoin client, nous avons l'opportunité d'accueillir un nouveau membre au...

  • Data Engineer/ analyste informatique – PySpark

    il y a 2 semaines

    Paris, Île-de-France Free-Work Temps plein

    Dans le cadre d'unprogramme de transformation Data, un acteur du secteur assurantiel recherche unData Engineer / Data Analyst confirmé et développeurPyspark et PowerBI pour intervenir sur unprojet de modernisation et d'harmonisation de la plateforme Data.Contexte de la missionLe projet vise à :moderniser l'infrastructure Data,optimiser le modèle de...

  • Tech Lead avec spécialité Data Engineering

    il y a 1 jour

    Paris, Île-de-France Collective Temps plein

    Budget: 650Tech Lead avec spécialité Data EngineeringContexte de la missionLe prestataire Tech Lead intègre une des 30 squads de la structure, composées de 5 à 10 personnes (data scientists, data engineers, software engineers, etc.). Chaque squad est dédiée à un projet métier.Le prestataire Tech Lead travaillera dans un environnement transverse à...

  • Tech Lead Databricks

    il y a 1 jour

    Paris, Île-de-France Collective Temps plein

    Budget: €Contexte de la missionDans le cadre de la construction d'une plateforme de pilotage de la performance pour un acteur international de l'énergie, nous recherchons un Tech Lead expérimenté pour piloter l'architecture technique, le développement et la mise en production des pipelines sur Databricks.Responsabilités principalesDéfinir et...

  • Senior Data Engineer Optimisation et stabilisation d'une pipeline PySpark

    il y a 2 semaines

    Paris, Île-de-France Free-Work Temps plein

    Profil : Senior Data EngineerContexte de la mission : L'équipe Supply Zone Forecast (SZF) développe et maintient les modèles de prévision de la demande et des ventes pour l'ensemble des produits Décathlon, par centre d'approvisionnement continental.Aujourd'hui, notre pipeline est en production sur l'Europe, la Chine et l'Inde, et notreambition pour 2026...

  • Tech Lead Data – Migration vers Microsoft Fabric

    il y a 2 semaines

    Paris, Île-de-France Syneam Temps plein

    ContexteDans le cadre de la modernisation de sa plateforme data, notre client remplace un ETL historique par un socle basé sur Microsoft Fabric et Spark. Les flux concernés alimentent un Data Hub finance/risque (contrats, positions, instruments de couverture, flux futurs, contreparties, notations, données de marché).Pour piloter cette transformation,...

  • Senior Tech Lead Data Engineering Product

    il y a 1 semaine

    Paris, France Ekimetrics Temps plein

    Ekimetrics est un leader de la Data & de l’IA, et fournisseur de solutions innovantes depuis 2006. Nous mettons la donnée au service de la performance marketing, business et environnementale, avec une conviction forte: la data peut et doit accélérer la transformation durable des organisations. Ekimetrics, c’est: - 500 expert-e-s en Data & IA - 1...

Tech Lead Data Engineer Pyspark

il y a 22 heures

Paris, France UCASE CONSULTING Temps plein

Bonjour,
Pour le compte de notre client, nous recherchons un Tech lead data engineer Pyspark / Azure / Databricks.
**Missions ci-après**:
1?? Analyse et Conception
Étudier les besoins métiers et concevoir l?architecture des pipelines de données en intégrant des modèles adaptés aux cas d?usage.
(Tech Lead) Définir la stratégie technique, valider les choix d?architecture et assurer leur cohérence avec les exigences métier et techniques.
2?? Développement des Pipelines
Développer et optimiser des pipelines ETL/ELT avec PySpark, intégrer diverses sources de données (SQL, NoSQL, APIs, fichiers) et garantir leur performance.
(Tech Lead) Assurer les bonnes pratiques de développement, réaliser des revues de code et encadrer les développeurs juniors.
3?? Gestion des Environnements Cloud
Configurer et gérer les clusters Databricks, orchestrer les flux de données avec Azure Data Factory / Databricks Workflows et stocker les données dans Azure Data Lake.
(Tech Lead) Optimiser la gestion des ressources cloud, mettre en place des standards pour le provisioning des environnements et superviser les décisions liées aux coûts et performances.
4?? Optimisation et Performance
Améliorer l?exécution des jobs avec Delta Lake, optimiser le code PySpark (partitioning, caching, joins...) et mettre en place du monitoring.
(Tech Lead) Définir et promouvoir les meilleures pratiques d?optimisation et de monitoring, analyser les bottlenecks et proposer des solutions adaptées à grande échelle.
5?? Sécurisation et Gouvernance
Assurer la sécurité des données avec RBAC, ACLs, Unity Catalog, mettre en place des contrôles d?accès et garantir la qualité des données (tests, validation, gestion des erreurs).
(Tech Lead) Définir les standards de sécurité et de gouvernance, assurer la conformité aux réglementations (GDPR, RGPD, ISO) et encadrer l?implémentation des bonnes pratiques.
6?? Automatisation et CI/CD
Automatiser le déploiement des pipelines via Azure DevOps, Terraform, intégrer des tests unitaires et des workflows CI/CD pour Databricks.
7?? Supervision et Maintenance
Suivre les performances et les coûts via Azure Monitor, assurer la maintenance des pipelines et documenter les processus pour le partage de connaissances.
(Tech Lead) Coordonner les opérations de maintenance, établir une vision long terme des évolutions techniques et encadrer la montée en compétences des équipes. ?
Bac + 5 informatique
**Prérequis**: Au moins 6 ans d'XP en python et pyspark
**XP**: Au moins 1 an sur Databricks et Azure
**XP**: 1 an en tant que tech lead
RIgoureux, bon relationnel et bonne communication