Technical Lead
il y a 6 jours
Technical Lead - Data Engineering H/F/N
Au sein de votre équipe #OneTeam
- Vous rejoindrez notre équipe de Data Engineering qui a pour mission de fournir des données fiables et accessibles à l'ensemble des métiers.
- Nous recherchons un(e) Tech Lead Data Engineering pour guider l'équipe, définir notre vision technique et construire les fondations d'une plateforme data robuste, scalable et conforme aux meilleurs standards de l'industrie.
Vos principales responsabilités
- Définir une architecture de donnée avec des systèmes de traitement de données en temps réel et en batch, en utilisant Kafka, Spark, Hudi et Postgres.
- Gérer les flux de données entre les différents systèmes, en utilisant Kafka et Spark pour le traitement des données en temps réel et en batch.
- Développer des pipelines de données pour traiter les données en utilisant Spark, Hudi et Airflow pour orchestrer les taches dans un cluster kubernetes.
- Assurer la qualité des données en créant des traitements de validation et de nettoyage des données avec Spark et Hudi.
- Développer des applications de données en utilisant Spark, Hudi et Postges.
- Gérer les performances des systèmes de traitement de données en utilisant des outils de monitoring SparkUI.
Votre futur impact
Dans 6 mois vous :
- Aurez une bonne compréhension de l'architecture technique des systèmes de données d'OVHcloud, notamment en ce qui concerne les outils de gestion de données tels qu'Airflow, Spark et S3.
- Comprendrez les besoins et les défis des clients internes de finance, d'industrie, etc. et comment les systèmes de données peuvent répondre à ces besoins.
- Développerez des solutions de données pour répondre aux besoins des clients internes et améliorer les processus de données existants.
- Connaitrez les principales équipes en interaction avec la vôtre, notamment les équipes de finance, d'industrie, etc.
- Aurez noué une bonne relation avec les membres des équipes de données et des clients internes.
- Prendrez de l'autonomie sur les sujets de développement de données et proposerez des solutions innovantes pour améliorer les processus de données.
Et dans 1 an vous :
- Aurez participé à des choix de conception liés aux projets de données de l'équipe, notamment en ce qui concerne l'utilisation d'Airflow, Spark et S3.
- Aurez réalisé un ou plusieurs Proof of Concepts ou contribué significativement aux livrables de projets de données, tels que la mise en place d'un système de gestion de données pour un client interne.
- Serez en capacité de proposer des pistes de réflexion à l'équipe pour améliorer les processus de données et répondre aux besoins des clients internes.
- Aurez une bonne compréhension du périmètre et des enjeux de la gestion des données à OVHcloud, notamment en ce qui concerne la sécurité, la qualité et la gouvernance des données.
_
Compétences requises :
- Vous avez une expérience solide en développement de données et en architecture de données (Python, Scala).
- Vous avez des connaissances approfondies en Spark, Hudi, Kafka, Postgres et Airflow.
- Vous êtes capable de communiquer efficacement avec les membres de l'équipe et les parties prenantes.
- Vous êtes capable de collaborer avec les autres équipes et les parties prenantes pour atteindre les objectifs.
- Vous avez une expérience en gestion de projets et en leadership d'équipe.
C'est un +
- Vous avez déjà une expérience avec Kafka et Kubernetes.
-
Technical Lead
il y a 6 jours
Paris, Île-de-France Broadridge Temps pleinAt Broadridge, we've built a culture where the highest goal is to empower others to accomplish more. If you're passionate about developing your career, while helping others along the way, come join the Broadridge team.AtBroadridge Trading and Connectivity Solutions(BTCS), our mission is to deliver high-performance, sustainable solutions that power the future...
-
Technical Lead
il y a 10 heures
Paris, Île-de-France FuturMaster Temps pleinTo help us meet our growing challenges, we are seeking an experienced and drivenTech Leadto join our R&D team. This pivotal role combines technical leadership with active development, fostering the success of team members while driving forward innovative solutions in the supply chain domain.Key Responsibilities:Team Leadership & GrowthLead, mentor, and...
-
Lead Technical Artist
il y a 17 heures
Paris, Île-de-France Virtuos Temps pleinDescriptionAbout the PositionVirtuos Paris is looking for an experienced Technical Art Director who will be responsible for art content production pipelines. In this role, you will directly manage a team of Technical Artists and VFX Artists, ensuring technical excellence, performance, and visual quality across projects.ResponsibilitiesKey Responsibilities1....
-
Lead Technical Account Manager
il y a 2 semaines
Paris, Île-de-France Sparteo Temps pleinSparteo is an independent suite of AI-powered advertising technologies built on sustainable, sovereign infrastructure.Since 2018, we've been reshaping programmatic advertising to make it faster, more transparent, and more profitable by building the most direct path between publishers and advertisers.But we don't stop here: wherever attention lives, on the...
-
Lead Technical Account Manager
il y a 10 heures
Paris, Île-de-France Sparteo Temps pleinSparteo is an independent suite of AI-powered advertising technologies built on sustainable, sovereign infrastructure.Since 2018, we've been reshaping programmatic advertising to make it faster, more transparent, and more profitable by building the most direct path between publishers and advertisers.But we don't stop here: wherever attention lives, on the...
-
Technical Lead – NDC 3.0 DevelopmentJob ID
il y a 2 semaines
Paris, Île-de-France Urban Resilience Hub by UN-Habitat's CRGP Temps pleinResult of ServiceThe final deliverable of the Technical Lead will be to elaborate, develop, and produce the NDC 3.0 document itself, including all analytical inputs, modelling outputs, scenarios, costs, technologies', and technical documentation necessary to inform and support its overall technical development and consolidation, in alignment with the...
-
Technical Program Lead
il y a 2 semaines
Paris, Île-de-France Kraken Temps pleinHelp us use technology to make a big green dent in the universeKraken powers some of the most innovative global developments in energy.We're a technology company focused on creating a smart, sustainable energy system. From optimising renewable generation, creating a more intelligent grid and enabling utilities to provide excellent customer experiences, our...
-
Technical Program Lead
il y a 6 jours
Paris, Île-de-France Kraken Temps pleinHelp us use technology to make a big green dent in the universe Kraken powers some of the most innovative global developments in energy. We're a technology company focused on creating a smart, sustainable energy system. From optimising renewable generation, creating a more intelligent grid and enabling utilities to provide excellent customer experiences,...
-
Technical Program Lead
il y a 2 jours
Paris, Île-de-France Kraken Temps pleinHelp us use technology to make a big green dent in the universeKraken powers some of the most innovative global developments in energy.We're a technology company focused on creating a smart, sustainable energy system. From optimising renewable generation, creating a more intelligent grid and enabling utilities to provide excellent customer experiences, our...
-
Senior Technical Lead Manager
il y a 2 semaines
Paris, Île-de-France Back Market Temps pleinLocationParisEmployment TypeFull timeLocation TypeHybridDepartmentBUREAU OF TECHNOLOGYHi, we're Back Market.We're here to help make tech reliable, affordable, and better than new. We're a global marketplace for refurbished devices, helping lower our collective environmental impact by providing trustworthy, affordable tech with 92% less carbon emissions than...
