Data Engineer Apache/flink
il y a 2 semaines
Assurer la maintenance des pipelines Flink en production et optimiser leurs performances.
Déployer et configurer un cluster Flink prêt pour la production, optimisé pour l?évolutivité et la tolérance aux pannes.
Mettre en place et configurer des outils de surveillance et d?alertes (ex. : Prometheus, Grafana).
Identifier et résoudre les problèmes liés aux performances et aux échecs des tâches Flink.
Fournir une documentation détaillée (architecture, tuning, troubleshooting, meilleures pratiques).
Animer une session de transfert de connaissances avec les équipes internes.
Familiarité avec l?écosystème Big Data et les meilleures pratiques d?ingénierie des données.
Sens de la collaboration et capacité à transférer des connaissances à une équipe technique.
Profil recherché
**Expertise technique**:
Maîtrise d?Apache Flink pour le traitement par lots et en flux.
**Excellentes compétences en programmation**: Java ou Scala, et SQL.
**Bonne connaissance des technologies Big Data**: Hadoop et Spark.
Expérience confirmée dans l'utilisation des services de données AWS.
**Expérience professionnelle**:
Participation à des projets de production avec Apache Flink.
Démonstration de la capacité à optimiser des pipelines Flink pour des performances élevées.
Assurer la maintenance des pipelines Flink en production et optimiser leurs performances.
Déployer et configurer un cluster Flink prêt pour la production, optimisé pour l?évolutivité et la tolérance aux pannes.
Mettre en place et configurer des outils de surveillance et d?alertes (ex. : Prometheus, Grafana).
Identifier et résoudre les problèmes liés aux performances et aux échecs des tâches Flink.
Fournir une documentation détaillée (architecture, tuning, troubleshooting, meilleures pratiques).
Animer une session de transfert de connaissances avec les équipes internes.
Familiarité avec l?écosystème Big Data et les meilleures pratiques d?ingénierie des données.
Sens de la collaboration et capacité à transférer des connaissances à une équipe technique.
Profil recherché
**Expertise technique**:
Maîtrise d?Apache Flink pour le traitement par lots et en flux.
**Excellentes compétences en programmation**: Java ou Scala, et SQL.
**Bonne connaissance des technologies Big Data**: Hadoop et Spark.
Expérience confirmée dans l'utilisation des services de données AWS.
**Expérience professionnelle**:
Participation à des projets de production avec Apache Flink.
Démonstration de la capacité à optimiser des pipelines Flink pour des performances élevées.
-
Data Engineer Apache Flink
il y a 7 jours
Paris, France UCASE CONSULTING Temps pleinBonjour à tous, Je recherche pour un de mes clients dans le domaine de la Banque/Finance un consultant Data Engineer. Développement de pipelines de traitement de données en temps réel : Concevoir, implémenter et maintenir des pipelines de données en utilisant Apache Flink sur AWS. **Optimisation de performances**: Identifier et résoudre les problèmes...
-
Flink & Infra Engineer, Data & Analytics Platform (Hybrid Paris)
il y a 1 semaine
Paris, France Datadog Temps pleinA leading tech company in Paris is looking for a Software Engineer for their Data & Analytics platform. In this role, you will design and deploy scalable tools and infrastructure to support product engineering, focusing on Flink and distributed systems. The ideal candidate should have over 2 years of experience in software engineering with a strong...
-
Experienced Data Engineer
il y a 3 jours
Paris, France BeReal. Temps pleinFounded in 2013, Voodoo is a tech company that creates mobile games and apps with a mission to entertain the world. Gathering 800 employees, 7 billion downloads, and over 200 million active users, Voodoo is the #3 mobile publisher worldwide in terms of downloads after Google and Meta. Our portfolio includes chart-topping games like Mob Control and Block Jam,...
-
Data Engineer
il y a 3 jours
Paris, Île-de-France MP DATA Temps pleinEn tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l'optimisation et la fiabilisation de nos pipelines de données à grande échelle, au cœur de notre plateforme analytique. Votre expertise sur Databricks et l'environnement Spark sera essentielle pour garantir des traitements performants, sécurisés et scalables.Vos...
-
Data Engineer
il y a 4 semaines
Paris, France MP DATA Temps pleinEn tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l’optimisation et la fiabilisation de nos pipelines de données à grande échelle, au cœur de notre plateforme analytique. Votre expertise sur Databricks et l’environnement Spark sera essentielle pour garantir des traitements performants, sécurisés et scalables.Vos...
-
Data Engineer
il y a 4 jours
Paris, France MP DATA Temps pleinEn tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l'optimisation et la fiabilisation de nos pipelines de données à grande échelle, au cœur de notre plateforme analytique. Votre expertise sur Databricks et l'environnement Spark sera essentielle pour garantir des traitements performants, sécurisés et scalables.Vos...
-
Senior Software Engineer
il y a 4 jours
Paris 2e, France Flink Temps pleinCompany Description We are Flink - your online supermarket revolutionising the way you do your grocery shopping. With a wide selection of over 2,400 high-quality products, we aim to deliver to your door in minutes. We put our customers first and ensure all products delivered are fresh and nutritious. Additionally, we can customise our national assortment to...
-
Lead Data Engineer
il y a 5 jours
Paris, France Aurélie Bagot ( Consultante recrutement indépendante) Temps pleinJe recherche pour un client startup en plein essort un lead data engineer (H/F) dont les principales missions seront de: - Extraire, transformer et stocker la donnée pour la rendre exploitable auprès des équipes qui en ont besoin (data viz, data scientist, équipes métiers,...) - Savoir monter une Data Plateform (connaissances ops de base requises)...
-
Lead software engineer
il y a 4 semaines
Paris, France DGSE - Direction Générale de la Sécurité Extérieure Temps pleinLa Direction Générale de la Sécurité Extérieure, DGSE, recrute un Lead software engineer - Systèmes distribués – Plateforme de données (H/F).Le poste est situé à Paris. La nationalité française est obligatoire.Domaine métierSciences et TechnologiesVotre environnement de travailLes flux de données traités par la DGSE sont massifs et...
-
Data Engineer
il y a 1 semaine
Paris, France Veepee Temps pleinAs a data engineer you will join one of our Data Science Teams, and distributed between Paris, Barcelona and Brussels. The team’s responsibility lies in providing forecasts to operational and business entities within Veepee, driving high-priority projects around product pricing, product ranking, warehouse efficiency and search. Your mission will be to...
