Senior Data Engineer
il y a 4 semaines
The Job
Contexte
Le Tribe « Customer Finance » est composé de plusieurs Squad, parmi elles la squad Finance Ingestion qui a pour mission de développer des outils et des applications pour la collecte de royalties auprès des plateformes de streaming de musique ainsi que préparer les données afin de faire la distribution des royalties auprès des producteurs de musiques.
En tant que Senior Data Engineer, tu intégras une équipe de Data Engineering travaillant avec les principes du framework agile Scrum. Cette équipe est composée essentiellement de 5 Data Engineer et 1 Software Engineer.
Nous avons un écosystème composé de :
Un socle de gestion des données (Delta Lake) plus d’1.5 milliard de lignes /mois
Data processing avec Scala et Spark utilisant le runtime de Databricks
Orchestration de nos data pipelines avec Airflow managé
Des APIs déployées avec AWS Lambda et API Gateway pour faire interagir les utilisateurs avec notre interface front (PHP)
AWS RDS pour hoster la base de données back-end sous PostgreSQL
Versionning du code sous GitLab avec un environnement de dev, staging et production
Infrastructure sous AWS
Les missions du Senior Data Engineer au sein de l’équipe :
– Accompagner les développeurs à écrire du code propre, qualitatif et conforme aux standards de l’équipe
- Interagir avec l’architecte, les équipes infrastructures Cloud pour concevoir les solutions de data engineering
– Proposer des améliorations continues et être garant de réduire les dettes techniques
- Développer des flux de données (data pipelines) avec de l’Apache Spark et du Scala
- Faire de l’orchestration via Airflow avec du Python
- Maintenir le workflow GitLab afin de garantir une bonne productivité de l’équipe de développement
- Effectuer des revues de codes des autres membres de l’équipe
- Collaborer les membres de l’équipe dev pour atteindre l’objectif du sprint
- Faire du support applicatif et fonctionnel de l’application auprès des opérationnel
Qualifications
Qualifications du Data Engineer
– 5-8 ans d’expérience en Scala
– Une maitrise horizontale de tous les composants d’une plateforme de data
– Expérience en programmation fonctionnel
– Connaissance d’un effect system en Scala (ZIO ou cats)
– Excellente maîtrise de l’API Spark en Scala avec pour but de guider l’équipe sur les bonnes pratiques
– Expérience en développement backend
– Une bonne maitrise des services AWS (API Gateway, Lambda, SNS, SQS, S3, Cloudwatch, VPC)
– Développer avec un état d’esprit Keep it Simple, Stupid (KISS)
– Excellente compétence dans la gestion de relation avec une équipe en remote
– Bonne communication pour gérer les différents points de vue et expliquer les contraintes aux utilisateurs
Optionnel
Expérience en PHP (framewok Symfony ou Laravel)
Additional Information
Set the tone with us
Chez Believe, nous avons deux cœurs : nos collaborateurs et nos artistes.
Nous croyons en la force de nos collaborateurs, qui s’épanouissent chaque jour en développant leur potentiel… Notre objectif est d’offrir à nos collaborateurs le meilleur environnement possible pour qu’ils puissent s’épanouir.
Rock the job
Programme de formation et de coaching sur mesure
Une politique de télétravail
Un programme de bien-être “Pauses” avec de nombreuses activités et animations en interne
Accès à Eutelmed, la plateforme numérique de santé mentale et de bien-être qui permet de parler à un psychologue expérimenté
Un restaurant d’entreprise sain et éco-responsable
Une assurance santé individuelle ou familiale
Avantages CE
Un rooftop
Une salle de sport avec des cours gratuits
Sing in harmony
Des groupes d’ambassadeurs pour s’engager sur la réduction de l’empreinte carbone et environnementale de Believe et l’équité professionnelle Femme/Homme.
Mise en place du Forfait mobilité durable: remboursement jusqu’à 600€ des frais de transport en commun/avec une faible empreinte carbone.
Congé 2nd parent de 5 jours calendaires rémunérés à 100% (en plus du congé légal paternité ou du congé d’adoption, nous ne l’attribuons pas au congé maternité)
Believe s’engage à garantir l’égalité des chances en matière d’emploi, sans tenir compte de l’origine, du sexe, des mœurs, de l’orientation sexuelle, du genre, de l’âge, de la situation de famille, de l’état de grossesse, d’une prétendue race, des opinions politiques, des activités syndicales, des convictions religieuses, de l’apparence physique, du nom de famille, du lieu de résidence, de l’état de santé, ou en situation de handicap.
Découvrez nos nouveaux locaux : bit.ly/believeoffice
-
Senior Data Engineer
il y a 4 semaines
Paris, France Dataworks Temps plein**Senior Data Engineer - Foodtech** **Paris** **65K€ - 85K€** **TECH STACK**: Airflow, DBT, SQL, Looker, Snowflake **LA SOCIÉTÉ**: **LE RÔLE**: En tant que Senior Data Engineer, vous aurez comme responsabilités principales: - Travailler sur toute la chaine de données - Le déploiement, l'automatisation des pipelines, et l'optimisation des...
-
Data Engineer
il y a 4 semaines
Paris, France Data Recrutement Temps pleinOffre publiée le 20-03-2023.- Paris - Fonction Data engineer hadoop spark - Taille entreprise de 51 à 200 - Télétravail partiel - Technologies Data studio - Technologies Gcp - Technologies Python - Technologies Sql - Expérience 3 à 5 ans - Expérience 6 à 10 ans - Statut CDI - Min 60k€ - Max 80k€ - Why: - **Croissance à deux chiffres**: -...
-
Senior Data Engineer Databricks
il y a 4 semaines
Paris, France Visian Temps pleinLa Direction des Systèmes d’Information de notre client grand compte dans l’énergie recherche un profil Data Engineer Databricks Senior pour concevoir, développer et maintenir les architectures Data nécessaires à l’exploitation de ses données par les analystes métiers et data scientists.Le Data Engineer Senior intègre une équipe en charge du...
-
Senior Data Engineer Databricks
il y a 4 semaines
Paris, France Visian Temps pleinLa Direction des Systèmes d’Information de notre client grand compte dans l’énergie recherche un profil Data Engineer Databricks Senior pour concevoir, développer et maintenir les architectures Data nécessaires à l’exploitation de ses données par les analystes métiers et data scientists. Le D ata Engineer Senior intègre une équipe en...
-
Senior Data Engineer Databricks
il y a 1 semaine
Paris, Ile-de-France VISIAN Temps pleinLa Direction des Systèmes d’Information de notre client grand compte dans l’énergie recherche un profil Data Engineer Databricks Senior pour concevoir, développer et maintenir les architectures Data nécessaires à l’exploitation de ses données par les analystes métiers et data scientists.Le Data Engineer Senior intègre une équipe en charge du...
-
Senior Data Engineer Databricks
il y a 1 semaine
Paris, France VISIAN Temps pleinLa Direction des Systèmes d’Information de notre client grand compte dans l’énergie recherche un profil Data Engineer Databricks Senior pour concevoir, développer et maintenir les architectures Data nécessaires à l’exploitation de ses données par les analystes métiers et data scientists.Le Data Engineer Senior intègre une équipe en charge du...
-
Senior Data Engineer
il y a 4 semaines
Paris, France Opus Recruitment Solutions Temps pleinRôle : Data Engineer Senior Industrie : Distribution Localisation : Île de France / Remote possible à 90%Salaire : 60k€ - 70k€ À propos : Avec maintenant plus de 10 ans d'existence et une levée de fonds significative il y a deux ans, l'entreprise vise désormais une expansion européenne. Sous la direction du Head of Data, et en collaboration avec...
-
Data Engineer Senior H/F
il y a 4 semaines
Paris, France Crédit Agricole Assurances Temps pleinDescription du poste Crédit Agricole Assurances se prépare pour demain. Dans un contexte de transformation digitale marqué par les nouvelles technologies (Chatbot, Datascience) et les nouvelles méthodes de travail (comme l'agilité), nous souhaitons renforcer nos équipes au sein du pôle IT. Nous cherchons des profils curieux, ouverts à...
-
Data Engineer Senior H/F
il y a 1 mois
Paris, France Credit Agricole Assurances Temps pleinCrédit Agricole Assurances se prépare pour demain. Dans un contexte de transformation digitale marqué par les nouvelles technologies (Chatbot, Datascience) et les nouvelles méthodes de travail (comme l'agilité), nous souhaitons renforcer nos équipes au sein du pôle IT. Nous cherchons des profils curieux, ouverts à l'innovation, motivés par le...
-
Data engineer Senior
il y a 4 semaines
Paris, France Visian Temps pleinLa Direction des Systèmes d’Information de notre client grand compte dans l’énergie recherche un profil Data Engineer Databricks Senior pour concevoir, développer et maintenir les architectures Data nécessaires à l’exploitation de ses données par les analystes métiers et data scientists. Le D ata Engineer Senior intègre une équipe en...
-
Senior Data Engineer
il y a 4 semaines
Paris, France Algolia Temps pleinWe’re on a mission to make Algolia a data-driven organisation, and we’re looking for a Senior Data Engineer to join our Data team and help us get there. Our Data team aims at helping other teams make better decisions by providing relevant data while ensuring its integrity and its consistency. This team has a significant impact as we work closely with...
-
Senior Data Science
il y a 4 heures
Paris, France NES Fircroft Travail à distance Freelance Temps pleinSenior Data Science & Machine Learning Engineer – 12 Months Contract – Central Paris, France Hybrid 3 days on site 2 days remote Start asap Fluent in French and English Required:- 5 years in Data Science and at least 2 years in MLOps (Azure, AWS). ML/AI algorithm ++++ Senior, Python ++++ Senior, MLOps +++ Medior, Databricks +++ Médior, AWS/Azure...
-
Senior Data Science
Il y a 50 minutes
Paris, France NES FIRCROFT Temps pleinBH-270080Posted: 17/05/2024GoodFrance Ile De France ParisContractAlternative & Renewable EnergyHydrogenITSenior Data Science & Machine Learning Engineer – 12 Months Contract – Central Paris, FranceHybrid 3 days on site 2 days remoteStart asapFluent in French and EnglishRequired:- 5 years in Data Science and at least 2 years in MLOps (Azure, AWS). ML/AI...
-
Senior Data Engineer Azure
il y a 4 semaines
Paris, France Visian Temps pleinLa Direction des Systèmes d’Information de notre client grand compte recherche un profil Data Engineer Azure Senior pour concevoir, développer et maintenir les architectures Data nécessaires à l’exploitation de ses données par les analystes métiers et data scientists. A ce titre, vos principales missions consisteront à :Mener les projets...
-
Senior Data Engineer Azure
il y a 4 semaines
Paris, France Visian Temps pleinLa Direction des Systèmes d’Information de notre client grand compte recherche un profil Data Engineer Azure Senior pour concevoir, développer et maintenir les architectures Data nécessaires à l’exploitation de ses données par les analystes métiers et data scientists. A ce titre, vos principales missions consisteront à : Mener les projets...
-
Senior Data Engineer Azure
il y a 1 semaine
Paris, Ile-de-France VISIAN Temps pleinLa Direction des Systèmes d’Information de notre client grand compte recherche un profil Data Engineer Azure Senior pour concevoir, développer et maintenir les architectures Data nécessaires à l’exploitation de ses données par les analystes métiers et data scientists. A ce titre, vos principales missions consisteront à :Mener les projets...
-
Senior Data Engineer Azure
il y a 1 semaine
Paris, France VISIAN Temps pleinLa Direction des Systèmes d’Information de notre client grand compte recherche un profil Data Engineer Azure Senior pour concevoir, développer et maintenir les architectures Data nécessaires à l’exploitation de ses données par les analystes métiers et data scientists. A ce titre, vos principales missions consisteront à :Mener les projets...
-
Data Engineer confirmés à sénior.
il y a 1 semaine
Paris, France AI&DATA Temps pleinLa mission Sur ce poste, vous serez intégré(e) à une équipe de projet et participerez à la mise en place de projets Big Data en intervenant notamment sur les missions suivantes : Analyser les besoins clients et formaliser les cas d’usages correspondants, Participer activement à la conception et à la réalisation des solutions Big Data, ...
-
Analytics Engineer
il y a 4 semaines
Paris, France Data Recrutement Temps pleinOffre publiée le 20-01-2023.- Paris - Fonction Data engineer hadoop spark - Fonction Ingenieur bi etl teradata - Fonction Data analyst sql r tableau - Taille entreprise de 51 à 200 - Télétravail partiel - Technologies Python - Technologies Sql - Expérience 3 à 5 ans - Statut CDI - Min 60k€ - Max 80k€ **L’ENTREPRISE : FOODTECH DISRUPTIVE**: -...
-
Senior Software Engineer
il y a 6 jours
Paris, France Data Recrutement Temps pleinOffre publiée le 24-11-2023.- Paris - Taille entreprise de 1 à 10 - Télétravail partiel - Technologies Gcp - Technologies Vue - Expérience 1 à 2 ans - Statut CDI - Min 60k€ - Max 80k€ **L'ENTREPRISE : LE SOFTWARE EN CYBERSECU DE DEMAIN**: - Cette Startup, développe un - **software IA révolutionnaire,** qui optimise drastiquement les...
