Data engineer
Il y a 4 mois
Description de l'entreprise
Et si Business & Décision et le groupe Orange conjuguaient leurs forces pour devenir l’un des leaders européens de la Data transformation ?
Nous l’avons fait Notre alchimie nous positionne comme un acteur unique intervenant sur toutes les étapes du voyage de la donnée.
Business & Décision en croissance sur l’année 2021, continue sur sa lancée avec un nouvel objectif de plus de 500 recrutements de profils #DataSpecialist .
Nous intervenons sur l’ensemble du cycle de vie des projets de clients du CAC40 :
Dès la phase de réflexion d’un projet, en passant par le management consulting, le cadrage, les études métiers, le cadrage de l'architecture, jusqu'au run, et expertises.
Nous formons et certifions régulièrement nos consultants sur les technologies du marché ; la formation étant l'une de nos priorités afin de vous accompagner dans le développement de vos compétences et vos perspectives d’évolutions.
Description du poste
En tant que Data Engineer, vous jouerez un rôle déterminant dans la conception, la construction et l’optimisation des pipelines de traitement des données au sein d’une plateforme de données centralisée « DATAHUB ». Cette plateforme consolide, fédère et améliore les ressources de données massives pour divers cas d’utilisation, notamment le reporting, l’analytique et l’apprentissage automatique. Vous travaillerez avec plusieurs sources de données, garantissant l’intégration, la transformation et la qualité transparentes des données, tout en migrant l’infrastructure Hadoop vers les environnements cloud.
Responsabilités :
- Intégration des données : intégrez des données provenant de plusieurs sources et formats dans la couche brute du DATAHUB.
- Modélisation des données et développement de pipelines : Concevez et développez des pipelines de données efficaces pour enrichir et transformer de grands volumes de données avec des règles commerciales complexes et la modélisation des données du lakehouse
- Transformation et qualité des données : Mettez en œuvre des processus de transformation des données et de contrôle de la qualité pour garantir la cohérence et l’exactitude des données. Utilisez des langages de programmation tels que Scala et SQL et des outils tels que Spark pour les opérations de transformation et d’enrichissement des données.
- Planification avec Airflow : Planifiez des tâches de traitement des données à l’aide d’Airflow.
- Tests de validation : Effectuez des tests unitaires et de validation pour garantir l’exactitude et l’intégrité.
- Mise en œuvre du pipeline CI/CD : configurez des pipelines CI/CD pour automatiser le déploiement, les tests unitaires et la gestion du développement.
- Documentation : Rédiger la documentation technique (spécifications, documents opérationnels) pour assurer la capitalisation des connaissances.
- Amélioration du code : modifiez le code existant selon les exigences de l’entreprise et améliorez-le continuellement pour de meilleures performances et une meilleure maintenabilité.
- Migration de l’infrastructure : migrez l’infrastructure Hadoop existante vers une infrastructure cloud sur Kubernetes Engine, Object Storage, Spark as a service et Airflow as a service
- Optimisation des performances et sécurité : Assurer la performance et la sécurité de l’infrastructure de données et suivre les meilleures pratiques de l’ingénierie des données.
- Support de production et maintenance : Contribuer au support de production, à la correction d’incidents et d’anomalies, et mettre en œuvre des évolutions fonctionnelles et techniques pour assurer la stabilité des processus de production.
- Collaboration d’équipe : travaillez en étroite collaboration avec les équipes de données et les équipes commerciales pour comprendre les besoins en matière de données et fournir des solutions sur
- Animer l’équipe : Guider, collaborer et déléguer des tâches de développement à des développeurs juniors
Qualifications
Compétences techniques :
Spark, Airflow, Hadoop, Oozie, Kubernetes, COS, Scala, SQL, Dremio, Git, GitLab, Jenkins
Informations complémentaires
Travailler chez Orange Consulting, c’est rejoindre un cabinet à taille humaine qui offre à ses collaborateurs des perspectives d’évolution claires et accessibles à travers des parcours de formations spécialement conçus par et pour nos consultants.
Quelques repères :
200 collaborateurs
Plus de 250 clients et 1000 missions par an
Une entreprise certifiée Top Employeur 2019
Un espace de travail de 2000 m² fraîchement rénové, au cœur de Montmartre
Nous accompagnons les entreprises et les institutions en France et à l'international sur leurs problématiques de transformation digitale et data et leurs enjeux métiers.
Nous rejoindre, c’est aussi faire partie d’Orange Business Services SA, une entreprise de services numériques regroupant 7 600 talents en France spécialisés dans de nombreux domaines d’expertises tels que la Cybersécurité, l’IA, le Cloud les Infrastructures IT, l’Internet des Objets, la Data, la Virtualisation, le Fleet Management, les Communications unifiées, l’Audit et le Conseil.
-
Data Engineer
il y a 7 jours
Paris, Île-de-France Data Engineer - Lead - Data Platforms Temps pleinJob Title: Data Engineer - Lead - Data PlatformsAbout Us:We're a team of engineers at Lenstra who deliver top-quality solutions to our clients, serving industries like Banking/Insurance, Luxury, and Tech. Our holistic approach helps clients solve complex problems around Cloud Computing & DevOps, Data Platform, and IT Security.Key Responsibilities:Designing...
-
Data Architect
Il y a 2 mois
Paris, France Data Engineer - Lead - Data Platforms Temps pleinLenstra was created by the passion of engineers specialised in Computer Science with a proven history in delivering top quality solutions to its customers. Bringing together work excellence and vision we managed to serve top tier clients from a variety of industry domains like Banking/Insurance, Luxury and Tech.We help our clients to solve their most...
-
Data Engineer
il y a 1 mois
Greater Paris Metropolitan Region, France Devoteam Data Driven Temps pleinDevoteam Data Driven recherche un(e) Data Engineer talentueux(se) pour rejoindre notre équipe dynamique et contribuer à des projets data innovants.Présentation de Devoteam GroupeDevoteam est un leader du conseil en stratégie digitale, plateformes technologiques et cybersécurité. Présent dans 25 pays en Europe et au Moyen-Orient, le groupe compte plus...
-
Data Engineer
il y a 1 mois
Greater Paris Metropolitan Region, FR Devoteam Data Driven Temps pleinDevoteam Data Driven recherche un(e) Data Engineer talentueux(se) pour rejoindre notre équipe dynamique et contribuer à des projets data innovants.Présentation de Devoteam GroupeDevoteam est un leader du conseil en stratégie digitale, plateformes technologiques et cybersécurité. Présent dans 25 pays en Europe et au Moyen-Orient, le groupe compte plus...
-
Data Engineer
il y a 3 semaines
Paris, France Data Performance Temps pleinLe Data Engineer doit: - Être orienté vers la résolution de problèmes et avoir un forte capacité d'analyse - Etre autonome et rigoureux dans sa manière d'aborder les défis techniques - Conseiller sur l'architecture des flux de données de bout en bout - Collaborer avec les différentes parties prenantes (product owners, solution owners, data solution...
-
Data Visualization Engineer
il y a 1 mois
Greater Paris Metropolitan Region, France Devoteam Data Driven Temps pleinDevoteam Data Driven recherche des talents passionnés pour rejoindre notre équipe Modern Analytics et contribuer à la démocratisation de l'analyse de données au sein des organisations de nos clients.Présentation de Devoteam GroupeDevoteam est un leader du conseil en stratégie digitale, plateformes technologiques et cybersécurité. Présent dans...
-
Data Visualization Engineer
il y a 1 mois
Greater Paris Metropolitan Region, FR Devoteam Data Driven Temps pleinDevoteam Data Driven recherche des talents passionnés pour rejoindre notre équipe Modern Analytics et contribuer à la démocratisation de l'analyse de données au sein des organisations de nos clients.Présentation de Devoteam GroupeDevoteam est un leader du conseil en stratégie digitale, plateformes technologiques et cybersécurité. Présent dans...
-
Data Engineer
Il y a 2 mois
Paris, France LeHibou Temps pleinNotre client est un acteur majeur du secteur des énergies. Il recherche un(e) consultant(e) pour une prestation de Data Engineering avec des compétences sur Python/Pandas/Pyspark/Databricks/Kinesis/MongoDB sous un environnement AWS Cloud. Le Data Engineer doit avoir des connaissances solides du langage de programmation Python et avoir travaillé avec ce...
-
Data Engineer
Il y a 6 mois
Paris, France Maisons Du Monde Temps pleinCDI Maisons du Monde par son ADN historique et sa raison d’être récente est une entreprise singulière et inspirante, composée de femmes et d’hommes engagés depuis toujours au développement d’une entreprise désirable et durable centrée clients. Chaleureuse, car l’humain est notre première richesse, notre façon d’être ensemble est...
-
Data Engineer
Il y a 6 mois
Paris, France Licorne Society Temps pleinLicorne Society a été missionné par une startup en pleine croissance pour les aider à trouver leur Data Engineer **À propos de l'entreprise**: Leader Français de la transformation digitale de la communication retail, l'entreprise se distingue par sa connaissance historique du secteur de la grande distribution et par ses solutions logicielles...
-
Data Engineer confirmés à sénior.
Il y a 6 mois
Paris, France AI&DATA Temps pleinLa mission Sur ce poste, vous serez intégré(e) à une équipe de projet et participerez à la mise en place de projets Big Data en intervenant notamment sur les missions suivantes : Analyser les besoins clients et formaliser les cas d’usages correspondants, Participer activement à la conception et à la réalisation des solutions Big Data, ...
-
Data Engineer
Il y a 6 mois
Paris, France Ornikar Temps plein**À propos de l'équipe Data** L’équipe Data chez Ornikar existe depuis plus de 3 ans et est composée d'une vingtaine de personnes (Data Analysts, Data Engineers, Machine Learning Engineers). Nous avons principalement 3 missions: **L’aide à la décision** : on accompagne les équipes à tous les niveaux de management, que ce soit pour des objectifs...
-
Data Engineer
il y a 2 semaines
Paris, France Tenth Revolution Group Temps plein**À propos de notre client**: Notre client est un acteur majeur du prêt-à-porter, reconnu pour son innovation et sa présence internationale. Avec plus de 1 500 magasins dans plus de 50 pays, l'entreprise cultive une relation unique avec sa clientèle à travers ses marques phares. **Poste**: Data Engineer Confirmé (H/F) Dans le cadre de sa...
-
Data Analyst Alternance
Il y a 6 mois
Paris, France Data ScienceTech Institute Temps pleinData ScienceTech Institute (DSTI) a été créé avec une ambition principale : former des experts du big data et de l'Intelligence Artificielle pour répondre aux besoins de l'industrie 4.0. Depuis 2015, DSTI forme des Data Analyst, Data Engineer et Data Scientist opérationnels, en offrant les programmes les plus internsifs du marché et les plus reconnus...
-
Data Engineer
Il y a 2 mois
Paris, France SARIEL Temps pleinBonjour, Nous recherchons pour un pote à pourvoir ASAP pour notre client banque basé en Région parisienne un profil Data Engineer La mission consiste à intégrer l'équipe Projets en charge de l'intégration des données de l'entreprise au sein de la plateforme Data sous le Cloud Azure afin de couvrir les besoins Big Data et BI de nos métiers. La...
-
Senior Data Engineer
Il y a 6 mois
Paris, France Dataworks Temps plein**Senior Data Engineer** **Paris - France (full remote possible)** **60-70K€ + variable** **TECH STACK**: GCP, Python, SQL, Airflow, dbt **LA SOCIÉTÉ**: Voici une opportunité de travailler pour une startup avec un produit SaaS à destination des métiers marketing. Avec une forte culture tech, ils recherchent un Senior Data Engineer pour renforcer...
-
Data Engineer
Il y a 6 mois
Paris, France HM GROWTH Temps plein**Offre d'emploi - Data Engineer (CDI) à Paris **_**03 ans Expériences pratique**_ - Recherchez-vous une opportunité stimulante en tant que Data Engineer au cœur de Paris ? Si oui, ne cherche pas plus loin ! _ Nous sommes actuellement à la recherche d'un Data Engineer talentueux et motivé pour rejoindre notre équipe dynamique. Vous travaillez dans un...
-
Data Engineer
il y a 4 semaines
Paris, France Pernod Ricard Temps pleinWant to join a fast-moving company, work among convivial teams, and take part in the global growth strategy of one of the most prestigious and comprehensive portfolios in the wine & spirits industry? We are looking for a Data Engineer! You will be based at The Island, our office in central Paris. About the tech team Our global Tech team operates in an...
-
Data Engineer
Il y a 6 mois
Paris, France Coperneec Temps pleinData Engineer - COPERNEEC **A propos de Coperneec** Coperneec est un cabinet de conseil spécialiste de la valorisation de la Data. Les expertises de nos consultants couvrent toute la chaîne des savoir-faire : Data Science, Data Analysis, Data Engineering et Data Business Analysis. Nos méthodes et techniques scientifiques éprouvées permettent de...
-
Data Engineer
Il y a 5 mois
Paris, France Harnham Temps pleinINFO - SALARY: - €50000 - €65000 LOCATION Paris - JOB TYPE - Permanent **Data engineer Confirmé** **Minimum 3 ans d'expérience** **Lyon** **CDI** **Up to 65k€** Nous recherchons pour une belle entreprise dans le domaine de la santé, un profil de Data engineer senior. Votre rôle sera: Data Engineering: - Réceptionner les données fournies...
