Data Engineer

il y a 1 mois


Paris, Île-de-France CHARLI GROUP Temps plein

La mission : En tant que consultant Ingénieur Data au sein de la Cellule Qualité du Fixe (CQF) , vous serez en charge de :

· L'exploitation de la plateforme Big Data de monitoring Wifi des Box : A ce titre vous aurez la charge :

· Du monitoring des principaux KPI du système et la misé en œuvre des nouveaux KPI

· Des investigations lors d'incident : Vous déclencherez et piloterez le fournisseur et / ou les autres entités de Bytel contribuant à son bon fonctionnement.

· Vous serez le garant de mise à disposition des données issues du cluster HDFS. Vous aurez des scripts Scala / Spark à développer pour toute évolution à la demande de l'équipe Datascience ou en fonction des évolutions du système.

· Vous assurez la mise en œuvre des politiques de sécurités et de sauvegarde, et appliquer tout patch ou correctif nécessaire à cette intégrité.

· Du pilotage des fournisseurs externes et internes pour les évolutions de la plateforme, que ces évolutions portent sur le hardware, les applicatifs, ou l'architecture réseau.

· La data ingénierie et l'exploitation de la plateforme Data en architecture de type microservices, basée sur Kubernetes et OpenShift. Vos tâches seront de :

o Assurer la supervision et débogage du système via Openshift

o S'assurer du bon fonctionnement des applicatifs (Spark, MinIo, Jhub, MySQL, Airflow)

o Contrôler les volumes et consommations Hardware de la plateforme

o Débugger les pods en cas d'erreur

· Assurer l'écriture des graphes Helm pour les déploiements applicatifs

o Ecriture de charts Helm pour le déploiement de nouveaux applicatifs

o Tester les nouveaux graphes sur la plateforme de test

o Déployer et patcher les applicatifs déjà existants avec Helm

o Assurer la pérennité de la plateforme en gérant efficacement les images et graphes via GitLab

· Assurer la gestion des utilisateurs et des règles de gestion du Datalake

o Gestion des buckets et utilisateurs

o Création de points de stockage et des règles de gestion associées

o Création de scripts pour le stockage de Parquets

· Assurer le fonctionnement du déploiement continu avec GitLab

o Administration des images de production Gitlab et DockerHub

Objectifs et livrables

TDB des indicateurs


  • Data Engineer

    il y a 2 semaines


    Paris, Île-de-France IEF2I Temps plein

    Notre école recherche activement pour le compte de l'un de ses clients un grand groupe, plusieurs Data Engineer / Data Analyst / Data Scientist en alternance pour une durée de 15 ou 24 mois dans le but de suivre en parallèle une formation en Master DATA EngineerAttention: Partenariat exclusif avec notre écoleMissions : Effectuer l'intégration et la...

  • Data engineer

    il y a 1 mois


    Paris, Île-de-France BlueSoftGroup Temps plein

    Nous sommes à la recherche d'un(e) Data Engineer passionné(e) à Paris. En tant que Data Engineer, vous jouerez un rôle crucial dans l'architecture, le développement et la mise en œuvre de solutions techniques pour répondre aux besoins en données de notre entreprise. Vous travaillerez en étroite collaboration avec notre équipe technique, les chefs...

  • Data Engineer

    il y a 4 semaines


    Paris, Île-de-France Adevinta Temps plein

    Within a team made up of Data Engineers, under the responsibility of an Engineering Manager and in direct collaboration with the CRM project managers, you will participate in the entire process of developing CRM features by intervening on the Data Engineer part.As a Data Engineer, you will contribute to:Develops and builds data products and data services and...

  • Data Engineer

    il y a 1 mois


    Paris, Île-de-France Digistrat consulting Temps plein

    Poste : Data Engineer / cube OLAP / cach in memory / base de données distribuée Secteurs stratégiques : Banque d'investissement Démarrage : ASAP Contexte /Objectifs : Au sein d'une équipe qui travaille sur une application d'aide à la décision pour le trading. Elle permet de gérer des données historiques sur les clients, et les données de...

  • Data Engineer

    il y a 4 semaines


    Paris, Île-de-France Adevinta Temps plein

    Au sein d'une équipe composée de Data Engineers, sous la responsabilité d'un Engineering Manager et en collaboration directe avec les chefs de projets CRM, vous participerez à l'intégralité du processus de développement des features CRM en intervenant sur la partie Data Engineer.En tant que Data Engineer, vous contribuerez en particulier à...

  • Data engineer

    il y a 1 mois


    Paris, Île-de-France HN SERVICES Temps plein

    Le Machine Learning Engineer est un développeur au sein de l'équipe Engineering Open Big Data, qui regroupe l'ensemble des expertises technologiques liées à l'ingénierie de la donnée, de l'automatisation et à l'exploitation des modèles de Machine Learning.Cette Guilde est dédiée au service et de ses équipes (Data office, Tribus, Business,...

  • Data Engineer

    il y a 1 mois


    Paris, Île-de-France skiils Temps plein

    Au sein de l'équipe Big Data, l'équipe Engineering est responsable de l'alimentation du data lake, du delivery projet, et du fonctionnement des applications en production. C'est pour rejoindre cette équipe que nous recherchons un Développeur Big Data « Maintenance ».Le Data Engineer Senior « Maintenance » prend en charge la maintenance corrective &...

  • data engineer aws

    il y a 1 mois


    Paris, Île-de-France SILAMIR Temps plein

    OS MISSIONS : Dans le cadre de notre croissance, nous recherchons un Data Engineer AWS F/H au sein de son pôle Datascience.TES MISSIONS : Conception des solutions BigData avec les architectes Data Mise en œuvre des techniques permettant la collecte, le nettoyage, l'organisation, la valorisation, la synthèse et la modélisation des données Développement...

  • Data Engineer

    il y a 2 semaines


    Paris, Ile-de-France ALFI : Financial Markets Consultancy Services Temps plein

    Le Data Engineer intervient au sein de l’équipe Engineering Open Big Data du Département Guilde Data, qui regroupe l’ensemble des expertises technologiques liées à l’ingénierie de la donnée, de l’automatisation et à l’exploitation des modèles de Machine Learning.Votre rôle et vos missions :Vous aurez pour missions principales de...

  • Data Engineer

    il y a 4 semaines


    Paris, Île-de-France Harry Hope Temps plein

    Notre client, société en pleine croissance, spécialisé dans le domaine de la Big Data, recherche des Consultants Data Engineer Participez à cette aventure et rejoignez une formidable équipe. Vos missions principales seront diversifiées, comprenant notamment :- Participation aux processus d'avant-vente : Vous contribuerez à l'élaboration des...

  • data engineer azure

    il y a 1 mois


    Paris, Île-de-France UCASE CONSULTING Temps plein

    Bonjour à tous, Je recherche pour un de mes clients dans le domaine de l'immobilier un consultant Data Engineer Azure : Echanger et challenger les métiers dans leurs besoins Rédiger les spécifications techniques et fonctionnelles Concevoir les solutions d'intégration de la donnée Participer au développement de reporting aux équipes métiers Stack...

  • Data Engineer

    il y a 3 semaines


    Paris, Île-de-France Publicis Groupe Temps plein

    Description de l'entreprisePublicis Sapient agit d epuis plus de 30 ans au service de la transformation digitale des entreprises. Notre expertise unique regroupée sous l'acronyme SPEED, Stratégie et Conseil, Produit, Expérience, Engineering et Data combinée à notre connaissance approfondie du secteur, nous permet de créer, avec nos clients, des...

  • DATA Engineer

    il y a 4 semaines


    Paris, Île-de-France Renault Group Temps plein

    Votre environnementLe métier Procurement de Renault est en pleine transformation et nécessite des outils performants pour gérer son réseau de fournisseurs, simuler des scénarios et anticiper les risques associés (logistiques, qualité, managériaux, sociaux-économiques, écologiques) .En s'appuyant sur les partenariats stratégiques de Renault avec...

  • Data Engineer

    il y a 5 jours


    Paris, Île-de-France NEXORIS Temps plein

    Notre client, un groupe bancaire, recherche un consultant techino-fonctionnel, Data engineer risque de crédit (H/F).Renforcement de l'équipe pour le projet Surveillance Crédit, axé sur la production de POC, l'analyse métier, et le développement de solutions tactiques.Tâches et activités de la missionContribution à la production de POC (Proof of...

  • Data Engineer

    il y a 2 semaines


    Paris, Ile-de-France Beelix Temps plein

    Qui sommes-nous ?Depuis 2016, nous accompagnons nos clients sur des problématiques de Product Management, Data et Design Thinking. Beelix contribue à façonner le monde de demain en participant aux grandes avancées des secteurs suivants:Automobile⚡EnergieMédias & TélécomsLuxe & Retail Banque, Finance & Assurance✈️DéfenseAujourd’hui, Beelix...

  • Data Engineer Senior

    il y a 2 semaines


    Paris, Ile-de-France SoyHuCe|a JAKALA company Temps plein

    SoyHuCe est le Center of Excellence en data/IA de JAKALA.Les équipes SoyHuCe combinent les expertises nécessaires à la création de solution data clé-en-main : collecte, traitement, analyse, algorithmie, exploitation, intégration et UX/UI.SoyHuCe répond ainsi à des cas d’usage variés, dans de multiples secteurs : retail, énergie, loisirs,...

  • Data Engineer Senior H/F

    il y a 1 mois


    Paris, Île-de-France Credit Agricole Assurances Temps plein

    Crédit Agricole Assurances se prépare pour demain. Dans un contexte de transformation digitale marqué par les nouvelles technologies (Chatbot, Datascience) et les nouvelles méthodes de travail (comme l'agilité), nous souhaitons renforcer nos équipes au sein du pôle IT. Nous cherchons des profils curieux, ouverts à l'innovation, motivés par le...

  • Data engineer

    il y a 1 mois


    Paris, Île-de-France CGI Temps plein

    Quelles sont les missions ?Big Data, Data Science, Data analyse, Data architecture, ... Ça n'a pas de secret pour vous ?Que vous commenciez votre carrière professionnelle ou que vous soyez spécialiste de l'une de ces disciplines, intégrer notre communauté Data, c'est l'assurance de progresser, innover, partager, vous certifier et rendre service à nos...

  • Data Engineer

    il y a 2 semaines


    Paris, Ile-de-France Airswift Temps plein

    Data EngineerLocation: Paris (Hybrid)Contract type: 12 months +Years of Experience: 4+Recruitment Partner: AirswiftKey Words: Project Management | Jira | Digiboard | Banking | Stakeholder Management | Architecture | Cloud | Payments/Credit |ServiceNow | PPM |ResponsibilitiesDesign, develop, and implement data pipelines to collect, process, and store...

  • Lead Data Engineer

    il y a 2 semaines


    Paris, Ile-de-France SELLIA Temps plein

    Nous recherchons un Lead Data Engineer spécialisé python/airflow pour rejoindre nos rangs et contribuer à notre succès continu.En tant que Lead Data Engineer, vous serez responsable de la conception de nos alimentations, du suivi opérationnel et de l’encadrement d’une équipe de 3 data engineers. Vous travaillerez en étroite collaboration avec nos...