Data engineer Spark/ Scala

L?application MAD est une solution batch développée : - en Scala/Spark. pour les imports/enrichissements/chargements de market data - en Scala/Spark pour les calculs d?indicateurs/scénarios : New - en C# pour les calculs d?indicateurs/sénarios, le scoring et l?alerting : existant MAD présente un Front REACT avec appels API REST Front/Back. La solution...

Nous sommes à la recherche d'un(e) Data Engineer passionné(e) à Paris. En tant que Data Engineer, vous jouerez un rôle crucial dans l'architecture, le développement et la mise en œuvre de solutions techniques pour répondre aux besoins en données de notre entreprise. Vous travaillerez en étroite collaboration avec notre équipe technique, les chefs...

Dans le cadre de son développement, Inventiv IT recrute un Data Engineer AWS avec une expérience de 4 ans au minimum.Le Poste est basé à Paris. Rythme de Travail Hybride Apporter une expertise en Big Data permettant la manipulation de données Concevoir et conseiller les solutions permettant de traiter des volumes importants de données Mettre en place...

Nous recherchons un Data Engineer dans le cadre d'un de nos projets au sein de notre direction informatique Corporate Functions Technologies.Vous contribuerez dans le cadre de votre alternance à la conception et à l'implémentation d'un outil de Data Lineage (visualisation du cycle de vie de la donnée afin d'identifier à la fois la source de cette...

Nous recherchons un(e) alternant(e) en Data Engineering dans le cadre d'un de nos projets au sein de notre direction informatique Corporate Functions Technologies.Vous contribuerez à la conception et à l'implémentation d'un framework de tests de non-régression, en étroite collaboration avec les Data Architect et les Métiers.Concrètement, vous serez...

La mission : En tant que consultant Ingénieur Data au sein de la Cellule Qualité du Fixe (CQF) , vous serez en charge de :· L'exploitation de la plateforme Big Data de monitoring Wifi des Box : A ce titre vous aurez la charge :· Du monitoring des principaux KPI du système et la misé en œuvre des nouveaux KPI· Des investigations lors d'incident : Vous...

Analyse des Exigences : Collaborer avec les équipes métier pour comprendre les besoins en matière d'analyse de données et de traitement. Conception de Solutions : Concevoir des architectures de données et des solutions de traitement distribué en utilisant Apache Spark. Proposer des modèles de données adaptés aux cas d'utilisation spécifiques....

Contexte /Objectifs :L'entité a pour charge la maintenance, le support et l'évolution de l'outil concernant le pilotage financier de la banque, des directions centrales et de la facturation interne du groupe.Les outils sont basés sur les technologies Big Data pour le stockage, Talend et Spark/Scala pour les traitements, la suite MSBI SQL Server et cube...

Ingestion des données sources via NIFI dans des tables de travail Cassandra ou en parquet sur AWS S3 Développement des Traitements Spark/Scala en lots des données sources ingérées Traitement au quotidien des nouvelles données clients (ajout nouveaux clients Enrichissement au quotidien des données des clients avec des fichiers de scoring et de...

Description de l'entreprisePublicis Sapient agit d epuis plus de 30 ans au service de la transformation digitale des entreprises. Notre expertise unique regroupée sous l'acronyme SPEED, Stratégie et Conseil, Produit, Expérience, Engineering et Data combinée à notre connaissance approfondie du secteur, nous permet de créer, avec nos clients, des...

Au sein d'une équipe composée de Data Engineers, sous la responsabilité d'un Engineering Manager et en collaboration directe avec les chefs de projets CRM, vous participerez à l'intégralité du processus de développement des features CRM en intervenant sur la partie Data Engineer.En tant que Data Engineer, vous contribuerez en particulier à...

Within a team made up of Data Engineers, under the responsibility of an Engineering Manager and in direct collaboration with the CRM project managers, you will participate in the entire process of developing CRM features by intervening on the Data Engineer part.As a Data Engineer, you will contribute to:Develops and builds data products and data services and...

Quelles sont les missions ?Vous rejoignez CGI, leader mondial du conseil et des services numériques à Paris et accompagnez nos clients du secteur luxe et cosmétiques.Data intelligence (RPA/IA), chatbots, IoT, offres hyper personnalisées... Nos équipes accompagnent les acteurs du luxe et retailers dans la définition de nouvelles stratégies pour...

Gérer le processus de passage en production des expérimentations en sortie du Datalab Plateforme IACoordonner avec le Data Management Engineer la mise à disposition des données dans le Datalake de Plateforme IA en cohérence avec les données dans le Datalake de productionAccompagner les Métiers dans leurs expérimentations en : Expliquant le rôle...

Votre environnementLe métier Procurement de Renault est en pleine transformation et nécessite des outils performants pour gérer son réseau de fournisseurs, simuler des scénarios et anticiper les risques associés (logistiques, qualité, managériaux, sociaux-économiques, écologiques) .En s'appuyant sur les partenariats stratégiques de Renault avec...

Du monitoring des principaux KPI du système et la misé en œuvre des nouveaux KPI. La data ingénierie et l'exploitation de la plateforme Data en architecture de type microservices, basée sur Kubernetes et OpenShift Assurer la supervision et débogage du système via Openshift S'assurer du bon fonctionnement des applicatifs (Spark, MinIo, Jhub, MySQL,...

Didomi ) helps companies get in compliance with data privacy regulations like GDPR and CCPA. We build a consent management platform that consists of apps, web components, and APIs around collecting, sharing and managing user consents. We know privacy appears to be a boring and hard problem, but we strive to make it interesting and easy to solve for our...

En tant que Data Engineer, vous intégrerez une feature team pour participer aux différents projets de développement. Pour cela vous aurez en charge : · Compréhension des besoins métiers· Conception des solutions nécessitant l'utilisation de technologies cloud & data pour répondre aux besoins métier· Déploiement, optimisation et industrialisation...

Contexte de la mission : Et si la Tech permettait de faire d'une plateforme, la plus grande plateforme numérique ? c'est l'objectif que se fixe notre partenaire. Une plateforme pouvant répondre aux besoins de 500 millions d'utilisateurs à travers le monde. Ils créent ainsi de nouvelles expériences pour les utilisateurs, mais aussi services de location...

Description de l'entrepriseLe data engineering est essentiel pour l'analyse de données. En construisant et en optimisant les pipelines de données, les data engineers permettent aux entreprises d'exploiter pleinement leur potentiel analytique. Leur rôle crucial dans la collecte, le stockage et le traitement des données garantit une base solide pour les...