Data Engineerpython Spark

**Conception et développement de pipelines de données**: Concevoir et développer des pipelines de données robustes et évolutifs utilisant Apache Spark et d?autres outils Big Data. Intégrer et transformer des données en temps réel ou en batch à partir de sources variées (bases de données, APIs, fichiers plats, etc.). Implémenter des solutions de...

Bonjour, Dans le cadre de ses projets clients, Visian est à la recherche d'n Data Engineer Python/Spark. Les missions de la prestation notamment seront: Remplacement des pipelines Informatica par des pipelines spark, pyspark et python Ordonnancement : Remplacement du DAC de OBIEE par Dagster Restitution : Création de rapports sur Apache SuperSet sur la...

**? Poste**: Data Engineer Scala Spark Hadoop **? Secteurs stratégiques**: Banque d?investissement **? Démarrage**: ASAP **? Contexte /Objectifs**: Notre client souhaite une assistance dans le cadre de la mise en ?uvre d'une assiette commune pour les usages Finances et Risques, plus particulièrement sur les données Evènements. **Dans ce cadre, la...

Contexte Notre client recherche un Data engineer Spark / Scala. Vous serez intégré(e) dans l’équipe Data Science et Engineering. A chaque projet, l’équipe Data Science et Engineering intervient dans les décisions d’architecture et le cadrage fonctionnel, la conception technique, puis implémente les traitements : transformations (volumes...

Vous travaillerez en tant que data engineer sur l?environnement technique suivant: - Spark - Scala Les plus : Kafka, avoir travaillé dans un environnement cloud Vous vous différencierez également par vos qualités humaines, votre savoir-être Le processus de sélection comprend un entretien avec un responsable Datapy, un entretien avec notre client...

Data Engineer - Spark Scala Hadoop - minimum 3 ans d?XP au sein d?une direction de l?innovation. Recherche un profil Data science/Data analyse pour rejoindre une équipe de 6+ personnes à terme **Compétences clefs obligatoires**: Spark Scala langage Java Big Data (environnement Hadoop) Bon relationnel (contact métier/esprit d?équipe), bonne capacité...

? Contexte /Objectifs: L'entité a pour charge la maintenance, le support et l'évolution de l'outil concernant le pilotage financier de la banque, des directions centrales et de la facturation interne du groupe. Les outils sont basés sur les technologies Big Data pour le stockage, Talend et Spark/Scala pour les traitements, la suite MSBI SQL Server et...

? Poste : Data Engineer Scala Spark Hadoop? Secteurs stratégiques : Banque d?investissement? Démarrage : ASAP? Contexte /Objectifs :Notre client souhaite une assistance dans le cadre de la mise en ?uvre d'une assiette commune pour les usages Finances et Risques, plus particulièrement sur les données Evènements.Dans ce cadre, la Prestation...

Nous recherchons un Data Engineer (H/F) expérimenté pour rejoindre notre équipe en pleine expansion. Vous serez responsable de la conception, de l'optimisation et de la gestion des pipelines de données dans un environnement Big Data complexe. Vous travaillerez avec une large gamme de technologies, notamment Spark, Kafka, et la stack Hadoop Cloudera, tout...

**Les missions**: - Requêter les bases de données de l?entreprise - Recenser et agréger les données de différentes sources - Analyser et explorer les données o Manipuler les données et créer des indicateurs ou de nouvelles variables - Modéliser (segmentation, score, prévision, analyse de pattern?) en s?appuyant sur des techniques de Machine...

Je recherche pour l?un de mes clients dans le domaine Banque/Assurance un Data Engineer. Contexte: En tant que Data Engineer vous participerez à la continuité du déploiement de notre architecture BigData: Missions: - Maintenir le code existant - Concevoir et développer de nouvelles fonctions - Mettre en place des pipelines de données. - Metttre en...

**Dans ce cadre, la mission consiste à contribuer à/au(x)**: L?architecture avec le reste de l?entité (tech lead, devs, architecture). Mise en ?uvre/Développement des propositions techniques. Revue de code. Suivi des méthodologies agiles. L'industrialisation des développements et des tests sur de l'open source Environnement anglophone. **Les...

Bonjour, Pour le compte de notre client, nous recherchons un data engineer spark / scala. **Mission**: **Livrables n 1**: Sprint n 1 **+ Lot 1**: développement des US et tests associés ; **+ Lot 2**: Documentation projet, mapping des données, modélisation des pipelines, documents d?exploitation ; **+ Lot 3**: Mise en place du CI/CD sur notre usine...

Nous recherchons un **Data Engineer (H/F)** expérimenté pour rejoindre notre équipe en pleine expansion. Vous serez responsable de la conception, de l'optimisation et de la gestion des pipelines de données dans un environnement Big Data complexe. Vous travaillerez avec une large gamme de technologies, notamment **Spark**, **Kafka**, et la stack **Hadoop...

**OPPORTUNITE A POURVOIR : Data Engineer Spark/Python !** **Découvrez la Vie Apsidienne** et vous aussi, devenez Apsidien On aurait pu demander à Chat GPT de vous démontrer en quoi **Apside est l’ESN qu’il vous faut,** mais on préfère que vous le découvriez vous-mêmes **Découvrez votre future mission** **Contexte** - Le client a lancé un...

Publiée le 05/09/2024 Venez rejoindre une équipe dynamique ! **Mission**: Nous recherchons un **Data Engineer (H/F)** expérimenté pour rejoindre notre équipe en pleine expansion. Vous serez responsable de la conception, de l'optimisation et de la gestion des pipelines de données dans un environnement Big Data complexe. Vous travaillerez avec une...

Développement et l?implémentation de solutions Big Data Analytics Analyse du besoin, étude d?impacts et conception de la solution technique Conception et modélisation des données au niveau d?un Data Lake (format Parquet, Delta table, ) Construction des pipelines de données pour collecter, transformer et traiter des données dans le Data...

Notre client bancaire recherche un consultant Data engineer - GCP BigQuery Spark Scala (H/F) pour renforcer l'équipe au sein de laquelle preste déjà un consultant de NEXORIS. Récupérer, traiter et mettre à disposition des agrégats de données via un datalake en utilisant des technologies et pratiques modernes de gestion de données. Tâches et...

Dans le cadre d?un renfort équipe le client serait à la recherche de profil Data Engineer / Mission: - Maintenir le code existant - Concevoir et développer de nouvelles fonctions au travers de sprint - Interagir avec le PO pour partager une vision claire et détaillée des besoins - Contribuer à la vision globale produit moyen terme et long terme - Run...

Le SI regroupe les outils IT relatif à l'intelligence et la gestion des clients : CRM, satisfaction, Pilotage commercial, rentabilité et opportunités. Le Domaine prend plus particulièrement en charge les outils permettant de consolider et mettre à disposition des équipes commerciales les opérations réalisées sur les produits du client. L'entité...