Data engineer Réseau

il y a 2 semaines

CharentonlePont, Île-de-France VISIAN Temps plein

Contexte / Objectifs : Récupérer les données issues de sources externes? Utiliser la puissance du Datalake? Produire et mettre à disposition automatiquement des agrégats journaliers, hebdomadaires et mensuels.Mise en ?uvre de la chaîne : o d?ingestion de données, o de validation de données, o de croisement de données, o de déversement dans le datalake des données enrichies? Développer dans le respect des règles d?architecture définies? Développer et documenter les user stories avec l?assistance du Product Owner.? Produire les scripts de déploiement ? Prioriser les corrections des anomalies? Assister les équipes d?exploitation? Participer à la mise en ?uvre de la chaîne de delivery continue? Automatiser les tests fonctionnelsDescription : ? Mettre en place la collecte et la mise à disposition des données au sein de l?entreprise ? Industrialiser et mettre en production des traitements sur les données (par exemple : mise à disposition de tableaux de bords, intégration de modèles statistiques) en lien avec les équipes métiers et les équipes qui les analysent Activités et tâches : ? Acheminement de la donnée ? Mise à disposition de la donnée aux équipes utilisatrices ? Mise en production de modèles statistiques ? Suivi de projet de développement ? Développement job spark ? Traitement et ingestion de plusieurs formats des données ? Développement des scripts ? Développement et Implémentation des collectes de données, des jobs de traitement et Mapping de données ? Développement des moyens de restitution via génération de fichier et ou API & Dashboarding ? Collecter toutes les données et les fournir aux clients en tant qu'API ou fichiers ? Développer de pipelines d'ingestion à partir de différentes sources (streaming et batch) ainsi que des spark jobs le prétraitement des données et calcul des indicateurs de performance (KPI) ? Développer des API génériques d?ingestion et de traitement de données dans un environnement HDP ? Participer à la conception, mise en place et administration de solutions Big Data ? Participation à l?installation, administration et configuration des Hadoop clusters. Mise en place en Spring Boot des services d'extraction de data du système legacy (tera data), la data sera par la suite envoyée au data lake via des topics Kafka ? Normalisation et agrégation des données afin de produire les rapports sous forme de Business ViewProfil candidat:Expertises spécifiques :Connaissances techniques : ? Plateforme et environnement GCP (indispensable) ? Environnement GKE (Google Kubernetes) ? Stockage : HDFS / GCS ? Traitement: Maitrise de l?écosystème Spark / Kafka / Scala ? Planification : Airflow / Composer ? Méthodologies : Scrum, Kanban, Git ? DWH : SQL, BigQuery, BigTable ? Delivery : Git, Ansible, Docker, Terraform, Jenkins / Cloud Build Aspects Humains :? Grande capacité à travailler dans une équipe, en mode Scrum / Kanban.? Bonnes compétences relationnelles et grand sens de la communication (capacité à entrer dans le détail).? Sensible et informé des évolutions technologiques sur les piles logicielles pratiquées.

  • Data engineer Finlake

    il y a 2 semaines

    Charenton-le-Pont, Île-de-France Onyx-Conseil Temps plein

    Contexte / Objectifs :La mission va se dérouler au sein de l'IT Financement dans l'équipe Business intelligence qui aujourd'hui développe et gère un datalake (FinLake). Ce datalake est utilisé comme une data plateforme pour les équipes IT et métiers. L'objectif de la mission est d'assurer le rôle de Data Engineer du Finlake :Gestion de la...

  • Data engineer Finlake

    il y a 6 heures

    Charenton-le-Pont, Île-de-France VISIAN Temps plein

    Contexte / Objectifs : La mission va se dérouler au sein de l'IT Financement dans l'équipe Business intelligence qui aujourd'hui développe et gère un datalake (FinLake). Ce datalake est utilisé comme une data plateforme pour les équipes IT et métiers. L'objectif de la mission est d'assurer le rôle de Data Engineer du Finlake :- Gestion de la...

  • Data Engineer

    il y a 2 semaines

    Charenton-le-Pont, Île-de-France Enova Temps plein

    Les missions du posteFondé à Genève en 2018, Enova Group offre des services informatiques en Suisse, au Luxembourg, en France et prochainement à Monaco. Spécialisé en conseil stratégique numérique, performance opérationnelle et technologies de l'information. Nous nous concentrons sur les compétences IT les plus recherchées et la gestion complète...

  • Data Engineer/Data Analyst senior

    il y a 2 semaines

    Charenton-le-Pont, Île-de-France Enova Temps plein

    Spécialisé en conseil stratégique numérique, performance opérationnelle et technologies de l'information. Nous nous concentrons sur les compétences IT les plus recherchées et la gestion complète de projets.Notre expertise holistique nous permet d'accompagner efficacement nos clients dans leurs projets, en cultivant des partenariats solides et en...

  • Technical Leader Sensitivities

    il y a 2 semaines

    Charenton-le-Pont, Île-de-France Natixis Corporate & Investment Banking Temps plein

    Technical Leader Sensitivities & Repository - Big Data (F/H)Job DescriptionAu sein du département Market and Counterparty Risk de l'IT Global Market & Risks, vous rejoignez l'équipe Sensitivities and Trade Repositories qui est composée de quatre Business Analysts IT, d'un Squad Lead et de cinq Data Engineers. Dans cette équipe, nous travaillons à...

  • Data Engineer DWH GCP

    il y a 2 semaines

    Noisy-le-Grand, Île-de-France Espritek Temps plein

    DÉBUT DE MISSION : ASAPDURÉE : 12 moisLIEU : Noisy-Le-Grand ? Travail hybrideCATÉGORIE TECHNIQUE : Systèmes (Infras, Cloud, DevOps, ...), Réseaux, SécuritéNous recherchons pour l?un de nos clients grands comptes un Data Engineer DWH GCP expérimenté, pour contribuer à un projet de transformation IT ambitieux.Contexte du projet :Dans le cadre du...

  • SAP Data Engineer F/H

    il y a 2 semaines

    Noisy-le-Grand, Île-de-France ESPRITEK Temps plein

    Les missions du posteNous recherchons pour l'un de nos clients grands comptes un Data Engineer DWH GCP expérimenté, pour contribuer à un projet de transformation IT ambitieux.DÉBUT DE MISSION : ASAPDURÉE : 12 moisLIEU : Noisy-Le-Grand - Travail hybrideCATEGORIE TECHNIQUE : Systèmes (Infras, Cloud, DEVOPS...), Réseaux, SécuritéContexte du projet...

  • Alternance - 2 ans - Data Analyst - F/H

    il y a 2 jours

    Charenton-le-Pont, Île-de-France Natixis Temps plein

    Institution financière internationale de premier plan, Natixis Corporate & Investment Banking met à disposition des entreprises, institutions financières, fonds d'investissement, agences souveraines et supranationales une palette de services en conseil, investment banking, financements, banque commerciale et sur les marchés de capitaux.Ses équipes...

  • Alternance - 2 ans - Data Analyst - F/H

    il y a 2 heures

    Charenton-le-Pont, Île-de-France Natixis SA Temps plein

    Description de l'entreprise Institution financière internationale de premier plan, Natixis Corporate & Investment Banking met à disposition des entreprises, institutions financières, fonds d'investissement, agences souveraines et supranationales une palette de services en conseil, investment banking, financements, banque commerciale et sur les...

  • Data Engineer

    il y a 2 semaines

    Breuil-le-Sec, Hauts-de-France Weldom Temps plein

    Weldom, une rencontre évidenteDes défis à relever pour accompagner l'expansion de notre réseau, une digitalisation à orchestrer... Weldom se trouve à l'aube d'une nouvelle ère qui vise à transformer les territoires, en ayant un impact positif sur son écosystème.Notre ambition : être utile aux autres et au monde en améliorant l'Habitat pour...

  • Technical Leader Sensitivities

    il y a 2 jours

    Charenton-le-Pont, Île-de-France Natixis Temps plein

    Institution financière internationale de premier plan, Natixis Corporate & Investment Banking met à disposition des entreprises, institutions financières, fonds d'investissement, agences souveraines et supranationales une palette de services en conseil, investment banking, financements, banque commerciale et sur les marchés de capitaux.Ses équipes...

  • data engineer

    il y a 2 jours

    Breuil-le-Sec, Hauts-de-France EURHASI Temps plein

    Job DescriptionEURHASI recuite pour son client un DATA ENGINEER (F/H)Notre client est une enseigne de bricolage, spécialiste de la proximité en France, avec plus de 300 magasins, majoritairement en franchise.    Avec un HUB logistique de plus de 100 000 m² qui intègre les nouvelles technologies, il permet de relever les défis ambitieux de demain :...

  • data engineer

    il y a 2 jours

    Breuil-le-Sec, Hauts-de-France EURHASI Temps plein

    EURHASI recuite pour son client un DATA ENGINEER (F/H)Notre client est une enseigne de bricolage, spécialiste de la proximité en France, avec plus de 300 magasins, majoritairement en franchise.    Avec un HUB logistique de plus de 100 000 m² qui intègre les nouvelles technologies, il permet de relever les défis ambitieux de demain : servir...

  • Alternance - 2 ans - Data Analyst/Scientist - F/H

    il y a 2 jours

    Charenton-le-Pont, Île-de-France Natixis Temps plein

    Institution financière internationale de premier plan, Natixis Corporate & Investment Banking met à disposition des entreprises, institutions financières, fonds d'investissement, agences souveraines et supranationales une palette de services en conseil, investment banking, financements, banque commerciale et sur les marchés de capitaux.Ses équipes...

  • Alternance - 2 ans - Data Analyst - F/H (Apprentissage/Alternance)

    il y a 2 jours

    Charenton-le-Pont, Île-de-France Natixis SA Temps plein

    Poste : Description de l'entreprise Institution financière internationale de premier plan, Natixis Corporate & Investment Banking met à disposition des entreprises, institutions financières, fonds d'investissement, agences souveraines et supranationales une palette de services en conseil, investment banking, financements, banque commerciale et sur les...

  • Data Engineer

    il y a 2 semaines

    Breuil-le-Sec, Hauts-de-France Weldom Temps plein

    Weldom, une rencontre évidenteDes défis à relever pour accompagner l'expansion de notre réseau, une digitalisation à orchestrer... Weldom se trouve à l'aube d'une nouvelle ère qui vise à transformer les territoires, en ayant un impact positif sur son écosystème.Notre ambition : être utile aux autres et au monde en améliorant l'Habitat pour...

  • Business Analyst Flux SEPA

    il y a 2 semaines

    Charenton-le-Pont, Île-de-France VISIAN Temps plein

    Contexte / Objectifs : Besoins : · Participer à la collecte, la transformation et la gestion des données pour en assurer l'intégrité, la sécurité et la qualité· Animer des groupes de travail avec les sponsors, les business analyst du SI Paiement et les membres de la squad Flux (data viz, data engineer, business analyst)· Rédaction des livrables :...

  • Data Engineer

    il y a 2 semaines

    Noisy-le-Grand, Île-de-France Devoteam Data Driven Temps plein

    Dans le cadre d'une mobilité interne, nous sommes à la recherche d'un Analyste Risques de Crédits F / H en CDI.Vous intégrerez la Direction Risques et Conformité, au sein du pôle SI Risques dont le rôle consiste à élaborer le reporting du suivi des risques de crédits pour la CASDEN et sa filiale d'assurance Parnasse Garanties et à s'assurer de...

  • Electronic Engineer

    il y a 2 jours

    Joinville-le-Pont, Île-de-France Trimble Temps plein

    Your Title : Electronic Engineer (m/f/d) Job Location : Joinville le Pont, France (Hybrid) Trimble Paris 3D scanning group is looking for an experienced digital electronic system engineer. The successful candidate will become a core member of the research development team. This multidisciplinary team is made up of highly talented electrical, optical,...

  • Firmware Engineer

    il y a 2 jours

    Joinville-le-Pont, Île-de-France Trimble Temps plein

    Your Title : Firmware Engineer (m/f/d) Job Location : Joinville le Pont, France (hybrid) Are you a Firmware Engineer that likes to craft, enhance, and innovate embedded software? Join our team and help us forge the path for future innovation About this position Trimble Paris 3D Scanning Group is looking for an experienced firmware engineer with...