Data Engineer GCP

il y a 6 jours

Paris, Île-de-France 1G-LINK CONSULTING Temps plein

Contexte du poste:

Le poste concerne un projet de migration et de refonte de traitements de données vers GCP, dans le cadre d?un projet dans le secteur des télécommunications.

Le besoin porte sur :

  • La migration de traitements Python existants provenant d?une ancienne infrastructure.

  • Le portage et la restructuration de données.

  • L?atterrissage des données dans BigQuery.

  • Le traitement de données froides et chaudes, avec une partie temps réel prise en charge via Kafka.

  • Les données traitées seraient ensuite consolidées afin de pouvoir être exploitées.

Missions principales:

  • Migrer les traitements existants en Python vers GCP.

  • Reprendre, adapter et optimiser les pipelines pour un fonctionnement sur BigQuery.

  • Participer à la restructuration des données et à la mise en place de nouveaux traitements.

Assurer le traitement :

de données « froides » (batch),

de données « chaudes » (temps réel) via Kafka.

Contribuer à l?industrialisation, aux tests, et à la mise en production sur GCP.

Compétences techniques requises:

  • Maîtrise de GCP (Google Cloud Platform)

  • Très bonne connaissance de Python

  • Très bonne maîtrise du SQL

  • Expérience sur BigQuery

  • Connaissances ou expérience avec Kafka

Profil recherché:

4 ans d?expérience environ

Capacité à reprendre des traitements existants et à les porter dans un nouvel environnement Cloud

Rigueur, autonomie et compréhension des enjeux de traitement de données à forte volumétrie

Poste en CDI

  • Data Engineer GCP

    il y a 6 jours

    Paris, Île-de-France Sfeir Temps plein

    Qui sommes-nous ? SFEIR, partenaire Premier de Google Cloud, est une communauté de 900 experts Tech dont plus de 100 spécialistes Data.  SFEIR c'est aussi   • 140 certifiés sur GCP • 70 Trainers  • 7 Google Developers Experts  Notre expertise Data & Cloud Conception et implémentation de data lakes et data warehouses sur BigQuery...

  • Data Engineer GCP

    il y a 6 jours

    Paris, Île-de-France SFEIR Temps plein

    Qui sommes-nous ? SFEIR, partenaire Premier de Google Cloud, est une communauté de 900 experts Tech dont plus de 100 spécialistes Data. SFEIR c'est aussi•140 certifiés sur GCP•70 Trainers •7 Google Developers Experts Notre expertise Data & CloudConception et implémentation de data lakes et data warehouses sur BigQueryDéveloppement de pipelines...

  • Data Engineer GCP

    il y a 6 jours

    Paris, Île-de-France Mobiskill | WEFY Group Temps plein

    La sociétéLa société est une start-up tech spécialisé dans les solutions IA pour le retail.Le contexteCette société cherche undata engineer confirméafin d'intégrer l'équipe infra et accompagner les devs sur les enjeux data du pôle.Les missionsConstruire et structurer des pipeline de donnéeCompréhension des enjeux infra de...

  • Cloud Engineer GCP

    il y a 1 semaine

    Paris, Île-de-France Collective Temps plein

    Budget: 550 Contexte De La MissionPour le compte d'ungrand groupe international, nous recherchons unCloud Engineer spécialisé GCPpour rejoindre uneéquipe Data & AIen charge de concevoir, déployer et opérer des solutions digitales à forte valeur ajoutée autour de ladata, de l'IA prédictiveet de l'IA générative.Vous interviendrez au sein d'une...

  • Senior Data Engineer GCP MLOps

    il y a 6 jours

    Paris, Île-de-France Free-Work Temps plein

    En quelques motsCherry Pick est à la recherche d'unSenior Data Engineer (H/F)pour l'un de ses clients qui opère dans le secteur culturelDescription Contexte de missionAu sein d'un pôle Data d'une douzaine de personnes, vous intégrerez l'équipe Data Engineering composée de trois Data Engineers. La mission vise à renforcer l'expertise du pôle dans un...

  • Data Engineer

    il y a 6 jours

    Paris, Île-de-France MP DATA Temps plein

    En tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l'optimisation et la fiabilisation de nos pipelines de données à grande échelle, au cœur de notre plateforme analytique. Votre expertise sur Databricks et l'environnement Spark sera essentielle pour garantir des traitements performants, sécurisés et scalables.Vos...

  • Data Architect GCP

    il y a 1 semaine

    Paris, Île-de-France Sfeir Temps plein

    Qui sommes-nous ? SFEIR, partenaire Premier de Google Cloud, est une communauté de 900 experts Tech dont plus de 100 spécialistes Data.  SFEIR c'est aussi   • 140 certifiés sur GCP • 70 Trainers  • 7 Google Developers Experts  Notre expertise Data & Cloud Architecture Conception d'architectures data modernes et cloud-native sur GCP Design...

  • Data Architect GCP

    il y a 6 jours

    Paris, Île-de-France SFEIR Temps plein

    Qui sommes-nous ? SFEIR, partenaire Premier de Google Cloud, est une communauté de 900 experts Tech dont plus de 100 spécialistes Data. SFEIR c'est aussi•140 certifiés sur GCP•70 Trainers •7 Google Developers Experts Notre expertise Data & Cloud ArchitectureConception d'architectures data modernes et cloud-native sur GCPDesign de data platforms...

  • Data Engineer GCP

    il y a 1 semaine

    Paris, Île-de-France Wewyse Temps plein

    ChezWewyse,on ne fait pas que du conseil en Data & IA :on bâtit un collectif engagé, porté par l'envie d'apprendre, d'innover et de partager.Si vous croyez au pouvoirtransformateur de la donnéeet que vous avez envie de rejoindre uneéquipe de passionnés: bienvenue chez vous.Ce que vous ferez chez nousEn tant queData Engineer H/F,vous serez au cœur de...

  • Senior Data Engineer – GCP – Luxe

    il y a 2 semaines

    Paris, Île-de-France Sander Temps plein

    Vous souhaitez rejoindreun groupe français emblématique du luxe & retail, engagé dans une transformation digitale ambitieuse ? Envie de travailler au cœur d'un environnement stimulant, data-driven, avec de vrais enjeux de scalabilité et d'innovation ?Nous recrutons unSenior Data Engineerpour intégrer l'équipeData Platform, composée d'experts...