Data Engineer

il y a 6 jours

SaintDenis, France Veepee Temps plein

**DU POSTE**:

- Nous cherchons une personne intéressée par le stockage, le traitement et l’analyse de données volumineuses (10 To bruts par jour, 500 000 requêtes par seconde), que ce soit en batch ou en streaming.

**MISSIONS**:

- Au sein de l’équipe Data, vous serez amené.e à travailler directement avec les Data Engineers, Scientists, Analystes. Vous aurez également une relation privilégiée avec l'équipe Dev. Vous serez confronté.e à nos différentes problématiques:

- Ingestion, formatage et contrôle de la qualité des données en temps réel et en batch, venant de partenaires ou d’autres équipes Adot, avec différentes contraintes (at most once ou at least once, selon l'importance de la source)
- Développement de services autour de la donnée
- Mise à disposition des données aux différentes équipes
- Automatisation des agrégations et analyses de données
- Gestion de l'infrastructure de l'équipe Data
- Revues de code, intégration continue
- **️Notre stack actuelle**
- Pipeline de données:

- Spark, dbt, Scala, Kafka, Airflow, Akka, Python, Presto/Trino, Pytorch
- Dataviz : Tableau
- Cloud : AWS
- Mais aussi : Node.js, React, Redux, GraphQL, Druid, ScyllaDB, MongoDB, Postgres, Redis, Docker, Nomad, Consul, Terraform, Ansible,...

**PRÉ REQUIS**:

- Vous avez de bonnes connaissances en Python & SQL
- Vous avez des notions en Scala et/ou Java
- Vous portez un intérêt pour Spark
- Vous maitrisez les systèmes de stockage distribués, leurs avantages et leurs contraintes
- Vous connaissez les pratiques classiques de software engineering : usage de Git et pratique de code reviews, culture du test, CI/CD. Vous êtes responsable de votre code de l'IDE jusqu'à la prod
- Vous êtes très curieux-euses et aimez être à la pointe en faisant régulièrement de la veille technologique.

**LE PETIT PLUS**:

- Vous avez travaillé sur un projet à forte volumétrie et/ou dans un environnement Spark/Hadoop
- Vous avez travaillé avec Kafka ou une file de message telle que RabbitMQ ou ActiveMQ
- Vous avez déjà travaillé avec dbt
- Vous êtes familier des plateformes cloud, si possible AWS
- Vous avez déjà travaillé avec Airflow
- Vous aimez travailler en collaboration avec des profils différents du vôtre et partager vos connaissances
- Vous aimez faciliter et automatiser les tâches répétitives

**AVANTAGES**:

- Un environnement enrichissant et humain
- Vous apprendrez beaucoup de choses techniques mais pas seulement
- Un environnement de travail stimulant avec de nombreux projets et innovations
- Politique de télétravail pouvant aller jusqu'à 3 jours par semaine
- Un parcours d'intégration complet pour rencontrer l'ensemble des équipes et être formé sur son poste et aux process internes
- Une qualité de vie au travail : budgets team building, cours de yoga, sensibilisation à la santé mentale, événements internes de cohésion...

**❓ WHO WE ARE
Veepeeᵀᵉᶜʰ is a part of Veepee and one of the biggest tech communities in Europe with more than 800 IT collaborators.
- From
**Warsaw **to
**Barcelona**, through
**Lyon**,
**Nantes**,
**Tel Aviv**,
**Brussels**,
** Nice,**
**Amsterdam, **and
**Paris**, all our projects are developed in a functional environment with a wide skills variety where you’ll be sure to find your place, no matter the technology you want to work with.
- If you love to try things why don’t you jump on this new adventure?

  • Data Engineer

    il y a 2 jours

    Saint-Denis, France AGH CONSULTING Temps plein

    AGH Consulting recherche pour un de ses clients un ingénieur data. **La mission consiste à**: Participation aux ateliers de conception technico-fonctionnels Prise en charge des activités de développement, écriture du code Remontée d?informations aux équipes de pilotage Participation aux stand-up daily et autres cérémonies agiles Échanges techniques...

  • Data Engineer

    il y a 2 semaines

    Saint-Denis, France Generali France Temps plein

    **Date**:27 sept. 2024 **Lieu de travail**: ST DENIS, FR, 93210 **Entreprise**:GENERALI VIE Generali, l'un des leaders mondiaux de l'assurance, accompagne plus de 61 millions de clients à travers le monde et près de 8 millions en France. Qu'ils soient particuliers, professionnels ou entreprises, nous proposons à nos clients une gamme de solutions...

  • Data Engineer Senior

    il y a 3 jours

    Saint-Denis, Île-de-France Collective Temps plein

    Budget: 550 max ou CDI à 62k€Data Engineer SeniorType de contrat :Salarié ou FreelanceExpérience requise :+7 ansLocalisation :Ile de France : 93Démarrage souhaité :Mi février 2026Durée :+18 moisNombre de postes :1Contexte & Objectifs du posteAlgoviA renforce son pôle Data & IA pour accompagner ses clients dans la conception, l'industrialisation et...

  • Data Engineer

    il y a 5 jours

    Saint-Denis, France GRDF Temps plein

    Identifiant de la demande: 42587 - Ville: Saint-Denis - Département/Région: J - Pays: FR **REJOIGNEZ GRDF !** GRDF, filiale indépendante d’ENGIE, est le principal gestionnaire de réseau qui distribue le gaz à plus de 11 millions de clients. Vous êtes motivé(e) ? - Pour mettre vos compétences au service d’un acteur majeur de la transition...

  • Data Engineer Scala/Spark.

    il y a 6 jours

    Saint-Denis, Île-de-France Codezys Temps plein

    Client : Entreprise de transport Poste : Architecte technique Senior DSM Expérience : Plus de 8 ans TJM d?achat max : 515? Localisation : Banlieue parisienne Deadline réponse : 09/12 Démarrage : 01/01/2025 Durée : Mission très longue DESCRIPTION DE LA MISSIONObjectifsLa prestation, objet du présent cahier des charges, est une prestation à...

  • Data Engineer Databricks

    il y a 6 jours

    Saint-Denis, France VISIAN Temps plein

    Bonjour, Dans le cadre de ses projets clients Visian est à la recherche d'un Data Engineer Databricks La mission du Data Engineer est de developper et de maintenir la liaison entre les besoins du métier Asset management et l?équipe Data Plateforme du Pôle Data en place. **A ce titre, il/elle doit**: ? Comprendre les enjeux et les problématiques métier,...

  • Data Engineer 3

    il y a 2 jours

    Saint-Denis, France KEONI CONSULTING Temps plein

    Contexte de la mission: La DSI du client final a mis en place une Data Plateforme pour faciliter la mise en ?uvre des projets Data. Elle souhaite aujourd?hui mettre en place en son sein une équipe d?experts compétents pour développer les projets Data et la piloter directement. MISSIONS: Participation aux ateliers de conception...

  • Data Engineer Pyspark/aws

    il y a 1 semaine

    Saint-Denis, France VISIAN Temps plein

    Bonjour, Dans le cadre de ses projets clients, Visian est à la recherche d'un Data Engineer Pyspark/AWS **Missions**: Concevoir, développer et optimiser des pipelines de données robustes, performants et scalables. Encadrer et apporter une expertise technique sur les choix d?architecture et de stack. Déployer et orchestrer des traitements distribués...

  • Data Engineer Power BI

    il y a 2 jours

    Saint-Denis, France AMAGO EXPERTISE Temps plein

    AMAGO IT recherche dans le cadre d'une mission de longue durée chez un client GC basé en IDF 93 : Data Engineer H/F Missions: - Participation aux ateliers de conception technico-fonctionnels - Prise en charge des activités de développement - Remontée d?informations aux équipes de pilotage - Participation aux daily et autres cérémonies agiles -...

  • Data Engineer Senior Scala/Spark

    il y a 5 jours

    Saint-Denis, Île-de-France QODEXIA Temps plein

    QODEXIA est une société de services informatiques implantée en France et en afrique du nord. Partenaire performant, innovant, agile pour aider les entreprises dans leur transforamtion digitale. QODEXIA s'est spécialisée dans le digital, SAP et les nouvelles technologies, accompagne au quotidien les plus grands acteurs de l'industrie, de l'énergie, du...