Senior Data Engineer

il y a 3 semaines

Paris, France Continuity Temps plein

La colonne vertébrale de notre solution est un pipeline de data et de ML qui permet d'enrichir chaque dossier analysé avec des données externes, de qualifier le risque (activité, adresse, bâtiment, situation financière, historique de sinistre) pour répondre à deux questions simples : le dossier peut-il être accepté ou refusé ? le contrat doit-il être modifié ?


Les data sont donc au cœur de notre produit

  • Pour assister nos utilisateurs dans l'analyse du risque d'une entreprise
  • Pour entraîner nos modèles de machine learning avec des données de qualités
  • Pour aider nos équipes Produit & Opérations dans leur suivi des besoins clients


Environnement technique

  • Data : Python, Spark, Dagster, pandas, multiprocess / asyncio
  • DB : AWS RDS Postgres / Aurora / OpenSearch / DynamoDB
  • GIS : geopandas, geospark, Postgis
  • ML : Python, Pytorch, Scikit-learn, Transformers
  • App : PHP/Symfony, API Platform, Angular, StencilJS
  • Storage : PostgreSQL, PostGIS, Elasticsearch, Redis, AWS/S3
  • Infra : AWS, Terraform, Kubernetes, Træfik, Docker, EC2, EMR
  • Monitoring : AWS/Cloudwatch, Datadog
  • Dashboarding : QuickSight, Metabase
  • Dev : Git, Gitlab, Gitlab CI/CD


Principales responsabilités

  • Identifier les sources de données pertinentes
  • Concevoir & Implémenter les pipelines permettant la collecte et le traitement de volumes importants de données
  • Superviser les outils de monitoring et d'alerting pour s'assurer du bon fonctionnement des composants (pipelines, workers, API de données)
  • Accompagner les ML Engineers pour la mise en production de leurs services
  • Challenger l'architecture existante pour optimiser son fonctionnement
  • Être garant de la qualité des données (exactitude, exhaustivité, cohérence, l’actualité, l’intégrité, sécurité)
  • Infuser les bonnes pratiques de développement et aider à la mise en production d'approches data centric
  • Recruter et faire monter en compétence une équipe de Data Engineers


Exemples de traitements de données

  • données administratives open source
  • données géographiques et satellitaires
  • identification et récupération des données web liées à chaque entreprises
  • processing des données internes des assureurs
  • pipelines d'annotations
  • pipelines d'entrainement des modèles de ML


En tant que Contributeur Individuel :

  • Spécification des nouvelles fonctionnalités en collaboration avec le Produit
  • Développement des composants applicatifs
  • Prise en compte des enjeux de qualité et de sécurité dans le cycle de développement
  • Stratégie de tests
  • Bonnes pratiques
  • Revues de code
  • CI/CD
  • Maintien en conditions opérationnelles
  • Surveillance et supervision
  • Gestion des incidents
  • Application de correctifs et de mises à jour
  • Optimisation des performances
  • Sauvegarde, restauration, continuité de l’activité
  • Formation et support technique
  • Veille technologique

En tant que Senior Engineer :

  • Participation à la stratégie technique et à l’architecture de la plateforme
  • Résolution de problèmes complexes et défis techniques
  • Gestion de projets techniques complexes et inter-équipes
  • Mentorat et développement des compétences techniques de l’équipe
  • Évaluation des technologies émergentes


Profil recherché


Expérience : Confirmé (3 à 5 ans)


État d'esprit

  • Esprit d’équipe et esprit d’initiative
  • Rigueur et sens du détail
  • Solides capacités à communiquer avec des personnes techniques et non techniques


Pipelines

  • Expérience dans la mise en place de process ETL (batch ou streaming)
  • Connaissance des principes d’orchestration de pipelines (retry, backfill, idempotence, )


Data

  • Expérience dans le traitement des données géographiques (GIS)
  • Expérience en administration et maintenance de bases de données (PostgreSQL, Mysql, Elasticsearch, Redis)
  • Expérience Cloud, idéalement avec AWS
  • Connaissances en modélisation et traitement de données volumineuses
  • Connaissances des moteurs de bases de données (relationnelles, noSQL, GIS, etc.)
  • Connaissance en qualité, sécurité et protection des données


Développement

  • Expérience significative en développement Python / SQL et très forte sensibilité à la qualité du code (bonnes pratiques, tests, maintenabilité, performance)
  • Familier avec les technologies de virtualisation et cloud computing (Docker, Kubernetes)
  • Familier avec le monitoring temps réel (Prometheus, Grafana, ELK, datadog)
  • Familier avec les outils de gestion de configuration / IaaC (Terraform est un plus)



Autres


Pourquoi nous rejoindre ?

  • Rejoindre une équipe solide et expérimentée
  • Travailler sur un marché en pleine disruption
  • Embarquer très tôt dans l'aventure
  • Construire une solution qui a un impact réel sur les entreprises


Bon à savoir

  • Mutuelle Alan, Carte Swile, frais de transports pris en charge à 50%
  • Télétravail partiel ou total, avec un budget pour aménager ton espace de travail
  • Bureaux centraux (quartier gare St Lazare), bien desservis

  • Senior Data Engineer

    il y a 9 heures

    Paris, France NES Fircroft Temps plein

    Senior Data Engineer – 12 Months Contract – Paris, France Hybrid working – 3 days on site, 2 days remote. Must be able to sepal fluent French and English Minimum of 5 years’ experience with Data Engineering Required:  Python, SQL, Spark, AWS Cloud Environment, Databricks, Terraform, Github The Senior Data Engineer will be responsible for the...

  • Senior Data Engineer

    il y a 3 jours

    Paris, France Stakha Temps plein

    Stakha is looking for a Senior Data Engineer for a company working on Social Impact sector You will find the precisions about the offer below : 🏠 Company : Social Impact Company, well known in France 🎯 Role : Senior Data Engineer 💻 Tech stack : Python, SQL, BigQuery, Kafka, Jupyter NoteBook, Looker, Terraform, Kubernetes et autres notions...

  • Senior Engineer, Data Engineering

    il y a 3 jours

    Paris, France Stakha Temps plein

    Stakha is looking for a Senior Data Engineer for a company working on Social Impact sector You will find the precisions about the offer below : &##127968; Company : Social Impact Company, well known in France &##127919; Role : Senior Data Engineer &##128187; Tech stack : Python, SQL, BigQuery, Kafka, Jupyter NoteBook, Looker, Terraform,...

  • Senior Data Engineer

    il y a 2 jours

    Paris, France Stakha Temps plein

    Stakha is looking for a Senior Data Engineer for a company working on Social Impact sectorYou will find the precisions about the offer below : Company: Social Impact Company, well known in France Role: Senior Data Engineer Tech stack : Python, SQL, BigQuery, Kafka, Jupyter NoteBook, Looker, Terraform, Kubernetes et autres notions : ELT, DWH Missions /...

  • Data Engineer Senior

    il y a 1 mois

    Paris, France Nexton Consulting FR Temps plein

    Description de l'offre NEXTON, leader du conseil digital opérationnel recrute un DATA ENGINEER SENIOR H/F, en CDI, à Paris ! Qui sommes-nous ? NEXTON accompagne les pure players digitaux et grands comptes dans leur transformation digitale. Nous intervenons pour nos clients sur les phases de conception, de développement sur les dernières technologies,...

  • Data Engineer

    il y a 1 mois

    Paris, France Data Recrutement Temps plein

    Offre publiée le 03-02-2023.- Paris - Toulouse - Fonction Data engineer hadoop spark - Taille entreprise de 21 à 50 - Télétravail à 100% - Technologies Aws - Technologies Gcp - Technologies Sql - Expérience 1 à 2 ans - Expérience 3 à 5 ans - Statut CDI - Min 50k€ - Max 60k€ - Why: - **Croissance à deux chiffres**: - **Entreprise rentable**: -...

  • Data Engineer

    il y a 1 mois

    Paris, France Data Recrutement Temps plein

    Offre publiée le 01-02-2023.- Paris - Toulouse - Fonction Data engineer hadoop spark - Taille entreprise de 21 à 50 - Télétravail à 100% - Technologies Aws - Technologies Elasticsearch - Technologies Gcp - Technologies Google cloud plateform - Technologies Sql - Expérience 1 à 2 ans - Expérience 3 à 5 ans - Statut CDI - Min 40k€ - Max 50k€ -...

  • Senior Data Engineer

    il y a 1 mois

    Paris, France Opus Recruitment Solutions Temps plein

    Rôle : Data Engineer Senior Industrie : Distribution Localisation : Île de France / Remote possible à 90%Salaire : 60k€ - 70k€ À propos : Avec maintenant plus de 10 ans d'existence et une levée de fonds significative il y a deux ans, l'entreprise vise désormais une expansion européenne. Sous la direction du Head of Data, et en collaboration avec...

  • Data Engineer Senior H/F

    il y a 1 mois

    Paris, France Credit Agricole Assurances Temps plein

    Crédit Agricole Assurances se prépare pour demain. Dans un contexte de transformation digitale marqué par les nouvelles technologies (Chatbot, Datascience) et les nouvelles méthodes de travail (comme l'agilité), nous souhaitons renforcer nos équipes au sein du pôle IT. Nous cherchons des profils curieux, ouverts à l'innovation, motivés par le...

  • Data Engineer Senior H/F

    il y a 1 mois

    Paris, France Crédit Agricole Assurances Temps plein

    Description du poste Crédit Agricole Assurances se prépare pour demain. Dans un contexte de transformation digitale marqué par les nouvelles technologies (Chatbot, Datascience) et les nouvelles méthodes de travail (comme l'agilité), nous souhaitons renforcer nos équipes au sein du pôle IT. Nous cherchons des profils curieux, ouverts à...

  • Data Engineer Senior H/F

    il y a 1 mois

    Paris, Île-de-France Credit Agricole Assurances Temps plein

    Crédit Agricole Assurances se prépare pour demain. Dans un contexte de transformation digitale marqué par les nouvelles technologies (Chatbot, Datascience) et les nouvelles méthodes de travail (comme l'agilité), nous souhaitons renforcer nos équipes au sein du pôle IT. Nous cherchons des profils curieux, ouverts à l'innovation, motivés par le...

  • Senior Data Engineer

    il y a 1 mois

    Paris, France Algolia Temps plein

    We’re on a mission to make Algolia a data-driven organisation, and we’re looking for a Senior Data Engineer to join our Data team and help us get there. Our Data team aims at helping other teams make better decisions by providing relevant data while ensuring its integrity and its consistency. This team has a significant impact as we work closely with...

  • Senior Engineer, Data Engineering

    il y a 2 jours

    Paris, France Harnham Temps plein

    Senior Data Engineer Paris - 3 Jours de télétravail Up to 75K€ CDI - Pas Freelance Cette start up est spécialisée par l'optimisation de la fidélisation et la maximisation des revenus pour leurs clients du secteur des applications mobiles. Leur approche unique combine science des données et créativité pour offrir des résultats mesurables et...

  • Senior Data Science

    il y a 2 semaines

    Paris, France NES Fircroft Travail à distance Freelance Temps plein

    Senior Data Science & Machine Learning Engineer – 12 Months Contract – Central Paris, France Hybrid 3 days on site 2 days remote Start asap Fluent in French and English Required:-    5 years in Data Science and at least 2 years in MLOps (Azure, AWS). ML/AI algorithm ++++ Senior, Python ++++ Senior, MLOps +++ Medior, Databricks +++ Médior, AWS/Azure...

  • Senior Data Science

    il y a 2 semaines

    Paris, France NES Fircroft Temps plein

    Senior Data Science & Machine Learning Engineer – 12 Months Contract – Central Paris, France Hybrid 3 days on site 2 days remote Start asap Fluent in French and English Required:-    5 years in Data Science and at least 2 years in MLOps (Azure, AWS). ML/AI algorithm Senior, Python Senior, MLOps Medior, Databricks Médior, AWS/Azure ...

  • Senior Data Engineer

    il y a 2 jours

    Paris, France Harnham Temps plein

    Senior Data EngineerParis - 3 Jours de télétravailUp to 75K€CDI - Pas FreelanceCette start up est spécialisée par l'optimisation de la fidélisation et la maximisation des revenus pour leurs clients du secteur des applications mobiles. Leur approche unique combine science des données et créativité pour offrir des résultats mesurables et...

  • Senior Data Engineer

    il y a 2 jours

    Paris, France Harnham Temps plein

    Senior Data EngineerParis - 3 Jours de télétravailUp to 75K€CDI - Pas Freelance Cette start up est spécialisée par l'optimisation de la fidélisation et la maximisation des revenus pour leurs clients du secteur des applications mobiles. Leur approche unique combine science des données et créativité pour offrir des résultats mesurables et...

  • Senior Data Engineer

    il y a 2 jours

    Paris, Ile-de-France Harnham Temps plein

    Senior Data EngineerParis - 3 Jours de télétravailUp to 75K€CDI - Pas Freelance Cette start up est spécialisée par l'optimisation de la fidélisation et la maximisation des revenus pour leurs clients du secteur des applications mobiles. Leur approche unique combine science des données et créativité pour offrir des résultats mesurables et...

  • Senior Data Engineer

    il y a 2 jours

    Paris, France Harnham Temps plein

    Senior Data Engineer Paris - 3 Jours de télétravail Up to 75K€ CDI - Pas Freelance Cette start up est spécialisée par l'optimisation de la fidélisation et la maximisation des revenus pour leurs clients du secteur des applications mobiles. Leur approche unique combine science des données et créativité pour offrir des résultats mesurables et...

  • Senior Data Engineer

    il y a 1 jour

    Paris, France Harnham Temps plein

    Senior Data EngineerParis - 3 Jours de télétravailUp to 75K€CDI - Pas Freelance Cette start up est spécialisée par l'optimisation de la fidélisation et la maximisation des revenus pour leurs clients du secteur des applications mobiles. Leur approche unique combine science des données et créativité pour offrir des résultats mesurables et...