Data Engineer Aws H/F

il y a 4 jours

BoulogneBillancourt, France néosoft Temps plein

Nous sommes à la recherche d'un consultant de haut niveau spécialisé en Data Engineering, disposant d'une expertise approfondie dans les technologies AWS (Kinesis, DMS, S3, etc.), Airflow, Terraform, GitLab CI/CD, Python ainsi qu'une solide maîtrise des bases de données telles qu'Exadata, Oracle, SQL Server et Snowflake. Il sera chargé de concevoir et développer des pipelines de réplication et de traitement de données dans un environnement cloud tout en contribuant activement à la fiabilité, l'automatisation et la scalabilité de notre plateforme data. Le contexte: L'un des principaux objectifs du plan de transformation DATA du groupe Canal+ est de développer des applications DATA qui enrichissent l'expérience de nos abonnés et permettent à nos équipes métiers (pilotage, marketing, commerce, etc.) de devenir autonomes dans l'analyse des données et des KPI. Dans ce cadre, Canal+ a déployé les outils : AWS, Dataiku, Gitlab, Terraform, Snowflake, Braze, AI, Spark, Python, POWERBI, .etc. pour mettre en place des architectures sophistiquées pour ingérer plus de 100To de données par jours: Datalake, Event-driven, Streaming, etc. Des exemples de projets sont nombreux : - AI Chatbot - AI pour recommandation des programmes .etc. - feature store - Socle vidéo - Content Platform - Partager des données avec nos partenaires (Netflix, Apple, M6, TF1, etc.) - Mettre à disposition des applications de data-selfservice Description du poste : Concevoir, développer et maintenir des pipelines de réplication et de traitement de données issues des sources hétérogènes, dans un contexte international, vers une plateforme de données centralisée sur AWS. Responsabilités : - Développement de pipelines ETL/ELT avec Airflow, Python, SQL - Connexion aux bases sources (Exadata, Oracle, etc.) - Intégration des données dans AWS (S3, Kinesis, DMS, Lambda) - Nettoyage, mapping, déduplication et enrichissement des données - Collaboration avec les 'architectes pour appliquer les modèles cibles - Documentation technique et référentiels - Concevoir et mettre en oeuvre les flux de réplication - Harmoniser et transformer les données - Automatiser les pipelines de données - Développer des Pipelines Gitlab CI/CD - Développer d'IaC pour des architectures sophistiquées full AWS avec Terraform, Ansible et Python. - Contribuer au FinOpsCompétences : - Aptitudes : Être dynamique, proactif, autonome, et ouvert d'esprit, bon communicant avec une grande curiosité scientifique - Très bonne maîtrise de l'écosystème AWS (S3, Kinesis, DMS, Lambda) - Très bonne maîtrise des bases des données et des Data warehouses (Exadata, Oracle, SQL Server, Snowflake, etc.) - Maitrise des langages : SQL, Python - Maîtrise des outils de traitement et d'orchestration (Apache Airflow, dbt, Python, SQL) - Bonne expérience en Terraform pour l'IaC - Connaissance de GitLab CI/CD pour l'automatisation des déploiements - Expérience avec des CRM - Connaissance des problématiques de data quality, modélisation, monitoring et alerting - Expérience : Justifier d'au moins 6 ans d'expérience en tant que Data Engineer ou Ingénieur Intégration Data dans des environnements dans un environnement similaire - Une ou plusieurs certifications (AWS, Snwoflake, Terraform, etc.) sont fortement appréciées - Langues : Maîtrise de l'anglais courant

  • Data Engineer

    il y a 1 semaine

    Boulogne-Billancourt, France Mp Data Temps plein

    MP DATA, société spécialisée dans l’acquisition, le traitement et la valorisation des données, accompagne ses clients, majoritairement industriels, dans le management de leur performance et l’exploitation de leurs données depuis 2015. Les collaborateurs, tous issus de grandes écoles, incarnent au quotidien les valeurs d’Excellence,...

  • Data Engineer

    il y a 2 jours

    Boulogne-Billancourt, France Mp Data Temps plein

    **MP DATA**, société spécialisée dans l’acquisition, le traitement et la valorisation des données, accompagne ses clients, majoritairement industriels, dans le management de leur performance et l’exploitation de leurs données depuis 2015. Les collaborateurs, tous issus de grandes écoles, incarnent au quotidien les valeurs d’Excellence,...

  • Data Engineer

    il y a 7 jours

    Boulogne-Billancourt, Île-de-France Astek Temps plein

    Ce Que Nous Allons Accomplir EnsembleNous recherchons un(e) Data Engineer pour intégrer un projet long dans le secteur hotelier.Votre mission vous l'acceptez ) :Construire et maintenir les pipelines de données en cohérence avec les solutions business définies par le PO. Utiliser les outils data existants pour répondre aux besoins analytiques. Assurer...

  • Data Engineer

    il y a 4 semaines

    Boulogne-Billancourt, France Nes Fircroft Temps plein

    Lieu : Paris Début de mission : Télétravail : 2 jours par semaine (présence obligatoire sur site 3 jours) Contexte Nous recherchons un Data Engineer pour rejoindre une organisation digitale innovante, composée de plusieurs squads agiles, qui conçoit et déploie des solutions digitales à grande échelle pour des projets internationaux. L'objectif :...

  • Data Engineer Cloud

    il y a 2 semaines

    Boulogne-Billancourt, France LINCOLN Temps plein

    Description de l'entreprise Rejoindre LINCOLN, c’est rejoindre un cabinet de conseil reconnu pour son **expertise data depuis plus de 30 ans**, en proposant des prestations d’expertise, de conseil et d’accompagnement en Modern BI, Big Data et Science de la donnée. - Vous progresserez au sein d’une équipe de **360 experts de l’ingénierie**: -...

  • Senior Data Engineer

    il y a 2 semaines

    Boulogne-Billancourt, France MP Data Temps plein

    Une entreprise analytique à Boulogne-Billancourt recherche un Data Engineer Senior pour construire et optimiser des pipelines de données. Vous apporterez votre expertise sur Databricks et Spark pour assurer des traitements performants et sécurisés. Avec un Bac +5 et 5 ans d'expérience en Data Engineering, vous collaborerez avec les équipes Data Science...

  • Data Engineer

    il y a 2 jours

    Boulogne-Billancourt, France AI&DATA Temps plein

    **Missions principales**: **Maintenance et Support**: Résoudre rapidement les incidents et les problèmes techniques. Fournir un support aux utilisateurs finaux et répondre à leurs questions. **Surveillance et Monitoring**: Mettre en place des alertes et des rapports pour identifier et prévenir les problèmes avant qu'ils n'affectent les...

  • Lead Data Engineer – F/H – CDI

    il y a 4 jours

    Boulogne-Billancourt, France FDJ - La Française des Jeux Temps plein

    Join to apply for the Lead Data Engineer – F/H – CDI role at FDJ - La Française des JeuxJoin to apply for the Lead Data Engineer – F/H – CDI role at FDJ - La Française des JeuxChez FDJ UNITED, nous ne faisons pas que proposer des jeux d’argent et de hasard, nous les réinventons en permanence.FDJ UNITED est un champion européen des jeux...

  • Data Engineer H/F

    il y a 3 semaines

    Boulogne-Billancourt, France Pixie Services France Temps plein

    Missions pour le Data Engineer : - Développement et maintenance : Créer et maintenir des ETLs et des pipelines de données robustes en utilisant Talend, MS BI, Azure (DataFactory), GCP (BigQuery) , SQL, Python, Scala - Modélisation des données : Proposer des modèles de données fiables et optimisés en termes de stockage et de traitement. -...

  • Lead Data Engineer

    il y a 5 jours

    Boulogne-Billancourt, France Fdj Temps plein

    Lead Data Engineer - F/H - CDI Details - Office:BOULOGNE-BILLANCOURT, France - Type of Employment:Full time, En contrat de travail à durée indéterminée - Reference Number:JR101642 A PROPOS DE FDJ UNITED Chez FDJ UNITED, nous ne faisons pas que proposer des jeux d'argent et de hasard, nous les réinventons en permanence. FDJ UNITED est un champion...