Data Engineer Aws H/F

il y a 4 semaines

BoulogneBillancourt, France néosoft Temps plein

Nous sommes à la recherche d'un consultant de haut niveau spécialisé en Data Engineering, disposant d'une expertise approfondie dans les technologies AWS (Kinesis, DMS, S3, etc.), Airflow, Terraform, GitLab CI/CD, Python ainsi qu'une solide maîtrise des bases de données telles qu'Exadata, Oracle, SQL Server et Snowflake. Il sera chargé de concevoir et développer des pipelines de réplication et de traitement de données dans un environnement cloud tout en contribuant activement à la fiabilité, l'automatisation et la scalabilité de notre plateforme data. Le contexte: L'un des principaux objectifs du plan de transformation DATA du groupe Canal+ est de développer des applications DATA qui enrichissent l'expérience de nos abonnés et permettent à nos équipes métiers (pilotage, marketing, commerce, etc.) de devenir autonomes dans l'analyse des données et des KPI. Dans ce cadre, Canal+ a déployé les outils : AWS, Dataiku, Gitlab, Terraform, Snowflake, Braze, AI, Spark, Python, POWERBI, .etc. pour mettre en place des architectures sophistiquées pour ingérer plus de 100To de données par jours: Datalake, Event-driven, Streaming, etc. Des exemples de projets sont nombreux : - AI Chatbot - AI pour recommandation des programmes .etc. - feature store - Socle vidéo - Content Platform - Partager des données avec nos partenaires (Netflix, Apple, M6, TF1, etc.) - Mettre à disposition des applications de data-selfservice Description du poste : Concevoir, développer et maintenir des pipelines de réplication et de traitement de données issues des sources hétérogènes, dans un contexte international, vers une plateforme de données centralisée sur AWS. Responsabilités : - Développement de pipelines ETL/ELT avec Airflow, Python, SQL - Connexion aux bases sources (Exadata, Oracle, etc.) - Intégration des données dans AWS (S3, Kinesis, DMS, Lambda) - Nettoyage, mapping, déduplication et enrichissement des données - Collaboration avec les 'architectes pour appliquer les modèles cibles - Documentation technique et référentiels - Concevoir et mettre en oeuvre les flux de réplication - Harmoniser et transformer les données - Automatiser les pipelines de données - Développer des Pipelines Gitlab CI/CD - Développer d'IaC pour des architectures sophistiquées full AWS avec Terraform, Ansible et Python. - Contribuer au FinOpsCompétences : - Aptitudes : Être dynamique, proactif, autonome, et ouvert d'esprit, bon communicant avec une grande curiosité scientifique - Très bonne maîtrise de l'écosystème AWS (S3, Kinesis, DMS, Lambda) - Très bonne maîtrise des bases des données et des Data warehouses (Exadata, Oracle, SQL Server, Snowflake, etc.) - Maitrise des langages : SQL, Python - Maîtrise des outils de traitement et d'orchestration (Apache Airflow, dbt, Python, SQL) - Bonne expérience en Terraform pour l'IaC - Connaissance de GitLab CI/CD pour l'automatisation des déploiements - Expérience avec des CRM - Connaissance des problématiques de data quality, modélisation, monitoring et alerting - Expérience : Justifier d'au moins 6 ans d'expérience en tant que Data Engineer ou Ingénieur Intégration Data dans des environnements dans un environnement similaire - Une ou plusieurs certifications (AWS, Snwoflake, Terraform, etc.) sont fortement appréciées - Langues : Maîtrise de l'anglais courant

  • Data Scientist

    il y a 2 semaines

    Boulogne-Billancourt, France MP DATA TECHNOLOGIE Temps plein

    **MP DATA** est une société spécialisée dans l’acquisition, le traitement, et la valorisation des données. **Depuis sa création en 2015**, MP DATA accompagne ses clients, majoritairement industriels, dans le management de leur performance et l’exploitation de leur données. Les collaborateurs, tous issus de grandes écoles, incarnent au quotidien...

  • Data Engineer Aws Expérimenté/sal

    il y a 1 semaine

    Boulogne-Billancourt, France WorldWide People Temps plein

    Data Engineer AWS expérimenté. Il faut 3 ans minimum d'expérience Data sur AWS et une connaissance de Starburst et Dataiku est un plus Date de début souhaitée : début septembre Durée : jusqu'à fin d'année minimum Localisation : Boulogne Billancourt + Télé travail Télétravail possible à hauteur de 50% L'objectif est de déployer jusqu?à...

  • Data Engineer

    il y a 2 jours

    Boulogne-Billancourt, France Mp Data Temps plein

    MP DATA, société spécialisée dans l’acquisition, le traitement et la valorisation des données, accompagne ses clients, majoritairement industriels, dans le management de leur performance et l’exploitation de leurs données depuis 2015. Les collaborateurs, tous issus de grandes écoles, incarnent au quotidien les valeurs d’Excellence,...

  • Data Engineer: Pipelines, Spark

    il y a 4 jours

    Boulogne-Billancourt, France Consort Group Temps plein

    Une entreprise spécialisée dans la data recherche un Data Engineer pour développer et optimiser des pipelines de données. Le candidat idéal possède une expertise avancée en Spark Scala, Python et AWS, ainsi qu'une expérience significative en CI/CD et dans l'architecture des données. Le poste est basé à Boulogne-Billancourt, en télétravail...

  • Data Engineer

    il y a 6 jours

    Boulogne-Billancourt, Île-de-France Astek Temps plein

    Ce Que Nous Allons Accomplir EnsembleNous recherchons un(e) Data Engineer pour intégrer un projet long dans le secteur hotelier.Votre mission vous l'acceptez ) :Construire et maintenir les pipelines de données en cohérence avec les solutions business définies par le PO. Utiliser les outils data existants pour répondre aux besoins analytiques. Assurer...

  • Lead Data Engineer

    il y a 4 jours

    Boulogne-Billancourt, Île-de-France MP DATA Temps plein

    MPdata accompagne ses clients dans la conception, la mise en production et l'industrialisation de solutions data à forte valeur ajoutée. Nous intervenons sur des environnements modernes (Databricks, Spark, cloud public) pour garantir performance, robustesse et évolutivité.Dans le cadre de notre croissance, nous recherchons unLead Data Engineercapable...

  • AI Data Engineer

    il y a 3 jours

    Boulogne-Billancourt, France Hilti France Temps plein

    At least 5 years of experience in Data Engineering, including contribution to GenAI projects. Fluency in English (required for our international environment). Hard Skills Strong programming skills in Python, SQL, and distributed data frameworks. Fluency in using AI coding assistants such as GitHub Copilot, Claude Code, Amazon Q developer. Experience with...

  • Data Engineer Cloud

    il y a 4 jours

    Boulogne-Billancourt, France LINCOLN Temps plein

    Description de l'entreprise Rejoindre LINCOLN, c’est rejoindre un cabinet de conseil reconnu pour son **expertise data depuis plus de 30 ans**, en proposant des prestations d’expertise, de conseil et d’accompagnement en Modern BI, Big Data et Science de la donnée. - Vous progresserez au sein d’une équipe de **360 experts de l’ingénierie**: -...

  • AI Data Engineer

    il y a 1 semaine

    Boulogne-Billancourt, Île-de-France Hilti France Temps plein

    At least 5 years of experience in Data Engineering including contribution to GenAI projectsFluency in English (required for our international environment).Hard SkillsStrong programming skills in Python, SQL, and distributed data frameworks.Fluency in using AI coding assistant like GitHub copilot, Claude code, Amazon Q developer, …Experience with GenAI...

  • Senior Data Engineer

    il y a 3 jours

    Boulogne-Billancourt, France MP Data Temps plein

    Une entreprise analytique à Boulogne-Billancourt recherche un Data Engineer Senior pour construire et optimiser des pipelines de données. Vous apporterez votre expertise sur Databricks et Spark pour assurer des traitements performants et sécurisés. Avec un Bac +5 et 5 ans d'expérience en Data Engineering, vous collaborerez avec les équipes Data Science...