DATA ENGINEER SENIOR

Il y a 1 jour

Paris, Île-de-France UCASE CONSULTING Temps plein
? Data Engineer Senior ? Big Data / Lakehouse / AWS Niveau : Senior Expérience : 8 ans minimum en Data Engineering Démarrage souhaité : ASAP Durée : 12 mois, renouvelable Rythme : 5 jours/semaine Télétravail : 3 jours/semaine ? Contexte de la mission : Dans le cadre du renforcement de son pôle Data Services, notre client recherche un Data Engineer Senior pour accompagner la conception, l?industrialisation et l?évolution de ses solutions Data.

Vérifiez que vous correspondez aux exigences de compétences pour ce poste, ainsi qu'à l'expérience associée, puis postulez avec votre CV ci-dessous.

Le consultant interviendra sur des sujets à forte dimension Data Engineering, Big Data et Lakehouse, avec notamment des problématiques d?architecture, de modélisation, d?optimisation des pipelines et d?industrialisation des traitements.

Il contribuera également à l?évolution de la stratégie Lakehouse du client et devra être capable d?accompagner techniquement des profils plus juniors.

? Missions Concevoir, développer et optimiser des pipelines de données à grande échelle Mettre en ?uvre des flux batch, streaming et ingestion via API Structurer les données selon une architecture Médaillon (Bronze / Silver / Gold) Développer et industrialiser les transformations avec DBT, Spark et Iceberg Contribuer à l?évolution et à l?optimisation de l?architecture Lakehouse Déployer et maintenir les pipelines dans un environnement AWS Orchestrer les workflows ETL / ELT via Airflow Mettre en ?uvre l?Infrastructure as Code avec Terraform Participer à la mise en place et au maintien de l?observabilité et de la supervision des traitements Définir et mettre en ?uvre les règles de Data Quality : tests, contrôles et validations automatisées Participer à la gestion des incidents et à l?amélioration continue Documenter les architectures, pi Profil candidat: ? Profil recherché Nous recherchons un Data Engineer Senior avec 8 ans minimum d?expérience en Data Engineering, capable d?intervenir sur des environnements Big Data et Lakehouse complexes.

Le profil devra impérativement maîtriser Spark, DBT, Iceberg, AWS et Terraform, avec une expérience concrète sur la conception, l?industrialisation et l?optimisation de pipelines de données à grande échelle.

Une bonne maîtrise des services AWS tels que S3, Glue et EMR est attendue, ainsi qu?une capacité à travailler sur des sujets d?architecture, de modélisation et de Data Quality.

Le candidat devra également être autonome, rigoureux et force de proposition, avec une bonne compréhension des enjeux métiers et une capacité à accompagner et faire monter en compétence des profils juniors. xuezdbg

La connaissance de Starburst / Trino, Datadog, Python, Airflow, Docker et Kubernetes sera un véritable plus.