Senior Data Engineer, Scale Data Pipelines on AWS

Il y a 5 jours

Paris, Île-de-France Laotop Temps plein

Objectif de la mission:

L'objectif principal est d'aider les entreprises à migrer vers Amazon Web Services (AWS) et de concevoir des pipelines datas scalables en réduisant ainsi leurs coûts d'infrastructure jusqu'à -40% (FinOps).

Missions principales:

Conception et mise en place de pipelines datas scalables sur AWS.

Optimisation des coûts d'infrastructure (FinOps).

Utilisation de Spark, Airflow et autres outils de l'écosystème AWS.

Profil recherché:

Compétences en ingénierie des données et en architecture cloud.

Expérience pratique dans la migration vers AWS et la création de pipelines datas scalables.

Connaissance du logiciel Spark, Airflow et autres outils de l'écosystème AWS.

Pratiques à adopter:

"Build small, scale later". Commencer petit, simplifier, tester puis évoluer Validation précoce et mise en place d'une architecture simple pour une maintenance plus facile Éviter les orchestrations complexes si un simple job suffit.

#J-18808-Ljbffr