Data Engineer AWS/Snowflake H/F
Il y a 8 heures
st arrondissement of Marseille, Provence-Alpes-Côte d'Azur, France
Free-Work
Temps plein
Gratuit avec email ou Google
Enregistrez cette offre et organisez votre recherche
Créez un compte gratuit pour enregistrer des offres d'emploi, créer des alertes et revenir à cette liste depuis votre tableau de bord.
Gratuit avec email ou Google
En continuant, vous acceptez nos Conditions d’utilisation & Politique de confidentialité.
Free-Work est une plateforme qui s'adresse à tous les professionnels des métiers de l'informatique.
Ses contenus et son jobboard IT sont mis à disposition 100% gratuitement pour les indépendants et les salariés du secteur. La mission est chez un client à Liège, en Belgique. Nous recherchons donc quelqu'un mobile pour pouvoir y résider.
1. Contexte du poste
Dans le cadre du développement et de l'évolution de notre plateforme Data, nous recherchons un Data Engineer spécialisé dans les environnements AWS et Snowflake.
Il interviendra sur la conception, le développement et l'industrialisation des flux de données, afin de garantir la disponibilité, la qualité et la performance des données.
2. Missions principales
Concevoir, développer et maintenir des pipelines de données (ETL / ELT).
Collecter, intégrer et transformer des données issues de différentes sources.
Développer des traitements et transformations de données en SQL et Python.
Concevoir et optimiser les modèles de données dans Snowflake.
Mettre en ?uvre les services AWS, notamment S3, Glue, Lambda, IAM et CloudWatch.
Assurer l'orchestration, la supervision et la fiabilité des traitements.
Optimiser les performances des requêtes et les coûts d'exploitation.
Mettre en place les bonnes pratiques d'industrialisation et de CI/CD.
Participer à l'évolution de l'architecture Data et à l'amélioration continue de la plateforme.
3. Compétences techniques requises
Snowflake : ingestion, transformation, modélisation et optimisation des données.
AWS : maîtrise des services S3, Glue, Lambda, IAM et CloudWatch.
Langages : SQL avancé et Python.
Data Engineering : ETL / ELT, Data Warehouse, Data Lake et modélisation de données.
Industrialisation : Git, CI/CD et automatisation des déploiements.
Outils complémentaires appréciés : dbt, Airflow, Terraform, AWS Step Functions.
4. Profil recherché
Formation supérieure Bac+5 en informatique ou Data Engineering.
Expérience de 3 à 5 ans minimum sur un poste de Data Engineer.
Expérience significative sur les environnements AWS et Snowflake.
Bonne maîtrise de SQL et Python.
Capacité à concevoir et industrialiser des pipelines de données.
Bonne compréhension des enjeux de qualité, sécurité et performance des données.
Autonomie, rigueur, esprit d'analyse et capacité à travailler en équipe.
5. Environnement technique
Cloud : AWS
Data Warehouse : Snowflake
Développement : SQL, Python
Stockage : Amazon S3
ETL / ELT : AWS Glue, dbt
Orchestration : Airflow / Step Functions
DevOps : Git, CI/CD, Terraform 4. Profil recherché
Formation supérieure Bac+5 en informatique ou Data Engineering.
Expérience de 3 minimum sur un poste de Data Engineer.
Expérience significative sur les environnements AWS et Snowflake.
Bonne maîtrise de SQL et Python.
Capacité à concevoir et industrialiser des pipelines de données.
Bonne compréhension des enjeux de qualité, sécurité et performance des données.
Autonomie, rigueur, esprit d'analyse et capacité à travailler en équipe.
Ses contenus et son jobboard IT sont mis à disposition 100% gratuitement pour les indépendants et les salariés du secteur. La mission est chez un client à Liège, en Belgique. Nous recherchons donc quelqu'un mobile pour pouvoir y résider.
1. Contexte du poste
Dans le cadre du développement et de l'évolution de notre plateforme Data, nous recherchons un Data Engineer spécialisé dans les environnements AWS et Snowflake.
Il interviendra sur la conception, le développement et l'industrialisation des flux de données, afin de garantir la disponibilité, la qualité et la performance des données.
2. Missions principales
Concevoir, développer et maintenir des pipelines de données (ETL / ELT).
Collecter, intégrer et transformer des données issues de différentes sources.
Développer des traitements et transformations de données en SQL et Python.
Concevoir et optimiser les modèles de données dans Snowflake.
Mettre en ?uvre les services AWS, notamment S3, Glue, Lambda, IAM et CloudWatch.
Assurer l'orchestration, la supervision et la fiabilité des traitements.
Optimiser les performances des requêtes et les coûts d'exploitation.
Mettre en place les bonnes pratiques d'industrialisation et de CI/CD.
Participer à l'évolution de l'architecture Data et à l'amélioration continue de la plateforme.
3. Compétences techniques requises
Snowflake : ingestion, transformation, modélisation et optimisation des données.
AWS : maîtrise des services S3, Glue, Lambda, IAM et CloudWatch.
Langages : SQL avancé et Python.
Data Engineering : ETL / ELT, Data Warehouse, Data Lake et modélisation de données.
Industrialisation : Git, CI/CD et automatisation des déploiements.
Outils complémentaires appréciés : dbt, Airflow, Terraform, AWS Step Functions.
4. Profil recherché
Formation supérieure Bac+5 en informatique ou Data Engineering.
Expérience de 3 à 5 ans minimum sur un poste de Data Engineer.
Expérience significative sur les environnements AWS et Snowflake.
Bonne maîtrise de SQL et Python.
Capacité à concevoir et industrialiser des pipelines de données.
Bonne compréhension des enjeux de qualité, sécurité et performance des données.
Autonomie, rigueur, esprit d'analyse et capacité à travailler en équipe.
5. Environnement technique
Cloud : AWS
Data Warehouse : Snowflake
Développement : SQL, Python
Stockage : Amazon S3
ETL / ELT : AWS Glue, dbt
Orchestration : Airflow / Step Functions
DevOps : Git, CI/CD, Terraform 4. Profil recherché
Formation supérieure Bac+5 en informatique ou Data Engineering.
Expérience de 3 minimum sur un poste de Data Engineer.
Expérience significative sur les environnements AWS et Snowflake.
Bonne maîtrise de SQL et Python.
Capacité à concevoir et industrialiser des pipelines de données.
Bonne compréhension des enjeux de qualité, sécurité et performance des données.
Autonomie, rigueur, esprit d'analyse et capacité à travailler en équipe.