Data Engineer Modern Data Stack F/H
Il y a 2 mois
Lyon, Auvergne-Rhone-Alpes, France
Orange SA
Télétravail
Temps plein
Gratuit avec email ou Google
Enregistrez cette offre et organisez votre recherche
Créez un compte gratuit pour enregistrer des offres d'emploi, créer des alertes et revenir à cette liste depuis votre tableau de bord.
Gratuit avec email ou Google
Votre rôle
Présente à Lyon, Grenoble, Marseille et Nice, l'agence Conseil & Expertise Grand Sud-Est intervient en synergie avec les agences sectorielles et géographiques d'Orange Business sur les périmètres suivants : Stratégie, Gouvernance & Trust, Architecture, Infrastructure, Services, et Acculturation.
Vos
missions:
•Concevoir, développer et maintenir des pipelines d'ingestion et de transformation de données (batch et temps réel) en Python et SQL. •Mettre en oeuvre des Modern Data Platforms sur le cloud (Azure, AWS, GCP) : Data Lake, Data Warehouse, zones raw / cleansed / business. •Industrialiser les traitements : orchestration, CI/CD, tests, reprise sur erreur, déploiement via IaC. •Mettre en place les contrôles de qualité de données et l'observabilité associée (fraîcheur, complétude, lineage, alerting). •Contribuer aux projets liés à la donnée et à l'IA (LLM chatbot, RAG, Azure AI/ML services) en exposant des données fiables et exploitables. •Optimiser les performances et les coûts des traitements (partitionnement, formats defichiers, dimensionnement, FinOps), y compris sur des architectures hybrides intégrant des environnements on-premise.
Votre profil
•
Expérience:
au moins 5 ans sur des projets de data engineering, dont une expérience significative sur la mise en production de pipelines en environnement cloud. •Python : maîtrise confirmée (code structuré, testé, packagé), ainsi que SQL avancé. •Intégration & transformation : dbt, Spark / PySpark, Talend, Kafka / Kafka Connect, Nifi, Airbyte ou équivalents — plusieurs outils du marché pratiqués. •Orchestration : Airflow, Dagster, Prefect, Azure Data Factory. •Cloud : maîtrise d'au moins une des plateformes (Azure, GCP, AWS) avec une expérience significative sur ses services data (BigQuery, Synapse, Databricks, Snowflake, Redshift…). •IaC : Terraform, AWS CDK, Bicep. •CI/CD : GitHub Actions, GitLab CI/CD, Jenkins. •Data/AI (un plus) : connaissance des plateformes MLOps, services AI/ML cloud, formats et moteurs de table (Parquet, Delta Lake, Iceberg). •Cloud hybride : expérience des déploiements et intégrations avec des infrastructures on-premise. Entité Orange Business est un intégrateur réseau et numérique qui comprend toute la chaîne de valeur du monde digital, permettant à nos clients de se concentrer sur les initiatives stratégiques qui font avancer leur business. Chaque jour, vous collaborerez avec une équipe dédiée à la livraison de solutions globales cohérentes et durables, peu importe où nos clients opèrent. Avec plus de 30 000 salariés en Europe, Asie, Amérique et Afrique, nous proposons un environnement dynamique et innovant permettant de développer et affiner vos compétences.
Nous offrons
des opportunités passionnantes dans la data et le digital, le cloud, l'IA, la cybersécurité, ou encore l'IoT et le digital workspace.
missions:
•Concevoir, développer et maintenir des pipelines d'ingestion et de transformation de données (batch et temps réel) en Python et SQL. •Mettre en oeuvre des Modern Data Platforms sur le cloud (Azure, AWS, GCP) : Data Lake, Data Warehouse, zones raw / cleansed / business. •Industrialiser les traitements : orchestration, CI/CD, tests, reprise sur erreur, déploiement via IaC. •Mettre en place les contrôles de qualité de données et l'observabilité associée (fraîcheur, complétude, lineage, alerting). •Contribuer aux projets liés à la donnée et à l'IA (LLM chatbot, RAG, Azure AI/ML services) en exposant des données fiables et exploitables. •Optimiser les performances et les coûts des traitements (partitionnement, formats defichiers, dimensionnement, FinOps), y compris sur des architectures hybrides intégrant des environnements on-premise.
Votre profil
•
Expérience:
au moins 5 ans sur des projets de data engineering, dont une expérience significative sur la mise en production de pipelines en environnement cloud. •Python : maîtrise confirmée (code structuré, testé, packagé), ainsi que SQL avancé. •Intégration & transformation : dbt, Spark / PySpark, Talend, Kafka / Kafka Connect, Nifi, Airbyte ou équivalents — plusieurs outils du marché pratiqués. •Orchestration : Airflow, Dagster, Prefect, Azure Data Factory. •Cloud : maîtrise d'au moins une des plateformes (Azure, GCP, AWS) avec une expérience significative sur ses services data (BigQuery, Synapse, Databricks, Snowflake, Redshift…). •IaC : Terraform, AWS CDK, Bicep. •CI/CD : GitHub Actions, GitLab CI/CD, Jenkins. •Data/AI (un plus) : connaissance des plateformes MLOps, services AI/ML cloud, formats et moteurs de table (Parquet, Delta Lake, Iceberg). •Cloud hybride : expérience des déploiements et intégrations avec des infrastructures on-premise. Entité Orange Business est un intégrateur réseau et numérique qui comprend toute la chaîne de valeur du monde digital, permettant à nos clients de se concentrer sur les initiatives stratégiques qui font avancer leur business. Chaque jour, vous collaborerez avec une équipe dédiée à la livraison de solutions globales cohérentes et durables, peu importe où nos clients opèrent. Avec plus de 30 000 salariés en Europe, Asie, Amérique et Afrique, nous proposons un environnement dynamique et innovant permettant de développer et affiner vos compétences.
Nous offrons
des opportunités passionnantes dans la data et le digital, le cloud, l'IA, la cybersécurité, ou encore l'IoT et le digital workspace.