Data Engineer Databricks F/H
Il y a 5 mois
Lyon, Auvergne-Rhone-Alpes, France
Orange SA
Télétravail
Temps plein
Gratuit avec email ou Google
Enregistrez cette offre et organisez votre recherche
Créez un compte gratuit pour enregistrer des offres d'emploi, créer des alertes et revenir à cette liste depuis votre tableau de bord.
Gratuit avec email ou Google
En continuant, vous acceptez nos Conditions d’utilisation & Politique de confidentialité.
Votre rôle
Ingestion et transformation des données Concevoir des pipelines ETL/ELT performants et évolutifs Ingérer des données depuis diverses sources (bases de données, fichiers, APIs, streaming, etc.) Appliquer des transformations et des nettoyages sur les données Optimisation et performance Optimiser les requêtes (partitionnement, caching, autoscaling) Gérer les coûts d’exécution en adaptant les ressources (clusters Databricks, autoscaling) Gestion et gouvernance des données Mettre en place des Data Lakehouse et organiser les données selon des bonnes pratiques (Bronze, Silver, Gold) Appliquer des politiques de sécurité et de gouvernance avec Unity Catalog Assurer la qualité des données Automatisation et industrialisation Développer des notebooks et des jobs pour automatiser les traitements Orchestrer les workflows avec Databricks Workflows ou Azure Data Factory Mettre en place du CI/CD avec des outils comme GitHub Actions, Azure DevOps, etc. Collaboration avec les équipes Data & métier Travailler avec les Data Scientists pour fournir des jeux de données prêts pour le Machine Learning Aider les analystes à optimiser leurs requêtes et tableaux de bord (BI) Assurer un rôle de conseil sur les bonnes pratiques Databricks et Spark Le recueil des besoins métiers La rédaction de spécifications fonctionnelles et techniques L’accompagnement des métiers dans la mise en place de leur besoin dans la data plateforme Compétences techniques :DatabricksAzurePowerBISparkSQL
Votre profil
Profil de formation Data, vous justifiez d'au moins 2 ans expériences significatives en qualité de consultant DATA Databricks. Entité Orange Business est un intégrateur réseau et numérique qui comprend toute la chaîne de valeur du monde digital, permettant à nos clients de se concentrer sur les initiatives stratégiques qui font avancer leur business. Chaque jour, vous collaborerez avec une équipe dédiée à la livraison de solutions globales cohérentes et durables, peu importe où nos clients opèrent. Avec plus de 30 000 salariés en Europe, Asie, Amérique et Afrique, nous proposons un environnement dynamique et innovant permettant de développer et affiner vos compétences.
Nous offrons
des opportunités passionnantes dans la data et le digital, le cloud, l'IA, la cybersécurité, ou encore l'IoT et le digital workspace.
Votre profil
Profil de formation Data, vous justifiez d'au moins 2 ans expériences significatives en qualité de consultant DATA Databricks. Entité Orange Business est un intégrateur réseau et numérique qui comprend toute la chaîne de valeur du monde digital, permettant à nos clients de se concentrer sur les initiatives stratégiques qui font avancer leur business. Chaque jour, vous collaborerez avec une équipe dédiée à la livraison de solutions globales cohérentes et durables, peu importe où nos clients opèrent. Avec plus de 30 000 salariés en Europe, Asie, Amérique et Afrique, nous proposons un environnement dynamique et innovant permettant de développer et affiner vos compétences.
Nous offrons
des opportunités passionnantes dans la data et le digital, le cloud, l'IA, la cybersécurité, ou encore l'IoT et le digital workspace.