Ingénieur Support et Exploitation Plateformes Data
il y a 7 heures
Budget: 650
Descriptif du poste
Notre Équipe Est Responsable Du Maintien En Condition Opérationnelle Des Plateformes Suivantes Qui Tournent Sur IKS (Kubernetes IBM) Et Bientôt Sur OpenShift
- Apache Spark
- Apache Airflow/Astronomer
- Starburst (trino)
Dans le cadre du renforcement de notre capacité de support sur la nouvelle offre "DATAHUB V2", nous recherchons des prestataires spécialisés dans l'exploitation et le support de ces plateformes.
Missions
La Prestation Visera à
- Assurer le maintien en condition opérationnelle en production des plateformes (Airflow, Spark, Starburst)
- Intervenir dans la gestion des incidents, l'analyse des root causes et la résolution
- Participer à l'optimisation des traitements Spark sur Kubernetes (tuning, configuration, dimensionnement), à l'optimisation de l'orchestration Airflow, à la gestion des catalogues Starburst
- Accompagner les équipes métiers dans l'utilisation efficace et sécurisée des plateformes
- Contribuer à la documentation et à l'amélioration continue de l'écosystème d'exploitation
Compétences attendues
- Expérience DATA en PROD
- Maîtrise des environnements Kubernetes, Spark, Airflow, Starburst (à minima 2 technos)
- Support sur des services Kubernetes/helm charts
- Solide expérience en support de production, monitoring, observabilité (logs, métriques), investigation d'incidents (technos Dynatrace, Kibana, Grafana)
- Bonnes pratiques d'exploitation de traitements data distribués
- Connaissances en tuning Spark, gestion des ressources, profiling applicatif
- Capacités rédactionnelles pour formaliser les procédures d'exploitation et de diagnostic
- Compétences en scripting (Ansible, Python, Bash...) appréciées
- Maîtrise chaîne CI/CD (Git, Jenkins, Gitlab CI, …)
- Connaissances Hashicorp Vault Secrets + PKI
- Français/Anglais
-
Ingenieur production DATA
il y a 7 heures
Paris, Île-de-France Collective Temps pleinBudget: 650 euros MAXIntitulé du poste :Ingénieur Production DataNiveau :ConfirméMissions PrincipalesAdministrer et maintenir les composants Data de la plateforme (installation, configuration, supervision, montées de version).Assurer le maintien en conditions opérationnelles des environnements Data et Analytics (Dataiku, Spark, AWS).Gérer le support...
-
Data ops
il y a 7 heures
Paris, Île-de-France ACENSI Temps pleinDataOps / Support Production Data (N2) – Environnement Kubernetes & SparkDans le cadre du renforcement d'une plateforme Data critique en environnement de production, nous recherchons un(e)DataOpsavec une forte cultureRUN / exploitationet une vraie capacité à stabiliser des traitements Data distribués.Votre mission (au cœur de la PROD) SupportNiveau...
-
Data Engineer
il y a 7 heures
Paris, Île-de-France MP Data Temps pleinEn tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l'optimisation et la fiabilisation de nos pipelines de données à grande échelle, au coeur de notre plateforme analytique. Votre expertise sur Databricks et l'environnement Spark sera essentielle pour garantir des traitements performants, sécurisés et scalables. Vos...
-
Ingénieur QA Pytest
il y a 7 heures
Paris, Île-de-France Health Data Hub Temps pleinLa Direction Technique est en charge de l'implémentation, de l'exploitation et de la maintenance de la plateforme technologique. La démarche d'Assurance Qualité fait partie intégrante de notre processus de développement, de livraison et de mise en production. Elle inclut une activité intense de test et release.En tant que release engineer, vous...
-
Architecte Data MDM Expérimenté H/F
il y a 7 heures
Paris, Île-de-France Egis Group Temps pleinDescription de l'entreprise Egis est un acteur international du conseil, de l'ingénierie de la construction et des services à la mobilité. Nous concevons et exploitons des infrastructures et bâtiments intelligents qui répondent aux défis liés à l'urgence climatique et permettent un aménagement du territoire plus équilibré, durable et...
-
Architecte Data MDM Expérimenté H/F
il y a 7 heures
Paris, Île-de-France Egis en France Temps pleinDescription De L'entrepriseEgis est un acteur international du conseil, de l'ingénierie de la construction et des services à la mobilité. Nous concevons et exploitons des infrastructures et bâtiments intelligents qui répondent aux défis liés à l'urgence climatique et permettent un aménagement du territoire plus équilibré, durable et résilient....
-
Ingénieur Réseau Data Center
il y a 7 heures
Paris, Île-de-France Collective Temps pleinBudget: 750Descriptif du posteAu sein du département Network Product, la ligne de produits Data Center & Cloud est responsable de la gestion des infrastructures réseau de Data Centers et d'environnements Cloud. Cela comprend les routeurs, commutateurs, load balancers, accès Internet, interconnexions de Data Centers, backbone DWDM, ainsi que les...
-
Ingénieur Réseau Data Center
il y a 7 heures
Paris, Île-de-France Collective Temps pleinDescriptif du posteAu sein du département Network Product, la ligne de produits Data Center & Cloud est responsable de la gestion des infrastructures réseau de Data Centers et d'environnements Cloud. Cela comprend les routeurs, commutateurs, load balancers, accès Internet, interconnexions de Data Centers, backbone DWDM, ainsi que les environnements...
-
Junior Data Manager
il y a 7 heures
Paris, Île-de-France Layer Data - When humans meet Data Temps pleinRole DescriptionVous rejoignez une équipe engagée sur des enjeux stratégiques de data et d'IA.Vous travaillez sur des sujets concrets de data governance et de data quality au cœur des organisations.Vous contribuez à la structuration des pratiques et à la mise en place d'outils clés comme le data catalog.Vous collaborez avec des équipes métiers et...
-
Graduate Data Engineer
il y a 7 heures
Paris, Île-de-France Data Reply Temps pleinGraduate Data EngineerTasks• Implementing new use cases• Mapping data and data flows• Implementing data analysis and processing pipelines• Industrializing data flows and their visualization through dashboards and reporting• Carrying out unit tests and integration tests Benefits• Structured career progression – at Reply, we encourage career...