Ingénieur DevOps Big Data H/F
il y a 3 semaines
Support Technique Niveau 2 et 3 sur Cloudera Data Platform - Analyser, diagnostiquer et résoudre les incidents complexes impactant la plateforme Cloudera. - Assurer un support de niveau 2 et 3 pour les équipes techniques et métiers. - Gérer les escalades des incidents critiques et collaborer avec l'éditeur si nécessaire. - Implémenter et améliorer les outils de monitoring avancés pour détecter et anticiper les problèmes. - Optimiser la performance des services et traitements Hadoop, Spark et Kafka. Gestion et Optimisation de Kafka - Administrer et optimiser l'infrastructure Kafka sur Cloudera. - Gérer la scalabilité et la résilience des clusters Kafka. - Assurer une supervision efficace des topics, brokers et consommateurs. - Résoudre les incidents liés à la latence, au throughput et à la gestion des offsets. - Mettre en place des stratégies de sécurisation et de haute disponibilité de Kafka. Automatisation et Développement - Développer et maintenir des scripts Shell, Ansible et Python pour automatiser le support et l'exploitation. - Automatiser la gestion des incidents récurrents et les procédures de maintenance. - Déployer des pipelines CI/CD pour les services Cloudera, Kafka et les bases de données associées. Optimisation et Dimensionnement de l'Infrastructure - Travailler sur le dimensionnement et le tuning des clusters Cloudera pour une meilleure gestion des charges de travail. - Dimensionner les divers clusters ElasticSearch en fonction des consommations des ressources. - Analyser et proposer des évolutions d'architecture en collaboration avec les architectes en fonction des besoins métier. - Assurer une veille technologique et être force de proposition pour améliorer la plateforme. Documentation et Transmission de Connaissances - Documenter les incidents récurrents, les procédures de résolution, les bonnes pratiques et le manuel d'utilisation de l'offre. - Former les équipes internes sur les outils de monitoring, Kafka, Cloudera et l'analyse des incidents. - Rédiger des guides de troubleshooting pour faciliter le travail des équipes de support niveau 1 et 2.Profil recherché - Expérience avérée en administration et support de Cloudera Data Platform. - Maîtrise de Kafka (optimisation, gestion des performances et de la scalabilité). - Capacité à analyser et résoudre des incidents critiques sur un environnement Big Data. - Maîtrise des langages Shell, Ansible et Python pour l'automatisation et le déploiement. - Expérience sur les bases de données Elasticsearch. - Capacité à intervenir sur des problématiques de dimensionnement et d'optimisation des performances. - Autonomie, rigueur et capacité à être force de proposition. - Une connaissance de la plateforme Dataiku serait un plus. - Capacité à collaborer avec des équipes multi-disciplinaires et à transmettre des connaissances. - Bonnes connaissances de Linux (à l'aise avec un terminal).
-
Tech Lead Big Data
il y a 3 jours
Bordeaux, France LeHibou Temps pleinNotre client dans le secteur non catégorisable recherche un Tech Lead Big Data H/F Descriptif de la mission: Nous recherchons pour notre client un ingénieur Big Data expérimenté pour intervenir autour de ces solutions: - Python - Spark Profil idéalement situé sur Bordeaux Compétences / Qualités indispensables: Python Spark Compétences /...
-
DevOps Data
il y a 3 jours
Bordeaux, France HAYS Temps pleinRejoignez un leader du e-commerce au niveau national pour une opportunité d'ingénieur Devops data Nous recherchons pour notre un DevOps data pour venir améliorer son infrastructure et accompagner ses équipes techniques. Au sein de la CT-NOSQL, dont la tâche est la gestion des parcs Mongo, Cassandra, SOLR et Couchbase, nous cherchons un DevOps avec de...
-
Amoa Big Data
il y a 1 semaine
Bordeaux, France LeHibou Temps pleinNotre client dans le secteur Autre recherche un AMOA Big Data H/F Descriptif de la mission: Notre client dans le secteur public souhaite valoriser la data qui est au c?ur de son SI. Pour cela il conduit plusieurs projets structurés autour d?un programme Data qui permet de moderniser les cas d?usages actuels (essentiellement autour du décisionnel) mais...
-
Architecte Big Data
il y a 1 semaine
Bordeaux, France NEXORIS Temps pleinNexoris est un cabinet de conseil spécialisé dédié aux consultants Indépendants du secteur IT & Financier pour intervenir dans les transformations métiers et SI de nos clients. Nous permettons à nos clients de travailler avec les meilleurs consultants freelances. Pour cette longue mission, nous accompagnons notre client, dans sa recherche d'un...
-
Ingénieur DevOps H/F
il y a 2 semaines
Bordeaux, France Soors Temps pleinNous recherchons un Ingénieur DevOps H/F pour rejoindre notre équipe. Poste et missions : - Mettre à disposition et maintenir des outils et des plateformes d'infrastructures (Kubernetes, Harbor, Ceph/Rook) utilisées en production. - Participer à de nombreux projets innovants (création et développement d'API en Python, Cilium, industrialisation et...
-
Ingénieur Data H/F
il y a 5 jours
Bordeaux, France Devoteam France Temps pleinChez nous, pas de routine ! On est une petite structure hyper agile où chacun peut s'investir et faire la différence. Si vous avez envie de booster votre carrière dans un environnement stimulant et convivial, venez nous rencontrer dans nos locaux idéalement situés sur les bords de la Garonne. Innovative Technology : Avec Innovative Tech, on booste la...
-
Ingénieur DevOps H/F
il y a 5 jours
Bordeaux, France Experis France Temps pleinIngénieur DevOps (H/F) - Bordeaux Nous recherchons un Ingénieur DevOps (H/F) passionné par l'automatisation, les infrastructures déclaratives et l'amélioration continue pour rejoindre nos équipes bordelaises. Vous participerez à la conception, l'industrialisation et l'optimisation de la supply chain et des outils GitOps liés à l'observabilité...
-
Data Engineer
il y a 1 jour
Bordeaux, France Capgemini Engineering Temps plein**Capgemini Engineering**: Capgemini Engineering, leader mondial des services d'ingénierie, rassemble des équipes d'ingénieurs, de scientifiques et d'architectes pour aider les entreprises les plus innovantes dans le monde à libérer leur potentiel. Des voitures autonomes aux robots qui sauvent des vies, nos experts en technologies digitales et...
-
Ingénieur DATA
il y a 6 jours
Bordeaux, Nouvelle-Aquitaine, France Devoteam Temps pleinDevoteam s'installe en Nouvelle Aquitaine et a posé ses valises à Bordeaux Nous accompagnons la transformation digitale des acteurs majeurs de la région: banques, retail, énergie, secteur public, défense... grâce à une expertise pointue qui couvre le déploiement d'infrastructures Cloud (AWS, Azure...), l'optimisation des systèmes et des réseaux,...
-
Ingénieur DATA
il y a 6 jours
Bordeaux, Nouvelle-Aquitaine, France Devoteam Temps pleinDescription de l'entreprise Devoteam s'installe en Nouvelle Aquitaine et a posé ses valises à Bordeaux Nous accompagnons la transformation digitale des acteurs majeurs de la région: banques, retail, énergie, secteur public, défense... grâce à une expertise pointue qui couvre le déploiement d'infrastructures Cloud (AWS, Azure...), l'optimisation des...
