Ingénieur Big Data Système Xaas

il y a 3 semaines


Toulouse, France Ascalium Temps plein

VOTRE RÔLE : Vous rejoignez l'équipe en charge des plateformes Big Data du SI (clusters Hadoop, Kafka, Elastic, NiFi, etc.). Votre rôle est celui d'un ingénieur plateforme / ingénieur système Big Data, responsable de la stabilité, de la performance, de la sécurité et du RUN avancé des environnements Big Data. Ce n'est PAS un poste Data Engineer (pas de dev Spark) C'est un rôle SRE/administration avancée Big Data Vous êtes le garant de la disponibilité du cluster, du troubleshooting profond, et de la bonne utilisation par les équipes de développement. VOS RESPONSABLES PRINCIPALES : RUN & Administration avancée - Maintenir les plateformes Hadoop, Kafka, Elastic, NiFi - Assurer le support N2/N3 et participer aux astreintes. - Gérer les incidents majeurs, le troubleshooting, les actions correctives. - Intervenir en HNO en cas de besoin (24/7 en rotation). Performance & optimisation - Diagnostiquer les lenteurs (HDFS, YARN, Kafka brokers, Elasticsearch). - Optimiser les configurations cluster, gérer la scalabilité. - Ajuster les paramètres système pour améliorer le throughput / latence. Sécurité - Gérer Kerberos, Knox, Ranger pour les accès et la gouvernance. - Garantir la conformité, les politiques d'accès et la sécurité des données. Monitoring et logs - Exploiter ELK : Elasticsearch, Logstash, Kibana. - Superviser l'état du cluster via scripts, dashboards, alerting. - Bonus : Dynatrace. Collaboration avec les équipes Dev - Expliquer comment consommer les services Big Data. - Accompagner les projets dans l'intégration des données / flux. - Contribuer à l'industrialisation de l'écosystème Big Data. Automatisation & intégration - Scripts Bash/Python. - Gestion de flux NiFi (si existant). - Suivi du multitraitement et orchestrations (Oozie en bonus).EXPERIENCE : - +6 ans en administration Big Data ou ingénierie système Data. - RUN impératif. - Maitrise Linux RedHat (niveau admin avancé). COMPETENCES TECHNIQUES : - Hadoop (HDFS, YARN) - Kafka - Elasticsearch - Logstash - Kibana APPRECIE : - NiFi - Hive - HBase - Oozie - Ranger - Knox - Phoenix SOFT SKILLS - Communication claire - Rigueur - Sang-froid - Esprit d'équipe - Prise d'initiative - Autonomie



  • Toulouse, Occitanie, France Capgemini Engineering Temps plein

    ExpérimentésGestion des infrastructures CloudCDIID fr_FRChoisir Capgemini, c'est choisir une entreprise où vous serez en mesure de façonner votre carrière selon vos aspirations. Avec le soutien et l'inspiration d'une communauté d'experts dans le monde entier, vous pourrez réécrire votre futur. Rejoignez-nous pour redéfinir les limites de ce qui est...


  • Toulouse, France Capgemini Temps plein

    Vos missions : En tant qu'expert(e) Big Data au sein de l'équipe XaaS, vous serez en charge de : * Gérer et maintenir les plateformes de données massives (Big Data) en environnement de production. * Optimiser les performances des systèmes de traitement et de stockage des données. * Assurer la qualité, la sécurité et la conformité des données selon...


  • Toulouse, France Capgemini Temps plein

    Choisir Capgemini, c'est choisir une entreprise où vous serez en mesure de façonner votre carrière selon vos aspirations. Avec le soutien et l'inspiration d'une communauté d’experts dans le monde entier, vous pourrez réécrire votre futur. Rejoignez-nous pour redéfinir les limites de ce qui est possible, contribuer à libérer la valeur de la...


  • Toulouse, France Capgemini Temps plein

    Choisir Capgemini, c'est choisir une entreprise où vous serez en mesure de façonner votre carrière selon vos aspirations. Avec le soutien et l'inspiration d'une communauté d'experts dans le monde entier, vous pourrez réécrire votre futur. Rejoignez-nous pour redéfinir les limites de ce qui est possible, contribuer à libérer la valeur de la...


  • Toulouse, France Ascalium Temps plein

    Créé en 2008, le Groupe Ascalium est un acteur global du recrutement spécialisé dans le placement de freelances (#WeAreFreelance) et le portage salarial (#WeArePortage). En 16 ans, plus de 5 000 consultants ont fait confiance au groupe et près de 100 clients ont été satisfaits. Ascalium accompagne également ses clients dans leur recherche de...


  • Toulouse, Occitanie, France CONCRETIO SERVICES Temps plein

    VOS RESPONSABLES PRINCIPALES :RUN & Administration avancéeMaintenir les plateformes Hadoop, Kafka, Elastic, NiFi?Assurer le support N2/N3 et participer aux astreintes.Gérer les incidents majeurs, le troubleshooting, les actions correctives.Intervenir en HNO en cas de besoin (24/7 en rotation).Performance & optimisationDiagnostiquer les lenteurs (HDFS,...


  • Toulouse, France Ascalium Temps plein

    VOTRE RÔLE : Vous rejoignez l'équipe en charge des plateformes Big Data du SI (clusters Hadoop, Kafka, Elastic, NiFi, etc.). Votre rôle est celui d'un ingénieur plateforme / ingénieur système Big Data, responsable de la stabilité, de la performance, de la sécurité et du RUN avancé des environnements Big Data. Ce n'est PAS un poste Data Engineer...

  • Consultant Data Engineer

    il y a 2 semaines


    Toulouse, France MP Data Temps plein

    Dans un contexte de croissance continue de nos activités Data & IA, MP DATA renforce son équipe toulousaine et recherche un Data Engineer (F/H) motivé, autonome et passionné par les architectures et pipelines de données. Chez MP DATA, nous accompagnons les acteurs industriels et technologiques dans la conception de solutions data robustes, scalables et...

  • ingé. Big Data

    il y a 5 jours


    Toulouse, Occitanie, France W EXECUTIVE FRANCE SAS Temps plein

    Bonjour, je recherche pour l'un de mes clients un(e) ingé. BIG DATA. Skills : Big Data - Red Hat Linux - anglaisMission : gérer et maintenir les plateformes de données massivesoptimiser les performances des systèmes de donnéesassurer la qualité et la sécurité des donnéescollaborer avec les équipes de développement pour intégrer les solutions...

  • Consultant Data Engineer

    il y a 2 semaines


    Toulouse, France MP Data Temps plein

    MP DATA est une société spécialisée dans l'acquisition, le traitement, et la valorisation des données. Depuis sa création en 2015, MP DATA accompagne ses clients, majoritairement industriels, dans le management de leur performance et l'exploitation de leur données. Les collaborateurs, tous issus de grandes écoles, incarnent au quotidien les valeurs...