Ingénieur BIGDATA
il y a 1 mois
Spécialisé dans le secteur bancaire, l'entreprise recherche activement un ingénieur bigdata KAFKA/ MongoDB ou Flink pour renforcer ses effectifs.
En tant qu'Ingénieur Big Data, vous serez responsable de la conception, du développement et de la gestion des solutions basées sur Kafka et MongoDB pour les plateformes Big Data de BNP Paribas. Vous interviendrez sur des projets stratégiques nécessitant une gestion efficace des données à grande échelle, tout en garantissant la fiabilité et la performance des systèmes de traitement des flux de données.
Concevoir et déployer des architectures distribuées à haute performance pour la gestion de flux de données en temps réel à l’aide de Kafka.
Développer et maintenir des bases de données NoSQL, principalement MongoDB, pour stocker et interroger des volumes massifs de données.
Optimiser les environnements Kafka pour assurer la scalabilité et la résilience des systèmes.
Participer à l'intégration de solutions Big Data dans les pipelines de traitement de données existants et nouveaux.
Implémenter et optimiser les flux de données en temps réel avec Kafka Streams, en garantissant la robustesse des pipelines.
Superviser les systèmes en place et analyser les performances des flux de données pour assurer leur continuité et leur efficacité.
Mettre en place des outils de monitoring et de gestion des erreurs pour garantir une gestion proactive des incidents.
Gérer les environnements MongoDB, y compris l’installation, la configuration, les sauvegardes, et la restauration.
Optimiser les performances des bases de données en gérant l'indexation, la fragmentation et les partitions pour garantir un accès rapide aux données.
Assurer la sécurité des données dans MongoDB en implémentant des contrôles d’accès, des audits et des politiques de chiffrement des données.
Travailler en collaboration avec les équipes infrastructure, développement et métier pour comprendre les besoins et proposer des solutions techniques adaptées.
Fournir un support technique de niveau 2/3 pour les environnements Kafka et MongoDB, incluant la résolution des incidents critiques.
Participer à la rédaction de la documentation technique et au transfert de compétences au sein des équipes.