Expert Confluent Kafka Senior
Il y a 1 jour
Nantes, Pays de la Loire, France
Collective.work
Temps plein
Gratuit avec email ou Google
Enregistrez cette offre et organisez votre recherche
Créez un compte gratuit pour enregistrer des offres d'emploi, créer des alertes et revenir à cette liste depuis votre tableau de bord.
Gratuit avec email ou Google
Une fintech recherche un Expert Confluent Kafka Senior pour piloter une transition technologique majeure, renforcer la sécurité de sa plateforme de streaming et structurer durablement sa gouvernance data. La mission s'inscrit dans une logique de modernisation d'une infrastructure critique déployée sur trois environnements.
MODALITÉS DE LA MISSION
* Démarrage souhaité : Asap
* Durée : 6 mois
* Localisation : Nantes intra-muros (centre-ville)
* Télétravail : 2 jours par semaine CONTEXTE Le système d'information du client repose sur une infrastructure Kafka critique, déployée sur trois environnements (Production, Préproduction, Staging). Dans un contexte de maintien en condition opérationnelle et d'évolution vers une architecture moderne, le client souhaite s'appuyer sur une prestation d'expert pour accompagner la montée en compétence et la restructuration de sa plateforme. L'environnement est contraint (normes PCI DSS / secteur bancaire), ce qui impose un niveau d'exigence élevé sur la sécurité, la conformité et la résilience. CE QUE VOUS ALLEZ FAIRE
* Pilotage de la migration 8.
X : identifier la version cible optimale, piloter l'infogéreur dans la mise en œuvre d'une migration « cassante », revoir le dimensionnement du cluster (nombre de nœuds) et orchestrer la bascule vers le moteur Kraft en remplacement de ZooKeeper.
* Architecture et sécurité (ADR) : répondre aux sollicitations techniques des équipes de développement, étudier l'impact et la faisabilité des exigences de sécurité, notamment le chiffrement des données at rest et in transit.
* Gouvernance et audit opérationnel : mettre en place une gouvernance robuste autour des usages Kafka (politiques de logs, droits, monitoring), reprendre la main sur les configurations existantes, auditer l'existant pour aligner les pratiques sur les standards de production internes. Livrables attendus
* Plan de migration détaillé (stratégie rolling restart, version cible, procédure de rollback)
* Dossier d'Architecture Technique (DAT) mis à jour
* Rapport de compatibilité clients (Java/Spring)
* Rapport d'audit de configuration brokers, topics, connecteurs
* Audit des processus opérationnels (incidents, backup/restauration, capacity planning)
* Rapport de performance avec KPIs et points de contention
* Matrice Effort / Valeur explicitant les risques du « statu quo » pour chaque audit
* Étude de faisabilité chiffrement (at rest + in transit)
* Matrice de conformité sécurité (RBAC, ACLs, KMS, CSFLE)
* Référentiel de bonnes pratiques (nommage, Schema Registry, catalogue de services/événements)
* Document de gouvernance opérationnelle (rôles infra vs dev, processus de reprise en main) Expert Confluent Kafka senior avec une expérience confirmée sur Kafka en environnement contraint (PCI DSS / Banque). Vous savez dialoguer aussi bien avec des équipes de développement qu'avec un infogéreur, et vous êtes capable de reprendre la main technique sur une plateforme existante pour la faire monter en maturité. COMPÉTENCES ATTENDUES
* Pilotage de migrations majeures Kafka en environnement de production critique
* Capacité à structurer une gouvernance opérationnelle et à formaliser des bonnes pratiques
* Aisance à interagir avec des partenaires infogéreurs et à orchestrer leur action
* Posture d'auditeur : capacité à challenger l'existant et à prioriser via une matrice Effort / Valeur
* Excellente communication écrite et orale pour produire des livrables structurés (DAT, rapports, ADR) COMPÉTENCES TECHNIQUES
* Apache Kafka et Confluent Platform, expertise confirmée sur la version 8.
X
* Bascule ZooKeeper vers Kraft (KRaft)
* Schema Registry, Connect, topics, brokers, partitionnement, réplication
* Sécurité Kafka : chiffrement at rest et in transit, RBAC, ACLs, KMS, CSFLE
* Observabilité et
Experience:
Débutant accepté
* Démarrage souhaité : Asap
* Durée : 6 mois
* Localisation : Nantes intra-muros (centre-ville)
* Télétravail : 2 jours par semaine CONTEXTE Le système d'information du client repose sur une infrastructure Kafka critique, déployée sur trois environnements (Production, Préproduction, Staging). Dans un contexte de maintien en condition opérationnelle et d'évolution vers une architecture moderne, le client souhaite s'appuyer sur une prestation d'expert pour accompagner la montée en compétence et la restructuration de sa plateforme. L'environnement est contraint (normes PCI DSS / secteur bancaire), ce qui impose un niveau d'exigence élevé sur la sécurité, la conformité et la résilience. CE QUE VOUS ALLEZ FAIRE
* Pilotage de la migration 8.
X : identifier la version cible optimale, piloter l'infogéreur dans la mise en œuvre d'une migration « cassante », revoir le dimensionnement du cluster (nombre de nœuds) et orchestrer la bascule vers le moteur Kraft en remplacement de ZooKeeper.
* Architecture et sécurité (ADR) : répondre aux sollicitations techniques des équipes de développement, étudier l'impact et la faisabilité des exigences de sécurité, notamment le chiffrement des données at rest et in transit.
* Gouvernance et audit opérationnel : mettre en place une gouvernance robuste autour des usages Kafka (politiques de logs, droits, monitoring), reprendre la main sur les configurations existantes, auditer l'existant pour aligner les pratiques sur les standards de production internes. Livrables attendus
* Plan de migration détaillé (stratégie rolling restart, version cible, procédure de rollback)
* Dossier d'Architecture Technique (DAT) mis à jour
* Rapport de compatibilité clients (Java/Spring)
* Rapport d'audit de configuration brokers, topics, connecteurs
* Audit des processus opérationnels (incidents, backup/restauration, capacity planning)
* Rapport de performance avec KPIs et points de contention
* Matrice Effort / Valeur explicitant les risques du « statu quo » pour chaque audit
* Étude de faisabilité chiffrement (at rest + in transit)
* Matrice de conformité sécurité (RBAC, ACLs, KMS, CSFLE)
* Référentiel de bonnes pratiques (nommage, Schema Registry, catalogue de services/événements)
* Document de gouvernance opérationnelle (rôles infra vs dev, processus de reprise en main) Expert Confluent Kafka senior avec une expérience confirmée sur Kafka en environnement contraint (PCI DSS / Banque). Vous savez dialoguer aussi bien avec des équipes de développement qu'avec un infogéreur, et vous êtes capable de reprendre la main technique sur une plateforme existante pour la faire monter en maturité. COMPÉTENCES ATTENDUES
* Pilotage de migrations majeures Kafka en environnement de production critique
* Capacité à structurer une gouvernance opérationnelle et à formaliser des bonnes pratiques
* Aisance à interagir avec des partenaires infogéreurs et à orchestrer leur action
* Posture d'auditeur : capacité à challenger l'existant et à prioriser via une matrice Effort / Valeur
* Excellente communication écrite et orale pour produire des livrables structurés (DAT, rapports, ADR) COMPÉTENCES TECHNIQUES
* Apache Kafka et Confluent Platform, expertise confirmée sur la version 8.
X
* Bascule ZooKeeper vers Kraft (KRaft)
* Schema Registry, Connect, topics, brokers, partitionnement, réplication
* Sécurité Kafka : chiffrement at rest et in transit, RBAC, ACLs, KMS, CSFLE
* Observabilité et
Experience:
Débutant accepté