Yo !

Est ce que y en a qui ont déjà utilisé Apache Kafka ? Je suis nouveau dans le domaine et je voulais savoir si quelqu'un pourrai répondre à des questions de débutant

Non mais on peut toujours chercher des réponses à tes questions donc commence plutôt par là.

J'utilise ça au taf, c'est quoi tes questions ? Autant les écrire dès le début...

Disons que j'évite de poser les questions dès le début parce que j'ai tendance à bider
C'était plus d'un point de vue architecture. Si je veux faire un cluster de plusieurs serveurs/brokers, est ce que j'ai besoin d'avoir zookeeper sur toutes mes machines ?

Non pas besoin, je crois que dans tes fichiers de config kafka tu gères la connexion au zookeeper avec zookeeper.connect

Désolé de ma réponse tardive, et merci. J'avais effectivement vérifié ça
J'ai une autre question qui concerne cette fois-ci la notion d'état dans Kafka. Souvent, quand on évoque l'état, on parle de l'ensemble clé/valeur qui est stocké pour vérifier l'avancement d'une application.
Mon objectif c'est de faire un système de pipelining où chaque noeud de mon cluster fait une partie du process, le stock dans un topic, et le noeud inférieur le récupère pour continuer le process et ainsi de suite. J'aimerai stocker l'état de mes clés à chaque niveau du stream.
Certains utilisent KafkaStreams, mais j'aimerai ne pas passer par ce qui est proposé par Kafka Streams ou Process mais directement stocker l'état de mes process d'une autre manière. Si j'utilises un Hash-map, ce sera pas permanent. Il suffit que mon programme crash et je perds tout.
Quelle serait la meilleure méthode si on voulait quelque chose d'optimisé ?