Przez bardzo długi czas Kafka nie mogła normalnie funkcjonować bez wsparcia ukrytego mechanizmu Zookeeper, którego zadaniem było magazynowanie podstawowych danych o partycjach i brokerach. Ponadto to wcale nie Kafka, a właśnie zookeeper wpływał na wybór głównego brokera-lidera jako kontrolera Kafki.
Twórcy Kafki przygotowują się na duże zmiany - już w tym roku planowane jest pozbycie się Zookeepera, co według producentów ułatwi zarządzanie danymi, poprawi skalowalność i umożliwi obsługę większej liczby partycji.
Tutaj umieszczam link do epica z opisem sytuacji -> https://cwiki.apache.org/confluence/display/KAFKA/KIP-500%3A+Replace+ZooKeeper+with+a+Self-Managed+Metadata+Quorum
Pewnie znaczna większość z obecnych tutaj przynajmniej raz miało kontakt z tą technologią, więc chciałbym zapytać o Wasze odczucia dotyczące tej radykalnej i już pewnej zmiany w architekturze Kafki. Czy wyjdzie im to na dobre czy wolelibyście zostać przy obecnym rozwiazaniu ?