Kafka кластер zookeeper отказ обработки

Question

Я собираюсь реализовать кластер kafka, состоящий из 3 машин, один для zookeeper и других 2 в качестве брокеров. У меня около 6 бытовых машин и около сотни производителей.

Теперь, если один из брокерских сбоев не удается потерять данные благодаря функции репликации. Но что, если zookeeper терпит неудачу, и тот же самый компьютер не может быть запущен? У меня есть несколько вопросов:

1. Я заметил, что даже после неудач подрядчиков продолжали нажимать сообщения в назначенных брокерах. Но потребители больше не могли их получить. Потому что потребители получили незарегистрированные. Итак, в этом случае данные теряются постоянно?
2. Как изменить zookeeper ip в конфигурации брокера во время выполнения? Должны ли они быть выключены, чтобы изменить zookeeper ip?
3. Даже если новая машина zookeeper каким-то образом внедрена в кластер, предыдущие данные будут потеряны?

Answer 1

Запуск только одного экземпляра Zookeeper не является отказоустойчивым, и поведение не может быть предсказано. Согласно HBase reference, вы должны настроить ансамбль с не менее чем 3 серверами.

Просмотрите страницу официальной документации: Zookeeper clustered setup.