Максимальная пропускная способность kafka в MB/Second

Question

Какова максимальная пропускная способность kafka в МБ/секунду. Я пытаюсь отправить сообщения размером 2 МБ каждый и получить пропускную способность около 30 записей в секунду (т. Е. 60 МБ/с) Я хотел проверить, какая теоретическая максимальная пропускная способность могла быть достигнута.

Answer 1

Kafka обычно связан с сетью - так что это зависит от вашего оборудования. Теоретический максимум для 1Gbit Ethernet составит 125 МБ/с.

Кроме того, проверить этот блог: https://engineering.linkedin.com/kafka/benchmarking-apache-kafka-2-million-writes-second-three-cheap-machines