Буфер протокола Google (protobuf) – это хорошо известный формат сериализации данных, который эффективен (меньше и быстрее, чем json) и не зависит как от платформы, так и от языка. Этот пост посвящен тому, как мы можем использовать формат сериализации protobuf для отправки сообщений в тему kafka и их чтения. Я также вставил ссылку на github в конце для полного рабочего кода. Вот мой другой пост о программировании kafka с сериализацией Avro :..

Визуализация наиболее непонятого параметра конфигурации Kafka Проработав с Kafka почти два года, есть две конфигурации, взаимодействие которых, как я заметил, повсеместно запутано. Эти две конфигурации acks и min.insync.replicas - и как они взаимодействуют друг с другом. Эта статья призвана быть удобной справочной информацией, которая устраняет путаницу с помощью некоторых иллюстраций. Репликация Чтобы лучше понять эти конфигурации, полезно напомнить себе о протоколе..