Описание

Приложуха на яве от Apache. Требует Java в системе. Разработчик предлагает запускать сервис скриптами. Также есть имбовая вещь как Kafka Connect - утилита которая позволяет связать кафку и какое-то внешнее хранилище, например S3, Elasticsearch, обычные файлики в ФС, и СУБД. Последнее позволяет выполнять какой-нибудь экшон на основе прилетевших в БД данных, что очень круто.

Состав:

• Zookeeper
• Kafka

Zookeeper следит за состоянием кафки и хранит всякие метаданные. Упал зукипер - упала кафка.

Зачем Zookeeper? Кто такой Confluent и почему он везде вылезает?

Kafka

Есть топики, т.е. очереди по сути.

Есть партиции (что это?)