Получить доступ

Какие основные компоненты Kafka?

MiddleKafka: topic, partition, offsetKafka
Ещё спрашивают так:
  • Из чего состоит кластер Kafka?
  • Что такое KRaft?
Коротко

Брокеры хранят партиции и обслуживают клиентов; клиенты — продюсеры и потребители; контроллер управляет метаданными кластера и выборами лидеров партиций — с Kafka 3.3+ на KRaft (Raft внутри Kafka), ранее через ZooKeeper.

  • Kafka 4.0 работает только в режиме KRaft
  • У каждой партиции лидер и реплики на разных брокерах
  • Координаторы групп и транзакций — тоже на брокерах

А ещё Клиенты подключаются к bootstrap-серверам и получают карту лидеров

Так подсказку видит пользователь sotto на живом собеседовании — за пару секунд, пока вы думаете вслух.

Подробно

Брокеры принимают и хранят данные в топиках, разбитых на партиции (партиция даёт порядок внутри себя и масштабирование). Клиенты — это producer и consumer; consumer group распределяет партиции между экземплярами приложения. Слой координации хранит метаданные кластера и выбирает лидеров партиций: в современных версиях это встроенный контроллер на протоколе KRaft, раньше — внешний ZooKeeper.

Что хотят услышать

  • Роли брокеров, клиентов и контроллера.
  • KRaft вместо ZooKeeper.
  • Лидеры и реплики партиций.

Частые ошибки

  • Называть ZooKeeper обязательным для всех современных Kafka-кластеров.
  • Путать topic и queue.

Проверьте себя

Один верный вариант. Подумайте, потом откройте ответ.

Показать варианты и ответ
  • ✗Master-нода и slave-ноды, как у классических реляционных БД
  • ✗Только один процесс брокера, без какой-либо координации
  • ✓Брокеры (хранят топики/партиции), клиенты (producer/consumer) и слой координации метаданных (контроллер на KRaft, ранее ZooKeeper)
  • ✗Web-сервер и БД, как у классических REST-сервисов

Что спросят дальше

  • Что такое partition leader?
  • Что такое offset commit?

Разбор темы

Связанные вопросы

Закрытая бета

Подсказки на собеседовании — в реальном времени

sotto слышит вопрос интервьюера и показывает короткий ответ и план, как в блоке «Коротко». Оставьте контакт — пришлём доступ и промокод.

  • Промокод на 2 часа — сверх пробных 30 минут
  • Программа для Windows — скачать сразу, войти — через Яндекс ID или VK ID
  • Прямая связь с разработчиком: что улучшить — сделаем