Прокачка · Инфраструктура и безопасность · Микросервисы и интеграция

Kafka - транзакции и репликация

Репликация защищает данные от потери при падении брокера.

  • 35 минВремя
  • 47Блоков
  • 35Теория
  • 11Практика
  • 1Схемы и медиа

Что вы узнаете

  • Kafka Транзакции и Репликация
  • Зачем это вместе
  • Карта уровня
  • Репликация в Kafka
  • Как работает копирование

Отрывок

Транзакции дают атомарную запись в несколько партиций и exactly-once semantics между producer и consumer.

В уровне — ISR, high watermark, leader election, transactional producer, fencing, isolation levels, EOS и практические настройки.

Без репликации транзакции бессмысленны: данные могут исчезнуть вместе с единственной копией.

Без транзакций репликация даёт durability, но не атомарность записи в несколько топиков и не защиту consumer от чтения «грязных» данных.

Вместе они закрывают сценарии платёжных систем, event sourcing и пайплайнов, где дубли и частичные записи недопустимы.

Сначала репликация — как брокер хранит несколько копий и выбирает лидера.

Затем транзакции — как producer атомарно пишет в несколько партиций, как consumer видит только committed данные и как достигается exactly-once.

Полный уровень открывается по подписке.

  • Интерактивные уровни с проверкой ответов
  • Прогресс и повторение терминов сохраняются
  • Тренажёры Linux, SQL, Git и Docker в браузере

Войти и открытьТарифы

Вселенная ИТ — практика IT на русском

Уроки с проверкой, энциклопедия, тренажёры и квизы на одной платформе. Всё работает в браузере, без установки.