Kafka без боли для аналитиков: объясняем просто, на примерах и с практикой скачать в хорошем качестве

Kafka без боли для аналитиков: объясняем просто, на примерах и с практикой

Курс "Брокеры сообщений для аналитика": https://systemanalyst.life/broker?utm... Два предыдущих вебинара про Kafka: Телеграм канал с полезным контентом для аналитиков: https://t.me/+yNuZMD8KEO9jZjI6 Алексей - старший разработчик, работающий с Kafka более 4 лет делится знаниями на вебинаре Ольга Пономарева - старший системный аналитик, СЕО школы по системному анализу Вы узнаете: ➖ как посчитать, сколько места нужно под данные, ➖ какие форматы сообщений использовать (Avro, JSON, Protobuf), ➖ когда стоит использовать один топик, а когда — несколько, ➖ какие параметры Kafka действительно важно понимать аналитику Таймкоды: 00:00 — О чём вебинар: 5 ключевых аспектов работы с Kafka 01:57 — Как Kafka хранит данные: простота и мощь 03:20 — Что такое append-only log и зачем это знать аналитикам 07:33 — Архитектура Kafka: брокеры, топики, партиции 11:07 — Продюсеры и конзюмеры: кто за что отвечает 17:09 — Как рассчитать нагрузку Kafka: формула в цифрах 21:10 — Репликация и расчёт объёма с учётом копий 24:15 — Зачем нужны бачи и как с ними работать 27:54 — Как создавать топики: один или много? 34:38 — Как выбрать формат сообщений: JSON vs Protobuf 39:44 — Как поддерживать совместимость при изменении формата 42:19 — Retention: как и сколько хранить сообщения 45:28 — Сколько нужно партиций и можно ли их менять 49:30 — Стратегии маршрутизации сообщений в партиции 51:25 — Acknowledgements и min-in-sync replicas: как обеспечить надёжность 56:09 — Оптимизация продюсера: batch size, linger.ms и компрессия 59:13 — Итоги: что аналитик должен знать про Kafka 01:04:15 — Что должен описывать аналитик в документации Kafka 01:07:39 — Какие параметры нужны для подключения к Kafka 01:14:16 — Презентация курса и домашек с реальной практикой