Apache Kafka 3.6. New Features Improvements

00:00: Введение в новую версию Kafka 3.6 с обзором обновлений и изменений. 00:14: Обсуждение многоуровневого хранилища (KIP 405), которое позволяет сохранять старые данные во внешних хранилищах, например, в S3. 00:57: Внедрение способов для избежания зависших транзакций (KIP 890), улучшая надежность обработки. 01:12: Возможность использования IPv4 и IPv6 на одном порту для улучшенной совместимости сети (HIP 797). 01:29: Обновление версии Zookeeper до , включающее улучшения и исправления безопасности (SKIP 902). 01:40: Улучшение надежности KFT за счет транзакций с метаданными (KIP 868). 02:00: Изменение поведения Admin Client для прямого взаимодействия с контроллером кворума (KIP 919). 02:29: Включение нескольких эвристических методов для правильной проверки временных меток и избежания ошибок (KIP 937). 03:21: Внедрение протокола сотрудничества по умолчанию для совместного восстановления и баланса (KIP 923), улучшение функциональности Kafka Streams. 03:33: Введение новой функции для объединения потоков и таблиц в Kafka Streams, что облегчает обработку неупорядоченных данных (KIP 923). 04:20: Добавление возможности настройки активных задач в зависимости от расположения стоек, что улучшает распределение задач по стойкам (KIP 925). 05:20: Обновление Kafka Connect (KIP 898), облегчающее поиск классов плагинов при запуске, что ускоряет время запуска для Connect работников. 05:46 Подведение итогов о последних обновлениях и функциях, включенных в релиз Kafka 3.6, и призыв исследовать более подробную информацию в блогах и примечаниях к выпуску