Курсы, программы / IT: Для программистов и IT-специалистов / Администрирование / KAFKA: Apache Kafka кластер администратор

KAFKA: Apache Kafka кластер администратор: Курсы

	Организатор	Регион	Стоимость


Коммерсант (0.03)		Москва	60 000 руб. руб. 60,000.00 за 32 ак. часа 3 дня

Даты проведения

09.09.2020 - 11.09.2020
05.10.2020 - 07.10.2020
07.12.2020 - 09.12.2020
23.05.2022 - 25.05.2022
11.07.2022 - 13.07.2022
Уточните расписание у организатора.
Возможно он не успел обновить расписание.

Форма обучения: Очная/дневная

Вид мероприятия: Курсы

Тип мероприятия: Открытые

Целевая аудитория

Специалисты, желающие изучить методы администрирования кластера Kafka

Преподаватель

Комиссаренко Н.В.

Анонс программы

Курс о метоах администрирования кластера Kafka (Confluent); настройках безопасности для Apache Kafka с использованием SSL, SASL, Kerberos; мониторинг и оптимизация очереди сообщений Kafka с использованием практических примеров реализации.

Описание программы

Введение в Apache Kafka
- Что такое Kafka?
- Сценарии использования Kafka
- Компоненты Kafka и Kafka экосистемы
- Архитектура Kafka
- Кластер Zookeeper
- Потоковая Обработка Событий(Event Stream Processing): — Терминология и основные концепции. Сравнение Hadoop и Spark
Основные концепции Kafka
- Как работает Kafka: Топики (Topics) и партиций (Partitions). Репликация данных.
- Брокеры (Brokers): Развертывание. Конфигурация Multibroker
- Поставщики данных (Producers): Типы партиций. Синхронные и асинхронные Producers. Параметры конфигурации. Java API
- Потребители данных (Consumers): Очереди Consumers. Широковещание (Broadcasting).
Установка кластера Kafka
- Требования по установке кластера Kafka
- Установка и настройка ...

Подробнее о программе

Введение в Apache Kafka
- Что такое Kafka?
- Сценарии использования Kafka
- Компоненты Kafka и Kafka экосистемы
- Архитектура Kafka
- Кластер Zookeeper
- Потоковая Обработка Событий(Event Stream Processing): — Терминология и основные концепции. Сравнение Hadoop и Spark
Основные концепции Kafka
- Как работает Kafka: Топики (Topics) и партиций (Partitions). Репликация данных.
- Брокеры (Brokers): Развертывание. Конфигурация Multibroker
- Поставщики данных (Producers): Типы партиций. Синхронные и асинхронные Producers. Параметры конфигурации. Java API
- Потребители данных (Consumers): Очереди Consumers. Широковещание (Broadcasting).
Установка кластера Kafka
- Требования по установке кластера Kafka
- Установка и настройка кластера Zookeeper: Настройка кворума. Конфигурация сервисов и файловой системы. Оптимизация и отказоустойчивость Zookeeper.
- Установка и настройка кластера Kafka: Планирование установки и sizing кластера Kafka. Типовые проблемы при установке. Запуск и первоначальное конфигурирование Kafka. Конфигурация Listeners. Отказоусточивость кластера Kafka. Kafka менеджер.
- Установка кластера Kafka на AWS
Базовые операции в Kafka
- Операции с Топиками (Topic)
- Публикация данных с консольного Producer
- Получение данных с консольного Consumer
- Пользовательские интерфейсы топика Kafka (Topics UI)
- Написание кода producer
- Написание кода consumer
Оптимизация кластера Apache Kafka
- Оптимизация производительности компонент кластера
- Масштабирование кластера
- Балансировка разделов(partition) и использование Partition Reassignment Tools
- Best Practices
- Мониторинг кластера Kafka
- Настройка мониторинга кластера Apache Kafka (Confluent) с использованием Prometheus + Grafana
Интеграция с Kafka
- Интеграция Spark и Spark Streaming
- Интеграция потоковой обработки Spark Streaming и Kafka
- Использование Apache NiFi
- Интеграция Apache Flume с Kafka
Расширенная конфигурация кластера Apache Kafka
- Расширенная конфигурация топиков (Topic): Изменение конфигурации топиков. Sizing(количество партиций и фактор репликации). Сегменты и индексы. Политика очистки логов (Log Cleanup Policy). Сжатие и консолидация данных в логах.
- Пользовательский интерфейс Landoop Kafka Topics
- Confluent REST Proxy
- Настройка Confluent Schema Registry
- Архитектура Kafka Connect
Безопасность в Kafka
- Шифрование SSL: Установка центра сертификатов (CA), настройка SSL для Kafka кластера и клиентов
- Аутентификация SSL/SASL
- Аутентификация Kerberos: Настройка Kerberos. Keytabs и principals. Настройка кластера Kafka и клиентов для поддержки Kerberos
- Авторизация в Kafka
- Управление списками управления доступом (ACL)

Скрыть подробности

Контактная информация

Коммерсант
Лебедева Ксения
info@bigdataschool.ru
г.Москва,ул.Илимская, д. 5/2, офис 303, БЦ "ДЕПО"
+7 99 показать номер

	Сохранить в избранном

	Заказать звонок

	Отправить вопрос или заявку


Подать заявку от 60000 руб


	Телефон организатора Нажмите на ссылку, чтобы увидеть телефон Показать телефон

	Пожалуйста, скажите организатору, что нашли мероприятие на EduMarket.ru