Курсы, программы / IT: Для программистов и IT-специалистов / Программирование / SPOT: потоковая обработка в Apache Spark

SPOT: потоковая обработка в Apache Spark: Вебинар

	Организатор	Регион	Стоимость


Коммерсант (0.03)		Pоссия	40 000 руб. руб. 40,000.00 за 16 ак. часов 2 дня

Даты проведения

12.05.2022 - 13.05.2022
19.09.2022 - 20.09.2022
12.12.2022 - 13.12.2022
Уточните расписание у организатора.
Возможно он не успел обновить расписание.

Форма обучения: Дистанционная

Вид мероприятия: Вебинар

Тип мероприятия: Открытые

Целевая аудитория

Для разработчиков Apache Spark, дата инженеров и аналитиков данных, Data Scientist’ов и других специалистов Big Data, которые используют или планируют использовать Spark для обработки и анализа больших данных

Преподаватель

Михаил Королев

Анонс программы

Практический курс по потоковой обработке с использованием Спарк рассчитан на специалистов, которые хотят получить опыт настройки и использования механизмов потоковой обработки в спарк, с видами источников и нюансами практического использования Structured Streaming.

Описание программы

1. Введение в потоковую обработку

Потоковая и пакетная обработка данных
Особенности потоковой обработки
Надежность и потоковая обработка.

2. Потоковая обработка в Apache Spark

Два вида потоков (на основе RDD и Dataframe)
Парадигма потоковой обработки в Structured Streaming
Источники (sources и sink).

3. Совместное использование Batch и Streaming

Трансформации и действия в Apache Spark
Объединение данных в Spark (join)
Особенности использования трансформаций при работе с потоковыми данными

4. Источники потоковых данных

Файловый источник данных
Apache Kafka как источник данных
Другие источники потоковых данных

5. Обеспечение надежности потоковой обработки в Apache Spark

Механизм checkpoint в Apache Spark
Настройка streaming checkpoint

Контактная информация

Коммерсант
Ксения Лебедева
Info@bigdataschool.ru
+7 (9 показать номер

	Сохранить в избранном

	Заказать звонок

	Отправить вопрос или заявку


Подать заявку от 40000 руб


	Телефон организатора Нажмите на ссылку, чтобы увидеть телефон Показать телефон

	Пожалуйста, скажите организатору, что нашли мероприятие на EduMarket.ru