Курсы, программы / IT: Для программистов и IT-специалистов / Информационные системы и технологии / HIVE: Hadoop SQL Hive администратор

HIVE: Hadoop SQL Hive администратор: Курсы

	Организатор	Регион	Стоимость


Коммерсант (0.03)		Москва	20 000 руб. руб. 20,000.00 за 8 ак. часов 1 день

Даты проведения

08.06.2022 - 08.06.2022
14.09.2022 - 14.09.2022
Уточните расписание у организатора.
Возможно он не успел обновить расписание.

Форма обучения: Дистанционная

Вид мероприятия: Курсы

Тип мероприятия: Открытые

Целевая аудитория

Cпециалисты SQL имеющие и желающие применить опыт работы с реляционными базами данных для организации хранения, настройке импорта и экспорта данных с использованием Apache Hive в кластере Hadoop. Для администраторов и разработчиков для Apache Hive.

Преподаватель

Михаил Королев

Анонс программы

. Рассматриваются методы доступа к данным с использованием HiveQL, загрузка и выгрузка данных в Hive, HDFS, реляционные БД и NoSQL, организация и оптимизация хранения данных с использованием Hive на HDFS, вопросы интеграции с другими инструментами экосистемы Hadoop. Практические занятия выполняются в AWS и локальной кластерной системе с использованием дистрибутивов Cloudera Hadoop, HortonWorks, Arenadata.

Описание программы

1. Основные концепции Apache Hive

Архитектура Hive.
Инструменты администирования и исполнения запросов: beeline/Hive shell & HUE Query Editor.
Схема чтения и записи в Hive.
Структура и формат хранения файлов HIVE.
Синтаксис HiveQL. Hive DDL и DML операции.

2. Импорт и экспорт в Apache Hive

Загрузка данных в таблицы Hive.
Внешние и управляемые таблицы в HiveQL.
Оптимизации производительности с использование Partition, Buckets.
Импорт/экспорт данных БД.
Форматы хранения данных и применение компрессии.

3. Реализация JOIN в Hive

Map JOIN.
Comon JOIN.
Skewed JOIN.
Collocated JOIN.

4. Advanced HiveQL и Hadoop SQL

Интеграция Hive с Pig, Impala, Hbase, Spark, Sqoop.
Thrift сервер
User Defined Functions
Hive на Spark.
Hive на Tez

5.Сценарии применения Hive

Курс содержит ...

Подробнее о программе

1. Основные концепции Apache Hive

Архитектура Hive.
Инструменты администирования и исполнения запросов: beeline/Hive shell & HUE Query Editor.
Схема чтения и записи в Hive.
Структура и формат хранения файлов HIVE.
Синтаксис HiveQL. Hive DDL и DML операции.

2. Импорт и экспорт в Apache Hive

Загрузка данных в таблицы Hive.
Внешние и управляемые таблицы в HiveQL.
Оптимизации производительности с использование Partition, Buckets.
Импорт/экспорт данных БД.
Форматы хранения данных и применение компрессии.

3. Реализация JOIN в Hive

Map JOIN.
Comon JOIN.
Skewed JOIN.
Collocated JOIN.

4. Advanced HiveQL и Hadoop SQL

Интеграция Hive с Pig, Impala, Hbase, Spark, Sqoop.
Thrift сервер
User Defined Functions
Hive на Spark.
Hive на Tez

5.Сценарии применения Hive

Курс содержит практические лабораторные работы на кластере в Amazon Web Services по настройке партиционирования больших данных на файловой системе HDFS, оптимизация исполнения запросов и интеграция с существующими решениями Cloudera Impala, HBase , Spark SQL и Sqoop.

Соотношение теории к практике 40/60

Скрыть подробности

Контактная информация

Коммерсант
Лебедева Ксения
sales@bigdataschool.ru
г.Москва,ул.Илимская, д. 5/2, офис 303, БЦ "ДЕПО"
+7 99 показать номер

	Сохранить в избранном

	Заказать звонок

	Отправить вопрос или заявку


Подать заявку от 20000 руб


	Телефон организатора Нажмите на ссылку, чтобы увидеть телефон Показать телефон

	Пожалуйста, скажите организатору, что нашли мероприятие на EduMarket.ru