Курсы, программы / IT: Для программистов и IT-специалистов / Программирование / DPREP: Подготовка данных для Data Mining

DPREP: Подготовка данных для Data Mining: Курсы

	Организатор	Регион	Стоимость


Коммерсант (0.03)		Москва	72 000 руб. руб. 72,000.00 за 40 ак. часов 4 дня

Даты проведения

22.07.2019 - 25.07.2019
16.12.2019 - 19.12.2019
29.09.2020 - 02.10.2020
16.11.2020 - 19.11.2020
Уточните расписание у организатора.
Возможно он не успел обновить расписание.

Форма обучения: Очная/дневная

Вид мероприятия: Курсы

Тип мероприятия: Открытые

Целевая аудитория

Архитекторы Data lakes, Аналитики данных, дата-инженеры, отвечающие за процессы сбора, подготовки данных и очистки больших данных.

Преподаватель

Николай Комиссаренко

Анонс программы

Процесс сбора и подготовки данных — один из самых трудоемких и сложных этапов в анализе больших объемов данных, который порой занимает до 80% всего времени. Использование статистических методик и современного программного обеспечения позволяет значительно сократить временные и финансовые затраты на данном этапе, и повысить эффективность и качество конечных результатов.

Описание программы

Введение в Data Mining
- Процессный подход Data Mining. Data Lake концепция
- Стандарты CRISP-DM и SEMMA
- Фазы жизненного цикла процессов Data Mining
- Подход Data provenance — происхождение данных. Тэгирование данных
- Подход Data Lineage и документирование
- Важность фазы подготовки данных для формирования озера данных
Целевая функция
- Целевая функции, и ее содержание.
- Основные принципы формирования целевой функции
Формат зависимых переменных
- Зависимые переменные. Типы зависимых переменных и преобразование шкал (нормализация данных)
- Приведение форматов даты и времени
- Приведение форматов Locale
Тестовая выборка
- Формирование тестовой выборки, ее содержание и объем по отношению ко всему объему исходных данных
- Основные принципы формирования ...

Подробнее о программе

Введение в Data Mining
- Процессный подход Data Mining. Data Lake концепция
- Стандарты CRISP-DM и SEMMA
- Фазы жизненного цикла процессов Data Mining
- Подход Data provenance — происхождение данных. Тэгирование данных
- Подход Data Lineage и документирование
- Важность фазы подготовки данных для формирования озера данных
Целевая функция
- Целевая функции, и ее содержание.
- Основные принципы формирования целевой функции
Формат зависимых переменных
- Зависимые переменные. Типы зависимых переменных и преобразование шкал (нормализация данных)
- Приведение форматов даты и времени
- Приведение форматов Locale
Тестовая выборка
- Формирование тестовой выборки, ее содержание и объем по отношению ко всему объему исходных данных
- Основные принципы формирования тестовой выборки
Валидационная выборка
- Понятие валидационной выборки, ее содержание и объем по отношению ко всему объему исходных данных
- Основные принципы формирования тестовой выборки и валидационной
Анализ выбросов
- Понятие «выбросов» (Outliers) и их анализ
Проверка на нормальность распределения
- Тестирование входных параметров на нормальность распределения
- Параметрическая статистика
Отcутствующие значения в исходных данных
- Отсутствующие значения (Missing values)
- Правила замены (генерации) отсутствующих данных или опущения (ommit)
Регрессионные модели данных
- Понятие регрессионных моделей, и их сильные и слабые стороны
- Проверка на мультиколлинеарность (Multicollinearity)
Заключительный проект по подготовке данных
- Выполнение полного цикла очистки и подготовки данных на примере выбранного dataset
- Формирование тестовой и валидационной выборки
- Документирование

Скрыть подробности

Контактная информация

Коммерсант
Лебедева Ксения
sales@bigdataschool.ru
ул. Илимская, д. 5/2, офис 303, БЦ "ДЕПО"
+7 99 показать номер

	Сохранить в избранном

	Заказать звонок

	Отправить вопрос или заявку


Подать заявку от 68400 руб При заявке через сайт скидка 5%


	Телефон организатора Нажмите на ссылку, чтобы увидеть телефон Показать телефон

	Пожалуйста, скажите организатору, что нашли мероприятие на EduMarket.ru

Выиграть грант
Вы можете выиграть грант на обучение
Узнать, как получить грант

Подать заявку на грант


	Скидка При контакте с организатором сообщите ему о том, что нашли эту программу на нашем сайте. Организатор предоставит вам скидку 3600 руб. (5%)