Вебинар GetSkills 26 ноября

Программа

Тарифы

ведущий практикума

I am ready for a long road flight for work with a week- or months-long projects.

ETL как ключевой инструмент аналитика

при анализе данных из разных источников

Практикум

Практикум в формате ZOOM-СОЗВОНА, количество мест строго ограничено!

Записаться:

мест 20

Зарегистрироваться

старт по

мере

группы

набора

Подведение итогов

Ответы на вопросы

2,5 часа практической пользы

Применение

Готовые инструменты

Практика

Обсуждение и работа в мини-группах

Отработаете практический навык проектирования ETL-процесса на реальном примере, включая продумывание реализации алгоритма преобразования данных

Теория

Дано:
3 источника данных:
- Реляционная база данных (СУБД mySQL)
- Стандартный CSV файл с данными
- Неструктурированные XLS файлы

Задача: Провести импорт данных из разных источников в единую БД на основе ETL-процесса

Процесс:

Провести анализ данных и выбрать эффективный сценарий импорта данных в БД
Описать требования и ограничения к данным
Провести преобразование и маппинг данных на основе шаблонов
Спроектировать импорт данных на основе ETL процесса и промежуточной области

Без воды и лишней информации

15-20

минут

70-80

минут

что такое ETL-процесс и его основные элементы

зачем нужен ETL-процесс, кем и где применяется

как работает ETL-процесс

преимущества и недостатки ETL

какое место занимает ETL-процесс в архитектуре системы бизнес-аналитики

универсальный сценарий реализации ETL-процесса

основные инструменты, применяемые аналитиками и разработчиками при проектировании и реализации ETL-процесса

особенности работы аналитика на ETL-проектах

примеры ETL-систем

полезные рекомендации

минут

2,5 часа практической пользы

Без воды и лишней информации

Применение

Подведение итогов

Готовые инструменты

Ответы
на вопросы

Практика

Обсуждение и работа в мини-группах

что такое ETL-процесс и его основные элементы

зачем нужен ETL-процесс, кем и где применяется

как работает ETL-процесс

преимущества и недостатки ETL

какое место занимает ETL-процесс в архитектуре системы бизнес-аналитики

универсальный сценарий реализации ETL-процесса

основные инструменты, применяемые аналитиками и разработчиками при проектировании и реализации ETL-процесса

особенности работы аналитика на ETL-проектах

примеры ETL-систем

полезные рекомендации

Дано: 3 источника данных:
- Реляционная база данных (СУБД mySQL)
- Стандартный CSV файл с данными
- Неструктурированные XLS файлы

Задача: провести импорт данных из разных источников в единую БД на основе ETL-процесса

Процесс:

Провести анализ данных и выбрать эффективный сценарий импорта данных в БД
Описать требования и ограничения к данным
Провести преобразование и маппинг данных на основе шаблонов
Спроектировать импорт данных на основе ETL процесса и промежуточной области

Теория

минут

70-80

минут

15-20

минут

я с вами

Часто бизнес- и системные аналитики принимают участие в:

Знание и применение аналитиками основных подходов при разработке требований к ETL-проектам, применение основных инструментов и шаблонов описания и проектирования позволяет быстро и эффективно обрабатывать подобные запросы и создавать понятную документацию для разработчиков

проектировании ETL-процесса

сборе требований к данным, форматам, и типам хранения, хранилищам, бизнес-процессам

определению НФТ для подобных систем

разработке алгоритмов преобразования и т.д.

Если ты

то этот практикум создан для тебя!

Бизнес-аналитик

Системный аналитик

Инженер по тестированию

Руководитель проекта

Иду на практикум!

Аналитики интересуются

Получить ответы на эти вопросы

Как подойти к миграции данных?

Какие задачи стоят перед аналитиком?

Как можно структурнее и понятнее описать процесс маппинга?

Какие различия между репликацией и миграцией?

Как попрактиковаться, если ранее не сталкивались с маппингом?

Какие ошибки и риски возникают в процессе миграции?

Где получить больше реальных примеров в связках разных систем с разными форматами, которые должны участвовать в передаче данных?

Результаты практикума

Приобретете теоретические знания и практические навыки, необходимые для работы на проектах, связанных с анализом данных из разных источников

На практике проработаете решение, связанное с преобразованием и сопоставлением данных (data mapping)

Изучите инструменты, применяемые в ETL-процессах

Освоите универсальный подход к проектированию ETL-процесса

Будете уверенно и профессионально работать на проектах, связанных с обработкой и анализом данных

Правильно спроектированный процесс позволяет эффективно работать с данными, ускорить процесс их перемещения, структуризации и приведения к нормальному виду