Data Warehouse Analyst от Otus

    Otus
    Стоимость курса
    71 400 Р
    Длительность
    5 месяцев
    Сертификат
    Да
    Начало курса
    28 декабря 2023
    Трудоустройство
    Нет

    Кому подойдет

    • Инженерам данных
    • DBA
    • Разработчикам
    • Системным администраторам
    • Техническим директорам

    Чему Вы научитесь

    • Навыкам построения ELT-pipelines: Airflow, Nifi, Airbyte
    • Принципам работы аналитических СУБД: Redshift, Greenplum, Clickhouse
    • Изучите лучшие практики моделирования данных: dbt, Data Vault
    • Визуализации и BI: Metabase, Superset, DataLens
    • Продвинутой аналитике: KPI, Funnels, Marketing Attribution, Cohort, RFM
    • DevOps-практикам: Continuous Integration, Github Actions

    Программа обучения

    ELT: Структура и типы источников данных

    Рассмотрим классификацию основных источников данных для аналитики и их отличительные особенности. Выясним отличие принципов ETL и ELT, структурированных и неструктурированных данных. Научимся подключаться и вычитывать исходные данные, запрашивать ответы от внешних провайдеров через REST API, настраивать потоковую репликацию данных в Хранилище. Проанализируем основные сервисы и инструменты, используемые для этого класса задач.

    • Тема 1: Аналитические движки (СУБД) для работы с данными
    • Тема 2: Источники данных: классификация и особенности
    • Тема 3: Инструментарий разработки: IDE, Terminal, Docker, Codespaces, Terraform
    • Тема 4: Инструменты для выгрузки данных

    DWH Basics

    Рассмотрим современные СУБД, используемые для анализа больших данных и ключевые принципы их функционирования. Изучим концепцию Хранилища Данных и вопросы, на которое оно призвано отвечать. Познакомимся с dbt – широко популярный мультитул для работы с DWH, позволяющий выстраивать работу в соответствии с лучшими практиками.

    • Тема 1: Принципы построения DWH
    • Тема 2: Знакомство с Data Build Tool
    • Тема 3: DWH powered by Clickhouse and dbt
    • Тема 4: Разбор ДЗ – Setting up Airbyte Data Pipelines Lab

    DWH Intermediate

    Изучим современные инструменты для оркестрации скриптов и задач, управления пайплайнами и цепочками зависимостей (DAGs). Получим представление об организации всестороннего качества данных и актуальности DWH. Познакомимся с ключевыми принципами оптимизации производительности и устранения bottlenecks. На практике применим навыки моделирования Хранилища по методологии Data Vault 2.0.

    • Тема 1: Оркестрация скриптов и задач – 1
    • Тема 2: Оркестрация скриптов и задач – 2
    • Тема 3: Data Quality
    • Тема 4: Вопросы оптимизации производительности
    • Тема 5: Разбор ДЗ – Конфигурирование и запуск проекта dbt
    • Тема 6: Data Vault – 1
    • Тема 7: Data Vault – 2
    • Тема 8: Data Vault – 3
    • Тема 9: Разбор ДЗ – Подготовка и установка на расписание DAG выгрузки данных из источников

    Business Intelligence

    Выясним круг задач для решений класса Business Intelligence. Научимся конфигурировать и запускать BI в своих проектах. Изучим лучшие практики визуальной подачи информации и подготовки дашбордов.

    • Тема 1: BI: Обзор
    • Тема 2: BI: Deployment
    • Тема 3: BI: Modeling & Delivering
    • Тема 4: Разбор ДЗ – Организация детального слоя DWH по методологии Data Vault
    • Тема 5: Analytics: Базовые аналитические витрины
    • Тема 6: Analytics: Сквозная аналитика
    • Тема 7: Разбор ДЗ – Конфигурация и развертывание BI-решения
    • Тема 8: Analytics: Продвинутые аналитические витрины

    DWH Advanced topics

    Изучим сложные и продвинутые фишки в работе с Хранилищем Данных: Настроим мониторинг и сбор ключевых метрик Хранилища Данных. Задействуем возможности тесной работы с Data Lake (External Data) и полу-структурированными данными. Найдем точки соприкосновения с Data Scientists, проведем обзор возможностей современных СУБД в сфере распределенного ML.

    • Тема 1: DWH: Advanced topics
    • Тема 2: DBT: Extending with modules
    • Тема 3: DWH: Monitoring + Workload management
    • Тема 4: DWH: External + Semi-structured data
    • Тема 5: DWH: Reverse-ETL
    • Тема 6: DWH: Machine Learning capabilities
    • Тема 7: Разбор ДЗ – Визуализация и дашбординг для аналитических витрин

    Recap

    Повторим и суммируем весь пройденный в предыдущих модулях материал. Изучим реальные кейсы и примеры организации работы с данными в компаниях. Рассмотрим пути дальнейшего развития Hard & Soft Skills.

    • Тема 1: Разбор кейса: end-to-end solution
    • Тема 2: Разбор ДЗ – Advanced DWH: Configuring CI, dbt modules, External tables
    • Тема 3: Дальнейшее развитие навыков

    Проектная работа

    Заключительный месяц курса посвящен проектной работе. Свой проект — это то, что интересно писать слушателю. То, что можно создать на основе знаний, полученных на курсе. При этом не обязательно закончить его за месяц. В процессе написания по проекту можно получить консультации преподавателей.

    • Тема 1: Выбор темы и организация проектной работы
    • Тема 2: Защита проектных работ

    Отзывы о школе 11

    4.6 из 5
    8
    1
    0
    1
    0
    Сортировать:
    Дате публикации
    • Дата публикации
    • Популярности
    • Сначала положительные
    • Сначала отрицательные
    • Антонина 12 октября 2023

      Я решила выбрать курс Symfony здесь, потому что ранее прошла другое обучение и была впечатлена организацией в этой школе. Здесь проводятся вебинары, предоставляется множество практических заданий, и интересные задания на дом. Программа курса новая и информативная. При этом Каморин Михаил является преподавателем этого курса. В нем сочетаются высокая квалификация, педагогическое мастерство и ответственность. Уроки тщательно структурированы, а примеры всегда применимы и интересны. Каждый вебинар сопровождается скриптом, позволяющий повторить все материалы занятия. Ценным является обратная связь, которую мы получаем по любым вопросам, возникающие у нас. Мы получаем тщательный анализ выполненного задания, а также множество советов о том, как его можно улучшить и выполнить правильно. Только что закончился курс, и я еще не начала искать работу, но я уверена: благодаря этому курсу я уже имею прочный фундамент знаний и практического опыта. Я уверена, что найду работу благодаря полученным навыкам. Хочу выразить благодарность всей команде OTUS за их работу!

      Был ли отзыв полезен?
    • Арсений 8 августа 2023

      Решив попробовать свои силы в разработке Android-приложений, я столкнулся с отсутствием опыта в программировании. Я решил приобрести обучающий курс "Специалитет" на платформе Otus, который включал в себя как базовый, так и продвинутый уровни. Однако, я бы рекомендовал новичкам начать с базового курса, так как для продвинутого уже нужен опыт работы над реальными проектами. Обучение на курсе было увлекательным, и я хотел бы выразить благодарность преподавателям и менеджерам, которые были всегда готовы помочь в случае возникновения проблем в процессе обучения. Базовый курс помог мне хорошо разобраться в устройстве и особенностях разработки приложений для платформы Android. Конечно, на лекциях невозможно получить исчерпывающую информацию, поэтому вам придется проводить много времени в поиске дополнительных материалов, чтении документации и так далее, но преподаватели всегда предоставляли ссылки на нужные материалы для продвижения по курсу. Также я рекомендую тем, кто не может быстро понять все аспекты разработки сразу, начать с бесплатного короткого курса по подготовке, которые многочисленно представлены в интернете, чтобы более гладко и быстро войти в процесс обучения с нуля и создавать свой собственный масштабный проект.

      Был ли отзыв полезен?
    • Константин 8 июня 2023

      Чисто для себя решил изучить администрирование Linux. Тем более что основы Python мне знакомы, и я ими владею. Менеджеру большой привет, свою работу он делает хорошо. Это он уговорил и заставил поверить, что сложностей у меня не возникнет. Азы же программирования мне известны. В Linux я не работал никогда и абсолютно в ней не разбираюсь. У меня изначально с этой операционкой не сложились отношения, она никак толком не хотела работать на моем стареньком ноуте. Общение в Слаке было никаким, большого энтузиазма у присутствующих оно не вызывало. Тоже самое могу сказать и про Телегу. Преподаватели отвечали на вопросы, но как-то уж очень кратко, без особых вниканий в детали. О том, что Linux надо хоть как-то знать, мне не сообщили. А ведь предупреждал, что с ним не знаком. Освоил его по ссылке самостоятельно, тем самым безбожно отстав от остальных ребят. Курс администрирования давался мне очень тяжело. На мой взгляд, там очень много недоработок и квалификация преподавателей оставляет желать лучшего. Не советую.

      Был ли отзыв полезен?
    Посмотреть все отзывы о Otus