Дата Инженер. Программа обучения
Дата Инженер – это специалист, который собирает, обрабатывает и загружает большие объёмы данных в модель для анализа. Он также организует хранение и использование данных в бизнесе.
Задачи Дата Инженера:
- Определение источников данных и разработка механизмов их сбора;
- Разработка и управление базами данных (БД), выбор подходящих технологий хранения данных;
- Проектирование процессов обработки данных и создание пайплайнов для трансформации информации;
- Обеспечение эффективной передачи данных между различными системами;
- Разработка механизмов защиты данных и управление доступом;
- непрерывное улучшение и оптимизация системы обработки данных для обеспечения высокой производительности;
- организацию мониторинга системы для выявления проблем и обеспечения бесперебойной работы.
Какие видео-уроки посмотреть?
- Бесплатные видео в разделе Практика для разминки;
- Видео-курс: Alteryx – основы. Видеокурс расскажет о программном обеспечении для визуального проектирования потоков обработки и преобразования данных – Alteryx Designer.
В этом уроке мы:
— покажем, как без программирования можно очистить данные, осуществим фильтрацию;
— посмотрим, каким образом можно объединять данные из нескольких разнородных источников, применим формулы (как построчные, так и агрегирующие), создадим и сохраним несколько отчетов (как в табличной форме, так и графической);
— решим несколько практических кейсов по получению и обработке данных из реальных веб-сервисов;
— покажем, каким образом можно создавать макросы и другие исполняемые программные модули, а также, зачем и каким образом можно соединиться с BI-инструментами.
Курс состоит из нескольких модулей:
Модуль 1 – 5 уроков, предоставляется в бесплатном доступе в тарифе ДЕМО.
Модуль 2 – 8 уроков, доступен в тарифах СТАНДАРТ и ПРЕМИУМ.
Ознакомиться подробнее с программой обучения курса можно тут.
- Видео-курс: Vertica одним взглядом.
Видеокурс расскажет о том, для чего необходимы аналитические базы данных. На примере Vertica будут рассмотрены колоночные базы данных, дающие существенный выигрыш в производительности для построения аналитики.
Мы покажем, как установить и настроить Vertica, а также имеющиеся визуальные средства по работе с ней. Совместно создадим тестовую базу данных, и на ее базе создадим аналитическое хранилище. Осуществим загрузку большого объема данных, и далее настроим проекции. Посмотрим, как работает Database Designer, и обсудим ключевые аспекты, которые следует учесть при работе с промышленными аналитическими базами данных.
Курс состоит из нескольких модулей:
Модуль 1 – 4 урока, предоставляется в бесплатном доступе в тарифе ДЕМО.
Модуль 2 – 5 уроков, доступен в тарифах СТАНДАРТ и ПРЕМИУМ.
Ознакомиться подробнее с программой обучения курса можно тут.
- Видео-курс: Основы теории создания хранилищ данных (DWH).
Наш видео-курс подойдет для специалистов, желающих научиться проектировать хранилища данных (DWH). В начале курса будет разобрана концепция нормальных форм, с примерами, а затем будут рассмотрены существующие в настоящее время методологии построения хранилищ, от «классических» (Кимбалл и Инмон) до «современных» (Data Vault и Anchor Modeling). В качестве практики будут построены модели хранилища для небольшого интернет-магазина, по каждой из методологий. В раздаточных материалах – скрипты по созданию моделей для каждой из методологий.
Курс состоит из нескольких модулей:
Модуль 1 – 3 урока, предоставляется в бесплатном доступе в тарифе ДЕМО.
Модуль 2 – 6 уроков, доступен в тарифах СТАНДАРТ и ПРЕМИУМ.
Ознакомиться подробнее с программой обучения курса можно тут.
- Видео-курс: Основы теории СУБД и языка SQL.
Видео-курс расскажет о том, что такое системы управления базами данных (СУБД), с акцентом на наиболее распространенный в настоящее время тип СУБД – реляционные. Будет рассмотрено устройство СУБД: из каких типовых компонент и процессов они состоят, и за что отвечают. Далее, автор покажет и научит, как самостоятельно создать для себя тестовую среду обучения, — будет установлена виртуальная машина, затем на ней будет развернута операционная система Linux, и установлены 2 различные СУБД – MySQL и Vertica, также к ним будут установлены наиболее удобные SQL-клиенты, — MySQL Workbench и DBeaver.
После установки тестовой среды обучения, автор расскажет о языке SQL, из каких групп операторов он состоит и для чего они применяются, и далее будут подробно разобраны команды из наиболее востребованных групп языка — DDL, DML. В качестве практики будет создана БД для управления интернет-магазина, в обеих тестовых средах – СУБД MySQL и Vertica, с акцентом на различия диалектов SQL-команд между этими СУБД.
Курс состоит из нескольких модулей:
Модуль 1 – 4 урока, предоставляется в бесплатном доступе в тарифе ДЕМО.
Модуль 2 – 12 уроков, доступен в тарифах СТАНДАРТ и ПРЕМИУМ.
Ознакомиться подробнее с программой обучения курса можно тут.
- Видео-курс: Аналитика? Сделай сам.
Подходы к построению платформы на собственной ИТ-инфраструктуре. Понимание процессов подготовки витрин данных, процессов ETL и ELT. Знание актуальных технологий, на которых можно реализовать эти процессы. Организация работы с большими данными Наш видео-курс подойдет для аналитиков и/или ИТ-специалистов, желающих разобраться в современных технологиях по работе с данными, чтобы суметь выбрать правильный путь в реализации стоящей перед ними задачи. Ведь зачастую технологии, преподаваемые в классических университетах, теряют свою актуальность, поскольку в 20х годах 21-го века стали доступны производительные аппаратные серверные возможности.
Курс состоит из нескольких модулей:
Модуль 1 – 1 урок, предоставляется в бесплатном доступе в тарифе ДЕМО.
Модуль 2 – 4 урока, доступен в тарифах СТАНДАРТ и ПРЕМИУМ.
Ознакомиться подробнее с программой обучения курса можно тут.
- Видео-курс: Аналитика интернет-магазина.
В этом курсе на основе реальной задачи построим решение, которое:
— автоматизирует процесс сбора данных из веб-сервисов WooCommerce и Яндекс.Метрика (причем без написания кода, в KNIME Analytics Platform);
— сохраняет полученные и обработанные данные в аналитической СУБД Vertica;
— визуализирует данные в виде аналитических отчетов в Tableau;
Данное решение будет собрано одним единственным специалистом практически на ваших глазах.
Курс состоит из нескольких модулей:
Модуль 1 – 4 урока, предоставляется в бесплатном доступе в тарифе ДЕМО.
Модуль 2 – 8 уроков, доступен в тарифах СТАНДАРТ и ПРЕМИУМ.
Ознакомиться подробнее с программой обучения курса можно тут.
Кто у нас учится?
Отзывы тех, кто прошел наше обучение:
Жанна Арчибасова, РУСАЛ о видео-курсе «Основы Tableau»: Очень подробное, структурированное изложение материала, сопровождаемое большим количеством наглядных примеров. Качественные задания для самостоятельной работы, хороший, понятный раздаточный материал. Моментальная обратная связь преподавателя. Спасибо!
Никита Чеснов, Тинькофф Банк р видео-курсе «Основы Tableau»: Отличный курс. Все темы курса были детально разобраны. Благодаря данному курсу я сэкономил огромное количество времени на изучение инструмента.
Максим Кречин, Яндекс.Такси о видео-курсе «Tableau. Сложный функционал»: Очень интересный курс, позволяющий глубоко погрузиться в нюансы работы с Tableau. Более структурировано дана информация о том, что ранее понималось интуитивно (Level of Details, табличные вычисления). Узнал множество «трюков» и путей реализации нестандартных визуализаций.
Евгения Евлютина, Банк ТОЧКА о видео-курсе «Tableau. Сложный функционал»: Мозг скрипел, но все очень понятно 🙂 если не отвлекаться. Спасибо преподавателю за человечность и фанатизм tableau (в хорошем смысле).
Виктория Годунова, Авито о видео-курсе «Tableau. Сложный функционал»: Тренинг очень понравился: раньше приходилось решать рабочие задачи бесконечным гуглежом, сейчас появилось более структурированное понимание принципов и логики Tableau. Отдельное спасибо за картинку иерархии фильтров! Увидь я ее раньше, она бы мне сохранила очень много времени.
Мария Карпова, YOTA о видео-курсе «Tableau. Визуальный анализ»: Интересный курс, открывающий новые (для новичков в Tableau) возможности! Хороший преподаватель. Спасибо!
Петр Беляков, НСПК о видео-курсе » Tableau. Визуальный анализ»: Интересный способ визуализации данных. Доступное объяснение на примерах.
Сайт Академия Аналитики academy.analytikaplus.ru
Телеграм Академия Аналитики analytixacademy_chat