Дата Инженер. Программа обучения

Дата Инженер  – это специалист, который собирает, обрабатывает и загружает большие объёмы данных в модель для анализа. Он также организует хранение и использование данных в бизнесе.

Задачи Дата Инженера:

• Определение источников данных и разработка механизмов их сбора;
• Разработка и управление базами данных (БД), выбор подходящих технологий хранения данных;
• Проектирование процессов обработки данных и создание пайплайнов для трансформации информации;
• Обеспечение эффективной передачи данных между различными системами;
• Разработка механизмов защиты данных и управление доступом;
• непрерывное улучшение и оптимизация системы обработки данных для обеспечения высокой производительности;
• организацию мониторинга системы для выявления проблем и обеспечения бесперебойной работы.

Какие видео-уроки посмотреть?

• Бесплатные видео в разделе Практика для разминки;
• Видео-курс: Alteryx – основы. Видеокурс расскажет о программном обеспечении для визуального проектирования потоков обработки и преобразования данных – Alteryx Designer.

В этом уроке мы:

—  покажем, как без программирования можно очистить данные, осуществим фильтрацию;

— посмотрим, каким образом можно объединять данные из нескольких разнородных источников, применим формулы (как построчные, так и агрегирующие), создадим и сохраним несколько отчетов (как в табличной форме, так и графической);

— решим несколько практических кейсов по получению и обработке данных из реальных веб-сервисов;

— покажем, каким образом можно создавать макросы и другие исполняемые программные модули, а также, зачем и каким образом можно соединиться с BI-инструментами.

Курс состоит из нескольких модулей:

Модуль 1 – 5 уроков, предоставляется в бесплатном доступе в тарифе ДЕМО.

Модуль 2 – 8 уроков, доступен в тарифах СТАНДАРТ и ПРЕМИУМ.

Ознакомиться подробнее с программой обучения курса можно тут.

 

• Видео-курс: Vertica одним взглядом.

Видеокурс расскажет о том, для чего необходимы аналитические базы данных. На примере Vertica будут рассмотрены колоночные базы данных, дающие существенный выигрыш в производительности для построения аналитики.

Мы покажем, как установить и настроить Vertica, а также имеющиеся визуальные средства по работе с ней. Совместно создадим тестовую базу данных, и на ее базе создадим аналитическое хранилище. Осуществим загрузку большого объема данных, и далее настроим проекции. Посмотрим, как работает Database Designer, и обсудим ключевые аспекты, которые следует учесть при работе с промышленными аналитическими базами данных.

Курс состоит из нескольких модулей:

Модуль 1 – 4 урока, предоставляется в бесплатном доступе в тарифе ДЕМО. 

Модуль 2 – 5 уроков, доступен в тарифах СТАНДАРТ и ПРЕМИУМ.

Ознакомиться подробнее с программой обучения курса можно тут.

 

• Видео-курс: Основы теории создания хранилищ данных (DWH).
  

Наш видео-курс подойдет для специалистов, желающих научиться проектировать хранилища данных (DWH). В начале курса будет разобрана концепция нормальных форм, с примерами, а затем будут рассмотрены существующие в настоящее время методологии построения хранилищ, от «классических» (Кимбалл и Инмон) до «современных» (Data Vault и Anchor Modeling). В качестве практики будут построены модели хранилища для небольшого интернет-магазина, по каждой из методологий. В раздаточных материалах – скрипты по созданию моделей для каждой из методологий.

Курс состоит из нескольких модулей:

Модуль 1 – 3 урока, предоставляется в бесплатном доступе в тарифе ДЕМО.

Модуль 2 – 6 уроков, доступен в тарифах СТАНДАРТ и ПРЕМИУМ.

Ознакомиться подробнее с программой обучения курса можно тут.

 

• Видео-курс: Основы теории СУБД и языка SQL.

Видео-курс расскажет о том, что такое системы управления базами данных (СУБД), с акцентом на наиболее распространенный в настоящее время тип СУБД – реляционные. Будет рассмотрено устройство СУБД: из каких типовых компонент и процессов они состоят, и за что отвечают. Далее, автор покажет и научит, как самостоятельно создать для себя тестовую среду обучения, — будет установлена виртуальная машина, затем на ней будет развернута операционная система Linux, и установлены 2 различные СУБД – MySQL и Vertica, также к ним будут установлены наиболее удобные SQL-клиенты, — MySQL Workbench и DBeaver.

После установки тестовой среды обучения, автор расскажет о языке SQL, из каких групп операторов он состоит и для чего они применяются, и далее будут подробно разобраны команды из наиболее востребованных групп языка — DDL, DML. В качестве практики будет создана БД для управления интернет-магазина, в обеих тестовых средах – СУБД MySQL и Vertica, с акцентом на различия диалектов SQL-команд между этими СУБД.

Курс состоит из нескольких модулей:

Модуль 1 – 4 урока, предоставляется в бесплатном доступе в тарифе ДЕМО.

Модуль 2 – 12 уроков, доступен в тарифах СТАНДАРТ и ПРЕМИУМ.

Ознакомиться подробнее с программой обучения курса можно тут.

 

• Видео-курс: Аналитика? Сделай сам.

Подходы к построению платформы на собственной ИТ-инфраструктуре. Понимание процессов подготовки витрин данных, процессов ETL и ELT. Знание актуальных технологий, на которых можно реализовать эти процессы. Организация работы с большими данными Наш видео-курс подойдет для аналитиков и/или ИТ-специалистов, желающих разобраться в современных технологиях по работе с данными, чтобы суметь выбрать правильный путь в реализации стоящей перед ними задачи. Ведь зачастую технологии, преподаваемые в классических университетах, теряют свою актуальность, поскольку в 20х годах 21-го века стали доступны производительные аппаратные серверные возможности.

Курс состоит из нескольких модулей:

Модуль 1 – 1 урок, предоставляется в бесплатном доступе в тарифе ДЕМО.

Модуль 2 – 4 урока, доступен в тарифах СТАНДАРТ и ПРЕМИУМ.

Ознакомиться подробнее с программой обучения курса можно тут.

 

• Видео-курс: Аналитика интернет-магазина.

В этом курсе на основе реальной задачи построим решение, которое:

Курс состоит из нескольких модулей:

Модуль 1 – 4 урока, предоставляется в бесплатном доступе в тарифе ДЕМО.

Модуль 2 – 8 уроков, доступен в тарифах СТАНДАРТ и ПРЕМИУМ.

Ознакомиться подробнее с программой обучения курса можно тут.

Кто у нас учится?

 

Отзывы тех, кто прошел наше обучение:

Жанна Арчибасова, РУСАЛ о видео-курсе «Основы Tableau»:  Очень подробное, структурированное изложение материала, сопровождаемое большим количеством наглядных примеров. Качественные задания для самостоятельной работы, хороший, понятный раздаточный материал. Моментальная обратная связь преподавателя. Спасибо!

Никита Чеснов, Тинькофф Банк р видео-курсе «Основы Tableau»: Отличный курс. Все темы курса были детально разобраны. Благодаря данному курсу я сэкономил огромное количество времени на изучение инструмента.

Максим Кречин, Яндекс.Такси о видео-курсе «Tableau. Сложный функционал»: Очень интересный курс, позволяющий глубоко погрузиться в нюансы работы с Tableau. Более структурировано дана информация о том, что ранее понималось интуитивно (Level of Details, табличные вычисления). Узнал множество «трюков» и путей реализации нестандартных визуализаций.

Евгения Евлютина, Банк ТОЧКА о видео-курсе «Tableau. Сложный функционал»: Мозг скрипел, но все очень понятно 🙂 если не отвлекаться. Спасибо преподавателю за человечность и фанатизм tableau (в хорошем смысле).

Виктория Годунова, Авито о видео-курсе «Tableau. Сложный функционал»: Тренинг очень понравился: раньше приходилось решать рабочие задачи бесконечным гуглежом, сейчас появилось более структурированное понимание принципов и логики  Tableau. Отдельное спасибо за картинку иерархии фильтров! Увидь я ее раньше, она бы мне сохранила очень много времени.

Мария Карпова, YOTA о видео-курсе  «Tableau. Визуальный анализ»: Интересный курс, открывающий новые (для новичков в Tableau) возможности! Хороший преподаватель. Спасибо!

Петр Беляков, НСПК о видео-курсе » Tableau. Визуальный анализ»: Интересный способ визуализации данных. Доступное объяснение на примерах.

 

НАЧАТЬ УЧИТЬСЯ БЕСПЛАТНО