Этот сайт использует cookies. Продолжая, вы даёте согласие на их обработку. Политика использования.
Инженерия данных от проектирования до нетривиальной обработки
СТАРТ ПРОГРАММЫ
19 февраля
19 февраля
КОМУ ПОДОЙДЁТ
JUNIOR+/MIDDLE
JUNIOR+/MIDDLE
ПОЭТАПНАЯ ОПЛАТА
НА 5 МЕСЯЦЕВ
НА 5 МЕСЯЦЕВ
ИНЖЕНЕР ДАННЫХ. ОБУЧЕНИЕ У НАС |
01
дней
02
часов
03
минут
04
секунд
Мы собрали ключевые курсы в мощные связки, чтобы вы получили максимальный результат. Приобретайте комбо и экономьте 15% на общей стоимости.
Подробнее об акции по ссылке
Подробнее об акции по ссылке
Мы собрали ключевые курсы в мощные связки, чтобы вы получили максимальный результат. Приобретайте комбо и экономьте 15% на общей стоимости.
Подробнее об акции по ссылке
Подробнее об акции по ссылке
НАУЧИТЕСЬ ПРАВИЛЬНО ГОТОВИТЬ ДАННЫЕ ЛЮБЫХ РАЗМЕРОВ И СЛОЖНОСТИ
Стандартный путь:
1/ НАЧИНАЕШЬ РАБОТАТЬ С ДАННЫМИ
2/ ПЫТАЕШЬСЯ СДЕЛАТЬ СИСТЕМНО И РАСШИРЯЕМО
3/ ПОНИМАЕШЬ, ЧТО НЕ ХВАТАЕТ ЗНАНИЙ, ЧТОБЫ ОХВАТИТЬ ВСЮ АРХИТЕКТУРУ DWH ЦЕЛИКОМ
Для эффективной работы с данными одного инструмента недостаточно — необходимо учитывать все взаимосвязи большого хранилища, понимать потребности заказчика и воспринимать данные как конечный продукт
Сильный инженер данных за счёт широты знаний и понимания архитектуры DWH способен подобрать правильные инструменты под любые задачи и донести результат до потребителей данных
Обучающие выборки для машинного обучения и красивые графики для отчётов не появляются сами собой: данные нужно собирать, хранить, валидировать и комбинировать между собой, быстро реагируя на изменения в их структуре
Наша программа создана для профессионалов, которые стремятся к системному проектированию сложных решений. Вы будете работать с задачами, которые требуют не базовых навыков, а глубокого понимания инструментов и архитектуры
Yandex Cloud — надежная инфраструктура и развитая экосистема для создания и совершенствования цифровых продуктов
Даём бесплатный доступ к облачным технологиям для всех студентов курса
КОМУ ПОДОЙДЁТ ЭТОТ КУРС:
Вы уже постоянно взаимодействуете с базами данных, но хотите лучше разобраться в ETL-процессах и выйти на качественно новый уровень в аналитике
АНАЛИТИК ДАННЫХ
Работаете с хранилищами данных, но хотите систематизировать знания и глубже погрузиться в актуальные технологии
ИНЖЕНЕР ДАННЫХ
Имеете опыт бэкенд-разработки и хотите применить его для решения задач, связанных с хранением и обработкой больших данных
BACKEND-РАЗРАБОТЧИК
Занимаетесь развитием систем бизнес-аналитики, хотите освоить архитектуру современных хранилищ данных и научиться их проектировать
BI-РАЗРАБОТЧИК
Он ориентирован на тех, кто уже имеет практический опыт в работе с данными и хочет перейти от решения отдельных задач к проектированию сквозных систем
при рассрочке на 24 месяца
117 895 ₽
одним платежом
или
6 318 ₽ / мес.
«Инженер данных» + доступ к «Симулятору Data Science» на 3 месяца
Ускорьте рост в Data Engineering. Освойте продвинутые инструменты и примените их на кейсах из бизнеса
> На курсе «Инженер данных» соберете стек под любые задачи: потоковая обработка, оркестрация, Big Data-инфраструктура
> На «Симуляторе Data Science» решите полноценные кейсы и усилите портфолио
> На курсе «Инженер данных» соберете стек под любые задачи: потоковая обработка, оркестрация, Big Data-инфраструктура
> На «Симуляторе Data Science» решите полноценные кейсы и усилите портфолио
новогоднее комбо!
какие инструменты освоите >
PostgreSQL
Hadoop
S3
Greenplum
Python
SQL
Hive
Spark
Kafka
ML Flow
Spark ML
SuperSet
Tableau
DataLens
Airflow
Для эффективной отработки навыков в курсе «Инженер данных» есть промежуточный практический проект, который воссоздает etl-процессы (airflow) крупной двухуровневой платформы данных. Проект максимально приближен по сути к рабочим задачам дата-инженера. В процессе работы над ним вы закрепите понимание инструментов airflow, spark + s3 и greenplum и поймете, как использовать их в связке друг с другом.
Проект доступен тем, кто прошел модуль Big data, на его выполнение дается две недели — в этот период не будут открываться другие уроки, чтобы вы не отвлекались.
Проект доступен тем, кто прошел модуль Big data, на его выполнение дается две недели — в этот период не будут открываться другие уроки, чтобы вы не отвлекались.
Максимальное погружение
ЧТО НЕОБХОДИМО ДЛЯ КУРСА [?]
Он предполагает, что вы уже владеете базовыми навыками — здесь мы фокусируемся на их применении в сложных условиях. Поэтому требуются следующие умения:
> Уверенное знание синтаксиса (SELECT, WHERE, GROUP BY, HAVING)
> Умение составлять подзапросы и делать все виды JOIN
> Опыт работы с оконными функциями
> Умение составлять подзапросы и делать все виды JOIN
> Опыт работы с оконными функциями
> Знание синтаксиса языка
> Понимание базовых структур данных (список, словарь, кортеж)
> Владение основами ООП (класс, объект)
> Понимание базовых структур данных (список, словарь, кортеж)
> Владение основами ООП (класс, объект)
> Умение работать с командной строкой
> Знание базовых команд Linux
> Опыт работы с Git
> Знание базовых команд Linux
> Опыт работы с Git
Если вы только начинаете осваивать инженерию данных, то обратите внимание на другой наш курс «Инженер данных с нуля»
У нас можно прокачать знания до уровня, где вы не просто обрабатываете данные, а создаете системы, которые выдерживают нагрузку реального бизнеса
ПРОГРАММА КУРСА //
Data Warehouse — централизованное хранилище данных из разных источников. Познакомимся с его верхнеуровневой логической архитектурой, рассмотрим её основные компоненты и разберём на практике разные подходы к проектированию детального слоя DWH.
Начнём погружение в инженерию данных со знакомства с реляционными и MPP базами данных. Рассмотрим их архитектуру, обсудим популярные решения и узнаем, в каких случаях MPP СУБД оказываются лучше традиционных. Научимся готовить PostgreSQL и MPP базы данных на примере Greenplum.
ETL — ключевой процесс в управлении хранилищами данных. Рассмотрим принципы и основные этапы его построения. Познакомимся с популярным инструментом Airflow, подробно разберём его основные компоненты и научимся с его помощью автоматизировать ETL-пайплайны.
Познакомимся с механизмами распределённого хранения больших данных на базе Hadoop, разберём основные паттерны реализации их распределённой обработки. Рассмотрим вопросы отказоустойчивости и восстановления после сбоев. Поговорим о потоковой обработке данных, методах и средствах мониторинга и профилирования заданий Spark.
Для эффективной отработки навыков в курсе «Инженер данных» есть промежуточный практический проект, который воссоздает etl-процессы (airflow) крупной двухуровневой платформы данных. Проект максимально приближен по сути к рабочим задачам дата-инженера. В процессе работы над ним вы закрепите понимание инструментов airflow, spark + s3 и greenplum и поймете, как использовать их в связке друг с другом.
Проект доступен тем, кто прошел модуль Big data, на его выполнение дается две недели — в этот период не будут открываться другие уроки, чтобы вы не отвлекались.
Проект доступен тем, кто прошел модуль Big data, на его выполнение дается две недели — в этот период не будут открываться другие уроки, чтобы вы не отвлекались.
Рассмотрим облачные решения и инструменты для построения DWH и Data Lake. Познакомимся с Kubernetes и научимся применять его для работы с данными. Поработаем с облаком на практике, рассмотрим процесс установки и настройки JupyterHub и Spark в Kubernetes.
Рассмотрим основные принципы работы с данными с точки зрения их визуализации и научимся смотреть на данные глазами их потребителя. Познакомимся с Tableau — гибким и мощным BI-инструментом. Узнаем, как он взаимодействует с базами данных, и построим с его помощью интерактивный дашборд для мониторинга DWH платформы.
Познакомимся с теорией распределённого машинного обучения. Научимся работать с популярным модулем Spark ML и рассмотрим подходы к обучению и применению моделей на больших данных.
В работе инженеры часто сталкиваются с подготовкой данных для обучения ML-моделей. Рассмотрим инструменты для построения ML-пайплайнов, версионирования датасетов, организации учёта и трекинга моделей.
На практике часто приходится иметь дело с разными данными и огромным числом интеграций и процессов, выполняющих над ними те или иные преобразования. Познакомимся с популярными подходами к управлению данными, обсудим инструменты для контроля качества данных и отслеживания их происхождения.
Data Warehouse — централизованное хранилище данных из разных источников. Познакомимся с его верхнеуровневой логической архитектурой, рассмотрим её основные компоненты и разберём на практике разные подходы к проектированию детального слоя DWH.
Начнём погружение в инженерию данных со знакомства с реляционными и MPP базами данных. Рассмотрим их архитектуру, обсудим популярные решения и узнаем, в каких случаях MPP СУБД оказываются лучше традиционных. Научимся готовить PostgreSQL и MPP базы данных на примере Greenplum.
ETL — ключевой процесс в управлении хранилищами данных. Рассмотрим принципы и основные этапы его построения. Познакомимся с популярным инструментом Airflow, подробно разберём его основные компоненты и научимся с его помощью автоматизировать ETL-пайплайны.
Познакомимся с механизмами распределённого хранения больших данных на базе Hadoop, разберём основные паттерны реализации их распределённой обработки. Рассмотрим вопросы отказоустойчивости и восстановления после сбоев. Поговорим о потоковой обработке данных, методах и средствах мониторинга и профилирования заданий Spark.
Для эффективной отработки навыков в курсе «Инженер данных» есть промежуточный практический проект, который воссоздает etl-процессы (airflow) крупной двухуровневой платформы данных. Проект максимально приближен по сути к рабочим задачам дата-инженера. В процессе работы над ним вы закрепите понимание инструментов airflow, spark + s3 и greenplum и поймете, как использовать их в связке друг с другом.
Проект доступен тем, кто прошел модуль Big data, на его выполнение дается две недели — в этот период не будут открываться другие уроки, чтобы вы не отвлекались.
Проект доступен тем, кто прошел модуль Big data, на его выполнение дается две недели — в этот период не будут открываться другие уроки, чтобы вы не отвлекались.
Рассмотрим облачные решения и инструменты для построения DWH и Data Lake. Познакомимся с Kubernetes и научимся применять его для работы с данными. Поработаем с облаком на практике, рассмотрим процесс установки и настройки JupyterHub и Spark в Kubernetes.
Рассмотрим основные принципы работы с данными с точки зрения их визуализации и научимся смотреть на данные глазами их потребителя. Познакомимся с Tableau — гибким и мощным BI-инструментом. Узнаем, как он взаимодействует с базами данных, и построим с его помощью интерактивный дашборд для мониторинга DWH платформы.
Познакомимся с теорией распределённого машинного обучения. Научимся работать с популярным модулем Spark ML и рассмотрим подходы к обучению и применению моделей на больших данных.
В работе инженеры часто сталкиваются с подготовкой данных для обучения ML-моделей. Рассмотрим инструменты для построения ML-пайплайнов, версионирования датасетов, организации учёта и трекинга моделей.
На практике часто приходится иметь дело с разными данными и огромным числом интеграций и процессов, выполняющих над ними те или иные преобразования. Познакомимся с популярными подходами к управлению данными, обсудим инструменты для контроля качества данных и отслеживания их происхождения.
КАК ПРОХОДИТ ОБУЧЕНИЕ >>
ПОДРОБНЕЕ О КУРСЕ
Преподаватели расскажут о курсе и его содержании. Вы узнаете, в чём ценность каждого модуля и как полученные знания помогут в дальнейшей работе.
Формат и нагрузка
> Обучение проходит в интенсивном формате по 3 занятия в неделю. Для каждого домашнего задания установлены мягкие двухнедельные дедлайны.
> На учёбу наши студенты тратят в среднем 10−15 часов в неделю
> Если у вас возникнут сложности с выполнением заданий, вы сможете обратиться к команде сопровождения — эксперты помогут разобраться с любой задачей из курса.
> На учёбу наши студенты тратят в среднем 10−15 часов в неделю
> Если у вас возникнут сложности с выполнением заданий, вы сможете обратиться к команде сопровождения — эксперты помогут разобраться с любой задачей из курса.
Инфраструктура
> Работайте со всеми необходимыми инструментами на выделенном сервере
> Совершенствуйте навыки работы с Hadoop, Greenplum, PostgreSQL, Airflow, Spark, Hive и Kubernetes
> Совершенствуйте навыки работы с Hadoop, Greenplum, PostgreSQL, Airflow, Spark, Hive и Kubernetes
ПРОМЕЖУТОЧНЫЙ ПРОЕКТ
В рамках проекта поработаете с etl-процессами (airflow) крупной двухуровневой платформы данных, закрепите понимание инструментов airflow, spark + s3 и greenplum и поймёте, как использовать их в связке друг с другом
Формат и нагрузка
—⦁Обучение проходит в⦁интенсивном формате по⦁3 занятия в⦁неделю. Для⦁каждого домашнего задания установлены мягкие двухнедельные дедлайны.
—⦁На⦁учёбу наши студенты тратят в⦁среднем 10−15 часов в⦁неделю
—⦁Если у⦁вас возникнут сложности с⦁выполнением заданий, вы⦁сможете обратиться к⦁команде сопровождения⦁— эксперты помогут разобраться с⦁любой задачей из⦁курса.
—⦁На⦁учёбу наши студенты тратят в⦁среднем 10−15 часов в⦁неделю
—⦁Если у⦁вас возникнут сложности с⦁выполнением заданий, вы⦁сможете обратиться к⦁команде сопровождения⦁— эксперты помогут разобраться с⦁любой задачей из⦁курса.
Инфраструктура
— Работайте со всеми необходимыми инструментами на выделенном сервере
— Совершенствуйте навыки работы с Hadoop, Greenplum, PostgreSQL, Airflow, Spark, Hive и Kubernetes
— Совершенствуйте навыки работы с Hadoop, Greenplum, PostgreSQL, Airflow, Spark, Hive и Kubernetes
ПРОМЕЖУТОЧНЫЙ ПРОЕКТ
— В рамках проекта поработаете с etl-процессами (airflow) крупной двухуровневой платформы данных, закрепите понимание инструментов airflow, spark + s3 и greenplum и поймёте, как использовать их в связке друг с другом
Документы после выпуска //
> Упаковывайте полученный опыт в портфолио
> Получайте сертификаты на русском и английском языках
ВАШЕ РЕЗЮМЕ ЧЕРЕЗ == 5 МЕСЯЦЕВ
ВИКТОР КУЗНЕЦОВ
Инженер данных
от 100 000 ₽
Желаемая зарплата
Работаю с реляционными базами данных, в том числе MPP, понимаю особенности работы распределенных систем на базе Greenplum
Умею строить и автоматизировать ETL\ELT-пайплайны на базе Apache Airflow
Имею опыт работы с большими данными в Hadoop и Spark, умею составлять сложные SQL запросы в Apache Hive
Разбираюсь в архитектуре хранилищ данных (DWH), владею методами многомерного моделирования, якорного моделирования и Data Vault
Умею строить и автоматизировать ETL\ELT-пайплайны на базе Apache Airflow
Имею опыт работы с большими данными в Hadoop и Spark, умею составлять сложные SQL запросы в Apache Hive
Разбираюсь в архитектуре хранилищ данных (DWH), владею методами многомерного моделирования, якорного моделирования и Data Vault
ВИКТОР КУЗНЕЦОВ
Инженер данных
Желаемая зарплата от 100 000
₽
- Работаю с⦁реляционными базами данных, в⦁том числе MPP, понимаю особенности работы распределенных систем на⦁базе Greenplum
- Умею строить и⦁автоматизировать ETL\ELT-пайплайны на⦁базе Apache Airflow
- Имею опыт работы с⦁большими данными в Hadoop и Spark, умею составлять сложные SQL запросы в Apache Hive
- Разбираюсь в⦁архитектуре хранилищ данных (DWH), владею методами многомерного моделирования, якорного моделирования и⦁Data Vault
- Имею практический опыт работы со Spark в Kubernetes, понимаю основные подходы к⦁построению хранилищ данных в⦁облаках
- Понимаю принципы работы и⦁подготовки данных для⦁BI-инструментов на⦁базе Tableau
- Применяю ML-модели на⦁больших данных, умею подготавливать данные для⦁их⦁обучения, понимаю подходы к⦁версионированию датасетов с⦁помощью Data Version Control
- Умею строить и⦁автоматизировать ETL\ELT-пайплайны на⦁базе Apache Airflow
- Имею опыт работы с⦁большими данными в Hadoop и Spark, умею составлять сложные SQL запросы в Apache Hive
- Разбираюсь в⦁архитектуре хранилищ данных (DWH), владею методами многомерного моделирования, якорного моделирования и⦁Data Vault
- Имею практический опыт работы со Spark в Kubernetes, понимаю основные подходы к⦁построению хранилищ данных в⦁облаках
- Понимаю принципы работы и⦁подготовки данных для⦁BI-инструментов на⦁базе Tableau
- Применяю ML-модели на⦁больших данных, умею подготавливать данные для⦁их⦁обучения, понимаю подходы к⦁версионированию датасетов с⦁помощью Data Version Control
- Знаю основные подходы к⦁управлению данными на⦁базе DMBOK
Регистрация на образовательной платформе
Для доступа к демоверсии вам необходимо зарегистрироваться на нашей образовательной платформе, указав ваши имя, фамилию и электронную почту.
Вы сможете продолжить использовать свою учётную запись для обучения на полной версии курса или других наших программах.
Если у вас уже есть учётная запись, можно использовать её.
Вы сможете продолжить использовать свою учётную запись для обучения на полной версии курса или других наших программах.
Если у вас уже есть учётная запись, можно использовать её.
стоимость обучения >>
инженер данных
> Проектирование DWH
> Реляционные и MPP СУБД
> Автоматизация ETL-процессов
> Big Data
> Проект
> Реляционные и MPP СУБД
> Автоматизация ETL-процессов
> Big Data
> Проект
Начните осваивать профессию инженера данных, получите доступ к работе на удалённом сервере и поддержке от наших экспертов
> Облачное хранилище
> Визуализация данных
> Big ML
> Управление моделями
> Управление данными
> Визуализация данных
> Big ML
> Управление моделями
> Управление данными
103 700 ₽
ОДНИМ ПЛАТЕЖОМ:
В РАССРОЧКУ ОТ:
при рассрочке на 24 месяца
5 383 ₽ / мес.
Оплачивайте курс так, как удобно: единовременно или в рассрочку
Беспроцентная рассрочка или оплата частями от наших партнёров:
Получите нужные навыки и развивайтесь в профессии — обучение может оплатить ваш работодатель
Повышайте квалификацию за счёт компании
Можно вернуть до 13% от стоимости обучения
Налоговый вычет
Если за две недели курс вам не подойдет, вернем полную стоимость. Позже — за вычетом пройденных уроков
Не подойдёт — вернём оплату
Выберите удобный срок рассрочки на этапе оплаты — от 4 до 24 месяцев
ОСТАВИТЬ ЗАЯВКУ
Мы свяжемся с вами для того, чтобы ответить на все вопросы по ней.
Регистрация на образовательной платформе
Для оплаты курса вам необходимо зарегистрироваться на нашей образовательной платформе, указав ваши имя, фамилию и электронную почту.
Если у вас уже есть учётная запись, можно использовать её.
Если у вас уже есть учётная запись, можно использовать её.
ЕВГЕНИЙ ЕРМАКОВ
Более 10 лет опыта работы с данными. Архитектор DWH и систем анализа данных в VK и Яндекс.Такси. Кандидат технических наук, автор более 10 работ в области анализа данных. Соавтор монографии по теории и практике анализа параллельных баз данных.
Модуль:
ВАЛЕРИЙ СОКОЛОВ
Работает с базами данных уже 17 лет, начинал в банковской сфере с Oracle, затем в FMCG c Oracle и MSSQL, а сейчас развивает Greenplum в Яндекс Go
Модуль:
ДИНА САФИНА
Занимается дата-инженерией около десяти лет, основной инструмент в работе — это Apache Airflow. Работала в Играх Mail.ru, а теперь руковожу дата-инженерами в Ozon.Fintech.
Модуль:
АНТОН ПИЛИПЕНКО
Более 10 лет создаёт и развивает системы для работы с большими данными. На протяжении 6 лет занимается консалтингом и помогает разным продуктам решать задачи в области ML, анализа данных и проведения экспериментов.
Модуль:
РОМАН БУНИН
Более 8 лет занимается визуализацией данных. Руководил разработкой SaaS BI сервиса в качестве операционного директора. Сертифицированный Tableau специалист, кандидат технических наук, автор блога и Telegram-канала о визуализации данных Reveal the Data
Модуль:
АЛЕКСАНДР ВОЛЫНСКИЙ
Специалист по Big Data и AI, занимается внедрением сложных кастомных проектов. Участвовал в создании хранилищ данных в компаниях Платформа ОФД, X5 и VK.
Модуль:
АЛЕКСАНДР САВЧЕНКО
Более 10 лет занимается распределёнными системами для обработки больших данных, облачными решениями и внедрением алгоритмов машинного обучения. Участвовал в разработке платформ для работы с данными в компаниях Amazon, Сбер, Дом. рф, Novartis, Kohl’s
Модули:
Авторы курса >>
ЕВГЕНИЙ ЕРМАКОВ
Руководитель платформы данных toloka.ai
Валерий Соколов
НЕРСЕС БАГИЯН
Head of DS в Raiffeisen CIB
Читать подробнее →
Модуль:
Старший администратор баз данных в Яндекс Go
РОМАН БУНИН
Head of Data, Nebius Group, BI-evangelist Yandex DataLens
Дина Сафина
CDO Яндекс Фантех
АЛЕКСАНДР ВОЛЫНСКИЙ
Технический менеджер ML сервисов в VK Cloud
Антон Пилипенко
ETL team lead в IPONWEB
Александр Савченко
Управляющий директор Газпром Банк AILab
ОТЗЫВЫ ВЫПУСКНИКОВ //
скоро следующее видео
- Я остался доволен курсом: и технологии новые освоил (причём в прикладном, а не обзорном формате), и пробелы в фундаментальном понимании закрыл. И самое главное — загорелся идеей развернуть своё дата-решение в облаке.
Читать полностью →Ярослав - Я работал с машинным обучением и аналитикой, делал скоринговые и рекомендательные модели. На прошлом месте работы я руководил командой, в которой были инженеры данных. И я хотел подтянуть свои компетенции. Сейчас я поменял работу из-за переезда. Компания меньше, поэтому где-то я делаю аналитику, где-то выполняю функции инженера, а где-то разрабатываю.
Читать полностью →Николай
Ярослав
«Я остался доволен курсом: и технологии новые освоил (причём в прикладном, а не обзорном формате), и пробелы в фундаментальном понимании закрыл. И самое главное — загорелся идеей развернуть своё дата-решение в облаке. В результате я взял сервер на DigitalOcean и сделал там своё рабочее пространство: прямо по всем рекомендациям с уроков развернул в нём кластеры, Jupyter, Superset для визуализации, Airflow для автоматизации, а также Spark и ClickHouse. Остался весьма доволен.
Сейчас я перестраиваю свой пет-проект и переношу на этот сервер — с построением процессов, как разбирали на курсе. У меня, конечно, не BigData, всё куда прозаичнее и меньше, но зато теперь есть реальный опыт.»
Сейчас я перестраиваю свой пет-проект и переношу на этот сервер — с построением процессов, как разбирали на курсе. У меня, конечно, не BigData, всё куда прозаичнее и меньше, но зато теперь есть реальный опыт.»
Николай
«Я работал с машинным обучением и аналитикой, делал скоринговые и рекомендательные модели. На прошлом месте работы я руководил командой, в которой были инженеры данных. И я хотел подтянуть свои компетенции. Сейчас я поменял работу из-за переезда. Компания меньше, поэтому где-то я делаю аналитику, где-то выполняю функции инженера, а где-то разрабатываю.
Сначала я проходил курсы на Stepik, оттуда узнал про курс Hard ML в Karpov.Courses. К собственным конспектам Hard ML регулярно возвращаюсь, чтобы лучше решать задачи по работе. Сомнений при покупке курса по инженерии данных не было, хотя после курса Hard ML ожидания были высокие. По результатам: в целом всё то, что хотел узнать, я узнал. Теоретические видео были интересными и содержательными. Понравился блок по облачным хранилищам, сразу есть возможность развернуть что-то своё. Бывает, пересматриваю блок по ETL — знания оттуда помогают решать рабочие задачи. Немного не хватило практики. Хотелось бы больше заданий на написание кода. С точки зрения формата — хорошо, что все лекции записаны заранее. Я думаю, что это правильно — преподаватели не устают и не выдыхаются. Приятно, что вокруг курсов сформировалось комьюнити, и в чатах помогают как студенты, так и преподаватели.»
Сначала я проходил курсы на Stepik, оттуда узнал про курс Hard ML в Karpov.Courses. К собственным конспектам Hard ML регулярно возвращаюсь, чтобы лучше решать задачи по работе. Сомнений при покупке курса по инженерии данных не было, хотя после курса Hard ML ожидания были высокие. По результатам: в целом всё то, что хотел узнать, я узнал. Теоретические видео были интересными и содержательными. Понравился блок по облачным хранилищам, сразу есть возможность развернуть что-то своё. Бывает, пересматриваю блок по ETL — знания оттуда помогают решать рабочие задачи. Немного не хватило практики. Хотелось бы больше заданий на написание кода. С точки зрения формата — хорошо, что все лекции записаны заранее. Я думаю, что это правильно — преподаватели не устают и не выдыхаются. Приятно, что вокруг курсов сформировалось комьюнити, и в чатах помогают как студенты, так и преподаватели.»
ОСТАВИТЬ ЗАЯВКУ
FAQ >>
Да, мы осуществляем образовательную деятельность на основании государственной лицензии № Л035-01298-77/00179689 от 11 апреля 2022 года, выданной Департаментом образования и науки города Москвы.
Да. Если вы оплатили обучение на курсе после 23 мая 2022 года, являетесь налоговым резидентом России и уплачиваете подоходный налог, вы можете оформить вычет. Однако подать документы можно только в году, следующем за годом оплаты обучения.
Налоговый вычет за обучение — это часть расходов на образование, которую государство может вам компенсировать. С подробной информацией об условиях получения налогового вычета, порядком его расчёта и списком необходимых документов можно ознакомиться на сайте ФНС.
Налоговый вычет за обучение — это часть расходов на образование, которую государство может вам компенсировать. С подробной информацией об условиях получения налогового вычета, порядком его расчёта и списком необходимых документов можно ознакомиться на сайте ФНС.
Для комфортного обучения на курсе необходимо уметь писать код на Python и составлять SQL запросы к базам данных. Специализированные знания в области инженерии данных вам не потребуются.
Лекции вы сможете смотреть с любого устройства, но для написания кода вам потребуется компьютер или ноутбук. Требований к конфигурации и мощности нет — мы предоставим всю необходимую инфраструктуру для работы на удалённом сервере. На старте обучения специальные программы устанавливать не обязательно — будут нужны только браузер и стандартные приложения для общения: Zoom и Пачка.
В среднем наши студенты занимаются по 10 часов в неделю. Этого времени хватает, чтобы успевать смотреть лекции и вовремя выполнять домашние задания.
Мы организовали обучение таким образом, чтобы вы могли совмещать его с работой, учёбой и личной жизнью. Заниматься вы сможете в любое время и в удобном для вас темпе — все лекции записаны заранее и разбиты на короткие видео по 15−30 минут, а для домашних заданий установлены мягкие двухнедельные дедлайны.
Обучение длится 5 месяцев. Каждую неделю будет проходить по три урока, доступ к которым будет открываться постепенно. Уроки состоят из видеолекций, конспектов и практических заданий, на выполнение которых отводится две недели. По истечении двухнедельного дедлайна будет открываться доступ к разборам заданий. Если во время обучения возникнут сложности, вы сможете обратиться за помощью к экспертам.
Во время обучения вполне нормально «застрять» на каком-то задании. На этот случай у нас работает команда поддержки, которая поможет разобраться со сложной задачей.
Конечно сможете. Всё общение с однокурсниками будет проходить в Пачке. Также в чатах можно будет задать вопросы по обучению нашим экспертам.
Вашими наставниками будут инженеры данных из ведущих российских компаний, таких как VK, Яндекс Go, СберМаркет и Mars. В этот курс они вложили все свои знания и опыт, полученные за многие годы работы.
Чтобы получить сертификат об успешном прохождении курса, необходимо набрать суммарно не менее половины баллов за домашние задания, а также получить не менее половины баллов за проект.
Да, останется. Лекции, конспекты и домашние задания будут доступны вам всегда, даже после окончания обучения. Единственное, к чему пропадёт доступ, это удалённый сервер. Но не волнуйтесь — мы заранее вас предупредим и дадим возможность сохранить все необходимые файлы.
Практические задачи, которые вы будете решать, регулярно встречаются в повседневной работе инженера данных. Поэтому вы сможете применить полученный опыт для решения большинства стоящих перед вами задач.
Вы можете оплатить обучение банковской картой. Доступны два варианта: заплатить всю сумму сразу или оформить рассрочку от банка-партнёра. При полной оплате обучение будет стоить меньше.
Да, сможете. В течение первых двух недель можно вернуть оплату за весь курс. Если проучитесь дольше, то сможете вернуть оплату за вычетом стоимости уже открытых уроков.
Да, вы можете оформить рассрочку на срок до 24 месяцев.
Вы сможете претендовать на позиции инженера данных уровня Junior+ или Middle, так как программа развивает навыки проектирования сквозных систем, а не решения отдельных задач.
Курс нацелен на глубокое погружение в инженерию данных и портфолио с практическим проектом, что является ключевым для успешного собеседования. Школа также предоставляет доступ к комьюнити для нетворкинга.
Вы выполните промежуточный практический проект, моделирующий ETL-процессы крупной платформы данных с использованием Airflow, Spark, S3 и Greenplum, что станет сильным кейсом для резюме.
Этот курс рассчитан на тех, у кого уже есть базовые навыки работы с SQL, Python и командной строкой, и фокусируется на проектировании сложных систем, а не на сновах.
Инженер данных (или дата инженер) проектирует и поддерживает инфраструктуру для работы с большими данными: создает базы данных и хранилища (DWH), настраивает ETL/ELT-процессы, обеспечивает качество и доступность данных для аналитиков и Data Scientist.
Вы изучите стек современных технологий для больших данных: распределенные системы (Hadoop, Spark, Kafka), облачные хранилища (S3), оркестрацию (Airflow), базы данных (PostgreSQL, Greenplum) и основы работы с Kubernetes.
Работа с большими данными сегодня немыслима без облачных решений из-за их масштабируемости, отказоустойчивости и экономической эффективности. Курс дает практический опыт работы с облачной инфраструктурой (Yandex Cloud).
Инженер данных создает и обслуживает «трубопроводы» и инфраструктуру для данных. Аналитик извлекает из этих данных инсайты, а ML-инженер строит и внедряет прогнозные модели. Курс затрагивает стык с ML, обучая работе с MLflow и Spark ML.
Data Warehouse - это централизованное хранилище, основа архитектуры данных в компании. Курс учит не просто использовать, а проектировать DWH, выбирать подходы (Кимбалл, Data Vault) и связывать его с инструментами обработки и визуализации.
Инженерия данных - одна из самых востребованных и высокооплачиваемых IT-профессий. Специалист может расти до архитектора данных, руководителя направления или эксперта по определенной технологии (например, Spark или Kafka).
Остались вопросы?
Отправьте заявку, и мы проконсультируем вас.
