Друзья!

На платформе Stepik я запустил продажи курса Введение в data engineering: дата-пайплайны. Речь в курсе идёт о замечательном инструменте Luigi о котором я неоднократно рассказывал на конференциях и в статьях.

Сейчас курс сделан наполовину, в нём есть вводная часть и каждую неделю, начиная с 18 ноября, будет открываться новый модуль с практическими материалами. Этот небольшой курс это начало интересной специализации по data engineering (будут отдельные курсы), которую я планирую создать в будущем, в неё войдут материалы про базы данных, распределенные системы, продвинутый SQL, инструменты экосистемы больших данных (Kafka, Spark, Airflow и т.д).

В курсе про дата-пайплайны я рассказываю о существующих инструментах, и детальный акцент делаю на Luigi. Курс научит вас понимать luigi и его компоненты, эффективно строить сложные зависимости между задачами, а также деплоить ваш пайплайн через Docker. Я подробно расскажу про конфигурирование и подводные камни при работе с этим инструментом.

Стоимость курса $10. Ссылка на курс: http://bit.ly/2NtOrRG

Чтобы его купить, необходимо сначала зарегистрироваться на платформе stepik.org.

5 comments

А по airflow будет?
Oleg Agapov
А по airflow будет?
планировал, всё зависит от того как вообще окупаются все эти курсы потому что делать их трудозатратное занятие =(
Oleg Agapov
Ок. Тогда куплю по Luigi, но буду ждать airflow, тк толковых туториалов мало
спасибо! скоро выйдет статья по Airflow в блоге, но она будет скорее небольшим введением: установка, запуск простенького DAG
ilya pkh
А блог это телеграмм- канал или есть ещё варианты? Присоединяюсь к airflow, купил бы не раздумывая