[МФТИ] Разработка и оркестрация ETL процессов в Airflow (Юрий Дылько)

Интенсив
После прохождения курса вы научитесь работать с архитектурой, основными концепциями Apache Airflow и приобретете практические навыки разработки ETL процессов.
Старт 19 января 2023
Занятие 1. Обзор Apache Airflow:
* Что такое ETL и почему нам нужны специальные технологии для их разработки и поддержки
* Почему Apache Airflow является лидером в области создания и управления ETL пайплайнами
* Рассмотрим архитектуру Apache Airflow
* Познакомимся с основными концепциями и инструментами для создания ETL пайплайнов в Apache Airflow
Занятие 2. Применение теории на практике:
* Познакомимся с веб-интерфейсом Apache Airflow и его возможностями
* Разберем код типового ETL пайплайна и посмотрим как он исполняется
Закрепим усвоенное:
* Тест по теоретической части
* Домашнее задание на разработку ETL пайплайна в Apache Airflow.
На некоторых файлах заблюрены водяные знаки.