[МФТИ] Разработка и оркестрация ETL процессов в Airflow [Юрий Дылько]

65

Интенсив
После прохождения курса вы научитесь работать с архитектурой, основными концепциями Apache Airflow и приобретете практические навыки разработки ETL процессов.

Старт 19 января 2023

Занятие 1. Обзор Apache Airflow:

* Что такое ETL и почему нам нужны специальные технологии для их разработки и поддержки
* Почему Apache Airflow является лидером в области создания и управления ETL пайплайнами
* Рассмотрим архитектуру Apache Airflow
* Познакомимся с основными концепциями и инструментами для создания ETL пайплайнов в Apache Airflow

Занятие 2. Применение теории на практике:

* Познакомимся с веб-интерфейсом Apache Airflow и его возможностями
* Разберем код типового ETL пайплайна и посмотрим как он исполняется
Закрепим усвоенное:
* Тест по теоретической части
* Домашнее задание на разработку ETL пайплайна в Apache Airflow.

На некоторых файлах заблюрены водяные знаки.