Apache Airflow это самый популярный workflow менеджер в экосистеме Python. Его используют такие IT-гиганты как Airbnb, Google, Amazon, Netflix и многие другие. Ни для кого не секрет, что практически во всех вакансиях на позицию дата-инженера присутствует требование опыта работы с Apache Airflow.
С выходом новой версии в декабре 2020 года, инструмент значительно изменился. Появился отказоустойчивый планировщик, современный Taskflow API, повысилась производительность фреймворка. Курс познакомит вас с этим замечательным инструментом с самых азов до уверенного пользователя, а также вы узнаете про новые фишки, появившиеся во второй версии.
Отзывы
Igor Polishchuk 13 Апрель 2022
Очень хочу залететь на ваш курс, но не получается оплатить картой из РФ.
Ivan Blohin 24 Октябрь 2021
Курс хорош для начала, но: 1) Кажется, до сих пор не дописан раздел по REST API. 2) Не хватило информации о ветвлении тасков, сабДАГов и тп. Хотелось бы узнать, как, например, в случае фейла сенсора перезапустить родительскую таску (вроде как DAG в принципе этого не подразумевает, но возможно есть какие-то способы). Кейс такой: запустилась ВМ, сенсор ждет, пока ВМ будет доступна. Если вм не запустилась (сенсор вылетел по таймауту), то попробовать еще раз - запустить ВМ с новыми конфигами, ждать опять. Так N раз, пока сенсор не вернет True и только если превышено N попыток - вылететь. В остальном спасибо! Буду признателен за ответ (если здесь нельзя, то на почту: ivan.blohinn(собака)яндекс.ру).
Alexandr Vitkovskiy 10 Июнь 2021
Достойный курс! Учитывая, что на данный момент большая часть литературы по airflow на английском языке. Объясняется все максимально доступно, с хорошими примерами. Так же есть советы от автора по тюнингу конфига airflow (что тоже довольно ценно). Ну и в комментариях по тому или иному модулю можно задать интересующие Вас вопросы, автор не оставит их без внимания. В общем, однозначно, к прохождению!
elessar 26 Май 2021
Курс понравился. Все что нужно для новичка! Это мой второй пройденный курс от данного автора. 100% советую всем кто начинает осваивать Airflow!
Renat Alimbekov 13 Апрель 2021
Курс мне понравился. Airflow очень крутой и полезный инструмент не только для специалистов data engineer, но и для data science специалистов. Освещены все аспекты работы с Airflow. Есть материал, которого не найдешь в открытом доступе. Отдельный плюс, что наличие чата. В нём можно задать уточняющие вопросы. Автор быстро и развернуто отвечает. Рекомендую курс всем.