Apache Airflow это самый популярный workflow менеджер в экосистеме Python. Его используют такие IT-гиганты как Airbnb, Google, Amazon, Netflix и многие другие. Ни для кого не секрет, что практически во всех вакансиях на позицию дата-инженера присутствует требование опыта работы с Apache Airflow.
С выходом новой версии в декабре 2020 года, инструмент значительно изменился. Появился отказоустойчивый планировщик, современный Taskflow API, повысилась производительность фреймворка. Курс познакомит вас с этим замечательным инструментом с самых азов до уверенного пользователя, а также вы узнаете про новые фишки, появившиеся во второй версии.
© 2021 — 2022, StartDataJourney.com
Отзывы
Igor Polishchuk 13 Апрель 2022
Очень хочу залететь на ваш курс, но не получается оплатить картой из РФ.
Ivan Blohin 24 Октябрь 2021
Курс хорош для начала, но: 1) Кажется, до сих пор не дописан раздел по REST API. 2) Не хватило информации о ветвлении тасков, сабДАГов и тп. Хотелось бы узнать, как, например, в случае фейла сенсора перезапустить родительскую таску (вроде как DAG в принципе этого не подразумевает, но возможно есть какие-то способы). Кейс такой: запустилась ВМ, сенсор ждет, пока ВМ будет доступна. Если вм не запустилась (сенсор вылетел по таймауту), то попробовать еще раз - запустить ВМ с новыми конфигами, ждать опять. Так N раз, пока сенсор не вернет True и только если превышено N попыток - вылететь. В остальном спасибо! Буду признателен за ответ (если здесь нельзя, то на почту: ivan.blohinn(собака)яндекс.ру).
Alexandr Vitkovskiy 10 Июнь 2021
Достойный курс! Учитывая, что на данный момент большая часть литературы по airflow на английском языке. Объясняется все максимально доступно, с хорошими примерами. Так же есть советы от автора по тюнингу конфига airflow (что тоже довольно ценно). Ну и в комментариях по тому или иному модулю можно задать интересующие Вас вопросы, автор не оставит их без внимания. В общем, однозначно, к прохождению!
elessar 26 Май 2021
Курс понравился. Все что нужно для новичка! Это мой второй пройденный курс от данного автора. 100% советую всем кто начинает осваивать Airflow!
Renat Alimbekov 13 Апрель 2021
Курс мне понравился. Airflow очень крутой и полезный инструмент не только для специалистов data engineer, но и для data science специалистов. Освещены все аспекты работы с Airflow. Есть материал, которого не найдешь в открытом доступе. Отдельный плюс, что наличие чата. В нём можно задать уточняющие вопросы. Автор быстро и развернуто отвечает. Рекомендую курс всем.