Введение в Data Engineering: дата-пайплайны: Дата пайплайн / Зачем нам Luigi

Шаг 2 из 2

Комментарии

Контент

  •   Установка Luigi

  •   Task, Target, Luigid

  •   Hello World Pipeline

  •   Hello World с параметрами

  •   NYC Yellow Taxi

  •   Параллельное выполнение тасков

  •   Нотификации в Telegram

  •   Общие настройки

  •   Настройки воркера

  •   Настройки диспетчера

  •   Прочие настройки

  •   Деплоим ручками

  •   Собираем Docker контейнер

  •   Деплоим в облако AWS