Введение в Data Engineering: дата-пайплайны
: Знакомство с Luigi / Установка Luigi
Шаг 5 из 5
Скачать
Назад
Далее
Комментарии
thaivox222
6 Август 2024
Хотел заюзать эту фичу, но она только в профессиональной версии (
Контент
Контент
Введение
Знакомство
Что необходимо знать
Содержимое курса
Дата пайплайн
Что такое дата пайплайн
Как готовят дата пайплайны
Зачем нам Luigi
Знакомство с Luigi
Установка Luigi
Task, Target, Luigid
Практические задачи построения пайплайнов
Hello World Pipeline
Hello World с параметрами
NYC Yellow Taxi
Параллельное выполнение тасков
Нотификации в Telegram
Разбор конфигов Luigi
Общие настройки
Настройки воркера
Настройки диспетчера
Прочие настройки
Деплой Luigi
Деплоим ручками
Собираем Docker контейнер
Деплоим в облако AWS
thaivox222 6 Август 2024
Хотел заюзать эту фичу, но она только в профессиональной версии (