Size: a a a

2018 April 06

МС

Максим Сёмочкин in Airflow
Должно быть видно при старте scheduler
источник

I

Igor in Airflow
Ksenia Stroykova
Кто-нибудь встречал проблему, что при импорте кастомного плагина из интерфейса исчезает управление дагом и остается только кнопка refresh, которая не помогает?
Как вообще кастомные плагины отлаживать? Лог даже найти не могу загрузки плагина при рестарте сервера
Ещё можно попробовать дёргать ручной запуск отдельных тасок, которые используют плагин
источник

KS

Ksenia Stroykova in Airflow
ручной из консоли кстати работает корректно и без ошибок. а в интерфейсе вижу что даг не появился в DagBag object
источник

I

Igor in Airflow
Я не знаю как это решать, но обычно делаю "пятнадцать раз всё перезапустить, и на всякий случай ещё пару раз удалить рекурсивно всякие *.pyc файлы". Иногда помогает.
источник

KS

Ksenia Stroykova in Airflow
оу
источник

МС

Максим Сёмочкин in Airflow
Так плагин и шаг отлаживаем?
источник

МС

Максим Сёмочкин in Airflow
Даг
источник

KS

Ksenia Stroykova in Airflow
Не знаю в чем именно проблема. Обычные даги работают ок. Написала свой плагин, добавила в папку, отрестартила. Добавляю даг с этим плагином - в интерфейсе только кнопка refresh и эта ошибка. Если комментирую импорт плагина - интерфейс чинится. Если запускаю целиком даг просто из консоли - работает.
источник

KS

Ksenia Stroykova in Airflow
Не знаю как я еще потом монгу буду прикручивать с такими проблемами =D
источник

МС

Максим Сёмочкин in Airflow
А что в плагине? Какие компоненты?
источник

KS

Ksenia Stroykova in Airflow
в нем FileSensor(BaseSensorOperator), реагирует на появление файла
источник

МС

Максим Сёмочкин in Airflow
То есть интерфейс не меняешь в плагине?
источник

KS

Ksenia Stroykova in Airflow
нет
источник

r

railscard in Airflow
Мне кажется никакой мистики не должно быть, а нет возможности лог scheduler'а скинуть?
источник

r

railscard in Airflow
После рестарта
источник

МС

Максим Сёмочкин in Airflow
Скедулера и веб сервера
источник

МС

Максим Сёмочкин in Airflow
Только не сюда :) куда-нить на pastebin
источник

KS

Ksenia Stroykova in Airflow
а куда кстати шедулер лог пишет?
источник

KS

Ksenia Stroykova in Airflow
вижу только лог тасок
источник

МС

Максим Сёмочкин in Airflow
airflow-scheduler.log
источник