Size: a a a

2020 October 06

ME

Max Efremov in Airflow
хм, он даже в бранчинг не зашёл...
источник

NP

N P in Airflow
Max Efremov
хм, он даже в бранчинг не зашёл...
Сам этот даг прошел успешно
источник

NP

N P in Airflow
Завершенный.
источник

NP

N P in Airflow
Следующий за ним
источник

ME

Max Efremov in Airflow
можно отключить депендс он паст, но включить максимум 1 даг раз за раз
источник

NP

N P in Airflow
Max Efremov
можно отключить депендс он паст, но включить максимум 1 даг раз за раз
А как?
источник

ME

Max Efremov in Airflow
сделать пул с 1 слотом
источник

ДН

Дмитрий Негреев... in Airflow
кто-нибудь свои плагины вызывает через
airflow.hooks.my_namespace.MyHook
airflow.operators.my_namespace.MyOperator?

упаковал плагин в колесо, и в даге импортирую просто как
my_plugin.operators.my_namespace.MyOperator
все работает вроде, и никаких ошибкок в IDE нет
источник

ДН

Дмитрий Негреев... in Airflow
есть какая-то разница?
источник

N

Nikita in Airflow
N P
А как?
Параметр max_active_runs у дага
источник

A

Alex in Airflow
Max Efremov
кстати, эта штука всегда на 1 минуте висит, не увеличивается через минуту...
а параметр scheduler_heartbeat_sec не трогали, случайно не 60?
источник

ME

Max Efremov in Airflow
Alex
а параметр scheduler_heartbeat_sec не трогали, случайно не 60?
да, верно
источник

A

Alex in Airflow
тогда все в норме
источник

ME

Max Efremov in Airflow
Наверное можно поставить 5 и убрать сообщение))
источник

A

Alex in Airflow
по гайдам на проде рекомендуют 60 ставить. Не понятно как это сообщение подправить чтобы оно учитывало этот параметр.
источник

A

Alex in Airflow
У меня тоже это сообщение показывается, может кто знает как его убрать не изменяя scheduler_heartbeat_sec? По логике, это сообщение нужно показывать когда Last heartbeat будет больше scheduler_heartbeat_sec
источник

ME

Max Efremov in Airflow
Надо посмотреть код показа сообщения
источник

ME

Max Efremov in Airflow
мб там что-то захардкоженное
источник

ME

Max Efremov in Airflow
scheduler_health_check_threshold надо поменять
источник

ME

Max Efremov in Airflow
у меня 30 стоит там
источник