VN
а то мы тут думали его вместо спарка использовать и я не могу понять как его удобнее запустить
schedule_interval='@hourly'После замены скрипта на обновленную версию таска перестала отрабатывать каждый час.
Size: a a a
2020 November 20
ME
Например имеется таска с расписанием на выполнение каждый час.
После замены скрипта на обновленную версию таска перестала отрабатывать каждый час.
После замены скрипта на обновленную версию таска перестала отрабатывать каждый час.
Должно, может бага?
VS
Например имеется таска с расписанием на выполнение каждый час.
После замены скрипта на обновленную версию таска перестала отрабатывать каждый час.
schedule_interval='@hourly'После замены скрипта на обновленную версию таска перестала отрабатывать каждый час.
замена значит другая
ME
Постоянно обновляю код дагов
VS
если меняете шедулинг, то надо менять название дага, в противном случае начинается геморой в базе бека
VS
на эту тему Никита писал на хабре статью: https://habr.com/ru/company/lamoda/blog/518620/
KZ
Например имеется таска с расписанием на выполнение каждый час.
После замены скрипта на обновленную версию таска перестала отрабатывать каждый час.
schedule_interval='@hourly'После замены скрипта на обновленную версию таска перестала отрабатывать каждый час.
если scheduler работает (другие таски запускаются), и все обычные условия соблюдены (даты, лимиты, пулы) - то может быть: DAG невидим в коде или имеется конфликт (с именем, например), у нас чего только товарищи не делали :)
VS
Если по всем дагам изменить названия, это поможет решить проблему?
Имеет ли смысл добавлять версию в названиях дагов для корректной работы шедулера?
Имеет ли смысл добавлять версию в названиях дагов для корректной работы шедулера?
В статье про это написано, почитайте
AB
Всем привет. А кто знает, как при деплое в Airflow развернуть Connections?
VS
Через базу вроде, у нас это отдельный пайплайн на ansible
AA
Всем привет. А кто знает, как при деплое в Airflow развернуть Connections?
AB
О, спасибо
AA
*шутка*
астрологи объявили неделю Антонов - количество Антонов увеличилось вдвое
астрологи объявили неделю Антонов - количество Антонов увеличилось вдвое
KZ
хаха +1
AB
ИХ
*шутка*
астрологи объявили неделю Антонов - количество Антонов увеличилось вдвое
астрологи объявили неделю Антонов - количество Антонов увеличилось вдвое
в чем прикол?
AA
Просто Антоны сегодня часто пишут