OI
Вопрос к тем, кто юзал KubernetesPodOperator
где там указывать token для
где там указывать token для
service_account_name ? Чота в доках не могу найтиSize: a a a
2020 October 12
A
Сделать - то можно, но это не похоже на бэст-практис)
Такой подход у astronomer описан. Но мне тоже кажется что это не очень)
АЖ
Вопрос к тем, кто юзал KubernetesPodOperator
где там указывать token для
где там указывать token для
service_account_name ? Чота в доках не могу найтиВ kube/config положить?
OI
В kube/config положить?
я ему явно указываю файлик с конфигом, ему чота вообще пофиг на него
OI
config_file опцияможно попробовать и в .kube/config положить🤔
AA
Alex
Такой подход у astronomer описан. Но мне тоже кажется что это не очень)
А можно ссылку?
AA
Alex
Может я плохо смотрю, но где там про разное расписание для тасков в одном даге?
A
Ну как бы расписание - свойство дага, соответственно, разное расписание - разные даги
я к этому сообщению отвечал)
YL
Ребята всем привет, кто то может скинуть какой-то свой полный Даг с пайтонсенсором, а то я что то врубится не могу.
AA
Alex
я к этому сообщению отвечал)
Так всё правильно, много дагов с одинаковым расписанием)
A
Так всё правильно, много дагов с одинаковым расписанием)
Т.е. если я просто создам под каждую группу тасок отдельный даг- это ок?
AA
Alex
Т.е. если я просто создам под каждую группу тасок отдельный даг- это ок?
Я не против)
На самом деле мне кажется, что в первую очередь нужно группировать логически, просто группировка по "всё, что нужно запускать раз в день" выглядит кривовато, хотя работать будет
На самом деле мне кажется, что в первую очередь нужно группировать логически, просто группировка по "всё, что нужно запускать раз в день" выглядит кривовато, хотя работать будет
A
Я не против)
На самом деле мне кажется, что в первую очередь нужно группировать логически, просто группировка по "всё, что нужно запускать раз в день" выглядит кривовато, хотя работать будет
На самом деле мне кажется, что в первую очередь нужно группировать логически, просто группировка по "всё, что нужно запускать раз в день" выглядит кривовато, хотя работать будет
Спасибо!
ИХ
Есть специалисты по работе с выгрузкой данных через API AMO CRM?
у нас техдир как-то года 2 назад связался с этой системой исплевался
AN
Alex
Ну, допустим когда одна таска должна запускаться раз в день, другая каждый час. Например, при репликации каких-нибудь таблиц.
Можно перед «суточной» веткой в даге поставить брэнч-оператор внутри которого навернуть любую логику которая будет решать идти в эту ветку или нет. Даг будет запускаться каждый час, но таски раз-в-сутки выполнятся только если брэнч скажет ок а остальное время скипаются. У нас так работает похожий комбайн из тасков ежедневных и еженедельных. Практика может не бэст, но провереная
A
Aleksey Nikolaev
Можно перед «суточной» веткой в даге поставить брэнч-оператор внутри которого навернуть любую логику которая будет решать идти в эту ветку или нет. Даг будет запускаться каждый час, но таски раз-в-сутки выполнятся только если брэнч скажет ок а остальное время скипаются. У нас так работает похожий комбайн из тасков ежедневных и еженедельных. Практика может не бэст, но провереная
спасибо!
AA
Тогда уж лучше несколько TimeDeltaSensor и от них все нужные таски