Size: a a a

2021 January 19

A

Anton in Airflow
Привет!

Подскажите, как лучше сделать при помощи ExternalTaskSensor ожидание выполнения другого dag?
источник

A

Anton in Airflow
Не совсем понимаю как работает данный оператор
источник

GB

Georgy Borodin in Airflow
Anton
Привет!

Подскажите, как лучше сделать при помощи ExternalTaskSensor ожидание выполнения другого dag?
Исключительно моё личное мнение: для таких вещей удобнее TriggerDagOperator
источник

A

Anton in Airflow
На данный момент таким образом работает запуск скриптов,но сама система уже становится очень запутанной
источник

RF

Ruslan Fialkovsky in Airflow
Всем привет, друзья!
Подскажите кто пробовал настраивать в качестве брокера redis sentinel c паролем? Как передать строку подключения с паролем в конфиге airflow?
источник

RF

Ruslan Fialkovsky in Airflow
в документации celery пример без пароля
источник

RF

Ruslan Fialkovsky in Airflow
https://github.com/celery/celery/issues/6301
тут пишут что нужно передать параметр "sentinel_kwargs": {"password":  "mypassword"}
но как его правильно записать в конфиге не понятно
источник

А

Анастасия in Airflow
Привет!

Мне поручили доработать даг другого человека, у меня вознили вопросы, на которые автор не смог ответить.

Суть дага в том, что он генерит и обновляет страницы в confluence на основе данных из postgres

Я взяла его и подумала, что хочу сначала проверять все на других страницах в другом space, чтобы ничего не сломать. Но непонятно, как оно понимает, в какой спейс надо смотреть

Например, как работает get_page_id?

Мы передаем только подключение и название страницы, но не спейс. При этом я проверила, что одноименную страницу можно создать в другом пространстве
источник

А

Анастасия in Airflow
источник

ME

Max Efremov in Airflow
у вас вопрос не по аирфлоу, а по коду, который с конфлюенсом работает, скорее всего
источник

VS

Vladislav 👻 Shishkov... in Airflow
Анастасия
Привет!

Мне поручили доработать даг другого человека, у меня вознили вопросы, на которые автор не смог ответить.

Суть дага в том, что он генерит и обновляет страницы в confluence на основе данных из postgres

Я взяла его и подумала, что хочу сначала проверять все на других страницах в другом space, чтобы ничего не сломать. Но непонятно, как оно понимает, в какой спейс надо смотреть

Например, как работает get_page_id?

Мы передаем только подключение и название страницы, но не спейс. При этом я проверила, что одноименную страницу можно создать в другом пространстве
Так вон же из коннекшина похоже все берется
источник

А

Анастасия in Airflow
Vladislav 👻 Shishkov
Так вон же из коннекшина похоже все берется
У меня нет доступа к настройкам подключений, но мне несколько раз сказали, что нет, там этого нет
источник

VS

Vladislav 👻 Shishkov... in Airflow
Судя по коду, получается что, на основе страницы "Таблицы АК" получают спейс
источник

А

Анастасия in Airflow
Нашла, что в другом месте на основании page_id добывается спейс. Это получается, что, если я создам страницу с таким же названием в другом спейсе, все пойдет не по плану?
источник

VS

Vladislav 👻 Shishkov... in Airflow
Это вопрос к разработчикам конфли
источник
2021 January 20

ET

Evgeniy Trunin in Airflow
кто нибудь знает почему шедулер может не отрабатывать корректно этот синтаксис "30 7 * * 3"? Он должен запускаться каждую среду в 7:30, и просто не отработал
источник

ET

Evgeniy Trunin in Airflow
другие даги с шедулером работают нормально
источник

ET

Evgeniy Trunin in Airflow
может есть какие нибудь нюансы не очевидные?
источник

ET

Evgeniy Trunin in Airflow
сам синтаксис отдельно проверял
источник

AA

Anton Afonin in Airflow
start_date?
источник