Size: a a a

2021 April 14

АД

Алексей Доровской... in Airflow
чтение через git-synс?
источник

AP

Anton Patsev in Airflow
нет. просто монтирование директории с хоста в контейнер
источник

AP

Anton Patsev in Airflow
scheduler:
 # Mount additional volumes into scheduler.
 extraVolumes:
   - name: dags
     hostPath:
       path: "/opt/airflow/dags"
 extraVolumeMounts:
   - name: dags
     mountPath: "/opt/airflow/dags"

добавил и в webserver и в scheduler и все равно не видно
источник

AP

Anton Patsev in Airflow
почему он не виден? что еще может влиять?
источник

AP

Anton Patsev in Airflow
В общем в версии 1.10.14 не было видно ошибки невалидного dag, а в версии 2.0 показывалась ошибка
источник

J

Jester in Airflow
Народ, кто нибудь хранит даги в отдельном репозитории или сабмодулях?
источник

J

Jester in Airflow
Как храните переменные параметров? В файле конфига, енв или в базе?
источник

A

Alex in Airflow
параметров чего? если параметры, влияющие на даги/таски то в Airflow variables
источник

J

Jester in Airflow
Да, но variables при первом поднятии или развертке откуда берутся?
источник

A

Alex in Airflow
когда надо тогда и читаете. задаются в веб-интерфейсе
источник

J

Jester in Airflow
Т.е. поднимая 100 кластеров мне надо везде зайти и сотни параметров задать вручную? А какого то конфига нет, откуда бы они подтянулись?
источник

J

Jester in Airflow
Или стороннего механизма что бы их туда определить, апишки там откуда задать можно...
источник

AA

Anton Afonin in Airflow
источник

J

Jester in Airflow
Ясно спасибо
источник
2021 April 15

N

Nikolai in Airflow
в cli есть экспорт/импорт переменных
источник

N

Nikolai in Airflow
источник

N

Nikolai in Airflow
переменные из окружения, кстати, не видно в ui и их невозможно переопределить там, это вызывает путаницу и непонимание
источник

P

Pavel in Airflow
Это абсолютно разные переменные потому что
источник

N

Nikolai in Airflow
поясни
источник

P

Pavel in Airflow
Вы де про переменные окружения на инстансах airflow и переменные из Admin - Variables?
источник