Size: a a a

2021 March 16

z

zxyzxy in Airflow
У меня было как-то такое что-то похожее, это с fernet key какая-то проблема
источник

N

Nikita Blagodarnyy in Airflow
Евгений Глотов
А, во, все переменные, созданные после версии 1.9, создаются как зашифрованные
У нас изначально стоял 1.10.4 и вроде раньше была галка шифровать или нет, но теперь я ее не вижу
источник

N

Nikita Blagodarnyy in Airflow
zxyzxy
А если открыть в веб интерфейсе, не в списке а как для изменения, там внутри что будет, то что Вы записывали туда или там тоже выглядит как абракадабра?
И в списке, и в режиме изменения нормальное значение.
источник

z

zxyzxy in Airflow
Я помню что в итоге оказалось, что даже в веб интерфейсе вместо значения которое я записывал, там оказалось зашифрованное значение и его вытащить уже было никак нельзя, я перезаписал переменную и все стало ок
источник

z

zxyzxy in Airflow
https://airflow.apache.org/docs/apache-airflow/stable/security/secrets/fernet.html#rotating-encryption-keys
если есть какой-то тестовый стенд или не жалко я бы попробовал )
источник

ЕГ

Евгений Глотов... in Airflow
Nikita Blagodarnyy
не работает этот код. говорит, что нету get_fernet
А если попробовать from airflow.models.crypto import get_fernet?
источник

z

zxyzxy in Airflow
https://github.com/puckel/docker-airflow/issues/387 issue открытое, каеф )
источник

ЕГ

Евгений Глотов... in Airflow
Мб переносят туда-сюда между неймспейсами, любимое дело питон-девелоперов
источник

N

Nikita Blagodarnyy in Airflow
Евгений Глотов
А если попробовать from airflow.models.crypto import get_fernet?
попробую, спасибо
источник

DN

Dmitriy Novikov in Airflow
Nikita Blagodarnyy
Ну да, которые в Admin. Шифруются.
rest api plugin?
источник

ЕГ

Евгений Глотов... in Airflow
Nikita Blagodarnyy
попробую, спасибо
Ещё, судя по коду, если conf -> core -> fernet_key == None, то шифроваться переменные не будут. Только наверно коннекшены тоже не будут
источник

N

Nikita Blagodarnyy in Airflow
Dmitriy Novikov
rest api plugin?
такие слова где-то были. но я его не использую
источник

DN

Dmitriy Novikov in Airflow
Nikita Blagodarnyy
такие слова где-то были. но я его не использую
первый раз такое вижу просто))
источник

DN

Dmitriy Novikov in Airflow
даж интересно стало что это
источник

N

Nikita Blagodarnyy in Airflow
Dmitriy Novikov
даж интересно стало что это
ну это плагин, через который можно манипулировать airflow по рест апи. задать значение переменной, например. в ci/cd много используем
источник

N

Nikita Blagodarnyy in Airflow
версия жарника поменялась-надо об этом сообщить airflow
источник

DN

Dmitriy Novikov in Airflow
Nikita Blagodarnyy
ну это плагин, через который можно манипулировать airflow по рест апи. задать значение переменной, например. в ci/cd много используем
огосики, интересн кароч
источник
2021 March 17

C

Combot in Airflow
Yung Heisenberg has been banned! Reason: CAS ban.
источник

ME

Max Efremov in Airflow
А можно сделать, что если прошлый зафейлился, новый бы не стартовал штатно? А то я туда добавил проверку флага окончания прошлого первой таской, но это костыль, конечно
источник

ME

Max Efremov in Airflow
А то если сейчас предпоследний перезапустить и он завершится, стартанёт новый день, который зафейлится тоже на первой таске)
источник