В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Airflow

1135 membersпожаловаться на группу
2021 March 05

ME

Max Efremov in Airflow
Филипп Чистяков
А может кто-то подскажет как добавить возможность править cfg через gui?

И второй вопрос, как ротировать логи, а то все место занимают на диске, руками чищу
мы пробросили папки логов на хост машину из докера и удаляем по крону файлы старше 1 суток, у нас на с3 копии
источник
11:29пожаловаться#1

ME

Max Efremov in Airflow
Филипп Чистяков
Ну или смотреть, я вот хз пытаюсь понять
есть опция, можно посмотреть в конфиге
источник
11:30пожаловаться#2

ФЧ

Филипп Чистяков... in Airflow
Вот тут смотрел, ничего не нашел https://airflow.apache.org/docs/apache-airflow/stable/configurations-ref.html#webserver
источник
11:30пожаловаться#3

GB

Georgy Borodin in Airflow
Филипп Чистяков
Вот тут смотрел, ничего не нашел https://airflow.apache.org/docs/apache-airflow/stable/configurations-ref.html#webserver
https://airflow.apache.org/docs/apache-airflow/stable/configurations-ref.html#expose-config
источник
11:31пожаловаться#4

ФЧ

Филипп Чистяков... in Airflow
Georgy Borodin
https://airflow.apache.org/docs/apache-airflow/stable/configurations-ref.html#expose-config
❤️
источник
11:32пожаловаться#5

VS

Vladislav 👻 Shishkov... in Airflow
Филипп Чистяков
А может кто-то подскажет как добавить возможность править cfg через gui?

И второй вопрос, как ротировать логи, а то все место занимают на диске, руками чищу
1. вроде никак и не рекомендую это делать
2. есть даги, которые чистят логи
источник
11:44пожаловаться#6

GB

Georgy Borodin in Airflow
Vladislav 👻 Shishkov
1. вроде никак и не рекомендую это делать
2. есть даги, которые чистят логи
Ну если иметь админ-юзеров и обычных, то может и нет ничего в этом плохого (неадминам же вроде конфиг закрыт, не помню).
Правда зачем это нужно)
источник
11:46пожаловаться#7

VS

Vladislav 👻 Shishkov... in Airflow
смысл не столько в безопасности (она там решена давно), сколько техническими проблемами
источник
11:46пожаловаться#8

GB

Georgy Borodin in Airflow
Vladislav 👻 Shishkov
смысл не столько в безопасности (она там решена давно), сколько техническими проблемами
Ну редактировать в вебе эта настройка и не даст, так, вспомнить, что написал)
источник
11:48пожаловаться#9

VS

Vladislav 👻 Shishkov... in Airflow
источник
11:49пожаловаться#10

VS

Vladislav 👻 Shishkov... in Airflow
и я админ 😬
источник
11:49пожаловаться#11

GB

Georgy Borodin in Airflow
Vladislav 👻 Shishkov
и я админ 😬
Ну по дефолту он всем закрыт)
источник
11:49пожаловаться#12

ФЧ

Филипп Чистяков... in Airflow
Vladislav 👻 Shishkov
1. вроде никак и не рекомендую это делать
2. есть даги, которые чистят логи
Вроде нашел https://github.com/teamclairvoyant/airflow-maintenance-dags
GitHub
teamclairvoyant/airflow-maintenance-dags
A series of DAGs/Workflows to help maintain the operation of Airflow - teamclairvoyant/airflow-maintenance-dags
источник
12:07пожаловаться#13

ME

Max Efremov in Airflow
Vladislav 👻 Shishkov
и я админ 😬
Нужно доказать это системе)
источник
12:09пожаловаться#14

RF

Ruslan Fialkovsky in Airflow
привет, столкнулся с такой проблемой - иногда airflow не отображает в ui жирные лог файлы дагов
просто выдает ссылку на них
ни кто не сталкивался?
может можно какой-то параметр в конфиге подкрутить?
источник
17:38пожаловаться#15

RF

Ruslan Fialkovsky in Airflow
log_fetch_timeout не оно?
источник
17:39пожаловаться#16

I

Igor in Airflow
Николай
в докере
Я тыкал на днях в докере, по ощущениям правда стало намного отзывчивей и щедулер как подменили. Но конечно как оно на деле будет — непонятно
источник
19:34пожаловаться#17

P

Pavel in Airflow
Филипп Чистяков
А может кто-то подскажет как добавить возможность править cfg через gui?

И второй вопрос, как ротировать логи, а то все место занимают на диске, руками чищу
Никак. После изменения конфига, вам вебсервер рестартить надо
источник
19:38пожаловаться#18

ФЧ

Филипп Чистяков... in Airflow
Pavel
Никак. После изменения конфига, вам вебсервер рестартить надо
Спасибо
источник
19:50пожаловаться#19

GB

Georgy Borodin in Airflow
Ruslan Fialkovsky
привет, столкнулся с такой проблемой - иногда airflow не отображает в ui жирные лог файлы дагов
просто выдает ссылку на них
ни кто не сталкивался?
может можно какой-то параметр в конфиге подкрутить?
А что пишет? Может он говорит, что не достучался до воркера забрать эти логи?
источник
21:13пожаловаться#20