P
Size: a a a
2020 November 25
GB
всем привет! коллеги! кто-нибудь хранит даги на S3? кто как организовал доставку дагов до инстансов airflow?
S3 не используем, но используем EFS с таском в ECS, пуллящим даги из гита. Таск запускается в CI/CD репозитория с дагами
P
S3 не используем, но используем EFS с таском в ECS, пуллящим даги из гита. Таск запускается в CI/CD репозитория с дагами
спасибо. да, схема стадартная. есть возможность сделать деплой дага из любой ветки?
PA
всем привет! коллеги! кто-нибудь хранит даги на S3? кто как организовал доставку дагов до инстансов airflow?
На Гугл клауде на сторадже.
GB
спасибо. да, схема стадартная. есть возможность сделать деплой дага из любой ветки?
Не пробовали, у нас мастер льётся только на прод.
Но задача выглядит решаемой)
Но задача выглядит решаемой)
PA
Синзронизация через клауд билд и ямл конфиг
P
На Гугл клауде на сторадже.
спасибо. как синк происходит?
PA
PA
спасибо. как синк происходит?
Ссылка в студии
ME
Al T
Эта штука стоит от 250 баксов в месяц. Что-то они загнули с ценой...
P
Ссылка в студии
спасибо!
ME
Это цена EC2 с 8 ядрами и 32 гигами памяти
AT
Эта штука стоит от 250 баксов в месяц. Что-то они загнули с ценой...
я не виноват, чесслово
PA
Это цена EC2 с 8 ядрами и 32 гигами памяти
На Гугле так же примерно
AT
обычно все новые сервисы потом цены скидывают, как там посчитают эффективность...
ME
Надеюсь, с такой ценой я его не продам проекту)
ME
А так было бы удобно поюзать
AT
ну надо посмотреть сколько уходит времени на поддержку существующего хозяйства - если и так все работает и все счастливы, то конечно, зачем менять
VS
А что там поддерживать то? Один раз настроил и забыл, другой вопрос масштабируемости и производительности
VS
Что-то по статье ничего не увидел, кроме того, что вот вам готовый пресет airflow