Size: a a a

2021 January 18

VS

Vladislav 👻 Shishkov... in Airflow
Sergey Tarasenko
Для обновления дагов у нас используется zipdag
Все так и на вольюм его, зачем пихать в образ airflow, который про другое?
источник

ST

Sergey Tarasenko in Airflow
Vladislav 👻 Shishkov
Сами даги можно закинуть в PV, а можно использовать git-sync
Хорошо. А в случае если в новой версии дагов требуется ещё пара тройка пайтон зависимостей?
источник

ST

Sergey Tarasenko in Airflow
Ну, которых не требовала предыдущая версия дагов
источник

VS

Vladislav 👻 Shishkov... in Airflow
Собрали новую зипку и закинули на вольюм
источник

VS

Vladislav 👻 Shishkov... in Airflow
Я не понимаю проблемы
источник

ST

Sergey Tarasenko in Airflow
Новая версия нампи, например
источник

VS

Vladislav 👻 Shishkov... in Airflow
И что? Я не понимаю, каким образом куб усложняет доставить новую версию нампи, а стейтфул не усложняет
источник

ST

Sergey Tarasenko in Airflow
Vladislav 👻 Shishkov
И что? Я не понимаю, каким образом куб усложняет доставить новую версию нампи, а стейтфул не усложняет
Прошу прощения, похоже мы друг друга не понимаем
источник

ST

Sergey Tarasenko in Airflow
Про стейтфул сет я говорил в разрезе вопроса о экзекуторах
источник

VS

Vladislav 👻 Shishkov... in Airflow
И все равно я не понял
источник

VS

Vladislav 👻 Shishkov... in Airflow
Ладно, мне лень сейчас копать, давайте вечером отдыхать, а то платина в киберпанке сама себя не возьмет
источник

ST

Sergey Tarasenko in Airflow
Vladislav 👻 Shishkov
И все равно я не понял
Если не трудно, и желательно завтра, сформулируй что конкретно непонятно, можно с цитатами
источник

ST

Sergey Tarasenko in Airflow
Vladislav 👻 Shishkov
И что? Я не понимаю, каким образом куб усложняет доставить новую версию нампи, а стейтфул не усложняет
"доставить новую версию нампи в кубы" - как минимум собрать образ, укатить в регистр образов, потом в окно обслуживания выкатить новую версию на дев (тест, прод) и это жеж долго.
источник

ST

Sergey Tarasenko in Airflow
По сравнению со сборкой, упаковкой и установкой зипдагов, там секунд 15 на все про все
источник

VS

Vladislav 👻 Shishkov... in Airflow
Я хз что у вас долго, я везде сделал автоматом и при выкате 80% времени - это прогон тестов. Отличие текущего стейта и куба, в зависимости от вариантов, может быть быстрее или медленнее.
источник

ST

Sergey Tarasenko in Airflow
Vladislav 👻 Shishkov
Я хз что у вас долго, я везде сделал автоматом и при выкате 80% времени - это прогон тестов. Отличие текущего стейта и куба, в зависимости от вариантов, может быть быстрее или медленнее.
Автоматом - это по коммиту?
источник

ST

Sergey Tarasenko in Airflow
И если не секрет - в минутах/секундах сколько
источник

VS

Vladislav 👻 Shishkov... in Airflow
5 минут вроде
источник

ST

Sergey Tarasenko in Airflow
А зависимостей лист в сколько строк?
источник

VS

Vladislav 👻 Shishkov... in Airflow
Да хз
источник