EK
Не знаю как S3 обеспечивает версионирование из коробки, гляну, спасибо
Size: a a a
2021 April 07
EK
Я сейчас в своих кубах запускаю через чарт от astronomer, но я видел как это сделано в гугл клауде и aws, кажется, что эту тулу можно и с ними интегрировать, чтобы легко закидывать даги и таски в их S3
EK
Не знал, что там можно легкое версионирование сделать
SC
А кто-то реализовывал загрузку DAG из git силами самого af ? можете dag прислать ?
SK
Тоже интересно.
Гугл предлагает дергать гит через cron
Гугл предлагает дергать гит через cron
EK
Думаю можно bashoperator заюзать, который будет делать git clone в airflow home (скорее всего при условии что home смотрит на шару)
VS
Никто не чувствует деадлок и рекурсию?
SC
Я так и собирался, через башоператор
SC
Просто, чтоб самому не писать, мб кто поделится)
VS
А зачем так делать то? Если у вас кубер, то там есть опция, если кубера нет, то не проще ли нормальный ci/cd прикрутить?
SK
Есть пример как его реализовать без кубера?
VS
А в чем проблема, взять даги из гита и положить на хосты?
SC
У меня standalone сервер
SC
Руками каждый раз?
SC
Я напишу, просто спросил мб есть у кого, чтобы не писать... Зайцем проехать не получилось 😂
SC
И прикручивать ci/cd для одной баш команды... Сомнительно
SC
У меня не докер, не кубер