YE
Нет, на сколько я знаю, не используем
Size: a a a
2018 February 06
SS
тогда следующий вопрос: как синхронизируете изменения в дагах между узлами airflow-кластера? rsync?
YE
Этот вопрос задавали на митапе, задавал @msemochkin :)
YE
У нас пока еще нет кластера
YE
Как будем синкать код, пока хз. Вариантов много
YE
крон + гит пулл
ансибл
рсинк тот же
папет
ансибл
рсинк тот же
папет
YE
не думали пока ещё
SS
это все тесно связано с процессом тестирования и CI...
интересен опыт коллег в этом направлении
интересен опыт коллег в этом направлении
YE
У кого был, делитесь :) мы с удовольствием послушаем :)
EV
Подождите, а зачем даги синкать, если мастер один? Стендбай держать наготове?
YE
Речь идет про контейнеры/виртуалки/сервера для воркеров, в случае кластера
МС
Подождите, а зачем даги синкать, если мастер один? Стендбай держать наготове?
Мастер один. Воркутлаг много. На каждом узле все компоненты AIRFLOW_HOME должны быть одинаковы.
EV
Вон оно что, спасибо
2018 February 07
МС
«Воркутлаг». Ну вот откуда он там взялся? 🤣 речь шла про Воркеры конечно.
YE
«Воркутлаг». Ну вот откуда он там взялся? 🤣 речь шла про Воркеры конечно.
😂 твой ифон пишет за тебя
ДС
«Воркутлаг». Ну вот откуда он там взялся? 🤣 речь шла про Воркеры конечно.
Я тоже пошла гуглить эту странную сущность, но ничего не нашла :)
МС
😂 твой ифон пишет за тебя
Да я на него перешёл пару месяцев как. Плюсов минусов примерно поровну. Но клавиатура это одна большая боль
2018 February 08
EV
Мастер один. Воркутлаг много. На каждом узле все компоненты AIRFLOW_HOME должны быть одинаковы.
Весь home кроме логов, я полагаю?
МС
Конечно. Речь про конфиг, даги и плагины