А
луиджи остановился примерно в 2017-2018, ровно тогда, когда мы переезжали на него с Oozie.
в то же время мы напрочь отмели Airflow, сейчас видим как последний слал всех нахуй и прочно отвоёвывает упущенное)
Size: a a a
2021 February 16
im
поэтому я предложил Luigi :)
а второй вопрос я не понял, почему нельзя пользоваться?
а второй вопрос я не понял, почему нельзя пользоваться?
Ui не умрет от такого кол-ва пайпланов когда их много накопится ?
im
та! для быстрых задач crontab охерительное решение
Хехе)
А
Ui не умрет от такого кол-ва пайпланов когда их много накопится ?
Вот можно и проверить) но думаю будет юзабельно
im
Да, поэтому в luigi крон используется )
То есть Luigi можно назвать стриминговым pipeline оркестратором ?
im
Вот можно и проверить) но думаю будет юзабельно
Я думал кто нибудь скажет как создал свою систему мониторинга поверх airflow )
А
То есть Luigi можно назвать стриминговым pipeline оркестратором ?
Это к чему?
im
Это к чему?
Ну если оверхеда нет , и есть паплайны то вроде как можно его использовать в целях стриминга , нет ?
im
Не трогал Luigi *
im
Airflow это корабль
А Luigi это лодка )
А Luigi это лодка )
*кубер флэшбеки*