Size: a a a

2020 July 30

ME

Max Efremov in Airflow
Vladislav 👻 Shishkov
Обычно, используют ту же базу, где и бек airflow, postgress например
у меня какие-то траблы с mysql возникли, искал альтернативы) То модуля mysql не мог найти, то модуль нашёл, а хотел бекенд найти там...
источник

VS

Vladislav 👻 Shishkov... in Airflow
мускул не использовал, поэтому затрудняюсь ответить, но по конфигурированию рекомендую пример конфига airflow.cfg из репы на гитхабе, там расписано обычно, что куда прописывать и в каком формате
источник
2020 July 31

P

Pavel in Airflow
Max Efremov
ПОдскажите, я селери вркеры настраиваю, сделал для них брокером редис и бекенд тоже он, получил предупреждение:
WARNING - You have configured a result_backend of redis://redis:6379/0, it is highly recommended to use an alternative result_backend (i.e. a database).

Лучше на СУБД поменять, получается? Какие возможны эффекты от редиса?
Постгрес используйте
источник

L

Leo in Airflow
А это норм что когда я import variable то он мне в джсонах меняет " на ' ?
источник

ME

Max Efremov in Airflow
Pavel
Постгрес используйте
У нас в авроре mysql, хочу переиспользовать его
источник

L

Leo in Airflow
версия 1.10.10
источник

P

Pavel in Airflow
Max Efremov
У нас в авроре mysql, хочу переиспользовать его
Его тоже можно)
источник

ME

Max Efremov in Airflow
Leo
А это норм что когда я import variable то он мне в джсонах меняет " на ' ?
Наверное серилизация съедает
источник

P

Pavel in Airflow
Max Efremov
У нас в авроре mysql, хочу переиспользовать его
Например, у нас все почти кроме кафки в кубе и там крайне быстро и просто поднять еще одну бд. В вашем случае, mysql станрвится spof
источник

ME

Max Efremov in Airflow
Pavel
Например, у нас все почти кроме кафки в кубе и там крайне быстро и просто поднять еще одну бд. В вашем случае, mysql станрвится spof
Есть отвалится аврора, у нас не только аирфлоу отвалится 😂 это меньшая из возможных проблем
источник