I
Size: a a a
2018 March 15
NZ
Где-то точно всплывёт часть системы, которую Airflow будет отказываться распознавать по неUTC. Я лично натыкался на что-то похожее в триггере который запускает другой даг.
Если у вас есть возможность, переведите всё на UTC, включая метабазу airflow
Если у вас есть возможность, переведите всё на UTC, включая метабазу airflow
да, тоже считаю, что это самый приемлимый вариант, спасибо
2018 March 16
WC
WC
Всем привет 👋 может кто сталкивался с такой ошибкой при установке apache-airflow [all]? Upgrade setuptools пробовал, не помогло
SS
а зачем вы ставите на винде?
WC
К сожалению, выбора нет
МС
Судя по тому, что я вижу в этой библиотеке её не получится поставить на винду
МС
МС
В 14-ой строке хардкод пути. С точки зрения винды это ошибка
SS
можно внутри докера на винде
WC
В 14-ой строке хардкод пути. С точки зрения винды это ошибка
Да, попробовал установить отдельно пакет hive-thrift, ошибка идентична
WC
можно внутри докера на винде
Попробую поковыряться ещё
WC
Спасибо
2018 March 20
WC
Пришлось заморочиться, но может кому будет полезно. Проблему решил установив airflow в подсистему линукс, и установил ssh соединение выбрав remote interpreter
WC
Нужно ещё вносить много правок в самом линуксе для полной установки, но это уже все есть в Google
2018 March 21
П
инструкция по таймзонам
https://github.com/apache/incubator-airflow/blob/master/docs/timezone.rst
https://github.com/apache/incubator-airflow/blob/master/docs/timezone.rst
это инструкция похоже для новой версии 1.10, которая еще не вышла
I
TriggerDagRunOperator всё равно использует utcnow когда создаёт DagRunOrder, так что там даг будет запущен не в то же время, если даг, который его тригернул не в utc
https://github.com/apache/incubator-airflow/blob/master/airflow/operators/dagrun_operator.py#L61
А если буквально заменить
https://github.com/apache/incubator-airflow/blob/master/airflow/operators/dagrun_operator.py#L61
А если буквально заменить
timezone.utcnow() в этой строчке на datetime.datetime.utcnow() то всё будет предсказуемо2018 March 22