Size: a a a

2020 July 23

DS

Dimitriy Scherbenko in Airflow
Всем привет! Подскажите, пожалуйста, где airflow  будет создавать файл с логами (само создание файла прописано в запускаемом скрипте без конкретной директории )
источник

ДН

Дмитрий Негреев... in Airflow
Dimitriy Scherbenko
Всем привет! Подскажите, пожалуйста, где airflow  будет создавать файл с логами (само создание файла прописано в запускаемом скрипте без конкретной директории )
Где base_log_folder в airflow.cfg укажите, там и будет
источник

DS

Dimitriy Scherbenko in Airflow
Не могу понять, почему даг запускается, но сам питоновский файл не выполняется. Помогите, пожалуйста, разобраться в причинах.
источник

ME

Max Efremov in Airflow
Dimitriy Scherbenko
Не могу понять, почему даг запускается, но сам питоновский файл не выполняется. Помогите, пожалуйста, разобраться в причинах.
Как вы его запускаете?
источник

DS

Dimitriy Scherbenko in Airflow
вот сам даг
источник

DS

Dimitriy Scherbenko in Airflow
запускаю через airflow trigger_dag
источник

DS

Dimitriy Scherbenko in Airflow
и дальше у него становится статус running и все
источник

DS

Dimitriy Scherbenko in Airflow
источник

AM

Aлексей Mатюхин... in Airflow
Dimitriy Scherbenko
и дальше у него становится статус running и все
Нужно флажок в состояние on поставить
источник

AM

Aлексей Mатюхин... in Airflow
У Вас в состоянии off
источник

AA

Anton Afonin in Airflow
А никто, случайно, не слышал про какой-нибудь чат про Debezium - мне бы вопрос опытным людям задать)
источник

AM

Alexander Millin in Airflow
Anton Afonin
А никто, случайно, не слышал про какой-нибудь чат про Debezium - мне бы вопрос опытным людям задать)
источник

S

Sabir in Airflow
Hi all, can anyone tell me is it necessary to set explicit_defaults_for_timestamp at global level to use Airflow.? It may affect other databases as well.
источник

SG

Sergey Gavrilov in Airflow
Sabir
Hi all, can anyone tell me is it necessary to set explicit_defaults_for_timestamp at global level to use Airflow.? It may affect other databases as well.
No, there is no necessasity in it
источник

АЖ

Андрей Жуков... in Airflow
Anton Afonin
А никто, случайно, не слышал про какой-нибудь чат про Debezium - мне бы вопрос опытным людям задать)
в @hadoopusers тоже могут 🙂
источник

S

Sabir in Airflow
Sergey Gavrilov
No, there is no necessasity in it
During initdb, I get error like
Global variable explicit_defaulte_for_timestamp needs to be on (1) for mysql.
источник

SG

Sergey Gavrilov in Airflow
Sabir
During initdb, I get error like
Global variable explicit_defaulte_for_timestamp needs to be on (1) for mysql.
It sounds like you're asking about default mysql database for airflow, not about Airflow itself
источник

SG

Sergey Gavrilov in Airflow
So you have to find out something about this environment in docs. I'm sure that on of the first 3 link will contain an answer
источник

S

Sabir in Airflow
Sergey Gavrilov
It sounds like you're asking about default mysql database for airflow, not about Airflow itself
Yes I'm going to use MySQL server to store metadata of Airflow. And explicit flag of SQL Server should be turn on to initialize Airflow database. But I have other databases as well in that server that will affect if I turn the flag to on. That's the issue.
источник

SG

Sergey Gavrilov in Airflow
Sabir
Yes I'm going to use MySQL server to store metadata of Airflow. And explicit flag of SQL Server should be turn on to initialize Airflow database. But I have other databases as well in that server that will affect if I turn the flag to on. That's the issue.
Mmm... If this is desturbing you... Then you can use PostgreSQL, because, as you see, no one can help you here )
источник