Size: a a a

2020 July 12

PA

Panchenko Andrey in Airflow
тоже нашел эту хрень.
источник

PA

Panchenko Andrey in Airflow
но я бы в это не лез если бы у именя сегодня просто тупо не отвалалися кубернетис оператор
источник

PA

Panchenko Andrey in Airflow
вот напрочь, все все было ок а сегодня нихачу нибуду
источник

YL

Yurii Lyktei in Airflow
кто сталкивался с ошибкой Cannot allocate memory (LocalExecutor)?
источник
2020 July 13

AA

Anton Afonin in Airflow
А ни у кого на 1.10.10 не было проблем с  Mysql с записью в служебную табличку после завершения таска? У меня в bash operator`е команда отрабатывает успешно и падает с ошибкой
[2020-07-13 10:26:41,063] {bash_operator.py:130} INFO - Command exited with return code 0
[2020-07-13 10:27:32,681] {taskinstance.py:1145} ERROR - (_mysql_exceptions.OperationalError) (1205, 'Lock wait timeout exceeded; try restarting transaction')
[SQL: INSERT INTO rendered_task_instance_fields (dag_id, task_id, execution_date, rendered_fields) VALUES (%s, %s, %s, %s)]
источник

AA

Anton Afonin in Airflow
Забыл - это происходит при одноврменной запуске двух тасков в одном даге, при этом другой отрабатывает успешно
источник

AA

Anton Afonin in Airflow
источник

ВТ

Виктор Титов... in Airflow
может быть одна таска лочит таблицу, к которой обращается вторая таска?
источник

AA

Anton Afonin in Airflow
Так ошибка при записи в базу метаданных аирфлоу, кроме него туда никто не обращается
источник

AA

Anton Afonin in Airflow
А он сам не должен так делать
источник

PA

Panchenko Andrey in Airflow
Ребята привет, есть у кого опыт подключения к google container registry из Connections, коннекш тайп Docker Registry
источник

PA

Panchenko Andrey in Airflow
может кто по другому делал?
источник

PA

Panchenko Andrey in Airflow
с подключением вроде разобрался но теперь вот что
источник

PA

Panchenko Andrey in Airflow
[2020-07-13 10:58:43,587] {base_task_runner.py:115} INFO - Job 640: Subtask costs_purchase_original_updater_international [2020-07-13 10:58:43,587] {docker_operator.py:201} INFO - Starting docker container from image airflow-cost
[2020-07-13 10:58:43,631] {base_task_runner.py:115} INFO - Job 640: Subtask costs_purchase_original_updater_international [2020-07-13 10:58:43,629] {base_hook.py:84} INFO - Using connection to: id: docker_registry. Host: gcr.io/excellent-style-170512, Port: None, Schema: None, Login: _json_key, Password: XXXXXXXX, extra: {}
[2020-07-13 10:58:43,643] {taskinstance.py:1059} ERROR - ('Connection aborted.', FileNotFoundError(2, 'No such file or directory'))
источник

GG

George Gaál in Airflow
Panchenko Andrey
[2020-07-13 10:58:43,587] {base_task_runner.py:115} INFO - Job 640: Subtask costs_purchase_original_updater_international [2020-07-13 10:58:43,587] {docker_operator.py:201} INFO - Starting docker container from image airflow-cost
[2020-07-13 10:58:43,631] {base_task_runner.py:115} INFO - Job 640: Subtask costs_purchase_original_updater_international [2020-07-13 10:58:43,629] {base_hook.py:84} INFO - Using connection to: id: docker_registry. Host: gcr.io/excellent-style-170512, Port: None, Schema: None, Login: _json_key, Password: XXXXXXXX, extra: {}
[2020-07-13 10:58:43,643] {taskinstance.py:1059} ERROR - ('Connection aborted.', FileNotFoundError(2, 'No such file or directory'))
красава
источник

GG

George Gaál in Airflow
приватный ключ в логах
источник

GG

George Gaál in Airflow
да все уже
источник

PA

Panchenko Andrey in Airflow
ну там в экстра засунул кей
источник

PA

Panchenko Andrey in Airflow
так о чем вот это может говорить?
источник

PA

Panchenko Andrey in Airflow
ERROR - ('Connection aborted.', FileNotFoundError(2, 'No such file or directory'))
источник