Size: a a a

2020 June 26

АЖ

Андрей Жуков... in Airflow
Но так-то го в Молли
источник

GG

George Gaál in Airflow
🤝
источник

SG

Sergey Gavrilov in Airflow
Msk?
источник

AK

Alena Korogodova in Airflow
В 2021 же, да?
источник

G

George in Airflow
Сюткин
А никто не хочет встретиться в баревиче,попить пивка и обсудить airflow?)
я хочу!)
источник

DS

Dmitry Samoylov in Airflow
Сюткин
А никто не хочет встретиться в баревиче,попить пивка и обсудить airflow?)
+
источник

L

Leo in Airflow
Кто испытывал проблему с psycopg2.OperationalError: FATAL:  remaining connection slots are reserved for non-replication superuser connections, было ли у вас такое, что эта трабла возникала на таске, никак не связанном с бд? У нас периодически падают DummyOperator таски на вот этом вот
источник

GG

George Gaál in Airflow
Leo
Кто испытывал проблему с psycopg2.OperationalError: FATAL:  remaining connection slots are reserved for non-replication superuser connections, было ли у вас такое, что эта трабла возникала на таске, никак не связанном с бд? У нас периодически падают DummyOperator таски на вот этом вот
ну написано же
источник

GG

George Gaál in Airflow
иди в постгрес и смотри что там с коннекшенам
источник

GG

George Gaál in Airflow
простое решение - поднять лимит соединений
источник

L

Leo in Airflow
лимит стоит высокий в бд, эррор логов не наблюдается
источник

GG

George Gaál in Airflow
извини, я тебе не верю
источник

GG

George Gaál in Airflow
> FATAL:  remaining connection slots are reserved for non-replication superuser connections

это 200% со стороны постгреса ошибка
источник

GG

George Gaál in Airflow
не в эйрфлоу
источник

L

Leo in Airflow
просто видел здесь совет увеличить sql_alchemy_pool_size в afirflow.cfg как раз. это мы сделаем, но непонятно почему не-дб таски падают на таких ошибках
источник

GG

George Gaál in Airflow
https://stackoverflow.com/questions/11847144/heroku-psql-fatal-remaining-connection-slots-are-reserved-for-non-replication

> You either need to increase the max_connections configuration setting or (probably better) use connection pooling to route a large number of user requests through a smaller connection pool.

первый совет из интернета, а я тебе отвечал по своему опыту
источник

M

Mikhail in Airflow
Leo
просто видел здесь совет увеличить sql_alchemy_pool_size в afirflow.cfg как раз. это мы сделаем, но непонятно почему не-дб таски падают на таких ошибках
наоборот уменьшить
увеличение пул сайз на стороне эйрфлоу увеличивает количество соединений и вы упираетесь в лимит постгреса
источник

GG

George Gaál in Airflow
Mikhail
наоборот уменьшить
увеличение пул сайз на стороне эйрфлоу увеличивает количество соединений и вы упираетесь в лимит постгреса
+++
источник

GG

George Gaál in Airflow
спасибо, что расшифровал
источник

M

Mikhail in Airflow
надо либо в постгресе лимит поднимать, либо уменьшать на стороне airflow
источник