Всем привет.
Никто не сталкивался с проблемой, при включении нескольких дагов падает шедулер, с разными ошибками, есть подозрение что какая-то проблема с пулами при подключении к БД.
Ошибки такие:
sqlalchemy.exc.OperationalError: (psycopg2.OperationalError) SSL SYSCALL error: EOF detected
sqlalchemy.exc.DatabaseError: (psycopg2.DatabaseError) SSL error: sslv3 alert bad record mac
sqlalchemy.exc.DatabaseError: (psycopg2.DatabaseError) server closed the connection unexpectedly
       This probably means the server terminated abnormally
       before or while processing the request.

Postgres 10.15 локально
Airflow в докере:
Ubunthu 14.04
Python 2.7.6
Airflow 1.9.0
SQLAlchemy 1.3.20
psycopg2 2.6.1

хотя зачему тут вообще пайтон если он у вас в докере закрыт как сервис?

это ошибка при подключении к бэкэндному постгре ?

Не совсем понял суть вопроса, это постгря с базой airflow.
Падает при какой-то определенной итерации выполнения тасков, при включении нескольких дагов одновременно.

копайте в настройки, где используется ssl и отключайте
обновите openssl
у постгреса есть опция в строке подключения для отключения ssl, можно попробовать её, но сомневаюсь

я бы посмотрела максимальное количество подключений для постгри с базой airflow и количество подключений, которые открывает шедулер

ssl в конфиге вроде везде отключен, не уверен что с ним проблема, так как падает только при превышении определенного количества операций к базе, и не все ошибки на ssl ругаются

А как посмотреть количество подключений от шедулера?

я вот так смотрю
state_pid=docker inspect --f '{{.State.Pid}}' имя_контейнера_с_шедулером
sudo nsenter -t $state_pid -n netstat

что значит не все, если вы ше все

Всем привет!
Есть в Airflow возможность централизованно хранить параметры расписания DAG'ов (start_date, schedule_interval)?
В идеале, чтобы это хранилище не запрашивать каждый heartbeat?