описание есть только у моего дага и у одного дефолтного(кот. для примера)

У вас в самом файле дага description = None?

with DAG(dag_id='Classified',
        schedule_interval="0 * * * *",
        default_args=def_args,
        start_date=datetime(2020, 2, 20),
        description='DAG load',
        catchup=False) as dag:
   dag.doc_md = """
               Downloading data from Kafka """

А если убрать description и. Doc_md?

а вернулось на всех вообще?

ага))) Я даже пробовал сначала им присвоить всем какой то текст. И все вернулось. Опять с описанием стали только 2 дага

Пробовал вообще без дагов эирфлоу запускать с нуля.

а какая версия?

airflow

Version Info
Version : 1.10.10
Git Version : Not Available

Точно такая же версия стоит на сервере и там все хорошо.

А локально вот такое случилось.

может какой-нибудь старый неубитый шедулер ходит в ту же базу метаданных?

проверьте локально контейнеры всякие и тд

Да я вроде заново поднимаю все контейнеры.

Но возможно. Поробую посмотреть, спасибо!

[2020-07-13 10:26:41,063] {bash_operator.py:130} INFO - Command exited with return code 0
[2020-07-13 10:27:32,681] {taskinstance.py:1145} ERROR - (_mysql_exceptions.OperationalError) (1205, 'Lock wait timeout exceeded; try restarting transaction')
[SQL: INSERT INTO rendered_task_instance_fields (dag_id, task_id, execution_date, rendered_fields) VALUES (%s, %s, %s, %s)]

Если вдруг кому интересно - косяк с модулем renderedtifields.py, который работает с табличкой rendered_task_instance_fields. После всяких операций типа update, delete, etc. нет коммитов и, видимо, из-за этого табличка лочится при одновременном обращении к ней разными тасками.

Вылечили самым продвинутым способом -

store_serialized_dags = False

Привет! Сегодня в 19:00 по Москве буду делать доклад на Airflow Summit про надёжность данных и опыт внедрения эирфлоу в Райке. Основная секция вопросов будет в Слаке Эирфлоу на английском, но готов буду поотвечать на вопросы в этом чате на русском. Так что меншените меня или можете писать в личку, могу поделиться опытом.

Похоже, из-за того, что раньше не писал, ссылку на секцию и на трансляцию оставить я не могу 🙂

Скинь в личку,закреплю