Чаты всё-таки для вопросов, которые хочется обсудить/нереально нагуглить

https://airflow.apache.org/docs/apache-airflow/stable/concepts.html#execution-date вот тут, если конкретнее

Привет!
А как можно в docker-compose добавить для образа airflow установку доп. пакетов через pip ?

Ну самый простой путь, возьмите официальный Dockerfile и дополните его тем, чем надо. Соответственно в docker-compose укажите вместо image его через build. Ну или заранее сбилдите, залейте куда нибудь свой кастомный образ и в image укажите его. https://github.com/apache/airflow/blob/2c6c7fdb2308de98e142618836bdf414df9768c8/Dockerfile#L39

Спасибо, пытаюсь по этому пути идти, но не могу понять как правильно прописать build : "filename"...
в docker-compose

Ну если положить Dockerfile туда же, где docker-compose, то будет 'build: .'

а ему можно имя задавать другое ?

Нет

Если вы про имя докерфайла

ааа, вот в чем дело... понятно.
а если docker-файлы раскидать по папкам ?

То относительный путь укажите

круто!
всё получилось

Спасибо

Добрый день! Вопрос от новичка. Мне нужно получить данные и сохранить их в локальную MySQL базу. Airflow стоит в докер контейнере. MySQL установлен на самом компьютере (винда 10). Подскажите, пожалуйста, как передать данные из контейнера в локальную базу данных. Никак не могу найти ответ на это вопрос. Если кто сталкивался с таким, подскажите, пожалуйста как быть или где почитать.
P.S. пробовал через sqlalchemy и команду create_engine, но всегда получаю ошибку [Errno 111] Connection refused. Пробовал создавать нового юзера в MySQL и выдавать ему все правда доступа - не помогло.

Можно через пандас

Нужно ещё порты в докере открыть

network mode: host