AA
Size: a a a
2020 October 12
ME
ага
ME
я им конфиг прокидываю и даги
YL
Сделай в подах ещё контейнер с гид синхронизацией и общим pvc
YL
И будет без перезагрузки
YL
Я например сделал efs общий на все контейнеры и под с гит хуком. Ты делаешь коммит в мастер тут же без перезагрузок это появляется в деве, делаешь в таг - идёт в прод
ME
А как сказать воркерам, чтобы они pid файл создавали?
ME
хочу настроить healthcheck на его основе, а файла нет...
ME
entrypoint: airflow worker -cn worker_1 --pid airflow-worker.pid
healthcheck:
test: ["CMD-SHELL", "[ -f /usr/local/airflow/airflow-worker.pid ]"]
interval: 30s
timeout: 30s
retries: 3
YL
По моему создают, завтра утром буду за компом проверю
ME
в AIRFLOW_HOME нету...
YL
Точно нету
2020 October 13
OI
коллеги, а воркерам celery нужно иметь доступ к коду дагов?
Може dag pickle делать. Тогда даги только на шедулере нужны
OI
Но вообще выше писали, в поде с воркером можно сделать контейнер с gitsync и общий с воркером вольюм. Отрабатывает довольно быстро.