E
ок, спасибо за идею и важно вставлять его не в default_args
ага, как и catchup
Size: a a a
2020 November 02
NP
ок, спасибо за идею и важно вставлять его не в default_args
А почему не в дефолт аргс?
СГ
А почему не в дефолт аргс?
потому что если посмотреть в код, то они там как параметры класса стоят и поэтому через default_args не будут отрабатывать
NP
потому что если посмотреть в код, то они там как параметры класса стоят и поэтому через default_args не будут отрабатывать
Спасибо за пояснение)
СГ
я тоже думал, что default_args - это просто как *kwargs, но оказалось, что нет)
СГ
А где и как проеисать правильно?
СГ
СГ
в airflow.cfg это
NP
в airflow.cfg это
Спасибо тебе!
JS
А как я могу передать параметр в запуск дага? Грубо, у меня есть граф, обрабатывающий один объект (по айди, урлу или типа того). Как я могу при запуске указать айди объекта для обработки?
Так там же "переменные"
s
Covid2020:
I was looking for a simple solution for running cronjobs for python miniconda3 docker to download files from 90 or more raspberry pi in remote place. As it's a docker container where cronjob run I see it's not idea. Is airflow suitable for cronjobs for download files.
Any suggestions
I was looking for a simple solution for running cronjobs for python miniconda3 docker to download files from 90 or more raspberry pi in remote place. As it's a docker container where cronjob run I see it's not idea. Is airflow suitable for cronjobs for download files.
Ex */5 **** download.sh 102.168.44.2.conf
*/5 **** download.sh 102.168.44.3.conf
*/5 **** download.sh 102.168.44.99.confAny suggestions
AA
Covid2020:
I was looking for a simple solution for running cronjobs for python miniconda3 docker to download files from 90 or more raspberry pi in remote place. As it's a docker container where cronjob run I see it's not idea. Is airflow suitable for cronjobs for download files.
Any suggestions
I was looking for a simple solution for running cronjobs for python miniconda3 docker to download files from 90 or more raspberry pi in remote place. As it's a docker container where cronjob run I see it's not idea. Is airflow suitable for cronjobs for download files.
Ex */5 **** download.sh 102.168.44.2.conf
*/5 **** download.sh 102.168.44.3.conf
*/5 **** download.sh 102.168.44.99.confAny suggestions
Easiest (but not the best) solution - just put your jobs from cron to airflow BashOperator
https://airflow.apache.org/docs/stable/howto/operator/bash.html
https://airflow.apache.org/docs/stable/howto/operator/bash.html
AA
I am new to airflow.