Size: a a a

2021 March 29

AK

Andrew Konstantinov in Airflow
Тип такого ,а после как таску подвязать к сенсору?
источник

С

Сюткин in Airflow
wait_for_mscope >> next_step
источник

С

Сюткин in Airflow
источник

GB

Georgy Borodin in Airflow
Филипп Чистяков
Заработало после добавления в pythonoperator, по другому не срабатывает
По доке, кстати, DAG принимает аргументы с коллбэками.
Но Airflow такой, иногда только эмпирически можно узнать, как что-то работает)
Как, например, из default_args не всегда все параметры берутся, что ещё более неожиданную попаболь приносит при запусках впоследствии
источник

AK

Andrew Konstantinov in Airflow
Сюткин
wait_for_mscope >> next_step
Грац
источник
2021 March 30

🌌[

🌌El.Randir/42ᅠ [AD]... in Airflow
Есть вопрос косвенно косающийся темы:
Есть докер, есть в артифактори образ docker-airflow... чёт я туплю, но как мне загуглить правильно, чтобы он мне выдал как его зафигачить — запустить то бишь
источник

🌌[

🌌El.Randir/42ᅠ [AD]... in Airflow
Выкачать его с артифактори, а потом уже запустить установку :?
источник

NN

No Name in Airflow
🌌El.Randir/42ᅠ [AD]
Есть вопрос косвенно косающийся темы:
Есть докер, есть в артифактори образ docker-airflow... чёт я туплю, но как мне загуглить правильно, чтобы он мне выдал как его зафигачить — запустить то бишь
Docker pull..?
источник

JS

John Smith in Airflow
коллеги, вопрос такой, при старте airflow в контейнере, где в какую переменую env указать расположение файла .kube/config от k8s
источник

А

Александр in Airflow
Всем привет. Подскажите, пожалуйста, создал DAG через BashOperator, в нем скрипт делает несколько запросов в базу SQL. Один из запросов выполняется относительно долго. В итоге DAG завершается ошибкой Lost connection to MySQL server during query. Но я вижу в базе, что запрос выполняется. То есть это Airflow похоже не дождался ответа. Вычитал на форуме, что вроде execution_timeout решает, но не помогло. Буду признателен, если подскажете куда копать...
источник

🌌[

🌌El.Randir/42ᅠ [AD]... in Airflow
No Name
Docker pull..?
Я хотел локально чтобы хранился, но видимо он уже где-то валяется..

Меня больше волнует, я указываю запускаться под определенным портом, а он один хер под 8080 поднимается
источник

A

Alex in Airflow
внутри запускается под своим портом. дальше через -p можно смэппить порт контейнера на локальный порт
источник

PA

Panchenko Andrey in Airflow
Ребята привет.
Вопрос:
Кто-то синхронил mssql с bigquery?
Не могли бы поделиться опытом?
источник

🌌[

🌌El.Randir/42ᅠ [AD]... in Airflow
Alex
внутри запускается под своим портом. дальше через -p можно смэппить порт контейнера на локальный порт
спасибо, знач нет доступа к порту
источник

🌌[

🌌El.Randir/42ᅠ [AD]... in Airflow
Alex
внутри запускается под своим портом. дальше через -p можно смэппить порт контейнера на локальный порт
Вопрос:
Он у меня стартует с 0.0.0.0:8080
Порт ладно, а как мне его выбить в инет :?

Чтобы я смог со своей машины подключаться к нему, когда он на серваке, как мне поставить localhost хотя бы (127), или что :?
источник

A

Alex in Airflow
🌌El.Randir/42ᅠ [AD]
Вопрос:
Он у меня стартует с 0.0.0.0:8080
Порт ладно, а как мне его выбить в инет :?

Чтобы я смог со своей машины подключаться к нему, когда он на серваке, как мне поставить localhost хотя бы (127), или что :?
смотря где сервак, единого ответа нет
источник

🌌[

🌌El.Randir/42ᅠ [AD]... in Airflow
Alex
смотря где сервак, единого ответа нет
sudo docker run puckel/docker-airflow webserver

есть мысля, что он не поднимается 🤔
источник

🌌[

🌌El.Randir/42ᅠ [AD]... in Airflow
источник

🌌[

🌌El.Randir/42ᅠ [AD]... in Airflow
зашёл на машину, запустил  файрфокс
и там пу сто та
источник

🌌[

🌌El.Randir/42ᅠ [AD]... in Airflow
ахаххаах
источник