Size: a a a

2018 April 09

KS

Ksenia Stroykova in Airflow
🤔
источник

OI

Oleg Ilinsky in Airflow
но это не по-феншую
хотя у нас примерно так)
источник

r

railscard in Airflow
Ну в хук обычно прокидывается коннекшн id
источник

r

railscard in Airflow
Для монги можно тип mysql указать
источник

r

railscard in Airflow
и в хуке что то такое

      uri = 'mongodb://{creds}{host}{port}/{database}'.format(
           creds='{}:{}@'.format(
               conn.login, conn.password
           ) if conn.login is not None else '',

           host=conn.host,
           port='' if conn.port is None else ':{}'.format(conn.port),
           database='' if conn.schema is None else conn.schema
       )
источник

r

railscard in Airflow
conn = self.get_connection('название_mysql_коннекшна')
источник

r

railscard in Airflow
Вот)
источник

KS

Ksenia Stroykova in Airflow
угу, поняла, спасибо. странно просто)
источник

r

railscard in Airflow
> но это не по-феншую
а как по другому?))
источник

OI

Oleg Ilinsky in Airflow
я хз) тоже интересно
источник

YE

Yury Emelyanov in Airflow
railscard
> но это не по-феншую
а как по другому?))
Connection type = MongoDB
источник

YE

Yury Emelyanov in Airflow
Из выпадающего  списка 😁
источник

r

railscard in Airflow
в 1.9 вроде нет mongo db типа
источник

YE

Yury Emelyanov in Airflow
railscard
в 1.9 вроде нет mongo db типа
Так про это и речь 😁
источник
2018 April 13

DK

Dmitry Kozeev in Airflow
Добрый день.
Если я запускаю  таск в даг таким образом то выполняется : airflow run tutorial_my My_sh 2017-04-13
А если из web пишет что run но ничего не происходит в чем может быть проблема?
источник

МС

Максим Сёмочкин in Airflow
Надо смотреть логи
источник

МС

Максим Сёмочкин in Airflow
Как работает ваш scheduler, какой тип executor выбран и так далее
источник
2018 April 18

AK

Andrey Kozlenkov in Airflow
Привет
источник

AK

Andrey Kozlenkov in Airflow
Народ, подскажите, насколько сейчас реально заюзать эирфлоу в продакшене? Цель заменить oozie. Как дела с sqoop, hive, presto, hdfs джобами? Насколько стабильно все работает?
источник

FL

Fedor Lavrentyev in Airflow
Oozie заменить реально, ради этого всё и строилось. Работает сначала очень непредсказуемо, но потом привыкаешь.
источник