В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Airflow

1103 membersпожаловаться на группу
2021 February 08

DN

Dmitriy Novikov in Airflow
Andrey Pak
Я не понимаю как потом из контейнера делать PR. Сейчас у меня хотя бы форк на руках и могу править исходники, а в докере будет последняя версия кода?
сорри, я хз, просто капитана включил, образ можно собрат ьсамому какая хочешь по идеи версия такая и будет, нет?
источник
17:36пожаловаться#1

AP

Andrey Pak in Airflow
По идее да. Просто меня смущает тот факт, что стандартная установка пип пакетов не проходит. И тут вопрос, что делаю не так?
источник
17:38пожаловаться#2

GB

Georgy Borodin in Airflow
Andrey Pak
По идее да. Просто меня смущает тот факт, что стандартная установка пип пакетов не проходит. И тут вопрос, что делаю не так?
В запущенном контейнере?
источник
17:38пожаловаться#3

AP

Andrey Pak in Airflow
На виртуалке
источник
17:39пожаловаться#4

GB

Georgy Borodin in Airflow
Andrey Pak
На виртуалке
Что значит "не проходит"?
Хотя бы текст ошибки нужен)
источник
17:39пожаловаться#5

z

zxyzxy in Airflow
https://github.com/apache/airflow/blob/master/BREEZE.rst пробовали?
GitHub
apache/airflow
Apache Airflow - A platform to programmatically author, schedule, and monitor workflows - apache/airflow
источник
17:54пожаловаться#6

А

Антон in Airflow
Всем привет. Кто-то пробовал засунуть связку операторов в функцию, которую потом вызвать в PythonOperator? Такой франкенштейн будет жить?
источник
17:54пожаловаться#7

z

zxyzxy in Airflow
We called it Airflow Breeze as It's a Breeze to contribute to Airflow. - Вроде бы то, что нужно.
источник
17:55пожаловаться#8

ИК

Илья Китов in Airflow
Антон
Всем привет. Кто-то пробовал засунуть связку операторов в функцию, которую потом вызвать в PythonOperator? Такой франкенштейн будет жить?
Будет
источник
18:12пожаловаться#9

ИК

Илья Китов in Airflow
Антон
Всем привет. Кто-то пробовал засунуть связку операторов в функцию, которую потом вызвать в PythonOperator? Такой франкенштейн будет жить?
А не, в функцию не пробовал, не знаю
источник
18:13пожаловаться#10

GB

Georgy Borodin in Airflow
Антон
Всем привет. Кто-то пробовал засунуть связку операторов в функцию, которую потом вызвать в PythonOperator? Такой франкенштейн будет жить?
Скорее всего, не будет. Воркфлоу должен быть определён до выполнения кода операторов
источник
18:45пожаловаться#11

VL

Vadim Lygin in Airflow
Антон
Всем привет. Кто-то пробовал засунуть связку операторов в функцию, которую потом вызвать в PythonOperator? Такой франкенштейн будет жить?
на аерфлоу 2.0 можешь в таск группу обернуть если тебе нужно связку реюзать
источник
19:36пожаловаться#12
2021 February 09

А

Антон in Airflow
ну, по крайней мере, в 1.10.12 оно рендерится и ошибок не кидает.. но запускать страшно
источник
09:49пожаловаться#13

ME

Max Efremov in Airflow
А как проще всего сбросить один день у пары десятков дагов?
источник
11:12пожаловаться#14

ME

Max Efremov in Airflow
Скриптик написать, чтобы через консоль тыркал по списку?
источник
11:13пожаловаться#15

ПП

Павел Приказчиков... in Airflow
всем привет,
подскажите как из докера airflow добраться до БД postgre на другом компьютере (не том где развернут докер)? Вопрос не совсем про airflow конечно.
источник
11:31пожаловаться#16

ИК

Илья Китов in Airflow
Павел Приказчиков
всем привет,
подскажите как из докера airflow добраться до БД postgre на другом компьютере (не том где развернут докер)? Вопрос не совсем про airflow конечно.
А в чем разница в докере airflow или не в докере? Обычный tcp доступ нужен к БД, с сервера на котором докер развёрнут
источник
11:35пожаловаться#17

VV

Vladimir Voitulevich in Airflow
Всем привет, подскажите пожалуйста, из-за чего в контекст может не попадать словарь с параметрами дага,  это происходит при вызове on_failure_callback.

даг из трех операторов с параметрами:
provide_context=True,
templates_dict=default_args,
on_failure_callback=on_failure_callback,
источник
12:05пожаловаться#18

ПП

Павел Приказчиков... in Airflow
Илья Китов
А в чем разница в докере airflow или не в докере? Обычный tcp доступ нужен к БД, с сервера на котором докер развёрнут
Почему то подумал что исходящее соединение нужно настраивать. Airflow к базе подцепилось, спасибо. Но при загрузке тестового примера возникла ошибка    
from airflow.operators.bash import BashOperator
ModuleNotFoundError: No module named 'airflow.operators.bash'.
Но разве пакеты для операторов нужно доустанавливать? Использую образ puckel/docker-airflow.
источник
12:07пожаловаться#19

GB

Georgy Borodin in Airflow
Павел Приказчиков
Почему то подумал что исходящее соединение нужно настраивать. Airflow к базе подцепилось, спасибо. Но при загрузке тестового примера возникла ошибка    
from airflow.operators.bash import BashOperator
ModuleNotFoundError: No module named 'airflow.operators.bash'.
Но разве пакеты для операторов нужно доустанавливать? Использую образ puckel/docker-airflow.
Некорректный импорт
источник
12:11пожаловаться#20