В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Airflow

1298 membersпожаловаться на группу
2021 May 24

z

zxyzxy in Airflow
priority_weight аргумент называется
источник
17:51пожаловаться#1

ФЧ

Филипп Чистяков... in Airflow
Попробую переформулировать.

У меня есть 15 тасков, я хочу чтобы одновременно было запушенно не более 5, при этом, я хочу чтобы определенная часть выполнялась раньше чем другая
источник
17:51пожаловаться#2

z

zxyzxy in Airflow
что бы не более чем n выполнялось одновременно нужно сделать pool
источник
17:52пожаловаться#3

ФЧ

Филипп Чистяков... in Airflow
Во! Вроде оно. Спасибо
источник
17:52пожаловаться#4

ME

Max Efremov in Airflow
пулы
источник
17:52пожаловаться#5

VS

Vladislav 👻 Shishkov... in Airflow
Через пул такие мелочи лучше не делать, микроменджемент слишком
источник
17:52пожаловаться#6

z

zxyzxy in Airflow
а как?
источник
17:52пожаловаться#7

z

zxyzxy in Airflow
колхозить уровни в даге, где на каждом уровне по 5 тасок?
источник
17:53пожаловаться#8

z

zxyzxy in Airflow
:)
источник
17:53пожаловаться#9

VS

Vladislav 👻 Shishkov... in Airflow
concurrency = 5
источник
17:54пожаловаться#10

VS

Vladislav 👻 Shishkov... in Airflow
Просто нужен был приоритет
источник
17:54пожаловаться#11

z

zxyzxy in Airflow
А для каких вещей вы тогда используете пулы? Ну кроме явного ограничение на подключение к бд и тд, чтобы это не показалось микроменеджментом?
источник
17:56пожаловаться#12

VS

Vladislav 👻 Shishkov... in Airflow
Когда надо пачки дагов группировать
источник
17:56пожаловаться#13

z

zxyzxy in Airflow
Типа когда генерятся куча дагов с разными параметрами какой-то фабрикой? И что там пулы разруливают?
источник
17:57пожаловаться#14

z

zxyzxy in Airflow
(я вообще без претензий спрашиваю,  просто интересно как вы их используете у себя)
источник
17:57пожаловаться#15

ME

Max Efremov in Airflow
пулы могут на кучу дагов ресурс шарить
источник
17:57пожаловаться#16

z

zxyzxy in Airflow
ну да, я понимаю что это не внутри одного дага )
источник
17:58пожаловаться#17

ME

Max Efremov in Airflow
тип чтобы не более 10 спарк тасок на весь кластер
источник
17:58пожаловаться#18

z

zxyzxy in Airflow
тоесть все-таки в бОльшей степени как ограничение на одновременное количество подключений к ресурсу
источник
17:58пожаловаться#19

VS

Vladislav 👻 Shishkov... in Airflow
Необязательно ограничений
источник
17:58пожаловаться#20