В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Airflow

1001 membersпожаловаться на группу
2020 October 19

А

Антон in Airflow
Всем привет! Подскажите пожалуйста, каким образом можно перенести Connections и Variables c одного Airflow на другой (с дева на прод, к примеру)?
источник
16:01пожаловаться#1

VS

Vladislav 👻 Shishkov... in Airflow
Антон
Всем привет! Подскажите пожалуйста, каким образом можно перенести Connections и Variables c одного Airflow на другой (с дева на прод, к примеру)?
это все в базе хранится
источник
16:56пожаловаться#2

Н

Никита in Airflow
Broken DAG: [airflow/dags/ETL_loader.py] Could not deserialize key data.
С чем это может быть связано ?
источник
19:27пожаловаться#3

Н

Никита in Airflow
Мб у меня переменные не передаются ?
источник
19:33пожаловаться#4

Н

Никита in Airflow
нашёл ошибку, не актуально
источник
19:46пожаловаться#5

VN

Vova Narovchatskiy in Airflow
Всем привет!
С чем может быть связана ошибка?
Не работает web ui

airflow error - exception on /admin/ [get]
.....
File "/opt/cloudera/parcels/AIRFLOW-1.10.3-python2.7.15_b2/lib/python2.7/site-packages/    sqlalchemy/sql/sqltypes.py", line 1651, in process
   return loads(value)
ValueError: unsupported pickle protocol: 4
источник
21:16пожаловаться#6
2020 October 20

I

Igor in Airflow
Vova Narovchatskiy
Всем привет!
С чем может быть связана ошибка?
Не работает web ui

airflow error - exception on /admin/ [get]
.....
File "/opt/cloudera/parcels/AIRFLOW-1.10.3-python2.7.15_b2/lib/python2.7/site-packages/    sqlalchemy/sql/sqltypes.py", line 1651, in process
   return loads(value)
ValueError: unsupported pickle protocol: 4
Бросается в глаза очень плохая версия питона

Но мжно руками попробовать понизить версию sqlachemy, авось прокатит
источник
00:01пожаловаться#7

ME

Max Efremov in Airflow
А airflow вообще с 2.х работает?
источник
00:04пожаловаться#8

ME

Max Efremov in Airflow
Я думал там только 3.х)
источник
00:04пожаловаться#9

I

Igor in Airflow
Стейбл на 2.7 должен работать

А тут к тому же поставка внутри клаудеры похоже, там вообще всякое может быть
источник
00:06пожаловаться#10

VN

Vova Narovchatskiy in Airflow
Да как я понял косяк с версией. Pickle протокол 4 версии только в 3 питоне поддерживается.
источник
00:07пожаловаться#11

VN

Vova Narovchatskiy in Airflow
Но в терминале работает airflow. Только в web ui падает
источник
00:08пожаловаться#12

VN

Vova Narovchatskiy in Airflow
Igor
Бросается в глаза очень плохая версия питона

Но мжно руками попробовать понизить версию sqlachemy, авось прокатит
да там не только на sqlachemy ругается
источник
00:10пожаловаться#13

VN

Vova Narovchatskiy in Airflow
Может существуют способы как-то понизить версию pickle протокола до 2.
источник
00:13пожаловаться#14

I

Igor in Airflow
Конечно есть, например пройтись по коду sed-ом
источник
00:16пожаловаться#15

I

Igor in Airflow
sticker.webp
(10.15 Кб)
источник
00:17пожаловаться#16

VN

Vova Narovchatskiy in Airflow
А можно конкретнее что почитать?
источник
00:18пожаловаться#17

I

Igor in Airflow
Окей гугл как поставить третий питон
источник
00:18пожаловаться#18

I

Igor in Airflow
Реально, скорее всего проблемы на исправлении в коде версии протокола пикла только начнутся а не закончатся
источник
00:19пожаловаться#19

VN

Vova Narovchatskiy in Airflow
Не было бы проблем, но этот же airflow под клаудерой
источник
00:19пожаловаться#20