A
Size: a a a
2021 February 18
YV
чтения\записи + потребление памяти
airflow это не инструмент для дата процессинга и дата трансформации, это умный крон, операции чтения/записи это операции в хранилищах и стораджах, зачем это тестировать на шедулере? максимум где тут чтение/запись - это сохранение метадаты самого Airflow
YV
остальное все это дергание чужих api или отправка кверей в Базы, airflow это не spark и не полноценный etl инструмент, как впрочем, написали уже 10 постами выше
ME
Просто докер компоуз для тестирования airflow?
MZ
Кто-то к 1с подключался? Как оно?
z
Кто-то к 1с подключался? Как оно?
А смотря как вы хотите подключаться )
MZ
А смотря как вы хотите подключаться )
А как предлагаете?)
MZ
Я и через sql напрямую качал, админ потом ругался. Потом качали через апи и все ок было )
Я новичёк тяжело мне будет?
MZ
А что вам надо из 1с тянуть?
Отчётность
2021 February 19
A
Привет, образовался вопрос, никто не знает, возможно ли сделать какую-то группировку дагов в UI (типо те даги что падают часто, и наоборот, которые всегда отрабатывают хорошо) или в целом средства более качественного мониторинга помимо стандартного Airflow UI. Может быть можно как-то сделать несколько вкладок с дагами, исходя из тегов на них
DN
Всем привет, кто то поюзал 2 версию? Можно ставить, если с нуля.
P
Всем привет, кто то поюзал 2 версию? Можно ставить, если с нуля.
С нуля можно ставить что угодно, т.к. вы ничем не рискуете, нечего терять