Size: a a a

2020 July 27

VS

Vladislav 👻 Shishkov... in Airflow
а я и не спорю, я придераюсь к статье
источник

DL

Dmitry Logvinenko in Airflow
Vladislav 👻 Shishkov
Не раскрыли один из главных элементов - requirements.txt
А тут не понял, что там раскрывать?
источник

SK

Stanislav Klevtsov in Airflow
Дима, подключайся ) @dmitry_anatolich
источник

VS

Vladislav 👻 Shishkov... in Airflow
Dmitry Logvinenko
А тут не понял, что там раскрывать?
как ставили и как решали проблемы
источник

DL

Dmitry Logvinenko in Airflow
Vladislav 👻 Shishkov
как ставили и как решали проблемы
Эм... Вроде бы максимально подробно всё описал, репозиторий приложил. Все описанные эксперименты делал с помощью docker-compose (всё приложил), на проде — на живых машинка — всё аналогочно, разве что без докера)
источник

VS

Vladislav 👻 Shishkov... in Airflow
ну вот у вас скриншот vertica_python не найден, откуда он взялся?
источник

VS

Vladislav 👻 Shishkov... in Airflow
вы написали, что добавили в requirements.txt, но какой он и как ставили - неизвестность
источник

SG

Sergey Gavrilov in Airflow
Ммм
источник

VS

Vladislav 👻 Shishkov... in Airflow
а ведь у airflow есть специальные альясы для установки распрастраненных модулей работы
источник

SG

Sergey Gavrilov in Airflow
Статья заявлена как ознакомительная, камон
источник

VS

Vladislav 👻 Shishkov... in Airflow
Sergey Gavrilov
Статья заявлена как ознакомительная, камон
Я расскажу вам о замечательном инструменте для разработки ETL-процессов — Apache Airflow. Но Airflow настолько универсален и многогранен, что вам стоит присмотреться к нему даже если вы не занимаетесь потоками данных, а имеете потребность периодически запускать какие-либо процессы и следить за их выполнением.


И да, я буду не только рассказывать, но и показывать: в программе много кода, скриншотов и рекомендаций.
источник

SG

Sergey Gavrilov in Airflow
И где противоречие?
источник

VS

Vladislav 👻 Shishkov... in Airflow
не вижу слова "ознакомительная", зато вижу много обратного
источник

VS

Vladislav 👻 Shishkov... in Airflow
поэтому не надо
источник

SG

Sergey Gavrilov in Airflow
Окей, раз это слишком сложно, то прямо из этого куска вытащу семантические конструкты
источник

VS

Vladislav 👻 Shishkov... in Airflow
если автор считает, что его статья ОК и я придираюсь - ОК, пускай так автор и напишет, моя позиция, донести правильную информацию про продукт, а не загнобить автора
источник

SG

Sergey Gavrilov in Airflow
Вводная "Я расскажу вам о..." предполагает, что нижележащий текст содержит как минимум введение и более ничего не гарантирует.

Часть "... Но Airflow настолько универсален и многогранен, что вам стоит присмотреться к нему..." намекает на то, что текст также несёт рекламный смысл.

Тут заявлений на "я вам расскажу всё и обо всём, ничего не забыв" не просматривается.
источник

SG

Sergey Gavrilov in Airflow
Vladislav 👻 Shishkov
если автор считает, что его статья ОК и я придираюсь - ОК, пускай так автор и напишет, моя позиция, донести правильную информацию про продукт, а не загнобить автора
Окей
источник

SG

Sergey Gavrilov in Airflow
Не буду выполнять его работу
источник

DT

Dmitry Tataurov in Airflow
Приветствую. Встряну в разговор. Когда полгода назад мы захотели переписать наш ETL с Pentaho, то остановились на Airflow. Мы тогда совсем ничего про этот инструмент не знали, кроме названия. Но когда попытались использовать лично у меня такие же ощущения сложились. Какой там ETL, это очень очень продвинутый CRON и не более. С тех пор лично мое мнение никак в этом плане не изменилось. Возможно, оно ошибочное, не знаю. Все хочу понять как его готовят люди на крупных проектах и откуда такая популярность.
источник