Size: a a a

2021 February 05

GB

Georgy Borodin in Airflow
Oleg Ilinsky
это как раз через этот плагин
А чем коробочная не устраивает? Не доверяю я плагинам 😂
источник

OI

Oleg Ilinsky in Airflow
Vladislav 👻 Shishkov
TTL у statsd-exporter
в 0 выставить, чтобы не истекали по времени?
источник

VS

Vladislav 👻 Shishkov... in Airflow
наоборот
источник

OI

Oleg Ilinsky in Airflow
Georgy Borodin
А чем коробочная не устраивает? Не доверяю я плагинам 😂
Ну мне в итоге надо экспортировать в прометей, а потом в заббикс. Поэтому вот эту хреновину юзаю
https://github.com/prometheus/statsd_exporter
источник

GB

Georgy Borodin in Airflow
Oleg Ilinsky
Ну мне в итоге надо экспортировать в прометей, а потом в заббикс. Поэтому вот эту хреновину юзаю
https://github.com/prometheus/statsd_exporter
А, мы о разных вещах, есть просто плагин для airflow.
Если включаете экспорт через конфиг в самом airflow – это коробочная
источник

VS

Vladislav 👻 Shishkov... in Airflow
Oleg Ilinsky
это как раз через этот плагин
погоди, если это плагин, то о каком statsd идет речь? о_0
источник

OI

Oleg Ilinsky in Airflow
Georgy Borodin
А, мы о разных вещах, есть просто плагин для airflow.
Если включаете экспорт через конфиг в самом airflow – это коробочная
а, не, в эирфлоу никаких плагинов не использовал
просто запустил отдельно под с prometheus statsd-exporter
источник

OI

Oleg Ilinsky in Airflow
и эирплов туда свои дефолтные метрики шлёт
источник

VS

Vladislav 👻 Shishkov... in Airflow
тогда да, поставь TTL какой-нибудь
источник

OI

Oleg Ilinsky in Airflow
спасибо) сейчас попробую
источник

VS

Vladislav 👻 Shishkov... in Airflow
у нас стоит 24h на все метрики 🤔
источник

VS

Vladislav 👻 Shishkov... in Airflow
только я не пойму, чем NaN портит все? ведь такие метрики игнорируются же...
источник

OI

Oleg Ilinsky in Airflow
Vladislav 👻 Shishkov
только я не пойму, чем NaN портит все? ведь такие метрики игнорируются же...
хз
у нас админы заббикса говорят, что из-за нанов не получается что-то там настроить
источник

OI

Oleg Ilinsky in Airflow
источник

VS

Vladislav 👻 Shishkov... in Airflow
я так подозреваю, TTL вас не спасет - это про другое
источник

VS

Vladislav 👻 Shishkov... in Airflow
тут только смотреть, что там заббиксу не нравится
источник

OI

Oleg Ilinsky in Airflow
ну он падал на NaN, админы сделаи coalesce на -1, но какие-то корявые метрики в итоге получились
Попробую с ними поговорить, что там мешает
источник

OI

Oleg Ilinsky in Airflow
а это же airflow квантили шлёт?
airflow_dag_duration{dag_id="oda_load_tr_firebase",instance="10.238.17.187:9102",job="prom-sd",quantile="0.9",task_id="wait_for_data”}
источник

VS

Vladislav 👻 Shishkov... in Airflow
statsd превращает
источник

VS

Vladislav 👻 Shishkov... in Airflow
на основе посылаемых airflow типов метрик были выставлены соответствующие типы метрик на statd-exporter
источник