A
гонять все метрики из одного прометея в другой не очень хорошая идея
Вообще нормальная, обычно так работает федерация и/или remote_write. А почему ты про это упомянул?
Size: a a a
2019 December 30
AS
иначе в том моменте когда тебе нужно будет взять точку её не будет.
A
"The default is every 1 minute." <- а есть разница?
A
и еще, у меня метрики _примерно_ раз в 5-6 минут появляются... это как-то влияет на интервал?
A
Появляются или меняются?
A
эм, новые данные в метрике появляются )
AS
если они появляются раз в 5 и более минут у тя будут дыры в проме.
AS
он не умеет работать с данными которые приходят реже чем раз 5 минут
A
да, это проблема ... надо будет че-нить мутить с вставкой в vm тогда
AS
ежели они у тя отдаются всё время но обновляются раз в 5 минут то всё ок
A
впрочем, там с одного aws loadbalancer раз в 5 минут логи собираются, но таких балансировщиков штук 100 будет...
A
так что меньше 5 однозначно
A
> ежели они у тя отдаются всё время но обновляются раз в 5 минут то всё ок
this, там statsd-експортер
this, там statsd-експортер
DS
впрочем, там с одного aws loadbalancer раз в 5 минут логи собираются, но таких балансировщиков штук 100 будет...
балансеры aws метрики отдавать не умеют?
DS
почему логи собирать приходится?
DS
а если там 50K в секунду логов?
vk
а если там 50K в секунду логов?
Ну это не то чтобы очень много :)
A
балансеры aws только умеют в cloudwatch отдавать метрики глобальные а-ля "счетчик ошибок / запросов" и класть логи в s3 bucket раз в 5 минут
мне же нужно пилить более тонкие метрики а-ля "сколько ошибок на специфичном урле" или "перцентиль задержи для сервиса users"
для этого приходится парсить логи и генерировать метрики из них
мне же нужно пилить более тонкие метрики а-ля "сколько ошибок на специфичном урле" или "перцентиль задержи для сервиса users"
для этого приходится парсить логи и генерировать метрики из них
DS
vladimir kolobaev
Ну это не то чтобы очень много :)
ну для банальной задачи, посчитать количество разных кодов ответа, оверкилл как по мне.
Y
Вообще нормальная, обычно так работает федерация и/или remote_write. А почему ты про это упомянул?
Ну в данном случе это не имеет смысла т.к. , если будет штормить кластер -> будет штормить внутренний прометей -> внешний прометей будет получать кривые метрики. Но вообще полная федерация ведь удваивает нагрузку на пром(насколько я знаю), а он и без того, собака, прожорливый.