Size: a a a

Церковь метрик

2019 December 17

GG

George Gaál in Церковь метрик
поясни - что ты хочешь в конечном итоге
источник

GG

George Gaál in Церковь метрик
тупо делать селект по базе и смотреть кто был запущен?
источник

NA

Nikolay Avdushkin in Церковь метрик
не, чтоб в рантайме отображался какой процесс сейчас запущен, какую модель обучает
источник

NA

Nikolay Avdushkin in Церковь метрик
так уж выходит, что айрфлоу не предоставляет таких метрик
источник

ML

Mikhail Leonov in Церковь метрик
George Gaál
я ответил на твой вопрос? Выдает правильный ответ?
Логика ясна, но резлутать не ясен )
источник

GG

George Gaál in Церковь метрик
Mikhail Leonov
Логика ясна, но резлутать не ясен )
я на таймстемпы такое посчитал - все четко
источник

GG

George Gaál in Церковь метрик
Nikolay Avdushkin
так уж выходит, что айрфлоу не предоставляет таких метрик
ты че-то не то делаешь
источник

GG

George Gaál in Церковь метрик
200%
источник

GG

George Gaál in Церковь метрик
предлагаю тебе пойти в чат по https://t.me/ruairflow
источник

GG

George Gaál in Церковь метрик
это раз
источник

GG

George Gaál in Церковь метрик
два - ты можешь написать какую-то логику, которая будет пушить инфу в хранилище о том какая модель учится
источник

GG

George Gaál in Церковь метрик
мы такое в даге засунули... в инфлакс писали что-то типа хартбита с меткой
источник

GG

George Gaál in Церковь метрик
а раз ты говоришь цадвизор... то у тебя даже не кубернетесь наверное, а тупо выделенная машина под обучение
источник

NA

Nikolay Avdushkin in Церковь метрик
Ага, без кубера
источник

NA

Nikolay Avdushkin in Церковь метрик
George Gaál
мы такое в даге засунули... в инфлакс писали что-то типа хартбита с меткой
Ну то есть ту по любому какой-то кастомный пайплайн пилится для этих целей
источник

ST

Sergey Trapeznikov in Церковь метрик
George Gaál
два - ты можешь написать какую-то логику, которая будет пушить инфу в хранилище о том какая модель учится
тока самим писать да?
источник

GG

George Gaál in Церковь метрик
думаб, что да
источник

AS

Aleksey Shirokikh in Церковь метрик
George Gaál
container_network_transmit_bytes_total - container_network_transmit_bytes_total offset 24h
это не очень. не учитывает переход через 0.
правильный вариант increase(container_network_transmit_bytes_total[24h])
источник

GG

George Gaál in Церковь метрик
Aleksey Shirokikh
это не очень. не учитывает переход через 0.
правильный вариант increase(container_network_transmit_bytes_total[24h])
Я про переход через ноль честно сказал выше )
источник

A

Andrey Afoninskiy in Церковь метрик
@valyala а вот такой вопрос
есть событие вида "http{...tags} <latency>", скорость генерации примерно 100 в секунду с распределением таймстампа в пределах последних 5 минут (то есть балком заливаю 60k метрик)
стандартная практика - аггрегировать в "http_bucket{...tags, le=[10...]} <count>" теряя в разрешении

предположим я хочу получить максимальное разрешение и возможность гибких выборок потому что пока не знаю какая именно инфа оттуда потребуется
это нормальная практика слать в vm сразу события или оно на такое не расчитано и вообще "плохая практика"? как примерно будет расти потребление памяти и цпу на больших датасетах при условии что диски не проблема? надо ли что-то будет подоптимизировать?
источник