Лог левел пишетися иногда в начале иногда в конце а иногда отдельной строчкой в мультилайне

И все это от одного по да еще и ты напрямую хочешь лить в локи без агрегатора

Тогда та - шаг в сторону - расстрел

Но для тебя уже написали логстеши/вектори/флюентдитеры которые все сделают за тебя

Да, и я проиграл

Хотя зависит от задачи, так то функции там есть

приветствую, есть необходимость собирать nginx ingress логи с k8s с сортировкой по service_name.
Выбор пал на loki + fluent-bit.
Fluent-bit использует один парсер для docker, если из helm разворачивать.

[PARSER]
    Name        docker
    Format      json
    Time_Key    time
    Time_Format %Y-%m-%dT%H:%M:%S.%L

В ingress настроил custom fromat логов в json вариант.
Но в графану они падают без nginx Log Labels, если запрос через UI.

{namespace_name="default"}

Если указать {namespace_name="default"} | json, то Log Labels появляются, но через UI невозможно выбрать фильтр по log labels.

Может как-то руками можно  фильтры правильно составить?

фильтры через UI примерно такие получаются:
{service_name="loki",namespace_name="default"} | json
но с нулевым результатом.

[PARSER]
    Name        docker
    Format      json
    Time_Key    time
    Time_Format %Y-%m-%dT%H:%M:%S.%L

Почитай про лейблы в локи - это отдельная сущность, не кусок лога, нужно дополнительно передавать.

Но в целом ты можешь дальше писать на logql что то из серии |= «servicename” и тд

Локи плохо жрет много лейблов

а много это сколько примерно? почему спрашиваю - мы тоже задумываемся об использовании локи у себя

А можно еще на файлопомойку посервисно в каталоги раскладывать файлики :)

практически не нужны - достаточно тех что навесят сборщики

А можно как-то сделать, чтобы он сразу на json их разбирал, без указания | json в logql ? От чего это зависит? fluent-bit вроде и так в json шлет.

Дык он их парсит

Есть лейблы(метки) а есть поля

Привет всем.
Кто-нибудь заводил Grafana/Loki с Gitlab-runner (kubernetes-executor)? Проблема в том, что с их дефолтным хелм-чартом контейнеры в подах пишут логи в локи. За исключением gitlab-runner'овских CI подов (!).

Т.е. для первого есть.
Для второго — нет.
Нужно ковырять scrape_config?

Гитлаб раннеровские CI поды не фигачят логи в стдаут

Читай как их отправить в стдаут и все у тебя будет собираться