Size: a a a

2020 July 09

GR

Gleb Rusakov in K8Spb
А кто-нибудь мониторил прометеем тему, когда в serviceDiscovery были нулевые активные таргеты. Тип того (0/8 active targets)
источник

GR

Gleb Rusakov in K8Spb
хочу странного
источник

VR

Vadim Rutkovsky in K8Spb
Gleb Rusakov
А кто-нибудь мониторил прометеем тему, когда в serviceDiscovery были нулевые активные таргеты. Тип того (0/8 active targets)
источник

GR

Gleb Rusakov in K8Spb
не, не то
источник

GR

Gleb Rusakov in K8Spb
у меня есть подмонитор, а потом я погасил сервисы и он как бы в статусе active, но при этом метрики не собирает(что очевидно). Хочется это собрать
источник

VR

Vadim Rutkovsky in K8Spb
можно попробовать читать scrape_samples_scraped, но это фактически будет эквивалентно absent
источник

MF

Maxim Filatov in K8Spb
коллеги, а расскажите мне про эфемерный стораж
источник

MF

Maxim Filatov in K8Spb
источник

MF

Maxim Filatov in K8Spb
> Nodes have local ephemeral storage, backed by locally-attached writeable devices or, sometimes, by RAM.
источник

MF

Maxim Filatov in K8Spb
вижу на ноде:
источник

MF

Maxim Filatov in K8Spb
Allocatable:
 cpu:                40
 ephemeral-storage:  109267760152
 hugepages-1Gi:      0
 hugepages-2Mi:      0
 memory:             98772972Ki
 pods:               110
источник

MF

Maxim Filatov in K8Spb
одновременно на этой же ноде:
источник

MF

Maxim Filatov in K8Spb
Reason:         Evicted
Message:        The node was low on resource: ephemeral-storage. Container coredns was using 68Ki, which exceeds its request of 0.
источник

MF

Maxim Filatov in K8Spb
# free -g
             total        used        free      shared  buff/cache   available
Mem:             94          13          11          15          69          64
Swap:             0           0           0
источник

MF

Maxim Filatov in K8Spb
# du -sh /var/lib/kubelet
816K  /var/lib/kubelet
источник

MF

Maxim Filatov in K8Spb
откуда взялась цифра 109267760152 и куда конкретно оно мапится?
источник

VR

Vadim Rutkovsky in K8Spb
Maxim Filatov
откуда взялась цифра 109267760152 и куда конкретно оно мапится?
cadvisor берет размер раздела с /var/lib/kubelet (и емнип добавляет память?)
источник

MF

Maxim Filatov in K8Spb
/dev/mapper/system--web06-var         114G   74G   35G  68% /var
источник

VR

Vadim Rutkovsky in K8Spb
а если у тебя докер, то туда еще считается размер /var/lib/docker. Так что зачастую лишние имаджи \ логи заставляют эвиктить поды
источник

MF

Maxim Filatov in K8Spb
/dev/mapper/system--web06-docker       59G  6.4G   50G  12% /var/lib/docker
источник