VS
А есть лямбда для забора логов с бакета и пуша их в CloudWatch ?
@bamaboy
@bamaboy
Size: a a a
2019 November 08
VS
У нас WAF через кинезис пуляет логи в бакет (криворукий амазон не смог добавить, в свой же кинезис, стрим в свой же КлаудВотч) и вот хотим забирать их и парсить уже в CloudWatch
b
А есть лямбда для забора логов с бакета и пуша их в CloudWatch ?
@bamaboy
@bamaboy
наверное, есть, вот что-то похожее https://github.com/maginetv/s3logs-cloudwatch
VS
наверное, есть, вот что-то похожее https://github.com/maginetv/s3logs-cloudwatch
Спасибо большое 👍
AS
делал на коленке)
я чот смотрю брайн то серьезно подошел к тестированию...
N
я чот смотрю брайн то серьезно подошел к тестированию...
Да, у него смешнпя презентация конечно была)
AS
в стиле оракла
N
Просто 10 из 10
AS
оракл обычно такие делает. передергивает и херачит чо угодно что бы валить любое альтернативное решение
AN
такое если честно, вы как чуть знакомые понимаете что он чушь нес и все тестирование можно выкинуть, а народ может и прислушаться
IE
я чот смотрю брайн то серьезно подошел к тестированию...
У вас табличка поехала
AS
N
такое если честно, вы как чуть знакомые понимаете что он чушь нес и все тестирование можно выкинуть, а народ может и прислушаться
100% ктото прислушается:) поэтому нужен vmcon
AS
сравнимые размеры прома и вм выглядят просто смешно
AN
на 1гб данных
AS
когда вместо одного месяца можно 4 хранить... ну хз хз
N
сравнимые размеры прома и вм выглядят просто смешно
канеш, он запускал на целых 12 часов;)
2019 November 09
G
yandex/ClickHouse tagged: v19.16.3.6-stable
Link: https://github.com/ClickHouse/ClickHouse/releases/tag/v19.16.3.6-stable
Release notes:
Link: https://github.com/ClickHouse/ClickHouse/releases/tag/v19.16.3.6-stable
Release notes:
v19.16.3.6-stable
A
логи балансера складываются на s3, оттуда уже можно плясать как угодно, можно тригерить lambda на event создания лога, можно настроить какой-нить стриминг через Kinesis в ELK, например. у нас сделано именно так, а потом уже из ELK можно строить дашборды в кибане
“Elastic Load Balancing publishes a log file for each load balancer node every 5 minutes” … если время не уменьшить (а судя по всему нет) то попец как медленный рефреш метрик будет, придется вариант снятия метрик на уровне балансировщика забыть и таки инструментализировать приложения :(