Size: a a a

2020 October 21

F

Future in AWS_RU
Al T
да
так выглядит
источник

AT

Al T in AWS_RU
классно выглядит!
источник

F

Future in AWS_RU
Al T
классно выглядит!
:D
главное чтобы не выглядело за лимитами фри тир)
источник
2020 October 22

A

Alex in AWS_RU
Докладываю: MSK (кафка) ломается если включить JMX экспортер и добавить его в скрейп в прометей 🙂
источник

A

Alex in AWS_RU
У меня один брокер сдох, остальные тормозят
источник

A

Anatoly in AWS_RU
Всем привет
Есть 4кк для хранения которых планируется использовать DynamoDB, у этих строк есть один атрибут который имеет 8 значений, и они в целом равномерно распределены по всему количеству
Возможно ли будет как-то за один запрос получать все записи по одному из значений этого атрибута (приблизительно 500к строк), и если да, то какой индекс или что лучше для этого использовать?
источник

СМ

Сашко Медянцев... in AWS_RU
Ну я и соня 🏴
Что из IAC на работе внедрять? Cloudformation, CDK или terraform?
Serverless framework
источник

KT

Karen Tovmasyan in AWS_RU
Anatoly
Всем привет
Есть 4кк для хранения которых планируется использовать DynamoDB, у этих строк есть один атрибут который имеет 8 значений, и они в целом равномерно распределены по всему количеству
Возможно ли будет как-то за один запрос получать все записи по одному из значений этого атрибута (приблизительно 500к строк), и если да, то какой индекс или что лучше для этого использовать?
А можно дать пример айтема?
источник

AT

Al T in AWS_RU
Alex
Докладываю: MSK (кафка) ломается если включить JMX экспортер и добавить его в скрейп в прометей 🙂
а на обычной кафке типа всё ништяк?
источник

A

Alex in AWS_RU
Al T
а на обычной кафке типа всё ништяк?
Ну на железе jmx кафку не ломал, хоть и тупорылый. Тикет вчера завел, проблему они увидели, ща позже вернусь и скажу че там нашли)
источник

AT

Al T in AWS_RU
оки, интересно!
источник

A

Alex in AWS_RU
Al T
оки, интересно!
Вангую, там в gc упирается. Выхов jmx начинает люто убивать jvm, она уходит в паузу на несколько секунд.
источник

A

Anatoly in AWS_RU
Karen Tovmasyan
А можно дать пример айтема?
id, attribute (int in range [0, 7]), map длинной до 200 символов
источник

AT

Al T in AWS_RU
Anatoly
Всем привет
Есть 4кк для хранения которых планируется использовать DynamoDB, у этих строк есть один атрибут который имеет 8 значений, и они в целом равномерно распределены по всему количеству
Возможно ли будет как-то за один запрос получать все записи по одному из значений этого атрибута (приблизительно 500к строк), и если да, то какой индекс или что лучше для этого использовать?
динамоDB не любит больших сканов, и не умеет в результате одной query возвращать больше 1мб за раз, то есть будет последовательно делать X запросов.  Мне кажется стоит посмотреть на другие базы данных
источник

AT

Al T in AWS_RU
use-case у динамо - много быстрых лукапов по ключу возвращая одну или несколько записей (умещающихся в 1 мб)
источник

A

Alexey in AWS_RU
Al T
а на обычной кафке типа всё ништяк?
у нас на обычной кафке так нормально работает, пришлось только whitelist для метрик сделать, иначе при большом количестве топиков экспортер может минут 7-10 на запрос отвечать
источник

A

Alexey in AWS_RU
Alex
Докладываю: MSK (кафка) ломается если включить JMX экспортер и добавить его в скрейп в прометей 🙂
а большой кластер? сколько там метрик эспортируется?
источник

A

Alex in AWS_RU
Alexey
а большой кластер? сколько там метрик эспортируется?
Кластер 3 ноды
Экспортируется все, потому что jmx на стороне амазона, у меня туда доступа нет. Только порт открыт.
источник

D

Danil in AWS_RU
Не могу понять, почему athena/glue видят мои таймстемпы вот таким образом "+52522-12-12..." +52522 это год если что. Конвертнул с помощью пандас из csv в parquet. Пандас показывает, что колонка имеет тип datetime64.
Crawler тоже распознал как timestamp, но в афине вот такое
сталкивался кто-нибудь с подобным или это лучше к датасатанистам?
источник

vk

victor kurguzov in AWS_RU
Подскажите, пожалуйста по Partial Upfront EC2 Instance Savings Plans, калькулятор насчитал
1 instances x 227.76 USD = 227.76 USD (upfront cost)
Amazon EC2 instances (upfront): 227.76 USD
1 instances x 0.026 USD x 730 hours in month = 18.98 USD (monthly instance savings cost)
Amazon EC2 Instance Savings Plans instances (monthly): 18.98 USD
так что я в итоге плачу?
источник