F
2 часа спустя, датасет готов
Size: a a a
2019 May 25
F
Без текстов
F
Вот здесь нет только столбца с размером сообщения
F
Не, кликхаус не настолько сумасшедший)
F
Поделись парой запросов, которые комбот для статистики использует, мне интересно глянуть на производительность
F
А как собираешь?
F
То есть у тебя агрегированные данные?
F
А зачем тогда ты все сообщения хранишь, если данные уже сформированны?
F
Странный ты человек..
F
Их можно было бы сжать гзипом и выкинуть на задворки сервера
F
А не тратить драгоценные ресурсы БД
F
Когда экономия ресурсов стала глупостью?
F
Эти данные ведь действительно не нужны тебе
F
Процессора, который при вставке данных перестраивает индексы
F
Ты хранишь гораздо больше данных чем используешь
F
У тебя постоянно есть индексы для быстрого поиска, хотя ты запросы к этой тонне данных не делаешь
F
Зачем?
F
Предложение - взять все твои данные, разбить на интервалы по неделям, все их заархивировать и залить в какое-то холодное хранилище
Например, я рекомендую backblaze, дешевле любого s3 хранилища
Например, я рекомендую backblaze, дешевле любого s3 хранилища
F
А потом, по необходимости, когда вы будете переезжать на новую систему - скачать, разархивировать и использовать уже нормально
F
А откуда тогда в бд 6 лярдов сообщений