Size: a a a

ClickHouse не тормозит

2021 March 19

n🐈

nikoinlove 🐈 in ClickHouse не тормозит
https://tensorbase.io/2021/03/16/announce_base_fe.html а что это такое ничегонепонятно
источник

DT

Dmitry Titov in ClickHouse не тормозит
nikoinlove 🐈
а настройки для движка роксдб уже научились прокидывать?)
там на самом деле есть файл с настройками роксдб, но не знаю насколько получится его потрогать
источник

SC

Smoked Cheese in ClickHouse не тормозит
nikoinlove 🐈
https://tensorbase.io/2021/03/16/announce_base_fe.html а что это такое ничегонепонятно
учитывая что кх часто упирается именно в железо, meh
источник

SC

Smoked Cheese in ClickHouse не тормозит
примеры какие-то сильно абстрактные
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
nikoinlove 🐈
https://tensorbase.io/2021/03/16/announce_base_fe.html а что это такое ничегонепонятно
если они продолжат втроем и как пет-проджект, то реальный продукт мы не увидим никогда.
источник

SC

Smoked Cheese in ClickHouse не тормозит
Smoked Cheese
учитывая что кх часто упирается именно в железо, meh
*в диски
источник

A

Anton in ClickHouse не тормозит
Подскажите было ли у кого,что после обновления кликхауса - место стало очень быстро съедаться?
источник

A

Anton in ClickHouse не тормозит
скорость записи осталась прежняя
источник

A

Anton in ClickHouse не тормозит
такое подозрение будто при обновлении могли слететь настройки сжатия, так как запись остановлена вся, но при этом место куда-то уходит.
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Anton
такое подозрение будто при обновлении могли слететь настройки сжатия, так как запись остановлена вся, но при этом место куда-то уходит.
так вы посмотрите по таблицам


SELECT
   database,
   table,
   formatReadableSize(sum(bytes) AS size) AS compressed,
   formatReadableSize(sum(data_uncompressed_bytes)) AS uncompressed,
   sum(rows) AS rows,
   count() AS part_count
FROM system.parts
WHERE (active = 1) AND (table LIKE '%') AND (database LIKE '%')
GROUP BY
   database,
   table
ORDER BY size DESC;
источник

A

Anton in ClickHouse не тормозит
Кажется проблема я смог разобраться в чем проблема, был запущен optimize table final
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
потом внутри таблицы сравните партции
источник

A

Anton in ClickHouse не тормозит
Правильно ли я понимаю, что для optimize table db.table final, надо иметь достаточно свободного места для полного распаковки таблицы?
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
нет, распаковка через озу.
партции мержатся по одной, по очереди.
нужно места 2*размер самой большой партиции
если места нет то просто не будет мержится
источник

D

Dj in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
можно сделать 100 тыс  dictGet  в DIRECT EmbeddedRocksDB
https://gist.github.com/den-crane/0c65ca11ae2d0c6f069f33c951becd5b

Elapsed: 0.786 sec.
а как насчет репликации роксДБ? там ничего не появилось из коробки? а то смысла иметь словарь на одной ноде маловато
источник

AK

Aleksey Kluchnikov in ClickHouse не тормозит
Всем привет. Вопрос архитектурный, как лучше хранить события типа {'маша':80,'саша':20}, с учетом что количество имен и сами имена могут быть разные. А потом надо выбрать из этих событий сумму например по 'маша'?
источник

РМ

Рязанский Михаил... in ClickHouse не тормозит
Aleksey Kluchnikov
Всем привет. Вопрос архитектурный, как лучше хранить события типа {'маша':80,'саша':20}, с учетом что количество имен и сами имена могут быть разные. А потом надо выбрать из этих событий сумму например по 'маша'?
JSON поменять есть возможность ?
источник

AK

Aleksey Kluchnikov in ClickHouse не тормозит
Если сделать 2 поля с массивами | ['маша','саша'] | [80,20] | то можно будет делать потом выборки?
источник

AK

Aleksey Kluchnikov in ClickHouse не тормозит
Рязанский Михаил
JSON поменять есть возможность ?
Да, можно как угодно менять
источник

AK

Aleksey Kluchnikov in ClickHouse не тормозит
Одно событие хочется уместить в одну строку
источник