optimize table my_table final deduplicate ?

какой движек у таблицы?

ReplicatedMergeTree

я сомневаюсь что вам нужен deduplicate вообще ( https://github.com/ClickHouse/ClickHouse/issues/11572 )
ну и конечно чистить партиции целиком мутациями это плохая идея.

привет : )
не нашел сходу. подскажите, есть в кликхаусе функция конвертации чисел по основанию? аналог mysql-функции CONV(N,from_base,to_base).
нужно раскодировать число из 36-ричного представления в обычное 10-чное.

да, спасибо, но это обычное 16-ричное декодирование.
мне нужно в/из base36. а лучше вообще произвольное.

Такого вроде нету

ну ок. надеялся, может, не задокументировали еще : )

то есть таблице можно кроме index_granularity и всего, что перечислено в доке индивидуально задавать parts_to_throw_insert?
а какие ещё, где почитать? :)

в  system.merge_tree_settings, там есть поле с описанием

я потихоньку их описываю в доке https://github.com/den-crane/ClickHouse/blob/master/docs/ru/operations/settings/merge-tree-settings.md

но не все можно менять, т.е. index_granularity например нельзя

потрясающе
спасибо! :)

и можно конечно подобрать max_delay_to_insert / parts_to_delay_insert  и затормозить параллельные инсерты чтобы мержи успевали, но кмк лучше побыстрее завершить инсерт и затем помержить 30тыс партов, чем медленно вставлять и успевать мержить

протестил дополнительно - все работает, как ожидается. Мы используем два datetime в тапле: время данных (округленное до часа) и время импорта. Выбираем последнее время данных для пары, однако там могут быть дубли (актуализация данных) и мы довыбираем по последнему времени импорта.  AggregateFunction отрабатывает корректно, выбирает из строк с одинаковых датой данных ту у которой самое большое значение времени импорта (второе в тапле)

ребят , а напомните плз как можно через sql запрос определить текущую ноду кластера

SELECT *
FROM system.clusters
WHERE is_local = 1;

может это?

select hostName(), FQDN() ?

ОК

Thanks 🙏