АК
Увеличь лимит
Size: a a a
2021 March 05
KL
Анатолий Костюшин
Увеличь лимит
костыль
DC
optimize table xxx DEDUPLICATE;
убирает только небольшую пачку дублей
убирает только небольшую пачку дублей
optimize .... -- запускает внеплановый мерж, было 130 партов, внеплновый мерж смержит хоть что-нибудь, возьмет 3 маленьких парта и смержит
optimize final -- мержит все что можно, все 130 партов будут перезаписаны в новые в минимально возможное кол-во партов.
optimize final -- мержит все что можно, все 130 партов будут перезаписаны в новые в минимально возможное кол-во партов.
A
если бы этот, то bytes должно было бы быть больше, чем 40 gb?
Нет. Это лимит на все запросы
AK
если бы этот, то bytes должно было бы быть больше, чем 40 gb?
может быть соседний запрос ел 40Гб без 1 байта
И при попытке твоим запросом выделить
И при попытке твоим запросом выделить
4218644 - общий лимит превышенIG
если бы этот, то bytes должно было бы быть больше, чем 40 gb?
Неправильно. Указан размер последнего блока, который пытались выделить.
IG
Возможно, всю остальную память израсходовал этот же запрос. Возможно, другие.
DC
Nullable(SimpleAggregateFunction(max, DateTime)) DEFAULT NULL почему то схлопывает нормальную дату и null в null. Я не туда воюю?
SimpleAggregateFunction(max, Nullable( DateTime) ))
AK
SimpleAggregateFunction(max, Nullable( DateTime) ))
Да, мне уже подсказали, спасибо. А не поясните, почему так происходит в этом случае?
DW
костыль
использовать внешнюю память для запроса не вариант?
KL
использовать внешнюю память для запроса не вариант?
я смотрю скорее в сторону оптимизации запроса/записи чанками. На хайлоаде рекомендуют через промежуточные таблицы
DC
Да, мне уже подсказали, спасибо. А не поясните, почему так происходит в этом случае?
Ну потому что вообще надо запретить создавать такие таблицы, никто просто не даже представить не мог что кто-то так будет делать.
это как спросить почему у меня кровь вытекает потому что я ногу отпилил.
это как спросить почему у меня кровь вытекает потому что я ногу отпилил.
AK
Ну потому что вообще надо запретить создавать такие таблицы, никто просто не даже представить не мог что кто-то так будет делать.
это как спросить почему у меня кровь вытекает потому что я ногу отпилил.
это как спросить почему у меня кровь вытекает потому что я ногу отпилил.
Ну, в моем примитивном понимании работы клика, я вижу схлопывание как применение агрегатной функции ко всем данным столбца по ключу, и почему там всплывает нул мне непонятно. Просто у меня в таблицу сливаются данные из двух других, и многие столбцы есть только в одной из них, соответственно из той, где нет даты, будет приходить дефолт, и в минимуме всегда будет он
DC
Ну, в моем примитивном понимании работы клика, я вижу схлопывание как применение агрегатной функции ко всем данным столбца по ключу, и почему там всплывает нул мне непонятно. Просто у меня в таблицу сливаются данные из двух других, и многие столбцы есть только в одной из них, соответственно из той, где нет даты, будет приходить дефолт, и в минимуме всегда будет он
потому что вы сказали клику что надо функцией any схлопывать состояния выхлопа агрегатной функции
any выбирает любое
any выбирает любое
M
подскажите, пожалуйста. можно ли массив обратно explode' нуть в колонку?
DC
Muhin Dmitry
подскажите, пожалуйста. можно ли массив обратно explode' нуть в колонку?
arrayJoin / array join / left array join
AK
потому что вы сказали клику что надо функцией any схлопывать состояния выхлопа агрегатной функции
any выбирает любое
any выбирает любое
А при чем тут any?
AK
Подскажите, стала появляться такая ошибка при выполнении селектов к локальной таблице
select_sequential_consistency стоит в 0, указанного парта не нашел ни на одной из реплик..
Received from remote.host:9000. DB::Exception: Replica doesn't have part 20201202_27869_27869_0 which was successfully written to quorum of other replicas. Send query to another replica or disable 'select_sequential_consistency' setting..
select_sequential_consistency стоит в 0, указанного парта не нашел ни на одной из реплик..
DC
А при чем тут any?
SummingMT и AggrMt схлопывают все с помощью Any если это не Аггр. Функ.
AK
SimpleAggregateFunction(max, Nullable( DateTime) ))
Это не аггр функция?