RO
да это препрод. так как слишком много данных то решили оптимизировать.
Size: a a a
2020 June 22
D
в вашем случае - меняйте таймаут через сет и запускайте - если хотите
D
дефолт таймаут - чтоб при отваленном хосте не ждать DDL часами
RO
да сча хост отваливается с ошибкой: слишком много открытых файлов
Д
Всем привет! Если select запрос с ограничением max_bytes_before_external_group_by идет на distiributed таблицу с 2умя шардами на 2ух серверах, то ограничение будет работать на второй сервер?
D
Всем привет! Если select запрос с ограничением max_bytes_before_external_group_by идет на distiributed таблицу с 2умя шардами на 2ух серверах, то ограничение будет работать на второй сервер?
вот честно, не знаю пробрасываются ли сеттинги сессии.
если узнаете - отпишитесь плз
если узнаете - отпишитесь плз
Д
Всем привет! Если select запрос с ограничением max_bytes_before_external_group_by идет на distiributed таблицу с 2умя шардами на 2ух серверах, то ограничение будет работать на второй сервер?
есть кто знает как это вообще работает и как этим управлять?)
DT
вот честно, не знаю пробрасываются ли сеттинги сессии.
если узнаете - отпишитесь плз
если узнаете - отпишитесь плз
вообще пробрасываются сеттинги, которые ты передаешь с запросом
DT
как минимум log_queries
D
вообще пробрасываются сеттинги, которые ты передаешь с запросом
если сделать
set max_threads=1;
select * from distr;
—-
на всех нодах будет 1 поток?
set max_threads=1;
select * from distr;
—-
на всех нодах будет 1 поток?
DT
Тут еще интересный вопрос, если у нас group BY идет к distributed таблице, то окончательный груп бай будет ведь всеравно на инициаторе
DT
если сделать
set max_threads=1;
select * from distr;
—-
на всех нодах будет 1 поток?
set max_threads=1;
select * from distr;
—-
на всех нодах будет 1 поток?
можно проверить, мг
Д
вообще пробрасываются сеттинги, которые ты передаешь с запросом
если пробрасывается сеттинг, то он учитывает оперативу другого сервера? типо если 150гб, то на каждый шард по 75 гб? или как?)
DT
если пробрасывается сеттинг, то он учитывает оперативу другого сервера? типо если 150гб, то на каждый шард по 75 гб? или как?)
нет, на каждом будет по 150гб, кмк
D
можно проверить, мг
лень/время, ща Денни проснется все расскажет )))
Д
нет, на каждом будет по 150гб, кмк
Просто у меня такой запрос был с ограничением в 150 гб и без. Без ограничения на втором серваке он сжирал 38 гб, а с ограничением всего 6 гб
DT
если сделать
set max_threads=1;
select * from distr;
—-
на всех нодах будет 1 поток?
set max_threads=1;
select * from distr;
—-
на всех нодах будет 1 поток?
ну сеттинги в запросы пробрасываются
DT
Просто у меня такой запрос был с ограничением в 150 гб и без. Без ограничения на втором серваке он сжирал 38 гб, а с ограничением всего 6 гб
возможно используются разные алгоритмы?
D
Просто у меня такой запрос был с ограничением в 150 гб и без. Без ограничения на втором серваке он сжирал 38 гб, а с ограничением всего 6 гб
150 GB - это какое именно ограничение было?