ВВ
да, походу остановилось. Теперь tmp_mut не мелькают
Size: a a a
2021 January 10
ВВ
спасибо
ВВ
но
select * from system.mutations limit 1;
все равно подвисает
select * from system.mutations limit 1;
все равно подвисает
DC
так а второй шаг был? detach/atach или ребут
ВВ
service restart
DC
значит еще есть файлы mutations.txt , в других таблицах
ВВ
прошел поудалял. ПРосто стремно так ходить руками по базе... БАкап бакапом, но...
ДА, теперь все гуд
ДА, теперь все гуд
ВВ
Спасибо огромное
ВВ
А так, на будущее - есть ли какой аналог show processlist? а то в этой ситуации была не очевидна проблема
КТ
Вячеслав Владимиров
А так, на будущее - есть ли какой аналог show processlist? а то в этой ситуации была не очевидна проблема
system.processes табличка
DC
Вячеслав Владимиров
А так, на будущее - есть ли какой аналог show processlist? а то в этой ситуации была не очевидна проблема
мутации видно в system.merges, а не в system.processes
ВВ
Спасибо )
2021 January 11
AM
Подскажите, может есть возможность при инсерте данных через HTTP клиент автоматически вставлять информацию о том с какого IP был запрос на инсерт?
Т.е. добавить в таблицу что-то типа
remoteServer IPv6 DEFAULT адрес_с_которого_пришел_инсерт ?
p.s. этот IP есть в системных логах initial_address from system.query_log
вопрос как получить её при инсерте в другой таблице
Т.е. добавить в таблицу что-то типа
remoteServer IPv6 DEFAULT адрес_с_которого_пришел_инсерт ?
p.s. этот IP есть в системных логах initial_address from system.query_log
вопрос как получить её при инсерте в другой таблице
DM
Первое что приходит в голову - поставить перед кх нгинкс и в нем переписать запрос
DM
Но, конечно, непонятно насколько это будет эффективно
AM
Переписать запрос можно и на стороне серверовс которых идет инсерт..., но хочется решить этот момент именно силами кликхауса.
DS
всем привет. можете подсказать в чем может быть проблема?
SELECT count() FROM reports.table AS sd WHERE (sd.month = 12) AND (sd.year = 2020) - возвращает больше 2х мрлд
делаю
insert into xxx SELECT * FROM reports.table AS sd WHERE (sd.month = 12) AND (sd.year = 2020)
вставляет каждый раз разное количество, но не больше 1.7 млрд
в логах ничего ошибок нет
ClickHouse server version 20.12.5 revision 54442.
SELECT count() FROM reports.table AS sd WHERE (sd.month = 12) AND (sd.year = 2020) - возвращает больше 2х мрлд
делаю
insert into xxx SELECT * FROM reports.table AS sd WHERE (sd.month = 12) AND (sd.year = 2020)
вставляет каждый раз разное количество, но не больше 1.7 млрд
в логах ничего ошибок нет
ClickHouse server version 20.12.5 revision 54442.
AM
Rebrikov Konstantin
Мониторинг поступающих данных:
отдельная матвьюшка stat_input_flow, подвешенная над основной таблицей фактов рассчитывает статистику по latency событий (min/max/квантили), позволяет впоследствии определять throughput, или другие параметры входящего потока данных.
Но при этом, обогатить признаком client_hostname (существующем на момент выполнения вставки в system.processes) или initial_address (доступном в system.query_log) не получалось.
отдельная матвьюшка stat_input_flow, подвешенная над основной таблицей фактов рассчитывает статистику по latency событий (min/max/квантили), позволяет впоследствии определять throughput, или другие параметры входящего потока данных.
Но при этом, обогатить признаком client_hostname (существующем на момент выполнения вставки в system.processes) или initial_address (доступном в system.query_log) не получалось.
Похожая задача.
ВВ
всем привет. можете подсказать в чем может быть проблема?
SELECT count() FROM reports.table AS sd WHERE (sd.month = 12) AND (sd.year = 2020) - возвращает больше 2х мрлд
делаю
insert into xxx SELECT * FROM reports.table AS sd WHERE (sd.month = 12) AND (sd.year = 2020)
вставляет каждый раз разное количество, но не больше 1.7 млрд
в логах ничего ошибок нет
ClickHouse server version 20.12.5 revision 54442.
SELECT count() FROM reports.table AS sd WHERE (sd.month = 12) AND (sd.year = 2020) - возвращает больше 2х мрлд
делаю
insert into xxx SELECT * FROM reports.table AS sd WHERE (sd.month = 12) AND (sd.year = 2020)
вставляет каждый раз разное количество, но не больше 1.7 млрд
в логах ничего ошибок нет
ClickHouse server version 20.12.5 revision 54442.
Тоже замечал - когда копировал за месяц в друг табл. В итоге пришлось копировать по дням. Тогда 1-в-1. Большой объем почему-то глючил
