Size: a a a

ClickHouse не тормозит

2020 September 16

MP

Maxim Pronkin in ClickHouse не тормозит
@floxard  неа
:) alter table __migration attach all;

Syntax error: failed at position 32 ('all'):

alter table __migration attach all;

Expected one of: PARTITION, PART


:) alter table __migration attach PART all;

Syntax error: failed at position 37 ('all'):
источник

КТ

Константин Трофимов... in ClickHouse не тормозит
не
источник

КТ

Константин Трофимов... in ClickHouse не тормозит
partition
источник

КТ

Константин Трофимов... in ClickHouse не тормозит
не part
источник

MP

Maxim Pronkin in ClickHouse не тормозит
:) alter table __migration attach PARTITION all;

Syntax error: failed at position 45 (end of query):

alter table __migration attach PARTITION all;

Expected one of: LIKE, GLOBAL NOT IN, IS, OR, QuestionMark, BETWEEN, NOT LIKE, AND, Comma, IN, ILIKE, Dot, NOT ILIKE, NOT, Arrow, token, NOT IN, GLOBAL IN
источник

КТ

Константин Трофимов... in ClickHouse не тормозит
alter table __migration attach PARTITION all;
источник

КТ

Константин Трофимов... in ClickHouse не тормозит
и в скобки
источник

КТ

Константин Трофимов... in ClickHouse не тормозит
alter table __migration attach PARTITION 'all';
источник

КТ

Константин Трофимов... in ClickHouse не тормозит
и ещё ID
источник

КТ

Константин Трофимов... in ClickHouse не тормозит
alter table __migration attach PARTITION ID 'all';
источник

MP

Maxim Pronkin in ClickHouse не тормозит
Константин Трофимов
alter table __migration attach PARTITION ID 'all';
Получилось! Огромное спасибо!
источник

EA

Eugene AsadiR in ClickHouse не тормозит
Есть ли опыт использования этого скрипта со старой mysql, например 5.6? При попытке запустить producer-а ошибка:
ImportError: cannot import name 'charset_to_encoding' from 'pymysql.charset'.

Пробовал разные версии pymysql, для версии 0.9.3 эта ошибка исчезает, но возникает:
pymysql.err.InternalError: (1236, "Client requested master to start replication from position > file size; the first event 'log-bin.000001' at 6601356, the last event read from './log-bin.000001' at 4, the last byte read from './log-bin.000001' at 4.")

Моя гипотеза - скрипт не тестировали со старыми версиями mysql.
источник

MP

Maxim Pronkin in ClickHouse не тормозит
Огромный + в карму @floxard  за помощь =)
источник

S

Slach in ClickHouse не тормозит
Eugene AsadiR
Есть ли опыт использования этого скрипта со старой mysql, например 5.6? При попытке запустить producer-а ошибка:
ImportError: cannot import name 'charset_to_encoding' from 'pymysql.charset'.

Пробовал разные версии pymysql, для версии 0.9.3 эта ошибка исчезает, но возникает:
pymysql.err.InternalError: (1236, "Client requested master to start replication from position > file size; the first event 'log-bin.000001' at 6601356, the last event read from './log-bin.000001' at 4, the last byte read from './log-bin.000001' at 4.")

Моя гипотеза - скрипт не тестировали со старыми версиями mysql.
источник

AK

Andrey Kovtun in ClickHouse не тормозит
добрый день. Подскажите, дата саентисты хотят доставать данные из кликхауса без условий почти select * from table с ограничением по датам, но это все равно сотни тысяч событий (хотят делать так раз в сутки). Насколько я понимаю - так делать, как минимум плохо, как подобные запросы будут влиять на производительность?
источник

КТ

Константин Трофимов... in ClickHouse не тормозит
добавьте +реплику и пускай они ходят туда, а нормальный прод на остальные реплики
и пускай её хоть изнасилуют ;)
источник

КТ

Константин Трофимов... in ClickHouse не тормозит
ну и как минимум попартиционироваться тогда по датам
источник

КТ

Константин Трофимов... in ClickHouse не тормозит
что вероятно вы уже
источник

S

Slach in ClickHouse не тормозит
Andrey Kovtun
добрый день. Подскажите, дата саентисты хотят доставать данные из кликхауса без условий почти select * from table с ограничением по датам, но это все равно сотни тысяч событий (хотят делать так раз в сутки). Насколько я понимаю - так делать, как минимум плохо, как подобные запросы будут влиять на производительность?
елси сотни тысяч строк раз в сутки, то это реально мало
никак это не повлияет

если миллионы строк и раз в минуту, то повлияет, засрет вам полосу пропускания до диска и все остальные запросы будут за эту полосу бороться
источник

S

Slach in ClickHouse не тормозит
Константин Трофимов
ну и как минимум попартиционироваться тогда по датам
+1 партицирование по toYYYYMMDD или по toYYYYMM как минимум должно быть в таблице
источник