Size: a a a

ClickHouse не тормозит

2021 January 14

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Sergey Bubnov
Спасибо, а нет ли способов понять, правильно ли я построил индекс для запроса? типа как в постгре explain какой-то сделать
какой индекс? skip ?
источник

A

Alex in ClickHouse не тормозит
Привет

ребят, есть такой запрос

SELECT * FROM keyword_statistic WHERE search_date='2020-01-01' ORDER BY search_date LIMIT 1000, 1000

но все время разные отрезки попадают, там на дату 500 тысяч строк инфы..., т/е/ все время результат как будто рандомный возвращает

как сделать чтоб оно всегда срезало мертво как в мускуле? от числа и не было рандомной выборки
источник

A

Alex in ClickHouse не тормозит
а то мне нужно часть данных обратно в мускул перелить....)
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Alex
Привет

ребят, есть такой запрос

SELECT * FROM keyword_statistic WHERE search_date='2020-01-01' ORDER BY search_date LIMIT 1000, 1000

но все время разные отрезки попадают, там на дату 500 тысяч строк инфы..., т/е/ все время результат как будто рандомный возвращает

как сделать чтоб оно всегда срезало мертво как в мускуле? от числа и не было рандомной выборки
WHERE search_date='2020-01-01' ORDER BY search_date

так а секунд нету?
источник

A

Alex in ClickHouse не тормозит
секунд нет
источник

DC

Denny Crane [not a Y... in ClickHouse не тормозит
Alex
а то мне нужно часть данных обратно в мускул перелить....)
а зачем LIMIT 1000, 1000
лейте в файл без лимита format CSV и потом в mysql загрузите как csv
источник

A

Alex in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
а зачем LIMIT 1000, 1000
лейте в файл без лимита format CSV и потом в mysql загрузите как csv
благодарю
источник

В

Влад in ClickHouse не тормозит
Благодарю, поизучаю
источник

EP

Evgen Pr in ClickHouse не тормозит
подскажите пожалуйста, кто работал с питоновским клиентом для кликхауса, когда в одном приложении делаю запросы в несколько потоков на запись в одну таблицу получаю что то вроде этого

Error on database:9000 ping: Unexpected EOF while reading bytes
Error on database:9000 ping: [Errno 9] Bad file descriptor
Error on database:9000 ping: [Errno 9] Bad file descriptor
EXCEPTION! Code: 100. Unknown packet 4 from server database:9000
clickhouse_driver.errors.UnknownPacketFromServerError: Code: 100. Unknown packet 4 from server database:9000
источник

TS

Taras Shevchenko in ClickHouse не тормозит
Evgen Pr
подскажите пожалуйста, кто работал с питоновским клиентом для кликхауса, когда в одном приложении делаю запросы в несколько потоков на запись в одну таблицу получаю что то вроде этого

Error on database:9000 ping: Unexpected EOF while reading bytes
Error on database:9000 ping: [Errno 9] Bad file descriptor
Error on database:9000 ping: [Errno 9] Bad file descriptor
EXCEPTION! Code: 100. Unknown packet 4 from server database:9000
clickhouse_driver.errors.UnknownPacketFromServerError: Code: 100. Unknown packet 4 from server database:9000
Создайте по клиенту на ядро.
источник

EP

Evgen Pr in ClickHouse не тормозит
Ага. так и подумал. спасибо
источник

M

Munir in ClickHouse не тормозит
Denny Crane [not a Yandex bot]
в профиле default
Это же в user.xml? А где-нибудь есть описание, какие ключи писать?
источник

D

Dj in ClickHouse не тормозит
Sergey Bubnov
Спасибо, а нет ли способов понять, правильно ли я построил индекс для запроса? типа как в постгре explain какой-то сделать
запустите с set send_logs_level='trace' там много полезного. explain подвезли недавно, но он не для новичков
источник

SB

Sergey Bubnov in ClickHouse не тормозит
Dj
запустите с set send_logs_level='trace' там много полезного. explain подвезли недавно, но он не для новичков
Понял, спасибо
источник

MG

Mikhail Glader in ClickHouse не тормозит
Добрый день. Может кто сталкивался. Беру файл с 10млн записей в формате ORC. Выполняю запрос insert into <table> select * from file('<filename>', ORC, '<fields>'). Запрос работает очень долго (уже больше часа) и пишет, что вставил 700 млн строк. В самой таблице почти сразу появилось 10 млн и не меняется. В чем может быть проблема?
(точно такой же по составу файл, но parquet, заливает сразу)
источник

S

Slach in ClickHouse не тормозит
Mikhail Glader
Добрый день. Может кто сталкивался. Беру файл с 10млн записей в формате ORC. Выполняю запрос insert into <table> select * from file('<filename>', ORC, '<fields>'). Запрос работает очень долго (уже больше часа) и пишет, что вставил 700 млн строк. В самой таблице почти сразу появилось 10 млн и не меняется. В чем может быть проблема?
(точно такой же по составу файл, но parquet, заливает сразу)
выглядит как повод для issue на github

а если строк меньше чем 10 миллионов?
источник
2021 January 15

MG

Mikhail Glader in ClickHouse не тормозит
Slach
выглядит как повод для issue на github

а если строк меньше чем 10 миллионов?
Аналогично.
источник

A

Ananth in ClickHouse не тормозит
while connecting tableau with clickhouse we are getting below error
[unixODBC][Driver Manager]Can't open lib '/usr/local/lib/libclickhouseodbc.so' : file not found
Generic ODBC requires additional configuration. The driver and DSN (data source name) must be installed and configured to match the connection.
Unable to connect using the DSN named "ANANTH DB". Check that the DSN exists and is a valid connection.
источник

A

Ananth in ClickHouse не тормозит
источник

AK

Anton Khokhrin in ClickHouse не тормозит
Ananth
while connecting tableau with clickhouse we are getting below error
[unixODBC][Driver Manager]Can't open lib '/usr/local/lib/libclickhouseodbc.so' : file not found
Generic ODBC requires additional configuration. The driver and DSN (data source name) must be installed and configured to match the connection.
Unable to connect using the DSN named "ANANTH DB". Check that the DSN exists and is a valid connection.
If you are sure that file exists and configuration is correct, try ldd comand. You can see this message when system can't find one of dependencies of .so file or it has wrong version.
источник