Size: a a a

ClickHouse не тормозит

2020 May 15

A

Andrey in ClickHouse не тормозит
Роман
пока не заходил в него -дефолтные значения должны быть
вообще deb пакет при установке, если мне не изменяет память, запрашивает ввод пароля.
так что проверьте на всякий случай еще директорию /etc/clickhouse-server/users.d, там может быть файл с юзером
источник

Р

Роман in ClickHouse не тормозит
ага там действительно пароль был, указал его в users.xml - сейчас нужно как-то перезапустить кликхаус для принятия изменений? просто  всё ещё выдаёт ошибку
источник

A

Andrey in ClickHouse не тормозит
Роман
ага там действительно пароль был, указал его в users.xml - сейчас нужно как-то перезапустить кликхаус для принятия изменений? просто  всё ещё выдаёт ошибку
посмотрите в /etc/clickhouse-client/, там будут настройки текущего дефолтного юзера. Так вот его пароль должен быть такой же как и в /etc/clickhouse-server/. Либо руками укадите при подключении
источник

Р

Роман in ClickHouse не тормозит
Andrey
посмотрите в /etc/clickhouse-client/, там будут настройки текущего дефолтного юзера. Так вот его пароль должен быть такой же как и в /etc/clickhouse-server/. Либо руками укадите при подключении
вы имеете ввиду config.xml?
источник

Р

Роман in ClickHouse не тормозит
я просто не вижу там упоминаний логина\пассворда
источник

A

Andrey in ClickHouse не тормозит
у вас есть 2 конфига. Один конфиг юзеров в сервере, второй конфиг клиента. Вот у вас логин и пароль должен быть в клиенте такой же как у одного из юзеров в сервере, чтоб вы могли подключаться не указывая их руками
источник

DD

Dmitry Detkov in ClickHouse не тормозит
всем привет. в довольно старой версии 1.1.54327 при резервном копировании таблицы(запросом ALTER TABLE $TABLE FREEZE PARTITION $PARTITION) в директорию со «снепшотом» не сохраняется файл format_version.txt и это приводит к проблемам при востановлении (https://github.com/ClickHouse/ClickHouse/issues/1569). ктонибубудь уже решал подобную проблему? может можно вытащить информацию о версии формата запросом?
источник

S

Slach in ClickHouse не тормозит
Kirill Solokhov
Коллеги, помогите! Делаю insert через native golang driver (https://github.com/ClickHouse/clickhouse-go) на клиенте все хорошо, коммит, ошибок нет. На сервере в логах такая ошибка:
2020.05.14 15:01:56.279294 [ 9095 ] {0c523c9b-b7b7-42fd-a78d-aece170d6669} <Error> executeQuery: Code: 33, e.displayText() = DB::Exception: Cannot read all data in NativeBlockInputStream. Rows read: 0. Rows expected: 990. (version 20.4.2.9 (official build)) (from 109.252.83.134:3145) (in query: INSERT INTO test.d_exch (EventTime, ...) VALUES ), Stack trace (when copying this message, always include the lines below):

0. Poco::Exception::Exception(std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char> > const&, int) @ 0x10406ef0 in /usr/bin/clickhouse
1. DB::Exception::Exception(std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char> > const&, int) @ 0x8ff88ad in /usr/bin/clickhouse
2. ? @ 0xce4a050 in /usr/bin/clickhouse
3. DB::NativeBlockInputStream::readImpl() @ 0xce47e1f in /usr/bin/clickhouse
4. DB::IBlockInputStream::read() @ 0xce37e0d in /usr/bin/clickhouse
5. DB::TCPHandler::receiveData(bool) @ 0x90fc7db in /usr/bin/clickhouse
6. DB::TCPHandler::receivePacket() @ 0x90fdd67 in /usr/bin/clickhouse
7. DB::TCPHandler::readDataNext(unsigned long const&, int const&) @ 0x90fdf45 in /usr/bin/clickhouse
8. DB::TCPHandler::processInsertQuery(DB::Settings const&) @ 0x90fe788 in /usr/bin/clickhouse
9. DB::TCPHandler::runImpl() @ 0x9100057 in /usr/bin/clickhouse
10. DB::TCPHandler::run() @ 0x9100650 in /usr/bin/clickhouse
11. Poco::Net::TCPServerConnection::start() @ 0x102f2c6b in /usr/bin/clickhouse
12. Poco::Net::TCPServerDispatcher::run() @ 0x102f30fb in /usr/bin/clickhouse
13. Poco::PooledThread::run() @ 0x104a0cc6 in /usr/bin/clickhouse
14. Poco::ThreadImpl::runnableEntry(void*) @ 0x1049bf80 in /usr/bin/clickhouse
15. start_thread @ 0x76db in /lib/x86_64-linux-gnu/libpthread-2.27.so
16. clone @ 0x12188f in /lib/x86_64-linux-gnu/libc-2.27.so
сможете issue вместе  с примером golang кода и схемой БД и версией сервера на github завести?
источник

KS

Kirill Solokhov in ClickHouse не тормозит
Slach
сможете issue вместе  с примером golang кода и схемой БД и версией сервера на github завести?
Спасибо, я уже разобрался, проблема у меня была (не корректная синхронизация в приложении, работа завершалась раньше чем данные успевали оитпарвитсья в ch)
источник

A

Alexey in ClickHouse не тормозит
пытаюсь сбилдить контейнер с хаусом, получаю ошибку
 gpg: keyserver receive failed: Server indicated a failure 

шарит кто как править?
источник

ЕА

Егор Андреевич... in ClickHouse не тормозит
Добрый день, у кого-то был опыт ограничений пользователей к кликхаусу? по настройками типа max_memory_usage max_memory_usage_per_user? В целом проблема такая: есть с десяток пользователей кликхауса, и в последнее время часто упираемся в
Memory limit (total) exceeded
 на 64гб оперативки, собсно хочется найти узкое место или понять какие цифры впихивать в ограничительные настройки
источник

SK

Serhii Kholodniuk in ClickHouse не тормозит
Добрый день. Необходимо подключить внешний словарь postgres через ODBS. все установил согласно https://clickhouse.tech/docs/ru/sql-reference/dictionaries/external-dictionaries/external-dicts-dict-sources/#primer-podkliucheniia-postgresql
источник

SK

Serhii Kholodniuk in ClickHouse не тормозит
выдает Code: 86. DB::Exception: Received from localhost:9000. DB::Exception: Received error from remote server /columns_info?connection_string=DSN%3Dmyconnection&schema=redash&table=clickhouse_dictionary_tag_v1_title&external_table_functions_use_nulls=true. HTTP status code: 500 Internal Server Error, body: Error getting columns from ODBC 'Poco::Exception. Code: 1000, e.code() = 0, e.displayText() = Connection attempt failed: Connection:Not applicable
Server:Not applicable
===========================
ODBC Diagnostic record #1:
===========================
SQLSTATE = IM002
Native Error Code = 0
[unixODBC][Driver Manager]Data source name not found, and no default driver specified

(version 20.3.8.53 (official build))'
источник

S

Slach in ClickHouse не тормозит
Егор Андреевич
Добрый день, у кого-то был опыт ограничений пользователей к кликхаусу? по настройками типа max_memory_usage max_memory_usage_per_user? В целом проблема такая: есть с десяток пользователей кликхауса, и в последнее время часто упираемся в
Memory limit (total) exceeded
 на 64гб оперативки, собсно хочется найти узкое место или понять какие цифры впихивать в ограничительные настройки
у вас ограничения то есть? или нет?
в clickhouse еще есть https://clickhouse.tech/docs/en/operations/settings/settings/#settings-max_query_size
источник

ЕА

Егор Андреевич... in ClickHouse не тормозит
нет, ограничения дефолтные все
источник

SK

Serhii Kholodniuk in ClickHouse не тормозит
Serhii Kholodniuk
выдает Code: 86. DB::Exception: Received from localhost:9000. DB::Exception: Received error from remote server /columns_info?connection_string=DSN%3Dmyconnection&schema=redash&table=clickhouse_dictionary_tag_v1_title&external_table_functions_use_nulls=true. HTTP status code: 500 Internal Server Error, body: Error getting columns from ODBC 'Poco::Exception. Code: 1000, e.code() = 0, e.displayText() = Connection attempt failed: Connection:Not applicable
Server:Not applicable
===========================
ODBC Diagnostic record #1:
===========================
SQLSTATE = IM002
Native Error Code = 0
[unixODBC][Driver Manager]Data source name not found, and no default driver specified

(version 20.3.8.53 (official build))'
В чем может быть проблема?
источник

A

Andrey in ClickHouse не тормозит
Serhii Kholodniuk
В чем может быть проблема?
Похоже на не верный dsn
источник

S

Slach in ClickHouse не тормозит
ну вам же говорит четко
[unixODBC][Driver Manager]Data source name not found, and no default driver specified

настройте odbc.ini
у вас его явно нет либо лежит не там
на сервере где clickhouse-server
должен быть odbc.ini
ну и DRIVER в нем должен на .so указывать

через isql утилиту (входит в состав unixodbc) попробуйте с вашим DSN подключиться
источник

SK

Serhii Kholodniuk in ClickHouse не тормозит
Slach
ну вам же говорит четко
[unixODBC][Driver Manager]Data source name not found, and no default driver specified

настройте odbc.ini
у вас его явно нет либо лежит не там
на сервере где clickhouse-server
должен быть odbc.ini
ну и DRIVER в нем должен на .so указывать

через isql утилиту (входит в состав unixodbc) попробуйте с вашим DSN подключиться
Драйвер прописал в .ini через утилиту isql не конектиться
источник

S

Slach in ClickHouse не тормозит
Егор Андреевич
нет, ограничения дефолтные все
https://clickhouse.tech/docs/en/operations/settings/query-complexity/#settings_max_memory_usage
ну там 10 гигов RAM по умолчанию
на 64G RAM можно и увеличить, но лучше для начала посмотреть на сами query
источник