Size: a a a

ClickHouse не тормозит

2021 February 03

YC

Yulia Ch in ClickHouse не тормозит
Подскажите, пожалуйста, как, имея таблицы, сгенерить sql-скрипт, который создаст такие таблицы?
источник

l

lnuynxa in ClickHouse не тормозит
Yulia Ch
Подскажите, пожалуйста, как, имея таблицы, сгенерить sql-скрипт, который создаст такие таблицы?
SELECT create_table_query FROM system.tables;
источник

YC

Yulia Ch in ClickHouse не тормозит
lnuynxa
SELECT create_table_query FROM system.tables;
Спасибо!
источник

IK

Ivan Kizimenko in ClickHouse не тормозит
что может ограничвать потребление опертивки при условии что  CH в докер контейнере, смотрю по docker stats
Ситуация
- один сервак: контейнеру выделен лимит 64 гига оперативки, он использует 2, в простое и при запросах.
- другой сервак: конктенеру выделено 24 гига он использует 12 в простое
источник

OG

Oleg Gavrilov in ClickHouse не тормозит
Может и не надо больше?
источник

IK

Ivan Kizimenko in ClickHouse не тормозит
не пойму почему  на серваке где выдано меньше гигов, и база почти всегда в простое стоит, жрет оперативы больше чем база в которую регулярно идет запись и запросы
источник

IK

Ivan Kizimenko in ClickHouse не тормозит
может и не надо больше, но почему то есть подозрение что ее  что то ограничивает
источник

FL

Fedor Loktionov in ClickHouse не тормозит
Всем привет.
С чем может быть связана проблема, при которой запрос вида

select
   main.value_1 as value_1,
   main.value_2 as value_2,
   main.value_1 as v1,
   main.value_2 as v2
from (подзапрос as main)

выдаёт разные, отличающиеся на порядки и никак не связанные результаты в колонках value_1 и v1 ?
источник

AS

Aleksey Studnev ( bi... in ClickHouse не тормозит
Dauletkhan Tulendiyev
Привет ребят,

Я создал таблицу, в которой у меня есть столбцы с некоторыми идентификаторами.
Эти идентификаторы могут быть удалены в основной базе данных mysql, и я должен добавить их для каждого запроса CH в качестве фильтра (предложение NOT IN).
Что я могу использовать для этого хранилища удаленных идентификаторов?
Раз в неделю или месяц я хочу обновить эти удаленные идентификаторы в CH и удалить записи из основной таблицы CH.

признателен за любую помощь, спасибо!
dictionary по моему для этой задачи походят
источник

СЛ

Станислав Линник... in ClickHouse не тормозит
Привет ребят, нашел странности в логах КХ
2021.01.18 22:54:34.868742 [ 19518 ] {} <Error> InterserverIOHTTPHandler: Code: 24, e.displayText() = DB::Exception: Cannot write to ostream at offset 4195414, Stack trace (when copying this message, always include the lines below):

0. DB::WriteBufferFromOStream::nextImpl() @ 0x9a4b360 in /usr/bin/clickhouse
1. DB::WriteBufferFromHTTPServerResponse::nextImpl() @ 0xe4aaca7 in /usr/bin/clickhouse
2. DB::HashingWriteBuffer::nextImpl() @ 0xe22227d in /usr/bin/clickhouse
3. DB::DataPartsExchange::Service::sendPartFromDisk(std::__1::shared_ptr<DB::IMergeTreeDataPart const> const&, DB::WriteBuffer&, bool) @ 0xe21c543 in /usr/bin/clickhouse
4. DB::DataPartsExchange::Service::processQuery(Poco::Net::HTMLForm const&, DB::ReadBuffer&, DB::WriteBuffer&, Poco::Net::HTTPServerResponse&) @ 0xe21b46a in /usr/bin/clickhouse
5. DB::InterserverIOHTTPHandler::processQuery(Poco::Net::HTTPServerRequest&, Poco::Net::HTTPServerResponse&, DB::InterserverIOHTTPHandler::Output&) @ 0xe4ae339 in /usr/bin/clickhouse
6. DB::InterserverIOHTTPHandler::handleRequest(Poco::Net::HTTPServerRequest&, Poco::Net::HTTPServerResponse&) @ 0xe4aea64 in /usr/bin/clickhouse
7. Poco::Net::HTTPServerConnection::run() @ 0x10c9c915 in /usr/bin/clickhouse
8. Poco::Net::TCPServerConnection::start() @ 0x10cd40df in /usr/bin/clickhouse
9. Poco::Net::TCPServerDispatcher::run() @ 0x10cd5af1 in /usr/bin/clickhouse
10. Poco::PooledThread::run() @ 0x10e06c99 in /usr/bin/clickhouse
11. Poco::ThreadImpl::runnableEntry(void*) @ 0x10e02bca in /usr/bin/clickhouse
12. start_thread @ 0x7ea5 in /usr/lib64/libpthread-2.17.so
13. __clone @ 0xfe96d in /usr/lib64/libc-2.17.so
(version 20.10.6.27 (official build))
2021.01.18 22:54:34.869191 [ 19518 ] {} <Error> ServerErrorHandler: Poco::Exception. Code: 1000, e.code() = 32, e.displayText() = I/O error: Broken pipe, Stack trace (when copying this message, always include the lines below):

0. Poco::Net::SocketImpl::error(int, std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char> > const&) @ 0x10cccd8d in /usr/bin/clickhouse
1. Poco::Net::SocketImpl::sendBytes(void const*, int, int) @ 0x10cce3e7 in /usr/bin/clickhouse
2. Poco::Net::StreamSocketImpl::sendBytes(void const*, int, int) @ 0x10cd3176 in /usr/bin/clickhouse
3. Poco::Net::HTTPSession::write(char const*, long) @ 0x10ca0233 in /usr/bin/clickhouse
4. Poco::Net::HTTPChunkedStreamBuf::writeToDevice(char const*, long) @ 0x10c8e15d in /usr/bin/clickhouse
5. Poco::BasicBufferedStreamBuf<char, std::__1::char_traits<char>, Poco::Net::HTTPBufferAllocator>::sync() @ 0x10c8f0b9 in /usr/bin/clickhouse
6. Poco::Net::HTTPChunkedIOS::~HTTPChunkedIOS() @ 0x10c8e3ac in /usr/bin/clickhouse
7. non-virtual thunk to Poco::Net::HTTPChunkedOutputStream::~HTTPChunkedOutputStream() @ 0x10c8ef2b in /usr/bin/clickhouse
8. Poco::Net::HTTPServerResponseImpl::~HTTPServerResponseImpl() @ 0x10c9e06f in /usr/bin/clickhouse
9. Poco::Net::HTTPServerConnection::run() @ 0x10c9c969 in /usr/bin/clickhouse
10. Poco::Net::TCPServerConnection::start() @ 0x10cd40df in /usr/bin/clickhouse
11. Poco::Net::TCPServerDispatcher::run() @ 0x10cd5af1 in /usr/bin/clickhouse
12. Poco::PooledThread::run() @ 0x10e06c99 in /usr/bin/clickhouse
13. Poco::ThreadImpl::runnableEntry(void*) @ 0x10e02bca in /usr/bin/clickhouse
14. start_thread @ 0x7ea5 in /usr/lib64/libpthread-2.17.so
15. __clone @ 0xfe96d in /usr/lib64/libc-2.17.so
(version 20.10.6.27 (official build))


Это может означать только одно - беды с диском?
источник

SS

Sergey Sesiunin in ClickHouse не тормозит
Всем привет! Есть тут эксперты по odbc-драйверу? Нормальная ли производительность, фулскан с винды через odbc-драйвер таблицы 1 млн строк и 472 столбца, занимает 1 минуту в формате RowBinaryWithNamesAndTypes? При этом пробовали через нативный clickhouse-client, там скорость в таком же формате около 12 сек. Упора в сетку/цп/озу нигде нет, ни на сервере ни на клиенте. Пробовали как с одной ноды дергать, так и с кластера в 2 и 5 нод, используя distributed таблицу, результаты примерно одинаковые +- 1-2сек, что наверное погрешность. Как-то ещё можно ускорить или всё-таки упор уже в драйвер ? В таблице в основном числовые значения
источник

В

Владислав in ClickHouse не тормозит
Коллеги SELECT timezone() выдает Europe/Berlin, сменил зону в конфигах и на самом сервере, однако ничего не поменялось, подскажите как поправить?
источник

AB

Artur Beglaryan in ClickHouse не тормозит
Владислав
Коллеги SELECT timezone() выдает Europe/Berlin, сменил зону в конфигах и на самом сервере, однако ничего не поменялось, подскажите как поправить?
Рестарт нужен
источник

В

Владислав in ClickHouse не тормозит
CH перезапустил, сам сервак только не перезапускал
источник

S

Slach in ClickHouse не тормозит
Владислав
Коллеги SELECT timezone() выдает Europe/Berlin, сменил зону в конфигах и на самом сервере, однако ничего не поменялось, подскажите как поправить?
как менял таймзону на сервере? =)
источник

В

Владислав in ClickHouse не тормозит
Slach
как менял таймзону на сервере? =)
timedatectl set-timezone UTC
источник

В

Владислав in ClickHouse не тормозит
В общем после рестарта сервера все работает
источник

M

Maxim in ClickHouse не тормозит
Всем привет. Подскажите, пожалуйста, а можно ли как-то сделать одну вьюху и для вставки и для выборки из существующей таблицы? (некий аналог переименования таблицы, что ли)
источник

EV

Evgeny Vinogradov in ClickHouse не тормозит
Maxim
Всем привет. Подскажите, пожалуйста, а можно ли как-то сделать одну вьюху и для вставки и для выборки из существующей таблицы? (некий аналог переименования таблицы, что ли)
что-то типа distributed engine?
источник

AZ

Artem Z in ClickHouse не тормозит
Привет, ткните пожалуйста куда почитать, как правильно удалить колонку использующуюся в ключе? Я так понимаю это причина ошибки DB::Exception: ALTER of key column <column_name> must be metadata-only
источник