Size: a a a

ClickHouse не тормозит

2020 June 17

DS

Denis Semenov in ClickHouse не тормозит
а так не работает)
источник

DS

Denis Semenov in ClickHouse не тормозит
SELECT null != 'val';
источник

DS

Denis Semenov in ClickHouse не тормозит
null
источник

DS

Denis Semenov in ClickHouse не тормозит
источник

DS

Denis Semenov in ClickHouse не тормозит
так всё же
источник

l

lnuynxa in ClickHouse не тормозит
Denis Semenov
SELECT null != 'val';
select * FROM (select Null as col1 UNION ALL select toString('val') as col1) WHERE assumeNotNull(col1) != 'val'
источник

BR

Boris Romanov in ClickHouse не тормозит
Привет! Я правильно понимаю, что Kafka коннектор сейчас работает с Avro только с конфлюентовской Shema Registry? В документации есть описание работы с Avro без Registry, но там нужен контейнер с схемой, которого в кафке явно не будет..
источник

DS

Denis Semenov in ClickHouse не тормозит
lnuynxa
select * FROM (select Null as col1 UNION ALL select toString('val') as col1) WHERE assumeNotNull(col1) != 'val'
понятно)
источник

l

lnuynxa in ClickHouse не тормозит
но вообще нужно быть осторожным. может скан по индексу поломаться, надо проверять
источник

И

Иван in ClickHouse не тормозит
А в чем вопрос то
источник

DS

Denis Semenov in ClickHouse не тормозит
Иван
А в чем вопрос то
вопрос, если ли в клике оператор notEqualsOrNull.
Потому что мне приходится писать
COLUMN != 'val' OR COLUMN IS NULL
чтобы выбросить из выборки все строчки, в которых имеется значение val, оставив при этом строчки, в которых значение null
источник

ДН

Денис Никульников... in ClickHouse не тормозит
Друзья, привет. Есть таблица с 2млрд строк.
select * from table order by created asc limit 1
- вешает сервак по cpu. Как можно ограничить использование cpu на запросах?
источник

l

lnuynxa in ClickHouse не тормозит
Денис Никульников
Друзья, привет. Есть таблица с 2млрд строк.
select * from table order by created asc limit 1
- вешает сервак по cpu. Как можно ограничить использование cpu на запросах?
set max_threads = N;
источник

Д

Данияр in ClickHouse не тормозит
Всем привет! У меня есть distributed таблица которая смотрит на 2 MergeTree таблицы (одна на том же сервере, другая на другом). При Insert в эту distributed таблицу вылетает ошибка :

2020.06.17 16:35:14.383878 [ 86 ] {} <Error> _request_store_master.Distributed.DirectoryMonitor: Code: 210, e.displayText() = DB::NetException: Connection reset by peer, while writing to socket (192.**********>

0. 0x100ab5bc Poco::Exception::Exception(std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char> > const&, int)  in /usr/bin/clickhouse
1. 0x8e74849 DB::Exception::Exception(std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char> > const&, int)  in /usr/bin/clickhouse
2. 0x8f65bea ?  in /usr/bin/clickhouse
3. 0x8f32280 ?  in /usr/bin/clickhouse
4. 0xd80634c DB::Connection::sendPreparedData(DB::ReadBuffer&, unsigned long, std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char> > const&)  in /usr/bin/clickhouse
5. 0xd597467 DB::RemoteBlockOutputStream::writePrepared(DB::ReadBuffer&, unsigned long)  in /usr/bin/clickhouse
6. 0xd58ae08 DB::StorageDistributedDirectoryMonitor::processFile(std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char> > const&)  in /usr/bin/clickhouse
7. 0xd58d585 DB::StorageDistributedDirectoryMonitor::processFiles()  in /usr/bin/clickhouse
8. 0xd58d8a8 DB::StorageDistributedDirectoryMonitor::run()  in /usr/bin/clickhouse
9. 0xd590151 ThreadFromGlobalPool::ThreadFromGlobalPool<void (DB::StorageDistributedDirectoryMonitor::*)(), DB::StorageDistributedDirectoryMonitor*>(void (DB::StorageDistributedDirectoryMonitor::*&&)(), DB::Sto>
10. 0x8e97347 ThreadPoolImpl<std::__1::thread>::worker(std::__1::__list_iterator<std::__1::thread, void*>)  in /usr/bin/clickhouse
11. 0x8e9580f ?  in /usr/bin/clickhouse
12. 0x76db start_thread  in /lib/x86_64-linux-gnu/libpthread-2.27.so
13. 0x12188f __clone  in /lib/x86_64-linux-gnu/libc-2.27.so
(version 20.1.5.26 (official build))
источник

ДН

Денис Никульников... in ClickHouse не тормозит
lnuynxa
set max_threads = N;
спасибо
источник

l

lnuynxa in ClickHouse не тормозит
Данияр
Всем привет! У меня есть distributed таблица которая смотрит на 2 MergeTree таблицы (одна на том же сервере, другая на другом). При Insert в эту distributed таблицу вылетает ошибка :

2020.06.17 16:35:14.383878 [ 86 ] {} <Error> _request_store_master.Distributed.DirectoryMonitor: Code: 210, e.displayText() = DB::NetException: Connection reset by peer, while writing to socket (192.**********>

0. 0x100ab5bc Poco::Exception::Exception(std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char> > const&, int)  in /usr/bin/clickhouse
1. 0x8e74849 DB::Exception::Exception(std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char> > const&, int)  in /usr/bin/clickhouse
2. 0x8f65bea ?  in /usr/bin/clickhouse
3. 0x8f32280 ?  in /usr/bin/clickhouse
4. 0xd80634c DB::Connection::sendPreparedData(DB::ReadBuffer&, unsigned long, std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char> > const&)  in /usr/bin/clickhouse
5. 0xd597467 DB::RemoteBlockOutputStream::writePrepared(DB::ReadBuffer&, unsigned long)  in /usr/bin/clickhouse
6. 0xd58ae08 DB::StorageDistributedDirectoryMonitor::processFile(std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char> > const&)  in /usr/bin/clickhouse
7. 0xd58d585 DB::StorageDistributedDirectoryMonitor::processFiles()  in /usr/bin/clickhouse
8. 0xd58d8a8 DB::StorageDistributedDirectoryMonitor::run()  in /usr/bin/clickhouse
9. 0xd590151 ThreadFromGlobalPool::ThreadFromGlobalPool<void (DB::StorageDistributedDirectoryMonitor::*)(), DB::StorageDistributedDirectoryMonitor*>(void (DB::StorageDistributedDirectoryMonitor::*&&)(), DB::Sto>
10. 0x8e97347 ThreadPoolImpl<std::__1::thread>::worker(std::__1::__list_iterator<std::__1::thread, void*>)  in /usr/bin/clickhouse
11. 0x8e9580f ?  in /usr/bin/clickhouse
12. 0x76db start_thread  in /lib/x86_64-linux-gnu/libpthread-2.27.so
13. 0x12188f __clone  in /lib/x86_64-linux-gnu/libc-2.27.so
(version 20.1.5.26 (official build))
а на втором хосте ошибки есть?
источник

Д

Данияр in ClickHouse не тормозит
lnuynxa
а на втором хосте ошибки есть?
сейчас посмотрю
источник

Д

Данияр in ClickHouse не тормозит
lnuynxa
а на втором хосте ошибки есть?
2020.06.17 16:35:14.381334 [ 78 ] {} <Error> ServerErrorHandler: Code: 99, e.displayText() = DB::Exception: Unknown packet 120 from client, Stack trace (when copying this message, always include the lines below>

0. 0x100ab5bc Poco::Exception::Exception(std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char> > const&, int)  in /usr/bin/clickhouse
1. 0x8e74849 DB::Exception::Exception(std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char> > const&, int)  in /usr/bin/clickhouse
2. 0x8f5b143 ?  in /usr/bin/clickhouse
3. 0x8f58625 DB::TCPHandler::runImpl()  in /usr/bin/clickhouse
4. 0x8f596bc DB::TCPHandler::run()  in /usr/bin/clickhouse
5. 0xdeaba37 Poco::Net::TCPServerConnection::start()  in /usr/bin/clickhouse
6. 0xdeabe9d Poco::Net::TCPServerDispatcher::run()  in /usr/bin/clickhouse
7. 0x101358bf Poco::PooledThread::run()  in /usr/bin/clickhouse
8. 0x10131908 Poco::ThreadImpl::runnableEntry(void*)  in /usr/bin/clickhouse
9. 0x101331a9 ?  in /usr/bin/clickhouse
10. 0x76db start_thread  in /lib/x86_64-linux-gnu/libpthread-2.27.so
11. 0x12188f __clone  in /lib/x86_64-linux-gnu/libc-2.27.so
(version 20.1.5.26 (official build))
источник

l

lnuynxa in ClickHouse не тормозит
Данияр
2020.06.17 16:35:14.381334 [ 78 ] {} <Error> ServerErrorHandler: Code: 99, e.displayText() = DB::Exception: Unknown packet 120 from client, Stack trace (when copying this message, always include the lines below>

0. 0x100ab5bc Poco::Exception::Exception(std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char> > const&, int)  in /usr/bin/clickhouse
1. 0x8e74849 DB::Exception::Exception(std::__1::basic_string<char, std::__1::char_traits<char>, std::__1::allocator<char> > const&, int)  in /usr/bin/clickhouse
2. 0x8f5b143 ?  in /usr/bin/clickhouse
3. 0x8f58625 DB::TCPHandler::runImpl()  in /usr/bin/clickhouse
4. 0x8f596bc DB::TCPHandler::run()  in /usr/bin/clickhouse
5. 0xdeaba37 Poco::Net::TCPServerConnection::start()  in /usr/bin/clickhouse
6. 0xdeabe9d Poco::Net::TCPServerDispatcher::run()  in /usr/bin/clickhouse
7. 0x101358bf Poco::PooledThread::run()  in /usr/bin/clickhouse
8. 0x10131908 Poco::ThreadImpl::runnableEntry(void*)  in /usr/bin/clickhouse
9. 0x101331a9 ?  in /usr/bin/clickhouse
10. 0x76db start_thread  in /lib/x86_64-linux-gnu/libpthread-2.27.so
11. 0x12188f __clone  in /lib/x86_64-linux-gnu/libc-2.27.so
(version 20.1.5.26 (official build))
версии одинаковые?
источник

Д

Данияр in ClickHouse не тормозит
да
источник