Size: a a a

ClickHouse не тормозит

2016 November 17

AN

Alexander Neberekutin in ClickHouse не тормозит
Ставили из пакета который указан на clickhouse.yandex, версия - Ubuntu 16.04 LTS
источник

e

er@essbase.ru in ClickHouse не тормозит
из сырцов собрать можете ?  - обычно это помогает если не хватает связаной библиотеки , то явно ошибки огребете
источник

AN

Alexander Neberekutin in ClickHouse не тормозит
Не пробовали, будем пробовать. Собрать из сырцов и протестировать этот же момент?
источник

e

er@essbase.ru in ClickHouse не тормозит
источник

АК

Андрей Михайлович Корниенко in ClickHouse не тормозит
Добра. А вы когда выкатываете что-то, всегда не пишете как собирать?
источник

🔒

🔒Zloool🔒 in ClickHouse не тормозит
Alexander Neberekutin
Всем привет! Писали в техподдержку, но там ответа так и не получили, решил сюда обратиться:)

Столкнулись с такой проблемой: после создания любой таблицы в базе и попытке обращения к этой таблице возникает ошибка вида -
Code: 1000. DB::Exception: Received from localhost:9000, 127.0.0.1. DB::Exception: File not found: /opt/clickhouse/data/myapptest2/testtable/pageURL.bin.
ClickHouse client version 1.1.54030.
ClickHouse server version 1.1.54030

Обновили до версии 1.1.54046
Теперь следующее поведение:
2016.11.15 12:58:56.602 [ 2 ] <Error> HTTPHandler: Poco::Exception. Code: 1000, e.code() = 2, e.displayText() = File not found: /opt/clickhouse//data/myapp/installations/app_id.bin, e.what() = File not found

Может кто знает в какую сторону стоит копать?
В строке с File not found подозрительно выглядят два слеша в пути
источник

АК

Андрей Михайлович Корниенко in ClickHouse не тормозит
О! Класс. Запихнули в doc. Теперь вижу.
источник

АК

Андрей Михайлович Корниенко in ClickHouse не тормозит
🔒Zloool🔒
В строке с File not found подозрительно выглядят два слеша в пути
И чем лечить?
источник

АК

Андрей Михайлович Корниенко in ClickHouse не тормозит
В том смысле, что это умолчание. Я ж не настраивал пути.
источник

АК

Андрей Михайлович Корниенко in ClickHouse не тормозит
Потому мне не понятно, кто и где это прописал.
источник

🔒

🔒Zloool🔒 in ClickHouse не тормозит
Это так, предположение, я без идей
источник

АК

Андрей Михайлович Корниенко in ClickHouse не тормозит
А вот мне ещё другое интересно: собрали пакет, а в ответе написано, что где-то чего-то не хватает. Вроде как при грамотной сборки зависимости тянутся сами. Не?
источник

АК

Андрей Михайлович Корниенко in ClickHouse не тормозит
Это я про репу
источник

PK

Pavel Kartavyy in ClickHouse не тормозит
Alexander Neberekutin
Всем привет! Писали в техподдержку, но там ответа так и не получили, решил сюда обратиться:)

Столкнулись с такой проблемой: после создания любой таблицы в базе и попытке обращения к этой таблице возникает ошибка вида -
Code: 1000. DB::Exception: Received from localhost:9000, 127.0.0.1. DB::Exception: File not found: /opt/clickhouse/data/myapptest2/testtable/pageURL.bin.
ClickHouse client version 1.1.54030.
ClickHouse server version 1.1.54030

Обновили до версии 1.1.54046
Теперь следующее поведение:
2016.11.15 12:58:56.602 [ 2 ] <Error> HTTPHandler: Poco::Exception. Code: 1000, e.code() = 2, e.displayText() = File not found: /opt/clickhouse//data/myapp/installations/app_id.bin, e.what() = File not found

Может кто знает в какую сторону стоит копать?
Привет. А движок какой?
источник

DA

Dmitry Andreev in ClickHouse не тормозит
Alexey Tomin
Добрый день всем!
Кто-нибудь грузил данные в CH из hadoop (hdfs)?
Как лучше всего делать? Если пускать map, то CH давится объёмами (hadoop кластер мощнее). Запускать отдельное приложение- админы против (ещё одна программа- ещё им работы).
А что конкретно делает mapper? Как он делит данные? Сколько их запускается одновременно?
источник

АК

Андрей Михайлович Корниенко in ClickHouse не тормозит
Pavel Kartavyy
Привет. А движок какой?
Хороший вопрос. Там ставили также, как и тыкдом. Так что даже не вдавались в этот вопрос. Это надо смотреть в коде или спрашивать у разрабов.
Собственное, ссылка https://github.com/5craft/blackbears-analytics
источник

АК

Андрей Михайлович Корниенко in ClickHouse не тормозит
попробуем сейчас выяснить.
источник

АК

Андрей Михайлович Корниенко in ClickHouse не тормозит
я, кстати, даже не знал, что у него их может быть несколько
источник

NG

Nikita Glashenko (Hohol) in ClickHouse не тормозит
Dmitry Andreev
А что конкретно делает mapper? Как он делит данные? Сколько их запускается одновременно?
mapper делал вставку в удаленный clickhouse через jdbc, batch insert'ами.
Батчи были примерно по 100к записей. Один батч - одна map таска.
Со "сколько их запускается одновременно" - проблема. Я не нашел способа ограничить количество одновременно работающих map тасок на уровне одной джобы. Только целиком для кластера. А это мешало бы другим джобам.
источник

PK

Pavel Kartavyy in ClickHouse не тормозит
для большинста случаев тебе нужно семейство MergeTree движков. Судя по пути движок стоит не MergeTree. Чтобы посмотреть движок "show create table", в конце он написан
источник