я могу еще посоветовать вот такую книгу... там в 1 части объясняется за LSM таблицы, причем очень достойно и очень понятно, да и вцелом книга норм https://www.ozon.ru/context/detail/id/144402960/

на диване я вообще не лежу его нет, сплю по 5-6 часов =) работы валом от ангулярки до мобилок на айос и андройд, ява плюсы бакенд, настрйока дженкинса кластеры в касандре, решил вот освоить кликхаус и понимаю что тут-то я вообще поплыл =))

я вот эту читал недавно: https://www.ozon.ru/context/detail/id/144499396/?stat=Yl8x тоже очень зашла

мне кажется это не сильно удачное название, то что я советую не про софт..., она про дату и что с ней делать, это не про разработку ПО

Да я понял просто поделился, спасибо закажу

mercy

Доброй ночи всем!
Я столкнулся с проблемой в драйвере clickhouse-jdbc.
Формирую батч формата Native, и использую
https://github.com/ClickHouse/clickhouse-jdbc/blob/master/src/main/java/ru/yandex/clickhouse/util/ClickHouseRowBinaryStream.java#L323
для записи нуллов, как показано в инфе о методе. Но батч собирается кривым, почему-то..
Если же просто вставлять вместо нулла какое-то значение, то все ок, батч валидный.
КТо-нибудь сталкивался с такой проблемой и что с этим делать?

почему Native? Native и RowBinary это два разных формата.
Какая ошибка? В Таблице поля Nullable ?
Как insert написан?

да, я понимаю, что это два разных формата, но я именно Native использую. Как я заметил в коде тут, Native тоже вполне можно формировать этим драйвером. https://github.com/ClickHouse/clickhouse-jdbc/blob/master/src/test/java/ru/yandex/clickhouse/util/ClickHouseRowBinaryStreamTest.java#L178
И формирую, собственно, но если не размечать NULL-ом ничего

инсерт что-то типа такого
clickhouse-client -q "insert into test_native format Native" < /var/tmp/test.native

ошибка:
Code: 50. DB::Exception: Unknown data type family: col1
где col1 - это название колонки

так не умеет jdbc драйвер Native формат, только одну строку может. Используйте RowBinary
https://github.com/ClickHouse/clickhouse-jdbc/blob/master/src/test/java/ru/yandex/clickhouse/integration/RowBinaryStreamTest.java

почему же у меня пачка из 10к строк, собранная этим драйвером вставляется в базу в формате Native? :)
С нуллом не понятно, только, как нужно нулл размечать...

Если на живом примере, далее перечислил байтмассив, где указывается кол-во полей, кол-во строк, далее название поля, тип и его значения. и так же с другим полем. Такой батч я собираю этим драйвером. Не это ли формат Native? Все совпадает с описанием в документации и сам кликхаус его воспринимает в формате Native.
2 -- cols
3 -- rows
4   99  111  108   49  -- col1
5   85   73  110  116   56 -- uint8
5    3    1  -- col1 values
4   99  111  108   50  -- col2
5   85   73  110  116   56 -- uint8
6    4    2  -- col2 values

ЕМНИП в RowBinary и наверное в Native сначала идет байт 0/1 признак Null или нет, если Null тогда дальше идет след. колонка/строка, если не Null тогда значение

я тоже так думал, но что-то пошло не так :) спасибо за помощь

доброй ночи, снова недотепа я =) скажите такой риторический наверное больше вопрос, почему яндекс решил сделать нумерацию колонок не с нуля а с единицы?  results.getMetaData().getColumnName(i+1);

отдельно колонки с null отдельно значения, как и на диске

stream.writeString("name");
stream.writeString("Nullable(String)");

for (int i = 0; i < numberOfRows; i++) {
    stream.markNextNullable(false);
}

for (int i = 0; i < numberOfRows; i++) {
    stream.writeString("Имя " + i);
}

имена методов конечно жесть, надо всего переделывать, с markNextNullable на markNextNull

ого, класс! спасибо! Было неочевидно с Nullable(String)

???  JDBC API  20 лет назад без яндекса в сантехники дизайнили

https://docs.oracle.com/javase/7/docs/api/java/sql/ResultSet.html
Columns are numbered from 1

а jdbc причем? или Яндекс решли, не править это а протащили через себя? я  отдельно ведь jdbc не ставлю а тяну с репы их драйвер и работаю с ним, странно что вот такая нумерация.