DC
и надо партиционировать в кафке партициями или топиками и читать например разные топики на шардах
Size: a a a
2020 August 05
AP
@den_crane расскажите пожалуйста, почему это хреново?
AP
и надо партиционировать в кафке партициями или топиками и читать например разные топики на шардах
эм, а почему так?
DC
уже разобрался, включил internal replication и админы докрутили права, чтоб работала репликация
internal replication из другой оперы, оно должно быть true у вас
AP
уточню, чтоб закрепить, я хочу писать в таблицу _replica c engine
ReplicatedMergeTree и если я пишу в эту таблицу на одном сервере, я хочу чтоб такая же запись появлялась и на другом (на реплике), как раз это делается через internal replication = trueAP
или я ошибаюсь?
DC
если есть
(
ENGINE = Replicated internal_replication обязано быть true(
internal_replication=true означает что репликацию делает сама таблица потому что у нее Replicated engine)DC
эм, а почему так?
>писались в заданный шард
заданный как? шардирование по полю какому-то?
что вы вообще понимаете под фразой "писались в заданный шард"
заданный как? шардирование по полю какому-то?
что вы вообще понимаете под фразой "писались в заданный шард"
AP
поясню от результата, кластер из 4х нод, в котором 2 шарда, в каждом 2 сервера в реплике, каждый сервер читает из кафка топика и пишет в таблицу _replicated
AP
я хочу, чтоб данные прочитанные из кафки скажем сервером 1 в шарде 1 зареплицировались на серер 2 в этом же шарде и наоборот
AP
тоже самое и для второго шарда, сервер 3 в шарде 2 реплицирует на серевер 4, сервер 4 реплицирует на сервер 3
AP
над этими 4я серверами и их _replicated таблицей я хочу построить distributed таблицу
DC
поясню от результата, кластер из 4х нод, в котором 2 шарда, в каждом 2 сервера в реплике, каждый сервер читает из кафка топика и пишет в таблицу _replicated
ааа, ясно, тогда все ОК у вас.
У вас просто рандомное шардирование, половина записей в одном шарде, половина в другом.
У вас просто рандомное шардирование, половина записей в одном шарде, половина в другом.
AP
Ok, понял, спасибо
2020 August 06
VC
Доброго времени всем, может, кто подскажет:
вставка значений в Decimal(9, 2) на КХ 20.4.4.18, при вставке значения
как работает эта магия и куда колдовать?
вставка значений в Decimal(9, 2) на КХ 20.4.4.18, при вставке значения
1.01 умудряется (крайне редко, но все же) фейлиться с Code: 69, e.displayText() = DB::Exception: Too many digits (10 > 9) in decimal value: (at row 171)
Row 171:
<...>
Column 38, name: Amount, type: Decimal(9, 2), parsed text: "1.00999999"ERROR как работает эта магия и куда колдовать?
DC
Доброго времени всем, может, кто подскажет:
вставка значений в Decimal(9, 2) на КХ 20.4.4.18, при вставке значения
как работает эта магия и куда колдовать?
вставка значений в Decimal(9, 2) на КХ 20.4.4.18, при вставке значения
1.01 умудряется (крайне редко, но все же) фейлиться с Code: 69, e.displayText() = DB::Exception: Too many digits (10 > 9) in decimal value: (at row 171)
Row 171:
<...>
Column 38, name: Amount, type: Decimal(9, 2), parsed text: "1.00999999"ERROR как работает эта магия и куда колдовать?
вот прямо 1.01?
VC
да, именно так
VC
логи параллельно со вставкой пишутся, так что точно именно это число улетало
DC
а воспроизводится если
create table x(a Decimal(9,2)) Engine=Null;
echo 'insert into x values (1.01)'|clickhouse-benchmark --database default
create table x(a Decimal(9,2)) Engine=Null;
echo 'insert into x values (1.01)'|clickhouse-benchmark --database default
VC
как проверю - отпишусь, спасибо за ответ в позднее время)