MT
Места хватает)
Сообщение да, говорит другое.
Size: a a a
2021 February 12
K
это не похоже на точку монтирования /tmp
K
ну вот возможно скушивается в процессе запроса имено эти 25 гигов
K
в процессе выполнения запроса понаблюдайте за местом внутри докер-композ контейнера (если я правильно понял клик запущен именно в нём)
❌
В system.replication_queue причина есть обычно
Итак. Версия
Я не очень понимаю как можно "протолкнуть" выполнения задачи.
21.2.2.8. Посмотрел в select * from system.replication_queue \G там висят пару заданий, но они не относятся к делу, как я понимаю. Забыл изначально описать что я делал - create table ... on cluster ZZZ. При этом запрос был сделан с хоста с самого кластера. Зависло еще в процессе выполнения. В select * from system.zookeeper where path = '/clickhouse/task_queue/ddl' \G задача все еще висит. При этом первая задача была с ошибкой синтаксиса и она так же зависла в процессе выполнения и она так же висит. На каких то репликах таблица была создана, на каких то нет. Посмотрел что лежит в /clickhouse/ZZZ/3/logs/system/replicas - одна реплика, второй нет. Тут была идея про веркер DDL, кажется все впорядке:
$ ps -eL|grep DDL
1889 3177 ? 00:17:10 DDLWorkerExec
1889 3181 ? 00:00:00 DDLWorkerClnr
1889 9469 ? 00:00:00 DDLWorker
Я не очень понимаю как можно "протолкнуть" выполнения задачи.
❌
сервер на котором вы выполняете on cluster ZZZ читает описание кластера ZZZ и видит два хоста AA и BB
и пишет задания в
сервер АА берет свой hostname -f и оказывается что у него hostname = localhost, идет в очередь
и пишет задания в
task_queue/ddl для АА и BBсервер АА берет свой hostname -f и оказывается что у него hostname = localhost, идет в очередь
task_queue и ищет задание для localhost, там пусто.Посмотрел про имена хостов, там все как обычно. hostname -f отдает тож самое что используется в работе КХ и в ЗК
❌
Похоже я нашел проблему. Помог перезапуск КХ. DDL запросы отработали. Видимо проблема подключения с ЗК. Но это не точно. Тут вопрос как этом можно понять и сделать переподключение к ЗК? Если это вообще проблема с этим, так как я же без проблем делаю
select * from system.zookeeper where path = '/clickhouse/task_queue/ddl' \G на проблемных хостах.❌
И еще вопрос - когда уйдет задача по создания таблицы из
/clickhouse/task_queue/ddl ? сама таблица уже появилась вездеAK
Всем привет!
Можете подсказать, кто-нибудь сталкивался с таким:
Просто дичь какая-то на соседнем сервер с стакой же версией ch и конфигурацией точь в точь http API нормально работает.
А здесь два инстанса кликхауса на разных портах - и на обоих вот такой ответ и на ping и на /.
Можете подсказать, кто-нибудь сталкивался с таким:
curl http://192.168.10.21:8124/ping
There is no handle /ping
Use / or /ping for health checks.
Or /replicas_status for more sophisticated health checks.
Send queries from your program with POST method or GET /?query=...
Use clickhouse-client:
For interactive data analysis:
clickhouse-client
For batch query processing:
clickhouse-client --query='SELECT 1' > result
clickhouse-client < query > result
Просто дичь какая-то на соседнем сервер с стакой же версией ch и конфигурацией точь в точь http API нормально работает.
А здесь два инстанса кликхауса на разных портах - и на обоих вот такой ответ и на ping и на /.
❌
8123 ?
AK
да, там один на 8123, другой на 8124, оба не работают
AK
разница только в ОС, у одного 18, У другого 20 убунта
AK
бинарник clickhouse тот же самый
❌
возможно файвол или посмотреть что пишет в логах
m
curl http://192.168.10.21:8124?query=select%201
?
D
Похоже я нашел проблему. Помог перезапуск КХ. DDL запросы отработали. Видимо проблема подключения с ЗК. Но это не точно. Тут вопрос как этом можно понять и сделать переподключение к ЗК? Если это вообще проблема с этим, так как я же без проблем делаю
select * from system.zookeeper where path = '/clickhouse/task_queue/ddl' \G на проблемных хостах.наверно STOP REPLICA/START REPLICA
AK
curl http://192.168.10.21:8124?query=select%201
?
curl http://192.168.10.21:8124?query=select%201
There is no handle /?query=select%201
Use / or /ping for health checks.
Or /replicas_status for more sophisticated health checks.
Send queries from your program with POST method or GET /?query=...
Use clickhouse-client:
For interactive data analysis:
clickhouse-client
For batch query processing:
clickhouse-client --query='SELECT 1' > result
clickhouse-client < query > result
AK
кликхаус-клиент работает норм
AB
Проблема не в кликхаусе, а в курле. Включите вывод дебага курла и посмотрите что он выдает.