SD
Detach table / attach
а в каком порядке надо делать detach/attach и удаление из зк
Size: a a a
2020 June 08
DC
а в каком порядке надо делать detach/attach и удаление из зк
Сначала удаление
SD
у меня еще висят инсерты не добавленные в очереди
SD
я могу их не удалять?
E
привет. Сорри за нубский вопрос.
Есть распределенный во времени поток событий в базу.
Базу хочется правильно бекапить - ка клучше это делать? По планировщику вызывать некую встроенную бекапилку или писать обычный скрипт?
Если бекап таблицы случился одновременно с попыткой записать туда - что будет?
Есть распределенный во времени поток событий в базу.
Базу хочется правильно бекапить - ка клучше это делать? По планировщику вызывать некую встроенную бекапилку или писать обычный скрипт?
Если бекап таблицы случился одновременно с попыткой записать туда - что будет?
SD
я могу их не удалять?
а если их удалить, то как мне потом синхронизировать реплики? или они сами разберутся?
DT
привет. Сорри за нубский вопрос.
Есть распределенный во времени поток событий в базу.
Базу хочется правильно бекапить - ка клучше это делать? По планировщику вызывать некую встроенную бекапилку или писать обычный скрипт?
Если бекап таблицы случился одновременно с попыткой записать туда - что будет?
Есть распределенный во времени поток событий в базу.
Базу хочется правильно бекапить - ка клучше это делать? По планировщику вызывать некую встроенную бекапилку или писать обычный скрипт?
Если бекап таблицы случился одновременно с попыткой записать туда - что будет?
Базу хочется правильно бекапить - ка клучше это делать? По планировщику вызывать некую встроенную бекапилку или писать обычный скрипт?
Зависит от размера базы и куда бекапить.
Для относительно небольших баз clickhouse-backup может подойти
еще можно сделать свою логику через FREEZE table
Если бекап таблицы случился одновременно с попыткой записать туда - что будет?
те данные, что записываются не попадут в бекап
Зависит от размера базы и куда бекапить.
Для относительно небольших баз clickhouse-backup может подойти
еще можно сделать свою логику через FREEZE table
Если бекап таблицы случился одновременно с попыткой записать туда - что будет?
те данные, что записываются не попадут в бекап
E
Базу хочется правильно бекапить - ка клучше это делать? По планировщику вызывать некую встроенную бекапилку или писать обычный скрипт?
Зависит от размера базы и куда бекапить.
Для относительно небольших баз clickhouse-backup может подойти
еще можно сделать свою логику через FREEZE table
Если бекап таблицы случился одновременно с попыткой записать туда - что будет?
те данные, что записываются не попадут в бекап
Зависит от размера базы и куда бекапить.
Для относительно небольших баз clickhouse-backup может подойти
еще можно сделать свою логику через FREEZE table
Если бекап таблицы случился одновременно с попыткой записать туда - что будет?
те данные, что записываются не попадут в бекап
++
SM
Базу хочется правильно бекапить - ка клучше это делать? По планировщику вызывать некую встроенную бекапилку или писать обычный скрипт?
Зависит от размера базы и куда бекапить.
Для относительно небольших баз clickhouse-backup может подойти
еще можно сделать свою логику через FREEZE table
Если бекап таблицы случился одновременно с попыткой записать туда - что будет?
те данные, что записываются не попадут в бекап
Зависит от размера базы и куда бекапить.
Для относительно небольших баз clickhouse-backup может подойти
еще можно сделать свою логику через FREEZE table
Если бекап таблицы случился одновременно с попыткой записать туда - что будет?
те данные, что записываются не попадут в бекап
clickhouse-backup create <название бекапа> (почитай какие ключи и как тебе подходит)
копируешь /var/lib/clickhouse/backup/<название бекапа> на удаленное хранилище
clickhouse-backup delete <название бекапа> созданный бекап
копируешь /var/lib/clickhouse/backup/<название бекапа> на удаленное хранилище
clickhouse-backup delete <название бекапа> созданный бекап
АБ
Базу хочется правильно бекапить - ка клучше это делать? По планировщику вызывать некую встроенную бекапилку или писать обычный скрипт?
Зависит от размера базы и куда бекапить.
Для относительно небольших баз clickhouse-backup может подойти
еще можно сделать свою логику через FREEZE table
Если бекап таблицы случился одновременно с попыткой записать туда - что будет?
те данные, что записываются не попадут в бекап
Зависит от размера базы и куда бекапить.
Для относительно небольших баз clickhouse-backup может подойти
еще можно сделать свою логику через FREEZE table
Если бекап таблицы случился одновременно с попыткой записать туда - что будет?
те данные, что записываются не попадут в бекап
Подскажите для каких объёмов clickhouse-backup уже не подходит? И как лучше бэкапить в этом случае?
DT
Подскажите для каких объёмов clickhouse-backup уже не подходит? И как лучше бэкапить в этом случае?
ну у меня на базе с 1тб данными (это размер 1 шарда), пришлось чутка перепиливать clickhouse-backup, что бы данные бекапились по партам и инкременты соответственно по ним же делались.
Но я потом отказался от clickhouse-backup в сторону реплики на ZFS и снапшоты
Но я потом отказался от clickhouse-backup в сторону реплики на ZFS и снапшоты
АБ
ну у меня на базе с 1тб данными (это размер 1 шарда), пришлось чутка перепиливать clickhouse-backup, что бы данные бекапились по партам и инкременты соответственно по ним же делались.
Но я потом отказался от clickhouse-backup в сторону реплики на ZFS и снапшоты
Но я потом отказался от clickhouse-backup в сторону реплики на ZFS и снапшоты
а реплика в том же кластере или через copier наливается?
DT
а реплика в том же кластере или через copier наливается?
она наливается через протокол репликации, но она не в 'кластере'
I
привет в очередной раз)
у кого-нибудь есть предположение, почему размер засечек увеличивается в 2 раза при переходе от строк или enum'ов к LowCardinality?
у кого-нибудь есть предположение, почему размер засечек увеличивается в 2 раза при переходе от строк или enum'ов к LowCardinality?
Р
Коллеги всем доброго дня, подскажите, кто либо пробовал данные из амо передавать в кликхаус а оттуда в power bi?)
DT
привет в очередной раз)
у кого-нибудь есть предположение, почему размер засечек увеличивается в 2 раза при переходе от строк или enum'ов к LowCardinality?
у кого-нибудь есть предположение, почему размер засечек увеличивается в 2 раза при переходе от строк или enum'ов к LowCardinality?
ну для low_cardinality надо хранить и айдшник в словаре и сам словарь(для каждого парта).
причем в отличии от enum там скорее всего айдишник больше
причем в отличии от enum там скорее всего айдишник больше
I
размер колонки на диске не меняется относительно enum
только размер файла с засечками
только размер файла с засечками
I
зачем в засечках хранить что-то из словаря?
I
точнее, при переходе с енама на словарь размер колонки на диске даже уменьшился (сжатый), а разжатый +- такой же
DT
размер колонки на диске не меняется относительно enum
только размер файла с засечками
только размер файла с засечками
А, я подумал про хранение в оперативной памяти.
словарь там хитрый, и их может быть несколько на 1 парт емнип
словарь там хитрый, и их может быть несколько на 1 парт емнип