p
Цель чтобы в итоге осталась только последняя вставленная
Size: a a a
2020 June 26
AP
Если приезжает вообще всё, может проще тогда перезаписывать этим MergeTree таблицу? А на эту таблицу повешать MV, которая в соседнюю таблицу сохранит историю?
AF
Alexander Petrov
Если приезжает вообще всё, может проще тогда перезаписывать этим MergeTree таблицу? А на эту таблицу повешать MV, которая в соседнюю таблицу сохранит историю?
О, я что-то про историю в соседнюю таблицу не подумал. Отличный план. Ещё бы придумать как сжать эту соседнюю таблицу так, что бы в ней оставались только изменения. Но видимо это на уровне MV не сделать
AF
Спасибо :)
AP
Цель чтобы в итоге осталась только последняя вставленная
Мы !!!на небольшом объёме!!! делали insert вставляемых данных во временную таблицу, потом insert состоящий из union 2х запросов: 1. Строки из заполняемой таблицы, которые нашлись во временной таблице с sign=-1. 2. Строки из временной таблицы с sign=1. Но это то ещё извращение 😀
p
Alexander Petrov
Мы !!!на небольшом объёме!!! делали insert вставляемых данных во временную таблицу, потом insert состоящий из union 2х запросов: 1. Строки из заполняемой таблицы, которые нашлись во временной таблице с sign=-1. 2. Строки из временной таблицы с sign=1. Но это то ещё извращение 😀
Да я тоже пробовал этот вариант (правда на ReplacingMergeeTree с версиями по дате). Но как-то не сработало и да, это точно "не самый простой вариант" )
AP
О, я что-то про историю в соседнюю таблицу не подумал. Отличный план. Ещё бы придумать как сжать эту соседнюю таблицу так, что бы в ней оставались только изменения. Но видимо это на уровне MV не сделать
Таблицу с историей можно попробовать создать на движке ReplacingMergeTree
СА
Добрый день, всем. Может кто то подсказать есть ли в clickhouse-operator возможность инициализировать схему при деплое кластера?
VB
Ребят, подскажите плз, кто работал с таблицами system.users и system.grants?
У меня почему-то их нет.
Версия кх —
У меня почему-то их нет.
Версия кх —
20.4.5 (клиент и сервер)VB
с чем это может быть связано? Возможно из наличие активируется где-то в настройках?
СЗ
Всем привет! У кого-нибудь был опыт выгрузки данных из 1С в clickhouse?
D
Процедура ВыполнитьКод()
Выгрузить Таблица1 в Кликхаус1
Сообщить("Выгрузка успешно завершена");
КонецПроцедуры
=)
СЗ
Процедура ВыполнитьКод()
Выгрузить Таблица1 в Кликхаус1
Сообщить("Выгрузка успешно завершена");
КонецПроцедуры
=)
сурово, но выглядит правдиво -))
Был ли реальный кейс? Сейчас планирую искать подрядчика на подобный проект, поэтому хочется понять насколько это сложно в реализации
Был ли реальный кейс? Сейчас планирую искать подрядчика на подобный проект, поэтому хочется понять насколько это сложно в реализации
AF
Alexander Petrov
Таблицу с историей можно попробовать создать на движке ReplacingMergeTree
да, я уже пробовал на ней делать, но в прошлый раз что-то не взлетело. но я пробовал удалять на основной таблице, а не на дополнительной. Подумаю ещё над этим, спасибо.
MD
that's kind of bad 😅
AF
сурово, но выглядит правдиво -))
Был ли реальный кейс? Сейчас планирую искать подрядчика на подобный проект, поэтому хочется понять насколько это сложно в реализации
Был ли реальный кейс? Сейчас планирую искать подрядчика на подобный проект, поэтому хочется понять насколько это сложно в реализации
если серьёзно, то выглядит невозможным без кардинальной переработки 1С.
AF
или я неправильно понимаю то, что вы хотите сделать
СЗ
или я неправильно понимаю то, что вы хотите сделать
выгружать данные из 1с о совершенных заказах в CH (куда подгружать данные из CRM и еще нескольких источников)
AF
выгружать данные из 1с о совершенных заказах в CH (куда подгружать данные из CRM и еще нескольких источников)
а, это выглядит несложным
СЗ
а, это выглядит несложным
как насчет фриланса? -)