спасибо! а сырые данные по хитам (clickstream log) постфактум экспортировать можно?

Ребята, привет! Кто может помочь вытащить и проанализировать данные о поведении пользователей на сайте?

Есть данные об 1 млн посетителей сайта в системах Яндекс метрика и Google analitics.
Необходимо смэтчить эти данные и вычленить из них поведенческие характеристики, по каждому пользователю и по каждой из его сессий:
- порядок и скорость перехода по страницам сайта
- поведение на каждой из страниц (тепловая карта)
- запросы / площадки с которых пришел
- соц-дем

Полученные данные проанализировать на предмет схожести.
Работа оплачиваемая, детали скину в личку!

Кстати если хотите кликстрим сделать через счетчик, можно стримить данные из GA к себе через customTask. Поищите в гугле, есть даже готовые решения для этого.

например да, хм... вот думаю, стоит ли go учить?

если придется писать что-то более производительное чем python то да
если вы просто аналитик, то python лучший выбор

Спасибо! Подскажите, данные за прошлый период (уже произошедшие и сохранённые в аналитике) можно в «сыром» залить в кликхаус?

Я правильно понимаю что все параметры из этой[1] доки применяются на самом верхнем уровне конфига кликхауса? Т.е включение max_network_bytes будет выглядеть так:

<yandex>
    <max_network_bytes>20971520</max_network_bytes>
</yandex>

[1]  https://clickhouse.tech/docs/en/operations/settings/settings/

приветствую, можете подсказать по clickhouse-copier, есть 2кх (20.4.6.53), таблица c движком ReplacingMergeTree

после запуска копира выполняется сама миграция, по окончанию копир говорит, что все выполнено успешно
но размер и количество строк отличается от исходного кластера, в чем может быть проблема?

случилась амнезия и забыл (или не знал никогда) - в том случае когда у нас несколько шардов - если запись в distributed table то он раскидывает по шардам в зависимости от partition key? но при этом же можно взять и напрямую в любой партишен записать - и тогда кликхаус смотрит в зукипере с какого шарда читать?