DG
Т.е. хочется многомерку
Size: a a a
2018 November 07
DG
С MDX как с вишенкой поверх всего
PK
Почему не кликхаус?
DG
Аналог который есть этопроприетарный AtScale.com
DG
Почему не кликхаус?
Не могу ответить, пока ещё не знаком с этим продуктом
DG
Хм, интересно , посмотрю , Яндекс 😃
PK
Если что, первый юзкейс кликхауса - это отчеты в яндекс-метрике по произвольным срезам. Т.е. олап их уже не устраивал. Ну а теперь внедрений тысячи.
DG
DG
Оболдеть
DG
Смотрю
FL
Если что, первый юзкейс кликхауса - это отчеты в яндекс-метрике по произвольным срезам. Т.е. олап их уже не устраивал. Ну а теперь внедрений тысячи.
Не совсем по произвольным, скорее, по обильно проиндексированным. Это во-первых.
А во-вторых, по одной плоской факт-таблице с маленькими таблицами измерений. Это допущение они обошли пока не полностью.
Это делает ClickHouse непригодным для полноценного generic BI, пока они не запилят нормальный distributed join.
А во-вторых, по одной плоской факт-таблице с маленькими таблицами измерений. Это допущение они обошли пока не полностью.
Это делает ClickHouse непригодным для полноценного generic BI, пока они не запилят нормальный distributed join.
DM
Вооо, становится понятнее, т.е. все же имеется в виду движок мультидименшн поверх спарка...
DM
Не тривиальная задача
DM
Насколько я знаю более менее Apache Kylin более или менее приблизился к такой реализации на базе хадупа
2018 November 08
TB
Год назад кайлин пробовали юзать и сравнивали со связкой hive+tez+llap, используя тестовые квери. Не знаю как сейчас, но тогда на спарке не было возможности запустить, только на мапредьюсе, потом забросили эту идею, так как все таки был сыроват
FL
Мы пробовали подключать Tableau и к Spark, и к Hive on Tez + LLAP. Последний, на глазок, медленнее более чем в два раза.
Допускаю, что это потому, что мы не умеем его готовить.
Допускаю, что это потому, что мы не умеем его готовить.
2018 November 12
PK
Всем привет!. Есть вопрос со спарковским csv ридером. Есть csv, у него есть столбец с тексами. Тексты многострочные, в них сожержатся виндовые переносы. Тексты заключены в двойные кавычки. Выставление опции multiLine вообще не помогает. В чем может быть трабл, как помочь?
PK
Пандасик, при этом, отлично прожевывает файлик
GP
Всем привет!. Есть вопрос со спарковским csv ридером. Есть csv, у него есть столбец с тексами. Тексты многострочные, в них сожержатся виндовые переносы. Тексты заключены в двойные кавычки. Выставление опции multiLine вообще не помогает. В чем может быть трабл, как помочь?
попробуй анкодинг утф8 указать файла и мултилайн анкодинг
GP
но оно может тоже не работать; там помоему был какойто баг что спарк не работал с анкодинг + мултилайн