G
чтоб потом оно не пересчитывалось
Этотсамо собой
Size: a a a
2021 February 11
NN
@hachhll заводи, в общем, тикет, чтобы логику переделывали, а то куда такое годится в 21м-то году)
GP
да никак не сделать быстрее)
NN
да никак не сделать быстрее)
Дай помечтать, а?
G
да никак не сделать быстрее)
Да в том то и дело.
G
В общем. Спасибо всем за участие :). Пойду логику ломать
2021 February 12
AS
Он еще не приземлен. Только формируется
А если по нему делать mappartinion, внутри проверять на наличие и бородкаст переменную использовать в качестве флажка?
e
Можно ли работать с avro без хадупа? И если да - то что для этого нужно сделать ?
ПФ
Можно ли работать с avro без хадупа? И если да - то что для этого нужно сделать ?
Что значит "работать"?
ПФ
Почитать без хадупа вообще легко, самый простой формат, даже проще csv
e
Записать?
ПФ
Тоже несложно
ПФ
avro tools умеет, например
GP
Можно ли работать с avro без хадупа? И если да - то что для этого нужно сделать ?
что за вопрос такой?
GP
а крайо тоже вне спарка не пользуется никто?
ПФ
а крайо тоже вне спарка не пользуется никто?
Используют конечно
GP
Используют конечно
тип да вопрос был подразумевающий такой ответ
ПФ
Не, ну там мало ли. Работать без хадупа с орком - жопа, например, особенно если он не локальный
GP
Можно ли работать с avro без хадупа? И если да - то что для этого нужно сделать ?
ну в кафке авро сапорт есть; лучше чем ничего; и сжатие приемлимое и какаято вреисонность