R
Spark 2.3
Size: a a a
2018 May 18
R
позавчера
ЕГ
Ага, и запилин 0.7.3
ЕГ
ЕГ
Который не работает со спарком 2.3)
ЕГ
Лучшая сборка)
D
Spark 2.3
spark kafka api для 0.10 версии уже довели до ума?
D
или как обычно - не работает
R
Кафка 1.0 в этой поставке. Тестить буду через неделю. Если интересно кому - могу тут результат сообщить.
D
Кафка 1.0 в этой поставке. Тестить буду через неделю. Если интересно кому - могу тут результат сообщить.
очень интересно,
хотя из того что я видел, пока не очень все гладко.
во первых у них апи почему то до сих пор эксперментальное, хотя в доке написано что stable
во вторых, они так и не убрали переопредление конфига консьюмера, где они отключат автокомит и auto reset
хотя из того что я видел, пока не очень все гладко.
во первых у них апи почему то до сих пор эксперментальное, хотя в доке написано что stable
во вторых, они так и не убрали переопредление конфига консьюмера, где они отключат автокомит и auto reset
D
из плюсов - стало очень быстро, но не очень стабильно
R
Ожидал, что hdp мейджор версию поднимут, а не 2.6.4 до 2.6.5
RT
Spark 2.3
Гхм, так это тянет на мажорный релиз, разве нет?
RT
Всмвсле странно что хортон это у минорном апдейте толкает
ЕГ
ну так не допилили же)
ЕГ
тез всё ещё старый, хотя новый тащат параллельно, но не поддерживают почему-то
ЕГ
хотя второму хайву требуется новый тез, в итоге народ не может в UI посмотреть по-нормальному ход работы джоба, потому что в UI счётчики подтягиваются только для старого теза
R
Гхм, так это тянет на мажорный релиз, разве нет?
Так и ждал 3 мажор.
2018 May 19
VO
spark kafka api для 0.10 версии уже довели до ума?
А можно подробнее? Чего не хватает? Или это про python + kafka 0.10?
GP
сам стриминг с Кафкой норм работает, причём хорошо; хз чо за наброс