ЕГ
А мешает
Size: a a a
2019 March 12
AM
По памяти?
пока не пойму как посмотреть. Пишет что связь утеряна.
ЕГ
А скиньте граф
AM
ок, сейчас скину.
AA
Евгений Глотов
Сохранять промежуточные результаты тоже помогает, если граф выполнения никак не хочет строиться, как надо
А есть доки почему он никак не строится? У меня была похожая проблема, я так и не разобрался.
ЕГ
Да просто кривой код кто-то написал, вот и не строится)
ЕГ
ЕГ
Я имею в виду кодогенерацию)
AA
Евгений Глотов
Да просто кривой код кто-то написал, вот и не строится)
Ну это 100%)) Надо понять как выпрямить))
AM
В stdout пишет Full GC (Ergonomics)
AM
перезагружает всю джобу, теряется весь стек(( не могу посмотреть почему падает((
ЕГ
А, вы на rdd?
AS
там видимо graphX
AM
да, graphx
AM
на rdd
AS
ярна нет? как standalone запускаешь?
AM
GraphX с трудом иногда проскакивает.
ЕГ
А попробуйте graphframes