GP
Ещё может драйвер что-то считать, это на UI не отображается
+
Size: a a a
2020 May 21
AC
Ещё может драйвер что-то считать, это на UI не отображается
как драйвер проверить?
M
как драйвер проверить?
Код смотреть
GP
Тут они заняты
GP
у тебя акурат время гц это время твоего таймаута?
GP
Я вижу что у тебя нейтив метод аксессор; это жнай?
M
у тебя акурат время гц это время твоего таймаута?
Не, там же больше часа тайм-аут
AC
у тебя акурат время гц это время твоего таймаута?
нет, 18 минут пишет, а таймаут час и десять минут
M
Там наверняка потом драйвер на каком-нибудь коннекшоне засыпает
M
Или ещё что
GP
Там наверняка потом драйвер на каком-нибудь коннекшоне засыпает
Ага
GP
или просто чето считает после каунта
AC
после каунта идёт подключение к различным источникам в hdfs и hive, затем join и запись на hdfs
AC
а логи вот так выглядят, в логах пустота
AC
Я вижу что у тебя нейтив метод аксессор; это жнай?
вот тут не понял, если честно
GP
вот тут не понял, если честно
Да ничо; на у драйвере у тебя проблема наверное; замени каунт числом любым и проверь сколько стартовать жоба будет
M
после каунта идёт подключение к различным источникам в hdfs и hive, затем join и запись на hdfs
А попробуй сделать подключения до каунта и посмотри что выйдет, вангую будет задержка до каунта теперь
AC
спасибо, попробую
M
Опять же если это не средствами Спарка джоин, а чистый хайв, то конечно сам процесс тебе не будет отображаться
ЕГ
после каунта идёт подключение к различным источникам в hdfs и hive, затем join и запись на hdfs
Запрос может генерироваться всё это время?