KM
119 строчка это
val model = ALS.train(matrix, rank, iterations, regularization_parameter)Size: a a a
2018 February 28
KM
KM
ну не может же так ванильный HDP фейлить
GP
hdp такое хдп
GP
он уже не ванильный
KM
KM
хм
GP
а код можно зашарить?
GP
попробуй везде в лямбдах типы явно указать
KM
попробуй везде в лямбдах типы явно указать
сейчас, спасибо.
AK
Caused by: java.lang.IllegalStateException: Library directory '/hadoop/yarn/local/usercache/spark/appcache/application_1519654131810_0049/container_e11_1519654131810_0049_02_000003/assembly/target/scala-2.11/jars' does not exist; make sure Spark is built.
подобная ошибка была при запуске spark2 из oozie, была связана с определением версии spark и параметром spark.yarn.jars
KM
подобная ошибка была при запуске spark2 из oozie, была связана с определением версии spark и параметром spark.yarn.jars
Такой переменной нет даже
AK
ну тогда можно попробовать задать ее типа —conf spark.yarn.jars=*.jar
KM
ну тогда можно попробовать задать ее типа —conf spark.yarn.jars=*.jar
не запускается всё равно
KM
и от других юзеров тоже не запускается
GP
и от других юзеров тоже не запускается
а попробуй число пи посчитать
GP
ну что бы понять действительно ли ты попал на конкретный баг
KM
ну что бы понять действительно ли ты попал на конкретный баг
KM
вот так вот запускаю