ПФ
потому что см. мою заметку на notion
Size: a a a
2020 May 27
GP
яж так понимаю ты пытаешься научить работать :?
GP
ну короч ты просто глину месишь) нет красивого решения у тебя
GP
и его не будет
ПФ
кодоген работает так, что если у тебя на входе объект был null — то дальше уже ничего проверяться не будет
GP
оно все будет уродское
ПФ
см. мою заметочку на notion
GP
Спарк сам говорит "юзайте java.lang.Integer если нужно наллабилити"
а чо как в жаве работает Array(1, null, 3).toDS?
ПФ
а чо как в жаве работает Array(1, null, 3).toDS?
без понятия, у меня нет джава спарка
ПФ
и я его не умею
ПФ
Ну то есть я наверное могу разобраться, но не сейчас
ПФ
кодоген работает так, что если у тебя на входе объект был null — то дальше уже ничего проверяться не будет
вот мне вот это кажется жутко бажным потому что это не обязательное условие!
ПФ
Более того, как извстно если отключить wholestage кодоген — всё работает корректно
GP
Более того, как извстно если отключить wholestage кодоген — всё работает корректно
да; интересно кстати где баг
в хол стейдж кодагене или нет
в хол стейдж кодагене или нет
GP
а ты не списывался еще с мейнтенерами разве?
GP
вдруг пару лидов тебе вбросят
ПФ
Вообще я всё надеялся что это у меня руки кривые, а н ебаг в кодогене
AS
теперь более сложный пример
case class Person(name:String)
case class PersonWithAge(name: String, age: Int)
Seq(Person("a")).toDS().joinWith(Seq(PersonWithAge("b",3)), col("name"))
.select(_.2.col("age"))
.as[Int]
.show()в цеппелине отработал этот пример, показал null
ПФ
в цеппелине отработал этот пример, показал null
но как если кодеков ля null нету? @pomadchin
GP
но как если кодеков ля null нету? @pomadchin
тут кодеки не причем