KR
Добрый день!
Вопрос к тем, кто пользуется Scala + Spark
Вы используете var переменные или только val?
Вопрос к тем, кто пользуется Scala + Spark
Вы используете var переменные или только val?
Size: a a a
2021 July 05
EC
чую вопрос с подковыркой. Подскажите, каким кейсом вызван этим вопрос?
KR
Никаких подвохов
Просто не так давно пишу на данном стэке
В Скала привык не использовать val
Возникает необходимость на Spark постоянно обновлять колонки и используя только val происходит накопление мусора в виде множества переменных при каждом обновлении записей
Просто не так давно пишу на данном стэке
В Скала привык не использовать val
Возникает необходимость на Spark постоянно обновлять колонки и используя только val происходит накопление мусора в виде множества переменных при каждом обновлении записей
GP
Использовать вары моветон в скале
GP
не знаю что у вас там с мусором но экономите на спичках (если экономите вообще)
GP
мутабельные коллекции и ссылки пригождаться могут только если надо много в больших массивах значений менять и то ссылка при этом не нужна мутабельная
GP
Нужны мутабельные коллекции
GP
Ссылка мутабельная для вайла в этом случае нужна будет только; но есть макросы которые это прячут
KR
Под мусором имеется в виду не экономия ресурсов, а читабельность кода
GP
вары ухудшают читабельность кода
GP
Искать что там где поменялось - такое себе
GP
Файнал вары не просто так популярны в жаве сейчас
KR
val df = spark.read...
Далее нужно поменять одну запись в фрейме
Каким образом лучше поступить, записать результат в новую переменную?
Далее нужно поменять одну запись в фрейме
Каким образом лучше поступить, записать результат в новую переменную?
GP
KR
Хорошо, спасибо большое
Так и делал, хотел узнать, нормальная ли это практика
Так и делал, хотел узнать, нормальная ли это практика
GP
ага так и над
GP
не пользуйся варами)
GP
ток если что-то сложное там
KR
Ни разу пока ещё не использовал, код оказался большим и задумался, мб стоит
ИК
можно написать if () else, в каждой ветке присваивая новое значение переменной датафрейма, а можно воспользоваться тем, что if else возвращает значение, создать новый val с понятным названием и только улучшить читаемость кода. И рефакторинг будет проще, вот серьёзное преимущество. И если многопоточное приложение, тоже будет легче поддерживать