Size: a a a

2020 October 17

GP

Grigory Pomadchin in Moscow Spark
Eugene Chipizubov
Это понятно, вопрос как из под одного пользователя видеть две версии спарка
да легко, ну ты в глобал пас не суй просто Спарки и все
источник

GP

Grigory Pomadchin in Moscow Spark
можешь симлинки нужного имени создать если прям так хочется и сунуть в бин
источник

GP

Grigory Pomadchin in Moscow Spark
или что значит ‘видеть’
источник

EC

Eugene Chipizubov in Moscow Spark
Т.е. запускаешь
spark-shell с определенной spark_major_version
источник

EC

Eugene Chipizubov in Moscow Spark
Без указания полного пути до spark-shell
источник

GP

Grigory Pomadchin in Moscow Spark
ну сделай симлинки spark-shell-2, spark-shell-3 (ну к примеру)
источник

EC

Eugene Chipizubov in Moscow Spark
update-alternatives собственно это и делает
источник

GP

Grigory Pomadchin in Moscow Spark
а причём тут апдейт альтернативз?
источник

EC

Eugene Chipizubov in Moscow Spark
Симлинки пилить не надо
источник

EC

Eugene Chipizubov in Moscow Spark
Ща буду пробовать
источник

EC

Eugene Chipizubov in Moscow Spark
Особо граблей значит нет, я собственно это и хотел узнать
источник

GP

Grigory Pomadchin in Moscow Spark
а какие в твоём понимании могут быть грабли? главное не делай им общий класспас и все ок
источник

EC

Eugene Chipizubov in Moscow Spark
Если неправильно их изолировать друга от друга, жду грабли самые разнообразные
источник

EC

Eugene Chipizubov in Moscow Spark
Ок спасибо
источник

EC

Eugene Chipizubov in Moscow Spark
Если что нибудь всплывет
источник

EC

Eugene Chipizubov in Moscow Spark
Напишу
источник
2020 October 19

L

Leonid in Moscow Spark
Подскажите, пожалуйста, какой логикой нужно руководствоваться выбирая поля для сортировки перед сохранением orc если цель уменьшить размер выходного файла?
источник

А

Алексей in Moscow Spark
Leonid
Подскажите, пожалуйста, какой логикой нужно руководствоваться выбирая поля для сортировки перед сохранением orc если цель уменьшить размер выходного файла?
поле сортировки должно дать минимум повторов в других полях. Легче всего эксперимент провести
источник

А

Алексей in Moscow Spark
если поле хорошо сортирует одни поля, но сбивает другие, то лучше выбрать для сортировки наиболее длинные поля
источник

L

Leonid in Moscow Spark
Алексей
если поле хорошо сортирует одни поля, но сбивает другие, то лучше выбрать для сортировки наиболее длинные поля
Понял, спасибо.
источник