Size: a a a

2021 March 22

EC

Eugene Chipizubov in Moscow Spark
Отклоняемся от спарк тематики ))
источник

V

Vladislav Gotsulyak in Moscow Spark
ок, спасибо)
источник

N

Nikita Blagodarnyy in Moscow Spark
Напиши маппартишон и на каждый партишон поднимай коннект и батчуй. Не будет однострочных вставок.
источник

N

Nikita Blagodarnyy in Moscow Spark
Батчевать можно хоть через addBatch
источник

N

Nikita Blagodarnyy in Moscow Spark
Дальше можно играться с количеством портишонов
источник

N

Nikita Blagodarnyy in Moscow Spark
И групедами
источник

N

Nikita Blagodarnyy in Moscow Spark
Подберешь норм параметры.
источник

K

KrivdaTheTriewe in Moscow Spark
Nikita Blagodarnyy
Напиши маппартишон и на каждый партишон поднимай коннект и батчуй. Не будет однострочных вставок.
вообще форичпартишн
источник

K

KrivdaTheTriewe in Moscow Spark
меппартишн нельзя
источник

N

Nikita Blagodarnyy in Moscow Spark
KrivdaTheTriewe
меппартишн нельзя
почему?
источник

K

KrivdaTheTriewe in Moscow Spark
потому что это трансформация
источник

ПФ

Паша Финкельштейн... in Moscow Spark
A new update of the Big Data Tools plugin has been released. This is our first version for general use, after a year and a half of the Early Access Preview program. Let’s dive into the details.

https://t.co/aC2ddGJpZi
источник

V

Vokeven in Moscow Spark
Nikita Blagodarnyy
посмотри распределения по ключам каждого джойна
Нашел место
источник

NN

No Name in Moscow Spark
Vokeven
Нашел место
Классика
источник

ЕГ

Евгений Глотов... in Moscow Spark
И главное ведь не -1
источник

ЕГ

Евгений Глотов... in Moscow Spark
источник

ЕГ

Евгений Глотов... in Moscow Spark
А -2
источник

N

Nikita Blagodarnyy in Moscow Spark
Vokeven
Нашел место
Пили на части че
источник

V

Vokeven in Moscow Spark
Да saltJoin уже делаю
источник
2021 March 23

AB

Anton Bukreev in Moscow Spark
Кто сталкивался с ошибкой pyspark
Exception in thread "main" java.lang.RuntimeException: [download failed: commons-io#commons-io;2.6!commons-io.jar]
Пробовал версии 2.4.7 и 2.4.1
источник