Size: a a a

2021 March 18

N

Nikita Blagodarnyy in Moscow Spark
Отож
источник

ПФ

Паша Финкельштейн... in Moscow Spark
Заходишь и прямо как в проводнике перетаскиваешь файлики
источник

G

Gev in Moscow Spark
Не. Смотрите. Я сделал таблицу с новми партициями. теперь хочу обменять папки старой на новые.
источник

ПФ

Паша Финкельштейн... in Moscow Spark
Gev
Не. Смотрите. Я сделал таблицу с новми партициями. теперь хочу обменять папки старой на новые.
Ну вот, в интерфейсе перетащи и всё
источник

G

Gev in Moscow Spark
Копировать файлы можно. переименовывать а ля мувить. но там есть свои ограничения
источник

С

Сюткин in Moscow Spark
Gev
Не. Смотрите. Я сделал таблицу с новми партициями. теперь хочу обменять папки старой на новые.
А там все партиции или только часть?

Если все то проще через alter table rename
источник

G

Gev in Moscow Spark
Да вопрос не о том как это руками сделать 🙂
источник

G

Gev in Moscow Spark
В том то и дело - не все. Например. в первой у меня 10 партиций. во вторую я залил 5 с новыми данными и теперь хочу их обменять
источник

G

Gev in Moscow Spark
overwrite partition не работает для части партиций, я думал просто создать рядом новую с  новой частью партиций и обменять, и тут проблема блин
источник

G

Gev in Moscow Spark
Какая то простая задача а решение найти не могу.
источник

EC

Eugene Chipizubov in Moscow Spark
Gev
overwrite partition не работает для части партиций, я думал просто создать рядом новую с  новой частью партиций и обменять, и тут проблема блин
Обменять.. overwrite... Напомнило задачку по программированию, обменяться значениями переменных a и b, не используя c
источник

EC

Eugene Chipizubov in Moscow Spark
Тебе прям обмен нужен?
источник

EC

Eugene Chipizubov in Moscow Spark
Gev
overwrite partition не работает для части партиций, я думал просто создать рядом новую с  новой частью партиций и обменять, и тут проблема блин
Overwite работает для части партиций надо только опцию в спарке включить
источник

K

KrivdaTheTriewe in Moscow Spark
Gev
overwrite partition не работает для части партиций, я думал просто создать рядом новую с  новой частью партиций и обменять, и тут проблема блин
Почему не работает ?
источник

G

Gev in Moscow Spark
Ииии. Я обыскался такой опции. Для Spark 2.2
источник

K

KrivdaTheTriewe in Moscow Spark
Работает
источник

EC

Eugene Chipizubov in Moscow Spark
Ааа
источник

G

Gev in Moscow Spark
Вот так. не работает overwrite для части партиций
источник

EC

Eugene Chipizubov in Moscow Spark
Ща
источник

G

Gev in Moscow Spark
только все на все
источник