В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Moscow Spark

872 membersпожаловаться на группу
2020 February 18

NN

No Name in Moscow Spark
Renarde
а еще лучше уточнить что с сеткой между БД и кластером.
помнится мне история, когда так же бились над выкачиванием данных из терадаты, с партишенами игрались, а оказалось что сеть была 1ГБ между ДЦ (и та по умолчанию на половину нагруженная)
Ну, да, и там уже от размера партиции плясать
источник
17:49пожаловаться#1

РП

Роман Пашкевич... in Moscow Spark
Спасибо всем. Общую концепцию я понял. Буду беседовать с "гуру" Ханы. И на тестовом серваке поиграюсь с потоками.
источник
18:01пожаловаться#2

С

Сюткин in Moscow Spark
No Name
Иногда даже по поводу 1 лучше уточнить, если точно не знаете.)
Снапшоты, репликации по дблинкам в другую базу

И делайте что хотите
источник
18:31пожаловаться#3

С

Сюткин in Moscow Spark
Иж чо боевую базу заддосить вздумали
источник
18:31пожаловаться#4

С

Сюткин in Moscow Spark
Давайте я Вася пупкин приду в вашу продовскую базу и буду ддосить в 100 потоков выкачивая неизвестно куда и неизвестно зачем
источник
18:32пожаловаться#5

С

Сюткин in Moscow Spark
sticker.webp
(18.29 Кб)
источник
18:33пожаловаться#6

NN

No Name in Moscow Spark
Сюткин
Давайте я Вася пупкин приду в вашу продовскую базу и буду ддосить в 100 потоков выкачивая неизвестно куда и неизвестно зачем
Давай ты Валера Сюткин, тогда хоть с прода грузи, хоть с огорода, ниче не жалко уважаемому
источник
19:27пожаловаться#7

С

Сюткин in Moscow Spark
No Name
Давай ты Валера Сюткин, тогда хоть с прода грузи, хоть с огорода, ниче не жалко уважаемому
Вась, когда тебя побанят раз пяток на оракловых биллинговых базах тогда и поговорим
источник
19:45пожаловаться#8

АЖ

Андрей Жуков... in Moscow Spark
Сюткин
Вась, когда тебя побанят раз пяток на оракловых биллинговых базах тогда и поговорим
sticker.webp
(7.92 Кб)
источник
19:47пожаловаться#9

АЖ

Андрей Жуков... in Moscow Spark
У нас тут Dremio забанили в Оракле,  вот это было весело
источник
19:47пожаловаться#10

АЖ

Андрей Жуков... in Moscow Spark
Теперь рефлекшены со спарка пеку
источник
19:47пожаловаться#11

NN

No Name in Moscow Spark
Сюткин
Вась, когда тебя побанят раз пяток на оракловых биллинговых базах тогда и поговорим
А я не Вася, и меня не побанят, я туда не пойду, что там делать
источник
20:11пожаловаться#12

С

Сюткин in Moscow Spark
No Name
А я не Вася, и меня не побанят, я туда не пойду, что там делать
Ну тогда лови лулзы в терадате, и я знаю что ты не Вася)
источник
20:12пожаловаться#13

NN

No Name in Moscow Spark
Сюткин
Ну тогда лови лулзы в терадате, и я знаю что ты не Вася)
Да уж словил разок однажды
источник
20:13пожаловаться#14

РП

Роман Пашкевич... in Moscow Spark
Сюткин
Снапшоты, репликации по дблинкам в другую базу

И делайте что хотите
Снапшот, репликация бывает 1 таблицы? N таблиц? Это будет быстро разве? Т.е. мы по любоиу теряем время и ресурсы на копирование данных в промежуточную БД. И потом из нее в 100500 потоков можем качать. Но получаем каким минимум +1 узел отказа.
источник
21:04пожаловаться#15

С

Сюткин in Moscow Spark
Роман Пашкевич
Снапшот, репликация бывает 1 таблицы? N таблиц? Это будет быстро разве? Т.е. мы по любоиу теряем время и ресурсы на копирование данных в промежуточную БД. И потом из нее в 100500 потоков можем качать. Но получаем каким минимум +1 узел отказа.
Снапшот боевой базы, слепок за вчерашний день
источник
21:04пожаловаться#16

С

Сюткин in Moscow Spark
Как золушка в полночь пересобирается
источник
21:05пожаловаться#17

С

Сюткин in Moscow Spark
Нужны горячие данные иди на бой, холодные на снап
источник
21:05пожаловаться#18

РП

Роман Пашкевич... in Moscow Spark
Сюткин
Снапшот боевой базы, слепок за вчерашний день
Идеал - теплые данные. Т.е. если прод обновился до старта джоба. Т-0. Если не успел, то Т -1
источник
21:08пожаловаться#19

С

Сюткин in Moscow Spark
Мои возмущения не о том что плохо качать с прода, а о том что переодически забывают что это прод и начинают грузить его как не в себя
источник
21:09пожаловаться#20