Size: a a a

2021 April 30

GP

Grigory Pomadchin in Moscow Spark
потому что каждый ехек будет убер тупой и ток одну за раз процессить
источник

NN

No Name in Moscow Spark
А в каком случае? Мне кажется, что в любом случае, грубо, поднять 4 кора на экзекутор лучше, чем 4 экзекутора по кору
источник

NN

No Name in Moscow Spark
Чейта?
источник

GP

Grigory Pomadchin in Moscow Spark
када у тебя много тонких машин
источник

GP

Grigory Pomadchin in Moscow Spark
если одно ядро то одна партиция за раз
источник

GP

Grigory Pomadchin in Moscow Spark
источник

GP

Grigory Pomadchin in Moscow Spark
магия
источник

NN

No Name in Moscow Spark
Эт я знаю
источник

GP

Grigory Pomadchin in Moscow Spark
ну и в чем вопросы?)
источник

NN

No Name in Moscow Spark
А, я не об этом, сорян
источник

GP

Grigory Pomadchin in Moscow Spark
когда не знаешь скок памяти и ядер дать начинаешь с одного ядра
потом понимаешь скок у тебя в среднем одноядерному над памяти
и начинаешь пропорционально докидывать памяти и ядер
источник

GP

Grigory Pomadchin in Moscow Spark
инкрементальный процесс такой
источник

GP

Grigory Pomadchin in Moscow Spark
и вдруг дешево получится
50 дешевых машин чем 20 убер дорогих
источник

GP

Grigory Pomadchin in Moscow Spark
вобщеим был клиент у меня кто такими ж гайдами тюнили жобу
так я и уивдел лайв огромный кластер р инстансов на амазоне
источник

GP

Grigory Pomadchin in Moscow Spark
(он им был нинужен)
источник

NN

No Name in Moscow Spark
Я просто примитивно прочитал несколько статей, где рекомендации все сводятся к тому, что на экзекутор оптимально 3-5 ядер кидать, и чёт крайне редко другие настройки лучше отрабатывают
источник

GP

Grigory Pomadchin in Moscow Spark
scam
источник

GP

Grigory Pomadchin in Moscow Spark
но в целом наверное в среднем так и есть
источник

GP

Grigory Pomadchin in Moscow Spark
видишь у тс в среднем не получилось
источник

GP

Grigory Pomadchin in Moscow Spark
у меня много где другие настройки
источник