Size: a a a

2021 April 30

ПФ

Паша Финкельштейн... in Moscow Spark
По логам gc
источник

GP

Grigory Pomadchin in Moscow Spark
я думаю, что будет не лучше чем гуиды в инетах
источник

GP

Grigory Pomadchin in Moscow Spark
такойж хит в 80% кейсов
источник

NN

No Name in Moscow Spark
Почему?
источник

ПФ

Паша Финкельштейн... in Moscow Spark
Я не придумываю, для gc такой продукт реально существует
источник

GP

Grigory Pomadchin in Moscow Spark
ну ет имеет смысл да
источник

ПФ

Паша Финкельштейн... in Moscow Spark
Ты ему логи gc, он тебе хорошие (не идеальные, просто хорошие) настройки
источник

GP

Grigory Pomadchin in Moscow Spark
ды знаю что по логам)) прост я к тому что жесть
источник

GP

Grigory Pomadchin in Moscow Spark
кайф в этом моменте что те придется понимать как он их подобрал чтоб понимать куда крутить параметры для более хороших настроек
источник

GP

Grigory Pomadchin in Moscow Spark
но да
источник

GP

Grigory Pomadchin in Moscow Spark
это здравая мысля
источник

GP

Grigory Pomadchin in Moscow Spark
тогда б вопроса тут не было про то с чего начать
источник

GP

Grigory Pomadchin in Moscow Spark
+
источник

ПФ

Паша Финкельштейн... in Moscow Spark
Ну вот смотри, нам не важно какие у тебя данные, нам надо посчитать по большому счёту шаффлы и gc. После этого мы сможем понять что можно оптимизировать
источник

GP

Grigory Pomadchin in Moscow Spark
а как он поймет что код гавно
источник

GP

Grigory Pomadchin in Moscow Spark
он ж будет работать принимая за данность что ты норм написал все
источник

ПФ

Паша Финкельштейн... in Moscow Spark
Ну ты не умеем интерпретировать работу нейронок. Но часто нам и не надо
источник

NN

No Name in Moscow Spark
источник

ПФ

Паша Финкельштейн... in Moscow Spark
А неважно. Он сделает тебе хорошие параметры для твоего кода, а не для абстрактного
источник

ПФ

Паша Финкельштейн... in Moscow Spark
Если оптимизировать некуда - предложит одну тачку с 2 Тб памяти
источник