DB
@dmitrybugaychenko есть что прокомментировать про видео и смену команды?
Кто и что сменил?
Size: a a a
2019 October 09
GP
можно форсить итераторы в листы; и делать все через рдд
GP
короче над у первоисточника спрашивать, чего гадать
PK
Кто и что сменил?
Почитай сообщения, начиная с видео Виталия
PK
Но основной вопрос, на чем основывается заявление Виталия про то, что спарк больше 1-2 ТБ не посчитает?
GP
«посчитает если ты реально хороший инжир, ткак там реальные проблемы» (с)
ПФ
Я бы и самого Виталия в чатик позвал )
ПФ
Он прям сейчас вроде в Сингапуре, но в чатик-то позвать можно
ПФ
Но вообще-то он сейчас в джетбрейнсе, а не в ОК. Уже два года как
AA
«посчитает если ты реально хороший инжир, ткак там реальные проблемы» (с)
джун - до 1 тб, миддл 1-2 тб, сеньёр > 2 тб😂
KS
Anton Alekseev
джун - до 1 тб, миддл 1-2 тб, сеньёр > 2 тб😂
В этой шутке есть доля правды, придется думать над запросами)
DB
Но основной вопрос, на чем основывается заявление Виталия про то, что спарк больше 1-2 ТБ не посчитает?
Виталий сейчас в jetbrains, но у нас много сделал и сейчас сотрудничаем. В целом утверждение в общей форме неверно. Т.е. Какие-то кейсы на 2 тб влет работают, типа агрегаты и даже грамотные джоины, в каких-то, например если нужен мл, приходится попотеть.
PK
Он прям сейчас вроде в Сингапуре, но в чатик-то позвать можно
Зови!
ПФ
А чот не могу его телегу найти
ПФ
Ща попробую ему в фб написать
С
Зови!
Паша с тобой разговаривать по поводу докладов на спарк митапчике?
PK
Сюткин
Паша с тобой разговаривать по поводу докладов на спарк митапчике?
Спрашиваешь!
PK
А тем временем до Spark Summit Europe остается ровно неделя. Давайте произведем перекличку, кто едет-то? Пока я точно знаю, что еду я, @tenKe, @fall_out_bug, кто еще?
VK
Всем привет)
VK
А тем временем до Spark Summit Europe остается ровно неделя. Давайте произведем перекличку, кто едет-то? Пока я точно знаю, что еду я, @tenKe, @fall_out_bug, кто еще?
Я кстати еду. У нас там прям будка