t
Ну вообще вроде бесконечные итераторы не нарушают контрактов
ну если говорить про спарк, то непонятно что с ними делать
Size: a a a
2020 December 28
t
С другой стороны нафига оно в спарке непонятно
угу
GP
ну если говорить про спарк, то непонятно что с ними делать
чтоб делать коллект тока не на драйвере
ПФ
Потенциально может быть полезно для зипа какого-нибудь
t
чтоб делать коллект тока не на драйвере
GP
партиции чтоб были огромные
GP
чтоб оно крашилось
t
.show длинною в жизнь
ПФ
.show длинною в жизнь
Оно же не всё показывает
t
не все, но одной бесконечности ему хватит
t
t
он же минимум одну партицию посчитает
t
меньше спарк не умеет
GP
прикинь степенями бесконечности мерять сложность и память
GP
вот у нас тут продакт двух партиций
GP
А
шафла нет, данные читаются и сразу пишутся в hdfs
t
прикинь степенями бесконечности мерять сложность и память
бесконечная STW пауза... ммм)