NN
Очевидно (теперь) что это вымышленное название и все могут по разному трактовать
Ну мне вот было это совсем неочевидно, я нубло)
Size: a a a
2020 June 02
GP
Вот он спарк хотел разобраться а тут гавно какое-то
GP
Ну мне вот было это совсем неочевидно, я нубло)
Добавил что теперь
GP
NN
Вот он спарк хотел разобраться а тут гавно какое-то
Мне так аналитики мои говорят постоянно, мол, на гавно какое-то нас посадил, ниче не работает, не то что пандас.)
GP
Хахаах) а потом они делают редьюс на драйвер и все на нем делают пандами?
N
Очевидно (теперь) что это вымышленное название и все могут по разному трактовать
оно вымышленое только на половину. есть моменты, которые позволяют так это трактовать. вот один из них "The rest of the space (40%) is reserved for user data structures" . Логично сказать, что user data structures храняться в user memory.
PK
Мне так аналитики мои говорят постоянно, мол, на гавно какое-то нас посадил, ниче не работает, не то что пандас.)
Ну так надо было их не на Спарк сажать, а на koalas
ЕГ
Разработчики спарка такие "а давайте 30% утечки памяти запишем в юзер мемори"😆👌
NN
Хахаах) а потом они делают редьюс на драйвер и все на нем делают пандами?
А потом они берут датафрейм на стотыщмиллионов записей и делают ту Пандас
ЕГ
А он работает😐
ЕГ
Потому что полтора терабайта оперативы)
GP
Евгений Глотов
Потому что полтора терабайта оперативы)
Ток хотел написать
GP
На тачке одной эти огромные амазон инстансы
NN
Ну так надо было их не на Спарк сажать, а на koalas
Ага, только я про него знаю только то, что он есть, и что его вроде как датабрикс пилит)
ЕГ
Полтора терабайта оперативы хватит всем)
GP
Милион в час стоят
ЕГ
Милион в час стоят
Мы со своим пакетом)
PK
Ага, только я про него знаю только то, что он есть, и что его вроде как датабрикс пилит)
Этого достаточно )