В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Moscow Spark

872 membersпожаловаться на группу
2020 April 04

GP

Grigory Pomadchin in Moscow Spark
давай в коклене
источник
19:00пожаловаться#1

ПФ

Паша Финкельштейн... in Moscow Spark
точно
источник
19:00пожаловаться#2

ПФ

Паша Финкельштейн... in Moscow Spark
но блин, всё равно отработает же
источник
19:00пожаловаться#3

GP

Grigory Pomadchin in Moscow Spark
да давай посмотрим
источник
19:01пожаловаться#4

ПФ

Паша Финкельштейн... in Moscow Spark
ща нарисую себе хелпер, который ист в Seq превращает
источник
19:02пожаловаться#5

ПФ

Паша Финкельштейн... in Moscow Spark
А то я даже apply не могу сделать
источник
19:03пожаловаться#6

GP

Grigory Pomadchin in Moscow Spark
если не кинет
источник
19:03пожаловаться#7

GP

Grigory Pomadchin in Moscow Spark
то след шагом можно глянуть ExpressionEvalHelper там есть явные методы вычилсить экспрешн с / без кодогена
источник
19:03пожаловаться#8

GP

Grigory Pomadchin in Moscow Spark
https://github.com/apache/spark/blob/bd031c2173b9e4c6f428aabd7f8490c1241a9c6b/sql/catalyst/src/test/scala/org/apache/spark/sql/catalyst/expressions/ExpressionEvalHelper.scala#L170-L174
GitHub
apache/spark
Apache Spark. Contribute to apache/spark development by creating an account on GitHub.
источник
19:03пожаловаться#9

ПФ

Паша Финкельштейн... in Moscow Spark
как там в скале спред оператор?
источник
19:04пожаловаться#10

ПФ

Паша Финкельштейн... in Moscow Spark
чтобы массив в варарги првратить?
источник
19:04пожаловаться#11

GP

Grigory Pomadchin in Moscow Spark
seq: _*
источник
19:04пожаловаться#12

ПФ

Паша Финкельштейн... in Moscow Spark
И с true, и с false работает как в скалке
источник
19:07пожаловаться#13

GP

Grigory Pomadchin in Moscow Spark
знач давай вычислять с и без кодогена
источник
19:07пожаловаться#14

ПФ

Паша Финкельштейн... in Moscow Spark
println(bound.fromRow(InternalRow.apply(helpme.listToSeq(listOf(1)))))
println(bound.fromRow(InternalRow.apply(helpme.listToSeq(listOf(null as Int?)))))
источник
19:07пожаловаться#15

ПФ

Паша Финкельштейн... in Moscow Spark
Grigory Pomadchin
знач давай вычислять с и без кодогена
ну походу пора логгер добавлять и сравнивать выхлоп кодогена, да
источник
19:08пожаловаться#16

GP

Grigory Pomadchin in Moscow Spark
ну над бы локализовать хотя б фанк кол который приводит к проблемам
источник
19:08пожаловаться#17

GP

Grigory Pomadchin in Moscow Spark
вот сча например вроде видно что вроде енкодер норм
источник
19:09пожаловаться#18

GP

Grigory Pomadchin in Moscow Spark
а послушай логично что у тебя все заработало
источник
19:10пожаловаться#19

GP

Grigory Pomadchin in Moscow Spark
ты же когда паралелзил в спарк арити с нулом то все ок было
источник
19:10пожаловаться#20