Size: a a a

2020 October 02

E

Eugene in Moscow Spark
Andrey Smirnov
их идеи видимо бояться отвергать, а про тестирование: посмотри как они тестируют spark-ml, это ужас, табличка на 10 записей, прогнали алгоритм, работает и всё!
А то что это на данных хотя бы в несколько милионов вообще неработоспособно их мало тревожит
То ли Спарк большой. Там есть и очень даже профессиональные ребята. Второй момент, это опенсорс. Если что-то не нравится, можно исправить и сделать пул реквест.
источник

AS

Andrey Smirnov in Moscow Spark
Eugene
То ли Спарк большой. Там есть и очень даже профессиональные ребята. Второй момент, это опенсорс. Если что-то не нравится, можно исправить и сделать пул реквест.
который будет висеть вечность, посмотри сколько там сейчас PR, все что не от команды идет в долгий ящик
источник

E

Eugene in Moscow Spark
Vladimir Morozov
Может кто подсказать почему Spark 2.3 считает что No output operations registered, so nothing to execute
Хотя ему очень даже есть чем заняться (Scala) https://gist.github.com/greenhost87/fc011b2e81e4af0f50f24629915a5555
Выглядит правильно. Попробуй разбить на куски. Сначала просто считать и показать, что данные есть. Затем записать.
источник

VM

Vladimir Morozov in Moscow Spark
Eugene
Выглядит правильно. Попробуй разбить на куски. Сначала просто считать и показать, что данные есть. Затем записать.
изначально так и было, собрал в кучу что бы гист был в один экран вместо двух... пока весь этот код умещался в работу через RDD проблем не было, но как только мне потребовалось писать поток данных на выходе в два разных топика… вообще я уже неделю занимаюсь этими приключениями… уже готов заплатить за консультацию, что бы решить эту проблему в конце концов.
источник

E

Eugene in Moscow Spark
Eugene
Выглядит правильно. Попробуй разбить на куски. Сначала просто считать и показать, что данные есть. Затем записать.
Я понимаю твою позицию. Но можно обвинять всех вокруг, а можно взять ответственность на себя и попробовать чего-то добиться.)
источник

E

Eugene in Moscow Spark
Vladimir Morozov
изначально так и было, собрал в кучу что бы гист был в один экран вместо двух... пока весь этот код умещался в работу через RDD проблем не было, но как только мне потребовалось писать поток данных на выходе в два разных топика… вообще я уже неделю занимаюсь этими приключениями… уже готов заплатить за консультацию, что бы решить эту проблему в конце концов.
Лучше разберись и получи бесценный опыт. А на следующем Москоу спарке расскажи ребятам.
источник

DG

Denis Gabaydulin in Moscow Spark
Лучше форк :troll:
источник

E

Eugene in Moscow Spark
Denis Gabaydulin
Лучше форк :troll:
Яндекс вей.)
источник

DG

Denis Gabaydulin in Moscow Spark
У нас 6 "спарков" и только один из них форк )
источник

PK

Pavel Klemenkov in Moscow Spark
Eugene
Ты удивишься, как легко азиатские парни и трансгендеры там проталкивают свои идеи.)
Холдена не трожь!
источник

E

Eugene in Moscow Spark
Denis Gabaydulin
У нас 6 "спарков" и только один из них форк )
Spark hell.)
источник

VM

Vladimir Morozov in Moscow Spark
Eugene
Я понимаю твою позицию. Но можно обвинять всех вокруг, а можно взять ответственность на себя и попробовать чего-то добиться.)
не совсем понял к чему бы это
источник

DG

Denis Gabaydulin in Moscow Spark
Eugene
Spark hell.)
Пусть победит сильнейший (или два) )
источник

E

Eugene in Moscow Spark
Pavel Klemenkov
Холдена не трожь!
Паша, ты удивишься, насколько сильно я не хочу его трогать)
источник

PK

Pavel Klemenkov in Moscow Spark
Denis Gabaydulin
У нас 6 "спарков" и только один из них форк )
Господи. Вот пиздил всех исператор, пиздил. Собирал земли яндексовые. И стоило ток ему свалить, как опять черт знает что развели
источник

PK

Pavel Klemenkov in Moscow Spark
Eugene
Паша, ты удивишься, насколько сильно я не хочу его трогать)
Эй, ну камон.
источник

ПФ

Паша Финкельштейн... in Moscow Spark
Pavel Klemenkov
Холдена не трожь!
Она не склоняется по правилам русского языка
источник

E

Eugene in Moscow Spark
Pavel Klemenkov
Эй, ну камон.
Ну не в моем вкусе девчонка, что теперь?🤣
источник

ПФ

Паша Финкельштейн... in Moscow Spark
Eugene
Паша, ты удивишься, насколько сильно я не хочу его трогать)
А у нас нет тут CoC, который такое запрещает?
источник

ПФ

Паша Финкельштейн... in Moscow Spark
Eugene
Ну не в моем вкусе девчонка, что теперь?🤣
Это не повод неуважительно к ней относиться, очевидно. И тем более транслировать своё неуважение публично.
источник