Size: a a a

2020 April 02

K

KrivdaTheTriewe in Moscow Spark
я после короны спрошу
источник

K

KrivdaTheTriewe in Moscow Spark
можно ли заопенсорсить
источник

K

KrivdaTheTriewe in Moscow Spark
Dmitry Zuev
И я сегодня сделал свои
основная идея - не над  плясать над  аирфлоу операторами
источник

K

KrivdaTheTriewe in Moscow Spark
мы вообще ими не пользуемся
источник

K

KrivdaTheTriewe in Moscow Spark
только докер оператор
источник

K

KrivdaTheTriewe in Moscow Spark
вот у меня прям цель сделать стейт для дага полноценный
источник

DZ

Dmitry Zuev in Moscow Spark
KrivdaTheTriewe
основная идея - не над  плясать над  аирфлоу операторами
Та ж тема. Разве что bq операторы используем
источник

K

KrivdaTheTriewe in Moscow Spark
в кубере через сторадж классы
источник

K

KrivdaTheTriewe in Moscow Spark
чтобы вообще не думать ни о чем
источник

DZ

Dmitry Zuev in Moscow Spark
KrivdaTheTriewe
вот у меня прям цель сделать стейт для дага полноценный
А зачем тебе стейт?
источник

K

KrivdaTheTriewe in Moscow Spark
ну чтобы делать деление
источник

K

KrivdaTheTriewe in Moscow Spark
оч часто нужно какие-нибудь файлы вычитать
источник

K

KrivdaTheTriewe in Moscow Spark
а потом по ним джобу сделать
источник

K

KrivdaTheTriewe in Moscow Spark
или еще что
источник

K

KrivdaTheTriewe in Moscow Spark
быват так, что одна таска гененитрует много всего, а потом тебе обработать второй нужно
источник

K

KrivdaTheTriewe in Moscow Spark
и через хком передавать- западло
источник

K

KrivdaTheTriewe in Moscow Spark
я если честно, оч плохо это делаю
источник

K

KrivdaTheTriewe in Moscow Spark
прост это можн  людям отдать
источник

K

KrivdaTheTriewe in Moscow Spark
какие-то простые задачи
источник

DZ

Dmitry Zuev in Moscow Spark
Блин, вот у нас примерно такое же
источник