AZ
Такое бывает, два здания рядом с общим ядром сети, тогда вполне можно, но это условный «георезерв»
Size: a a a
2021 September 28
UD
Шедулер ярна/политики хдфс тупые и не рассчитаны на геокластера
S
Не, в моем случае там подальше.
А дублирование тоже какое-то нужно
А дублирование тоже какое-то нужно
UD
Ну тогда страдать
AZ
This
UD
Ставить dwdm на пару терабит чтобы distcp быстро работал
UD
Писать прослойку которая бы раздупляла где-чего-каво сегодня лежит
AZ
Ворклоад и метаданные посложнее чем сам HDFS
UD
Просто такие желания возникают по двум причинам
UD
Люди не понимают как работает хадуп
UD
И они же продолбались с планированием емкости дц
UD
UD
Если нет технической потенции, спиливать хадуп нафиг и брать облако
AZ
Хадуп тут не уникален, даже банальную аналитическую СУБД сделать в георезерве это недешево, протоколы физической или логической репликации плохо работают с длинными джобами, батчлоадерами
S
Это мы могем
GP
рибята а как переопределить каст спарковый? хочу что бы для определенных типов cast to String вызывал другой метод отличный от toString
рерайт плана?
рерайт плана?
R
Я думаю нужно вернуться на шаг назад и выбрать другое решение, без необходимости переопределять поведение стандартных конструкций
GP
ну в моем конкретно случае я могу переопределить toString
есть ситуации где не могу
есть ситуации где не могу
ЕГ
Чё за ситуации