Size: a a a

2021 February 04

ПФ

Паша Финкельштейн... in Moscow Spark
Dmitry
У нас, блин, бзера через HADOOP_USERNAME можно проставить 🤦  и вперед
Ну так бывает, да
источник

K

KrivdaTheTriewe in Moscow Spark
Dmitry
У нас, блин, бзера через HADOOP_USERNAME можно проставить 🤦  и вперед
Нужна керберизация
источник

ПФ

Паша Финкельштейн... in Moscow Spark
А пока её нету - накрутить так много слоёв защиты как можно
источник

K

KrivdaTheTriewe in Moscow Spark
Dmitry
У нас, блин, бзера через HADOOP_USERNAME можно проставить 🤦  и вперед
Иначе любой человек имеющий сеть к кластеру может удалить все
источник

ПФ

Паша Финкельштейн... in Moscow Spark
Да
источник

K

KrivdaTheTriewe in Moscow Spark
Нужно или выводить кластер в отдельный сетевой контур
источник

K

KrivdaTheTriewe in Moscow Spark
Или  керберизацию делать
источник

D

Dmitry in Moscow Spark
Паша Финкельштейн
Идея с прятанием из морды даёт просто на один слой меньше защиты
А почему, кстати, в таком фиговом сетапе (без керберизации) это не прокатит? Если креды прокидывать енвом, и редачить все упоминанию серкетов через этот регэксп
источник

D

Dmitry in Moscow Spark
А, типа, он все равно кладет кофиг запуска  куда-то в общедоступное место (hdfs)?
источник

ПФ

Паша Финкельштейн... in Moscow Spark
Dmitry
А, типа, он все равно кладет кофиг запуска  куда-то в общедоступное место (hdfs)?
Ну ты же откуда-то прокидываешь? Вот в этом месте и будет видно
источник

D

Dmitry in Moscow Spark
сам spark-submit запускается с защищенного хоста (это типа контйенер с примаунченным волт сайдкар контейнером), можно "считать", что хотя бы в этой части конструкции все секурно😅
источник

ПФ

Паша Финкельштейн... in Moscow Spark
Стоп, если там кубик - то весь Спарк в кубике?
источник

ПФ

Паша Финкельштейн... in Moscow Spark
Тогда же есть сикреты и моего читать оттуда
источник

D

Dmitry in Moscow Spark
Вот как раз нет
источник

ПФ

Паша Финкельштейн... in Moscow Spark
А, блин
источник

ПФ

Паша Финкельштейн... in Moscow Spark
Тогда да, можно закрыть регэкспами или раскидать броадкастом - всё одно, кажется
источник

ПФ

Паша Финкельштейн... in Moscow Spark
А, не
источник

ПФ

Паша Финкельштейн... in Moscow Spark
Вру
источник

ПФ

Паша Финкельштейн... in Moscow Spark
Надо же как-то на мастер прокинуть
источник

D

Dmitry in Moscow Spark
ага
источник