Всем привет! Подскажите пожалуйста, возможно кто то сталкивался, у кого был опыт в масштабировании мастера jenkins?
Суть проблемы, есть мастер 16/32, есть 16 слейвов 6/24 по 16 exec каждый и есть код который пилит другая команда где один Билд вызывает parallel ещё 16 потоков, и если верно рассчитали:
= 16 слейвов*16 exec * 16 потоков когда запущена Джобу=4096 потоков на мастере, и он начинает жутко лагать, и в последствии просто завис, и рестарт демона только. А, ну и плюс объём деплой таков что в очереди(queue) ещё накапливается 100-200 билдов.
Расширить мастер тоже в процессе решения. Но это Временный костыль.
Если есть реальный опыт как можно заскейлить мастер который выдержит подобные нагрузки, было бы кстати.
Гугл у меня не отняли, я этим сейчас занимаюсь. Но реальный опыт также может помочь быстрее найти решение и поделиться подводными камнями при такой архитектуре.