Да, все это делается для того, чтобы системы была с максимально динамическим энвайрментом и быстро-конфигурабельными библиотеками, для этого docker собственно. Секьюрная и при этом с быстрым и простым деплоем на неё, для этого Jenkins.
1)Деплоим 2)Вычисления идут 3)Сгенеренные результаты выгружаются по мере выполнения.
Основная проблема с достижением третьего пункта, но если есть какие-то мануалы по построению похожих систем в целом - с радостью бы принял)