Ну наши шлют нахуй, эти вроде бы стараются подсказать. У них немного другая идеология 🙂

я так будучи студентом - писал в mail.ru, говорил им какой запрос к базе надо написать, чтобы вернуть мой потерянный пароль к почте))))

Да, понимаю, но всё же вы уже помогли.

А там потоки. Я не умею с ними работать. Читаю, но думаю налажаю.

Не надо там с потоками ничего делать

Пожалуй стоит пояснить. Секунду

Есть sidekiq worker. Он делает бла бла бла. Внутри него, этого воркера, мне нужно отправить 10 простых запросов (обработка их ошибок, если такие будут, необязательны). Чтобы процесс ускорить, я запускаю эти 10 запросов в 10 потоков. После этого (когда все потоки отработалм) ставится touch на нужный объект и работа всего воркера заканчивается.

Т.е. работа не с потоками самого sidekiq.

Удачи. Садик не любит толстые длинные джобы.

а нельзя запустить 10 разных sidekiq worker-ов?

А touch сделать отложено

Если распараллеливать через сайдкик, то надо заморачиваться с отслеживанием общего результата.
Очень похоже на batches из sidekiq pro

https://sidekiq.org/products/pro.html

А так-то сделать несколько параллельных запросов из воркера не очень страшно, если осторожно

https://github.com/breamware/sidekiq-batch - для бедных

А подробнее?

Можно разделить всё на отдельные воркеры, но не имею опыта работы с таким. Т.е. может получиться гигантский кавардак, с которым не пойму как работать.

Условно, там 1 воркер, который проходит по 3000 объектам делая бла бла, потом в конце делаются эти 10 запросов и переходим к следующему объекту. Суммарно, на все дела уходит около 1 часа, но в рамках одного воркера.

Если предположительно сделать, чтобы каждый объект был новым воркером, то уже будет 3000 воркеров. А если ещё и запросы выделить в отдельные воркеры, то будет 30.000 штук.

Я не знаю насколько это норм, но что-то очень много и есть острое ощущение, что в продолжительности обработки вырастит в разы, скажем из 1 часа превратится в 5 часов.

Да, поддерживаю, придётся мониторить каждый. А оно не особо нужно.

м? не понял вопроса

Реальное число. Ну там примерно, может 2600 или 2800.

Воркер делает свои операции, которые занимают время.