Друзья, еще один нубовский вопросик от меня)

Есть список урлов на файлы с удаленного сервера. пытаюсь пройти циклом и скачать все. В какой-то момент (1800-1900 скаченных файлов) они перестают скачиваться. Ошибок никаких нет.
Пробовал разные варианты:
1. Вариант прохода через массива через цикл for in, со скачиванием напрямую через node-wget
2. вариант прохода через for in с добавлением в очередь tress и скачиванием через http.get

Подскажите пожалуйста куда копать.

Нужно поставить задержку между скачиваниями

Друзья, еще один нубовский вопросик от меня)

Есть список урлов на файлы с удаленного сервера. пытаюсь пройти циклом и скачать все. В какой-то момент (1800-1900 скаченных файлов) они перестают скачиваться. Ошибок никаких нет.
Пробовал разные варианты:
1. Вариант прохода через массива через цикл for in, со скачиванием напрямую через node-wget
2. вариант прохода через for in с добавлением в очередь tress и скачиванием через http.get

Подскажите пожалуйста куда копать.

Я думаю это мало. Нужно смотреть какие политики на сервере откуда качается

если нет ошибок, то либо ты их не отлавливаешь, либо таймаутов нет, которые бы эти ошибки сделали.
Вероятно, на сервере, с которого ты качаешь что-то происходит

Сервер может просто начать отправлять пустой 200 ОК

Чтобы не сливали его контент

Ну мы же не знаем сколько всего надо скачать и какого размера каждое скачивание

сейчас скачивается 1800-1900 файлов объемом 200метров

А потом через сколько скачиваться опять начинает?