там неплохо бы паузу добавлять
чтоб серак не ддосить

ночью в выходной день?.. 😳

В справке:

--html-extension Если тип загруженного файла text/html и его адрес не оканчивается на \.[Hh][Tt][Mm][Ll]?, при использовании данного параметра к его имени будет добавлено .html.

о, вот так чуть понятней, спасибо

http://51.15.192.163/transport.cheladmin.ru/index.shtml
из-за CORS не появляются некоторые картинки, но вроде неплохо получилось. всем спасибо за помощь и участие!

Но учитывайте что базу саму он не вышрузил

базу чего?

Сайта, он же вероятно не статичный

"рация на танке" ))
я вижу только один раздел - транспорт онлайн - не статичный. но скорее всего конечно сайт наполняется через админку, т.е. вполне вероятно, что база всё же существует. к сожалению в этих вещах я ТОЖЕ не разбираюсь )

а вот и нашлась первая потеря: docs папка не скачалась. вот тут doc всё ещё ведёт на исходный сайт

кириллицу не видит?

Стандартные настройки для архивации выглядят вот так
wget --warc-cdx -b --mirror -w 1 --random-wait -e robots=off --limit-rate=512k --cookies=on --keep-session-cookies --no-check-certificate -v --save-cookies=[domain].cookie.txt -o [domain].log domain --warc-file=[domain]
расшифровка опций:
--mirror - зеркалирование сайта, чтобы можно было делать оффлайн навигацию
--warc-cdx - генерировать CDX файл для WARC файла
--warc-file - сохранение сайта в единый WARC файл веб архива
--save-cookies - файл для сохранения кук
--keep-session-cookies - сохранять сессионные куки
--cookies - поддерживать куки
--limit-rate - ограничивать выгрузку этим лимитом
-w 1 - пауза между запросами в секундах, для сайтов имеющих блокировки по частоте запросов
-e robots=off - игнорировать инструкции в robots.txt
--random-wait - произвольное время ожидания между запросами, для сайтов умеющих отслеживать ожидание
-b - запуск на заднем фоне (background)
-v - подробный вывод о запросах
--no-check-certificate - не проверять https сертификаты, помогает когда сертификаты устаревают или невалидны
-o - файл для вывода логов
[domain] - название домена

итоговый файл .warc можно проигрывать с помощью программы webrecorder-player https://github.com/webrecorder/webrecorder-player

А можете ссылку на транспорт онлайн дать

она там чуть ли не самая первая, меню с нее начинается. комп уже выключил, извините

да там насколько увидел все ссылки на яндекс ведут(

Это не из вашей базы , это вам сервис предоставляет оператор мониторинговых данных , скажете ему новое место и он туда перенесет .

Но система так себе если честно

ни разу не видел какого-либо сравнения, простого даже перечня или мук выбора систем мониторинга. если поделитесь буду благодарен