AR
Тут такие регулярно
Size: a a a
2020 August 22
SS
что нужно сделать чтобы паук обновил кэш страницы данной url?
К
что нужно сделать чтобы паук обновил кэш страницы данной url?
прописать dont_cache в мете реквеста
SS
прописать dont_cache в мете реквеста
разве флаг dont_cache не просто заставляет игнорировать существование кэша (не читать из него и не писать)?
К
разве флаг dont_cache не просто заставляет игнорировать существование кэша (не читать из него и не писать)?
Да. А по каким условиям ты хочешь обновлять?
SS
Да. А по каким условиям ты хочешь обновлять?
если response.body состоит из символов "\x00" - обновить кэш.
SS
А как ты узнаешь из чего состоит свежий ответ, если ты его не получишь, а получишь тот что в кэше?
страницы обновляются раз в пару лет, ручная проверка показывает, что обновлений не было
SS
Может быть ты хочешь не сохранять ответ в кэш если он состоит из этих символов?
уже сохранил, хочу обновить
A
Есть у кого-то секунда для совета? Чего не хватает этому сайту в запросе? (ЮА подкрутил)
https://www.overstock.com/Home-Garden/Brother-Cs8800prw-80-Stitch-Project-Runway-Computerized-Home-Sewing-Embroidery-Machine/16794545/product.htmlAR
в браузере работает?
A
в браузере работает?
Да, даже с вьікл джс
AR
а в скрапи что?