i
Size: a a a
2020 July 26
A
да зачем, поменяй на 5000 айтемов на страницу)
A
или сколько их там на 42 страницах
AS
тупо в get-запросе делаешь цикл и заменяешь pageNum= на нужный тебе
Попробую ну это уже request
AS
Чекну
2020 July 27
AL
Hey all. Is there a way to ise Scrapy for mobile apps?
SS
Пытаюсь вытащить ссылки на pdf файлы с сайта https://sds.valvoline.com/
(в коде запрашивается язык Norwegian, но это не принципиально).
Отправка запроса с ключевым словом работает, но когда пытаюсь открыть первый файл из полученного списка - сайт выдает ошибку (вероятно, неправильно работает функция parse_form_request()).
Что я делаю не так?
Собственно, сам код:
https://pastebin.com/dJdiT7jg
(в коде запрашивается язык Norwegian, но это не принципиально).
Отправка запроса с ключевым словом работает, но когда пытаюсь открыть первый файл из полученного списка - сайт выдает ошибку (вероятно, неправильно работает функция parse_form_request()).
Что я делаю не так?
Собственно, сам код:
https://pastebin.com/dJdiT7jg
DM
Не по теме, но все же:
С SQL рекурсией кто-то дружит?
С SQL рекурсией кто-то дружит?
V
Не по теме, но все же:
С SQL рекурсией кто-то дружит?
С SQL рекурсией кто-то дружит?
i
Пытаюсь вытащить ссылки на pdf файлы с сайта https://sds.valvoline.com/
(в коде запрашивается язык Norwegian, но это не принципиально).
Отправка запроса с ключевым словом работает, но когда пытаюсь открыть первый файл из полученного списка - сайт выдает ошибку (вероятно, неправильно работает функция parse_form_request()).
Что я делаю не так?
Собственно, сам код:
https://pastebin.com/dJdiT7jg
(в коде запрашивается язык Norwegian, но это не принципиально).
Отправка запроса с ключевым словом работает, но когда пытаюсь открыть первый файл из полученного списка - сайт выдает ошибку (вероятно, неправильно работает функция parse_form_request()).
Что я делаю не так?
Собственно, сам код:
https://pastebin.com/dJdiT7jg
А файлы точно на поддомене sds?
SS
И какую ошибку возвращает?
SS
Ошибка не в виде кода - а в редайректе на страницу с сообщением об ошибке