Size: a a a

2020 June 20

x\

xal.py \-_-/ in Scrapy
А бля
источник

x\

xal.py \-_-/ in Scrapy
Что возвращается
источник

A

Andrii in Scrapy
если сесион то та самая страница, без сесион - сорри еррор
источник

К

Кирилл in Scrapy
И в чем вопрос?
источник

К

Кирилл in Scrapy
Если с сессион всё хорошо
источник

A

Andrii in Scrapy
всьо, понял, сделал - всем спасибо за время
источник

OS

Oleg Shleiko in Scrapy
Товарищи знатоки, подскажите пожалуйста чем паук может себя спалить. Стучусь на сайт пауком - 403 ошибка, беру хэдеры паука и стучу через курл - всё норм
источник

AR

Andrey Rahmatullin in Scrapy
Порядок хедеров
источник

AR

Andrey Rahmatullin in Scrapy
Какие-нибудь пробелы и регистр букв в хедерах тоже могут проверять в принципе
источник

AR

Andrey Rahmatullin in Scrapy
Ну и что такое беру хедеры паука?
источник

OS

Oleg Shleiko in Scrapy
    def process_response(self, request, response, spider):
       for header in request.headers:
           logging.error(header.decode('utf-8') + ': ' + request.headers[header].decode('utf-8'))
источник

OS

Oleg Shleiko in Scrapy
источник

OS

Oleg Shleiko in Scrapy
Вот вывод, в таком же порядке прокидываю курлу через -H
источник

AR

Andrey Rahmatullin in Scrapy
HTTP 1.1?
источник

OS

Oleg Shleiko in Scrapy
Как это проверить?
источник

К

Кирилл in Scrapy
а ERROR тебя не напрягло?
источник

К

Кирилл in Scrapy
это должен быть info или debug левел)
источник

OS

Oleg Shleiko in Scrapy
ERROR ерез поиск пайчарма легко отследить))
источник

OS

Oleg Shleiko in Scrapy
Кирилл
это должен быть info или debug левел)
Да какая разница, я вывел что бы протестировать на курле
источник

AR

Andrey Rahmatullin in Scrapy
Oleg Shleiko
Как это проверить?
В дебаг-выводе курла
источник