Size: a a a

2020 April 22

D

D in Scrapy
Всем привет! Подскажите пожалуйста, что может быть не так. Сплеш не грузит сраницу silpo.ua . Сплеш ее не грузит даже в єтой утилите, что находиться по адресу localhost:8050.

Скриншот показывает загрузку сколько бы я не давал времени.

Если я отключаю privatmode, загрузка заменяется белым экраном на скриншоте, но дальше дело не идет.

зарание спасибо!
источник

М

Мак in Scrapy
попробуй для начала написать такой же скрипт для рендеринга страницы и получения скриншота как в доке scrapy-splash и опробовать его на каком то простом сайте
источник

D

D in Scrapy
Мак
попробуй для начала написать такой же скрипт для рендеринга страницы и получения скриншота как в доке scrapy-splash и опробовать его на каком то простом сайте
на других сайтах работает и через скрапи-сплеш и напрямую в сплеше, даже google maps загружается. тут конкретно с этим сайтом что то.

Я попробовал все рекомендации в faq, но хотел посоветоваться, может что то упустил
источник

D

D in Scrapy
если быть точнее, я пытаюсь загрузить страницу с товаром.
https://shop.silpo.ua/detail/2301/490833
источник

D

D in Scrapy
Может какой то блок на юзернейм, или какая то скрытая проверка на бота
источник

М

Мак in Scrapy
хм... а нахрена тебе splash на э
источник

М

Мак in Scrapy
на этой странице, если там пост запрос
источник

AR

Andrey Rahmatullin in Scrapy
ага
источник

AR

Andrey Rahmatullin in Scrapy
не, ну так про почти все использования хедлесса можно сказать
источник

М

Мак in Scrapy
D
Может какой то блок на юзернейм, или какая то скрытая проверка на бота
источник

М

Мак in Scrapy
и вот тебе ответ на этот запрос
источник

М

Мак in Scrapy
всё на тарелочке, можно сказать
источник

D

D in Scrapy
это надо делать JsonRequest?
источник

М

Мак in Scrapy
эмм....
источник

М

Мак in Scrapy
это надо делать пост запрос
источник

AR

Andrey Rahmatullin in Scrapy
FormRequest обычный
источник

D

D in Scrapy
method "POST"?
источник

М

Мак in Scrapy
и никаких блоков там нет, всё прекрасно присылается с обычными хедерами
источник

М

Мак in Scrapy
либо так, либо как Андрей написал
источник

AR

Andrey Rahmatullin in Scrapy
D
method "POST"?
да, но он будет по дефолту если передан formdata
источник