Size: a a a

2020 June 06

B

Bulatbulat48 in Scrapy
источник

S

SoHard 🎄 in Scrapy
Bulatbulat48
Положить в мета, а в след функции извлечь из мета.
спасибо
источник

B

Bulatbulat48 in Scrapy
Либо через cb_kwargs в новых версиях
источник

A

Andrii in Scrapy
Привет. Есть сайт
https://www.joblo.com/
, через curl все хорошо, а вот через скрапи
Ignoring response <403 https://www.joblo.com/movie-posters/2019/charlies-angels/image-35598>: HTTP status code is not handled or not allowed
, как обойти? Подсталяю хедерс, не помогает
источник

A

Andrii in Scrapy
request.get дает 200 код
источник

AR

Andrey Rahmatullin in Scrapy
юзерагент поменяй
источник

A

Andrii in Scrapy
Andrey Rahmatullin
юзерагент поменяй
как не смешно, но User-Agent': 'Mozilla/5.0 (X11; Linux x86_64; rv:48.0) Gecko/20100101 Firefox/48.0' работает, а вот хром 83 не хотел)
источник

A

Andrii in Scrapy
спасибо
источник

RC

Ravi Chavare in Scrapy
Pass value through meta
источник
2020 June 07

🎱

🎱 in Scrapy
вопрос на миллион,
скрапи и бютифулсуп одинаково отдают контент для парсинга ?
источник

AR

Andrey Rahmatullin in Scrapy
Что такое отдают контент?
источник

🎱

🎱 in Scrapy
Andrey Rahmatullin
Что такое отдают контент?
Response одинаково возвращают?
источник

🎱

🎱 in Scrapy
Я опять неправильно выражаюсь, суп же не умеет в запросы
источник

🎱

🎱 in Scrapy
Ну html возвращает одинаково чтобы тянуть значения потом ?)
источник

К

Кирилл in Scrapy
html это стандарт, он всегда одинаковый
источник

AR

Andrey Rahmatullin in Scrapy
🎱
Я опять неправильно выражаюсь, суп же не умеет в запросы
бинго
источник

AR

Andrey Rahmatullin in Scrapy
🎱
Ну html возвращает одинаково чтобы тянуть значения потом ?)
кто с кем одинаково?
источник

🎱

🎱 in Scrapy
Andrey Rahmatullin
кто с кем одинаково?
Скрапи и суп.
источник

AR

Andrey Rahmatullin in Scrapy
Я опять неправильно выражаюсь, суп же не умеет в запросы
источник

🎱

🎱 in Scrapy
Кирилл
html это стандарт, он всегда одинаковый
Тогда, одинаково парсят страницу
источник