Size: a a a

2020 June 09

К

Кирилл in Scrapy
Зачем тебе https?
источник

G

Georg in Scrapy
Кирилл
Зачем тебе https?
Сайт требует для некоторых запросов
источник

G

Georg in Scrapy
Гляните код? Хотя вряд-ли поможет.
источник

G

Georg in Scrapy
http работает отлично. Https - пусто.
источник

К

Кирилл in Scrapy
Думаю тебе будет быстрее взять что-то другое, а не aiohttp. И узнать на каком этапе проблема возникает, возможно с самими прокси проблема
источник

К

Кирилл in Scrapy
Сделай тепличные условия и усложняй
источник

G

Georg in Scrapy
Кирилл
Думаю тебе будет быстрее взять что-то другое, а не aiohttp. И узнать на каком этапе проблема возникает, возможно с самими прокси проблема
Что например?
источник

К

Кирилл in Scrapy
requests?
источник

G

Georg in Scrapy
Сейчас с aiohttp-proxy ставлю прокси как https, отправляю запросы на http страницу, все отлично. Как только страница http - ошибка. Так же все работает с http-http.
источник

G

Georg in Scrapy
Кирилл
requests?
Нужно помощнее чет(
источник

К

Кирилл in Scrapy
Прикрутишь туда gevent и будет норм
источник

К

Кирилл in Scrapy
Ты попробуй сначала
источник

G

Georg in Scrapy
Georg
Сейчас с aiohttp-proxy ставлю прокси как https, отправляю запросы на http страницу, все отлично. Как только страница http - ошибка. Так же все работает с http-http.
фикс, как только страница https*
источник

G

Georg in Scrapy
Блин(
источник

К

Кирилл in Scrapy
Протестируй с httpbin.org
источник

К

Кирилл in Scrapy
Может дело в либе, может в прокси, может в сайте. Сначала найди где проблема
источник

G

Georg in Scrapy
Кирилл
Может дело в либе, может в прокси, может в сайте. Сначала найди где проблема
Сайт ident.me. Прокси с requests работают отлично. Но на requests все очень медленно.
источник

G

Georg in Scrapy
Дело, скорее всего, в aiohttp. Но в чем именно?
источник

К

Кирилл in Scrapy
С gevent будет так же как asyncio
источник

EA

Evgeniy Abramov in Scrapy
Парни может кто подсказать в scrapy авторизацию как правильно делать если я пускаю запросы через splash?
источник