Size: a a a

2020 May 31

A

Andrii in Scrapy
ну у меня идет проверка что 5 минут на наличие товара
источник

A

Andrii in Scrapy
и что то после 2 часов все начало виснуть
источник

A

Andrii in Scrapy
даже после ребута, ssh дисконектит
источник

A

Andrii in Scrapy
походу cpu time лимит закончился
источник
2020 June 01

VS

Vlad Savva in Scrapy
Почему scrapy-rotating-proxies работает так долго?
источник

МС

Михаил Синегубов... in Scrapy
потому что прокся хреновая, по крайней мере конкретно для этого сайта
источник

b

blessed in Scrapy
Alex
в браузере js выключен
HTTP/2 - может по этому
источник

A

Alex in Scrapy
blessed
HTTP/2 - может по этому
А это решается как то?
источник

AR

Andrey Rahmatullin in Scrapy
вряд ли сайт не умеет 1.1
источник

b

blessed in Scrapy
Alex
А это решается как то?
Да, извиняюсь. Там в чем то другом дело.
источник

A

Alex in Scrapy
Прокси тогда как последний вариант
источник

b

blessed in Scrapy
Alex
Прокси тогда как последний вариант
Так он же в браузере открывается
источник

A

Alex in Scrapy
blessed
Так он же в браузере открывается
Да но в view(response) пустая страница. Как то палит скрапи
источник

МС

Михаил Синегубов... in Scrapy
Alex
Да но в view(response) пустая страница. Как то палит скрапи
дай ссылку, либо ее не было, либо просмотрел
источник

A

Alex in Scrapy
Михаил Синегубов
дай ссылку, либо ее не было, либо просмотрел
источник

МС

Михаил Синегубов... in Scrapy
т.е. фрейм с частью адреса "src="/_Incapsula_Resource?CWUDNSAI=22&xinfo=4..." вот совсем не настораживает?
источник

AR

Andrey Rahmatullin in Scrapy
лол
источник

A

Alex in Scrapy
Михаил Синегубов
т.е. фрейм с частью адреса "src="/_Incapsula_Resource?CWUDNSAI=22&xinfo=4..." вот совсем не настораживает?
Как бы нет))
Можно обьяснить пожалуйста)
источник

AR

Andrey Rahmatullin in Scrapy
антибот
источник

МС

Михаил Синегубов... in Scrapy
я бы сказал больше "анти DDOS", а это, на мой взгляд, по круче будет.
источник