Size: a a a

2020 July 31

i

ildar in Scrapy
аналогично глянул оба этих линка в шелле, прекрасно вроде все грузит и показывает по view(response). И даже вроде редиректов никаких нет, тупо сразу 200 отдает. у тебя новейшая версия скрапи вообще?
источник

i

ildar in Scrapy
301 редирект оно отдает, если идти на http, а не https по этому адресу, но и то, скрапи эту фигню нормально вроде всегда отрабатывал, зачем это как-то дополнительно отбрасывать или обрабатывать - непонятно
источник

i

ildar in Scrapy
источник

AR

Andrey Rahmatullin in Scrapy
Dima Moiseenko
Чтобы свободно чувствовать себя со Scrapy нужно бы twisted сначала почитать?
не знаю, твистед всё равно изучить невозможно, мне кажется чтобы просто юзать скрапи про твистед надо знать только что он однопоточный с корутинами, но может какие-то более глубокие знания иногда и нужны
источник

AK

Aleksey Kanashenko in Scrapy
В shell у меня тож нормально. Версия последняя.
источник

AK

Aleksey Kanashenko in Scrapy
Решил вопрос через sitemapspider
источник

VB

Vladyslav Babych in Scrapy
Andrey Rahmatullin
не знаю, твистед всё равно изучить невозможно, мне кажется чтобы просто юзать скрапи про твистед надо знать только что он однопоточный с корутинами, но может какие-то более глубокие знания иногда и нужны
Чего невозможно?
источник

AR

Andrey Rahmatullin in Scrapy
твистед изучить
источник

VB

Vladyslav Babych in Scrapy
почему?
источник

AR

Andrey Rahmatullin in Scrapy
потому что сложный
источник

S

SoHard 🎄 in Scrapy
что вы знаете о демпинге
источник

ИБ

Иван Батурин... in Scrapy
может рублей РБ?
источник

AR

Andrey Rahmatullin in Scrapy
ахаха
источник

S

SoHard 🎄 in Scrapy
Иван Батурин
может рублей РБ?
на сайте нет такой валюты, так что не думаю
источник

AR

Andrey Rahmatullin in Scrapy
не, ну если оптово и сайты простые
источник

AR

Andrey Rahmatullin in Scrapy
но в идеале конечно одинаковые
источник

МС

Михаил Синегубов... in Scrapy
SoHard 🎄
что вы знаете о демпинге
х/з что в данном конкретном случае, но я то же могу написать "500 рублей", только это будет парсинг не сложной верстки на одной старничке сайта. И ведь не обману, такое, может и дешевле сделаю :))
источник

S

SoHard 🎄 in Scrapy
это есяли я правильно понял средний ценник за сайт, по идее там разные могуты быть
источник

ИБ

Иван Батурин... in Scrapy
ну уж точно не средний. Если средний 200, значит есть и по 100 и по 50 :)
источник

AR

Andrey Rahmatullin in Scrapy
:))))))
источник