Size: a a a

2020 June 28

Alexandr Корнеев... in Scrapy
источник

Alexandr Корнеев... in Scrapy
источник

Alexandr Корнеев... in Scrapy
При этом второй вариант работает с другими сайтами.
источник

К

Кирилл in Scrapy
Разница только в dont_filter
источник

A

Archie in Scrapy
или убрать start_urls, тоже все заработает
источник

AR

Andrey Rahmatullin in Scrapy
чо вдруг
источник

AR

Andrey Rahmatullin in Scrapy
если убрать start_urls, start_requests() упадёт с AttributeError
источник

Alexandr Корнеев... in Scrapy
Archie
или убрать start_urls, тоже все заработает
Не заработает. урлы в методе пробовал прописывать, то же самое.
источник

Alexandr Корнеев... in Scrapy
Andrey Rahmatullin
а, это потому что урлы из start_urls по умолчанию с dont_filter=True
Как это исправить? Где, что поменять?
источник

К

Кирилл in Scrapy
Я что-то не понял, если дэфолтный start_requests работает, то в чем проблема?
источник

AR

Andrey Rahmatullin in Scrapy
Alexandr Корнеев
Как это исправить? Где, что поменять?
выставить dont_filter=True в реквестах
источник

A

Archie in Scrapy
ну хз я юзаю start_requests без start_urls и все пашет
источник

AR

Andrey Rahmatullin in Scrapy
😹😹
источник

Alexandr Корнеев... in Scrapy
Andrey Rahmatullin
выставить dont_filter=True в реквестах
Спасибо. Заработало.
источник

И

Илья in Scrapy
возникла проблемка с записью JSON в mysql базу, его как то надо преобразовывать  ?
источник

AR

Andrey Rahmatullin in Scrapy
зависит от типа столбца я думаю
источник

И

Илья in Scrapy
нашел, его надо в строку преобразовывать, словари и листы питонячие он не принимает
источник

AR

Andrey Rahmatullin in Scrapy
естественно
источник

И

Илья in Scrapy
а как boolean передавать ?  тоже стокой ?
источник

К

Кирилл in Scrapy
возьми лучше NoSQL бд
источник