Size: a a a

2021 February 01

i

i in Scrapy
летом 2020го похоже куча народу решила "ну его в пень", вот еще в похожем проекте примерно такая же фигня случилась: https://github.com/istresearch/scrapy-cluster/issues/235
источник

S

Shaman89 in Scrapy
i
летом 2020го похоже куча народу решила "ну его в пень", вот еще в похожем проекте примерно такая же фигня случилась: https://github.com/istresearch/scrapy-cluster/issues/235
Этот кстати самый новый.  Но под мои задачи перебор я думаю. Апач кафка и тд. Проще дефолтными средствами скрапи накостылить
источник

NP

Nickolay Podkolzin in Scrapy
i
не рекомендую, там часто старые штуки написаны, если видишь .extract() - беги оттуда)
Спасибо, я так понимаю что лучше по туториалу с доков
источник

AR

Andrey Rahmatullin in Scrapy
как и всегда
источник

AR

Andrey Rahmatullin in Scrapy
туториал правда совсем уж базовый
источник

NP

Nickolay Podkolzin in Scrapy
Да я его смотрел уже там не сильно много
источник

S

Shaman89 in Scrapy
Nickolay Podkolzin
Да я его смотрел уже там не сильно много
По крупицам можно собрать инфу в основном со стэковерфлоу конечно.
источник

i

i in Scrapy
это же не так работает)
источник

i

i in Scrapy
тебе не надо для работы прям выучить ВСЕ!
источник

S

Shaman89 in Scrapy
Ну и на coderoad достаточно примеров.
источник

S

Shaman89 in Scrapy
Да все и не зачем. По докам основы по гуглу свои специфичные хотелки. Без дебрей
источник

i

i in Scrapy
ты сначала читаешь базовую штуку. потом берешь конкретный проект и начинаешь его пилить, что непонятно - пытаешься понять сам, если не получается, уже идешь на стековер. Так себе карту знаний и строишь постепенно)
источник

МС

Михаил Синегубов... in Scrapy
тут надо смотреть какие базовые знания. Если умеешь в парсинг и надо изучить новый фреймворк - это одно, если вообще ничего не знаешь - это уже совсем другая история.
источник

NP

Nickolay Podkolzin in Scrapy
Михаил Синегубов
тут надо смотреть какие базовые знания. Если умеешь в парсинг и надо изучить новый фреймворк - это одно, если вообще ничего не знаешь - это уже совсем другая история.
Я раньше bs4 использовал
источник

i

i in Scrapy
значит пункт 1)
источник

i

i in Scrapy
если боишься прыгнуть в скрапи - не бойся, прыгай туда, прям по самые гланды! я тоже раньше сидел на реквесте-бс4, а потом попробовал скрапи, это земля и небо, где раньше надо было 3 страницы кода писать, теперь 10 строчек хватает, остальное за тебя фреймворк делает.
источник

S

SoHard 🎄 in Scrapy
i
если боишься прыгнуть в скрапи - не бойся, прыгай туда, прям по самые гланды! я тоже раньше сидел на реквесте-бс4, а потом попробовал скрапи, это земля и небо, где раньше надо было 3 страницы кода писать, теперь 10 строчек хватает, остальное за тебя фреймворк делает.
жаль скрапи хреново pyinstaller-ом клеется
источник

i

i in Scrapy
(ну, правда там не все так радужно, javascript все-равно вынуждает на splash/selenium, но это уже частные случаи)
источник

S

SoHard 🎄 in Scrapy
ну или я не умею)
источник

i

i in Scrapy
SoHard 🎄
жаль скрапи хреново pyinstaller-ом клеется
ну с этой стороны докер мне помог
источник