Телеграмм чат группы scrapy

Size: a a a

Scrapy

832 membersпожаловаться на группу

2021 February 07

Кирилл in Scrapy

Михаил Синегубов

третий пункт нужен "по необходимости" 😁
upd: ибо у меня "50/50" то использую, то нет

Ну тогда, это скорее Да, ты считаешь что они полезны

источник

15:49пожаловаться #1

i in Scrapy

следующий парсер с ними напишу. и так items использую все-равно

источник

15:50пожаловаться #2

МС

Михаил Синегубов... in Scrapy

ну, так то да, по крайней мере, считаю их полезной плюхой.

кстати, больше всего мне понравилась плюшка, когда в поле насовываешь данные из кучи мест, а потом их объединяешь.
Я так без проблем собирал дескрипшен их 3-5 мест страницы (от такая странная верстка была)

источник

15:51пожаловаться #3

SoHard 🎄 in Scrapy

ну штош, пора наверное разобраться )

источник

15:53пожаловаться #4

SoHard 🎄 in Scrapy

а то нахваливаете каждую неделю

источник

15:53пожаловаться #5

i in Scrapy

на wsl2 ставишь надеюсь?

источник

15:53пожаловаться #6

Кирилл in Scrapy

Ознакомиться, так точно нужно)

источник

15:53пожаловаться #7

i in Scrapy

через

i in Scrapy

да

15:54пожаловаться #10

🎱

🎱 in Scrapy

кстати, мне нужно ограничить айтемы в скрапи до 100 штук.
прописал в settings

CLOSESPIDER_ITEMCOUNT = 100

все равно скрапится больше 100. (116)

источник

15:56пожаловаться #11

i in Scrapy

Если используешь git, сразу выставь себе git config --global core.autocrlf input шо это такое объяснено тут https://stackoverflow.com/questions/10418975/how-to-change-line-ending-settings

Stack Overflow

How to change line-ending settings

Is there a file or menu that will let me change the settings on how to deal with line endings?

I read there are 3 options:
Checkout Windows-style, commit Unix-style

Git will convert LF to CRLF w...