В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Scrapy

569 membersпожаловаться на группу
2020 July 26

i

ildar in Scrapy
https://i.imgur.com/MQ9stDF.png
источник
22:18пожаловаться#1

i

ildar in Scrapy
второй пример этого древнего кода (когда сначала собрали все):
источник
22:19пожаловаться#2

i

ildar in Scrapy
https://i.imgur.com/fhtyqLV.png
источник
22:20пожаловаться#3

AS

Anatolii Shaitanov in Scrapy
ildar
https://i.imgur.com/MQ9stDF.png
Через BS я знаю как
источник
22:20пожаловаться#4

i

ildar in Scrapy
блин у меня такой кринж когда я на свой код смотрю
источник
22:20пожаловаться#5

i

ildar in Scrapy
ну через селениум также. отличий ноль
источник
22:20пожаловаться#6

i

ildar in Scrapy
что именно ты не понимаешь?
источник
22:20пожаловаться#7

AS

Anatolii Shaitanov in Scrapy
ну просто что я буду передавать в список если тиам ссылка одна на все страницы
источник
22:23пожаловаться#8

i

ildar in Scrapy
хинт - ты можешь собрать сначала селениумом код в driver.page_source. потом его обработать в любимом парсере аля бс там или parsel, получить нужные тебе ссылки. и снова по ним пойти тем же селениумом.
источник
22:24пожаловаться#9

A

Andrii in Scrapy
ildar
а ты иди по одной. их не не 6 сразу открывается, так ведь? если ты жмешь next, у тебя одна страница, которая следующая, открывается
Next пригает сразу на +5 страниц, гений сайт делал 😂
источник
22:24пожаловаться#10

AS

Anatolii Shaitanov in Scrapy
Andrii
Next пригает сразу на +5 страниц, гений сайт делал 😂
и то правда
источник
22:24пожаловаться#11

i

ildar in Scrapy
ну создай пустой список. назови его "мои страницы страницы мои"
источник
22:25пожаловаться#12

i

ildar in Scrapy
и эти все 5 страниц добавляй. и вызывай некст дальше
источник
22:25пожаловаться#13

i

ildar in Scrapy
а потом, берешь, и идешь по всему списку
источник
22:25пожаловаться#14

i

ildar in Scrapy
и собираешь там ссылки
источник
22:26пожаловаться#15

A

Andrii in Scrapy
ildar
ну создай пустой список. назови его "мои страницы страницы мои"
На сайте нет url страниц, через джаваскрипт подгружает)
источник
22:26пожаловаться#16

i

ildar in Scrapy
ну жми кнопку end в селениумом
источник
22:26пожаловаться#17

i

ildar in Scrapy
или яваскриптом
источник
22:26пожаловаться#18

AS

Anatolii Shaitanov in Scrapy
Andrii
На сайте нет url страниц, через джаваскрипт подгружает)
да так бы я через гет решил
источник
22:26пожаловаться#19

A

Andrii in Scrapy
Походу там через xhr проще, если он есть)
источник
22:27пожаловаться#20