Size: a a a

2020 July 26

i

ildar in Scrapy
а еще вероятнее всего там где-то рядом прикопан json или переменная в виде js-словаря. или вызывается по запросу и тебе этот запрос можно отследить
источник

i

ildar in Scrapy
from selenium.webdriver.common.keys import Keys
источник

i

ildar in Scrapy
короче я еще почитал - получаешь эти 5 страниц и все их в цикле протыкиваешь селениумом в цикле for. самый простой способ. список ты получишь если сделаешь driver.find_elements_by
источник

AS

Anatolii Shaitanov in Scrapy
ildar
ну жми кнопку end в селениумом
page = driver.find_element_by_css_selector("a[class='c-pagination__link js-pagination-link ']").send_keys(Keys.END)
источник

AS

Anatolii Shaitanov in Scrapy
Anatolii Shaitanov
page = driver.find_element_by_css_selector("a[class='c-pagination__link js-pagination-link ']").send_keys(Keys.END)
просто наводит курсив
источник

AS

Anatolii Shaitanov in Scrapy
ildar
короче я еще почитал - получаешь эти 5 страниц и все их в цикле протыкиваешь селениумом в цикле for. самый простой способ. список ты получишь если сделаешь driver.find_elements_by
попробую
источник

i

ildar in Scrapy
нет, я думал у тебя динамическая подгрузка)
источник

AS

Anatolii Shaitanov in Scrapy
ildar
нет, я думал у тебя динамическая подгрузка)
а, нет)
источник

i

ildar in Scrapy
тебе надо просто кнопку найти следующую за той, которая открыта и ее нажать - т.е. к примеру открыта 2, а нажать 3
источник

i

ildar in Scrapy
там обычно стоит что-то вроде selected или active
источник

i

ildar in Scrapy
вот находишь этот элемент и от него делаешь поиск следующего элемента по css-селектору
источник

i

ildar in Scrapy
наверняка, когда ты нажмешь на 3 и прогрузится эта страница у тебя уже будет 3 активна и перед стрелкой этой направо видно 6
источник

AS

Anatolii Shaitanov in Scrapy
ildar
наверняка, когда ты нажмешь на 3 и прогрузится эта страница у тебя уже будет 3 активна и перед стрелкой этой направо видно 6
Нет
источник

i

ildar in Scrapy
если уж как ты утверждаешь, что при нажатии на кнопку next (которая > , а не ») прогружается не следующая страница
источник

К

Кирилл in Scrapy
Andrii
Походу там через xhr проще, если он есть)
Конечно он там есть, но решили что это для слабаков
источник

AS

Anatolii Shaitanov in Scrapy
источник

A

Andrii in Scrapy
Кирилл
Конечно он там есть, но решили что это для слабаков
Хз, я с телефона
источник

К

Кирилл in Scrapy
Я скидывал его выше
источник

i

ildar in Scrapy
ой да господи, там короче
источник

i

ildar in Scrapy
источник