Size: a a a

2020 July 22

AR

Andrey Rahmatullin in Scrapy
лол
источник

AR

Andrey Rahmatullin in Scrapy
Тюлень Здоровенный
Вот так не то значение берется из таймера (берутся дофига большие чиселки, а мне нужны часы-минутки-секундочки:
print(driver.find_element_by_id('counter_3').get_attribute("timer"))
что запрашиваешь, то и возвращается
источник

ТЗ

Тюлень Здоровенный... in Scrapy
Andrii
print(driver.find_element_by_id('counter_3').text ?
Спасиб. :)
источник
2020 July 23

S

SoHard 🎄 in Scrapy
каким образом можно получить следуюющий тэг после h3?
источник

S

SoHard 🎄 in Scrapy
источник

💀Ҁ

💀 Ңӥҟӥҭӓ Ҁӆӑҫҭӥӿӥӊ 🐲... in Scrapy
div.line ищи
источник

💀Ҁ

💀 Ңӥҟӥҭӓ Ҁӆӑҫҭӥӿӥӊ 🐲... in Scrapy
он никак с h3 не связан
источник

К

Кирилл in Scrapy
~ в css или following-sibling в xpath
источник

A

Andrii in Scrapy
//h3/following-sibling::div[@class='line']
источник

💀Ҁ

💀 Ңӥҟӥҭӓ Ҁӆӑҫҭӥӿӥӊ 🐲... in Scrapy
о о о...
я тоже вопрос задам

есть сайт
урл в подгруппе там список статей с коротким описанием и ссылки на полные статьи
+ паггинация снизу


вопрос, как мне эти ссылки собрать (вместе с переходами по пагинации) и попереходить по ним собрав там инфу?

ЗЫ. только только начал скрапи ковырять, пока вообще не понял что как работает
(в итемс закинул поля, какие парсить, в спайдере связал эти поля с div/class элементами на странице, что дальше делать...хз, упёрся именно в пагинации и переходах по ссылке)
мне б побольше примеров посмотреть, я хз где
источник

К

Кирилл in Scrapy
💀 Ңӥҟӥҭӓ Ҁӆӑҫҭӥӿӥӊ 🐲
о о о...
я тоже вопрос задам

есть сайт
урл в подгруппе там список статей с коротким описанием и ссылки на полные статьи
+ паггинация снизу


вопрос, как мне эти ссылки собрать (вместе с переходами по пагинации) и попереходить по ним собрав там инфу?

ЗЫ. только только начал скрапи ковырять, пока вообще не понял что как работает
(в итемс закинул поля, какие парсить, в спайдере связал эти поля с div/class элементами на странице, что дальше делать...хз, упёрся именно в пагинации и переходах по ссылке)
мне б побольше примеров посмотреть, я хз где
эти ссылки на странице есть или js подгружает новые данные с страницами?
источник

A

Andrii in Scrapy
💀 Ңӥҟӥҭӓ Ҁӆӑҫҭӥӿӥӊ 🐲
о о о...
я тоже вопрос задам

есть сайт
урл в подгруппе там список статей с коротким описанием и ссылки на полные статьи
+ паггинация снизу


вопрос, как мне эти ссылки собрать (вместе с переходами по пагинации) и попереходить по ним собрав там инфу?

ЗЫ. только только начал скрапи ковырять, пока вообще не понял что как работает
(в итемс закинул поля, какие парсить, в спайдере связал эти поля с div/class элементами на странице, что дальше делать...хз, упёрся именно в пагинации и переходах по ссылке)
мне б побольше примеров посмотреть, я хз где
источник

A

Andrii in Scrapy
источник

💀Ҁ

💀 Ңӥҟӥҭӓ Ҁӆӑҫҭӥӿӥӊ 🐲... in Scrapy
Кирилл
эти ссылки на странице есть или js подгружает новые данные с страницами?
на странице есть, я их могу вытянуть с одной страницы
а вот пройти по пагинации
у меня уже не алё
источник

К

Кирилл in Scrapy
используй CrawlSpider
источник

К

Кирилл in Scrapy
он сам всё сделает, только напишешь какие ссылки брать
источник

💀Ҁ

💀 Ңӥҟӥҭӓ Ҁӆӑҫҭӥӿӥӊ 🐲... in Scrapy
Andrii
так это по страницам только пройтись
а у меня на каждой такой странице ссылки, на которые надо зайти и там уже спарсить
источник

💀Ҁ

💀 Ңӥҟӥҭӓ Ҁӆӑҫҭӥӿӥӊ 🐲... in Scrapy
Кирилл
используй CrawlSpider
ок, почитаю, спасибо
источник

A

Andrii in Scrapy
💀 Ңӥҟӥҭӓ Ҁӆӑҫҭӥӿӥӊ 🐲
так это по страницам только пройтись
а у меня на каждой такой странице ссылки, на которые надо зайти и там уже спарсить
Тоже самое, собери линк и вперед
источник

💀Ҁ

💀 Ңӥҟӥҭӓ Ҁӆӑҫҭӥӿӥӊ 🐲... in Scrapy
Andrii
Тоже самое, собери линк и вперед
собрать в start_links?
источник