Телеграмм чат группы scrapy

Size: a a a

Scrapy

539 membersпожаловаться на группу

2020 July 13

Viktor in Scrapy

именно сам линк на продукт

Переслано от Viktor

Народ, нужна ваша помощь. Мне нужно достать атрибут href тега <a> класса "goods-tile__picture" из каждого <li> класса "catalog-grid__cell catalog-grid__cell_type_slim". Я делаю через xpath.
content (должен быть 52 и равняться колличеству li, но он почему-то 60.), а product.xpath() совсем ничего не возвращает. Использую Scrapy.

селекторы выглядят правильно, но там же динамический контент, его просто так через html не вытащишь

источник

11:00пожаловаться #2

Кирилл in Scrapy

тебе нужны данные из script id="rz-client-state"

источник

11:01пожаловаться #3

Viktor in Scrapy

Спасибо) попробую достать

источник

11:02пожаловаться #4

Stanislav Sagan in Scrapy

Здравствуйте, если я пишу xpath типа такого

"//div[@class='class1']"

То оно будет пропускать div-ы у которых больше одного класса, например:

class='class1 class2'

Как можно изменить это поведение?

Здравствуйте, если я пишу xpath типа такого

"//div[@class='class1']"

То оно будет пропускать div-ы у которых больше одного класса, например:

class='class1 class2'

Как можно изменить это поведение?

Или используй contains, или css

источник

12:37пожаловаться #6

Кирилл in Scrapy

//div[contains(@class, 'class1')]

источник

12:38пожаловаться #7

Stanislav Sagan in Scrapy

👍 работает. Спасибо))

источник

12:41пожаловаться #8

Andrey Rahmatullin in Scrapy

это, понятно, найдёт и class='class11'

источник

12:43пожаловаться #9

Stanislav Sagan in Scrapy

Andrey Rahmatullin

это, понятно, найдёт и class='class11'

мммм.. Понял как оно работает. Учту. Важное замечание.

источник

13:09пожаловаться #10

Andrey Rahmatullin in Scrapy

(c CSS селекторами такой проблемы нет, конечно)

источник

13:12пожаловаться #11

Stanislav Sagan in Scrapy

Подскажите пожалуйста, почему оно выводит 4 ОДИНАКОВЫХ масива по 4 ссылки? Если я ожидаю в принте увидеть 4 массива по одной разной ссылке? Что я делаю не так?

источник

13:13пожаловаться #12

Andrey Rahmatullin in Scrapy

// ищет по всему документу

источник

13:14пожаловаться #13

Stanislav Sagan in Scrapy

Andrey Rahmatullin

// ищет по всему документу

Упс)

источник

13:16пожаловаться #14