B
я чё спрашиваю
планирую писать около десяти парсеров, хочу к какому-то виду одному придерживаться
планирую писать около десяти парсеров, хочу к какому-то виду одному придерживаться
Как вариант использовать для 90% случаев CSS, а для сложных xpath
Size: a a a
2020 July 24
OS
А не здесь ли писали, что css преобразуется один чёрт в xpath?
VB
А не здесь ли писали, что css преобразуется один чёрт в xpath?
Так и есть
VB
В parsel по крайней мере так
МС
есть что-то типа follow_all но для абсолютных ссылок?
ммм, а он для абсолютныйх не сработает, разве??
AR
А не здесь ли писали, что css преобразуется один чёрт в xpath?
нам-то какое дело, что он преобразуется?
AR
xpath тоже не процом выполняется, а интерпретируется
МС
я чё спрашиваю
планирую писать около десяти парсеров, хочу к какому-то виду одному придерживаться
планирую писать около десяти парсеров, хочу к какому-то виду одному придерживаться
придерживайся того, что тебе удобнее. Да, есть "правило" использовать только одно. Но вот прям следовать ему.... Если в одной процедуре лучше использовать и XPATH и CSS так и надо делать, а не делать километровый костыль ибо "у меня только XPATH/CSS"
A
придерживайся того, что тебе удобнее. Да, есть "правило" использовать только одно. Но вот прям следовать ему.... Если в одной процедуре лучше использовать и XPATH и CSS так и надо делать, а не делать километровый костыль ибо "у меня только XPATH/CSS"
100%
МС
я нарывался на таких "у нас в проектах только CSS"/
говорю, "на XPATH я это сразу вытащю, на CSS надо костылить" - неее, только CSS
говорю, "на XPATH я это сразу вытащю, на CSS надо костылить" - неее, только CSS
AR
я нарывался на старый код времён когда скрапи не умел цсс, вот это тяжко
S
ммм, а он для абсолютныйх не сработает, разве??
значит я что-то не так делаю
SS
.getall()?
S
.getall()?
тоже самое
AR
не сматчилось ничего значит
S
не сматчилось ничего значит
links = response.css('.title-cell a ::attr(href)').getall()
for url in links:
yield scrapy.Request(url, callback=self.get_ad)