Size: a a a

2021 January 23

К

Кирилл in Scrapy
Stepan Smirnov
https://www.plsa.co.uk/Press-Centre/News/Article/82--positive-about-pension-freedoms-but-many-worried-about-risks

Каким образом можно сгенерировать список элементов схожий с тем, что получается при применении xpath '//div[@class="article-content clearfix"]/*',
но с включением элементов '//div[@class="article-content clearfix"]/text()' (с сохранением порядка)?
такое? //div[@class="article-content clearfix"]/node()
источник

SS

Stepan Smirnov in Scrapy
Да, спасибо
источник

В

Влад in Scrapy
Всем привет. Не подскажете где искать сайты по названию? Мб апишка поисковика какого-нить? Нашел пару либ с поиском в дакдакго, но им по 11 лет и они не работают.  Гугл начал просить пройти капчу.
источник

AR

Andrey Rahmatullin in Scrapy
🤷‍♂
источник
2021 January 24

A

Ashgaz in Scrapy
Влад
Всем привет. Не подскажете где искать сайты по названию? Мб апишка поисковика какого-нить? Нашел пару либ с поиском в дакдакго, но им по 11 лет и они не работают.  Гугл начал просить пройти капчу.
в тут https://rapidapi.com/collection/web-search-api нашёл например такой api - https://rapidapi.com/apigeek/api/google-search3/pricing
600 запросов в месяц - на халяву. Точно можно по 100 ответов в запросе получать
источник

В

Влад in Scrapy
спасибо.
я нашел https://pypi.org/project/duckpy/. походу запросы неограниченные
источник

S

SoHard 🎄 in Scrapy
Влад
спасибо.
я нашел https://pypi.org/project/duckpy/. походу запросы неограниченные
DuckDuckGo may temporarily block your request IP or return empty results, especially if you are using the library for scraping, bots and other stuff that generate many requests. This is not a duckpy issue and can be prevented using proxies.
источник

В

Влад in Scrapy
ладно
источник

AR

Andrey Rahmatullin in Scrapy
лол
источник

S

Serhii in Scrapy
Влад
ладно
https://www.ecosia.org
С этого поисковика вроде результаты можно парсить без проблем. Попробуй его.
источник
2021 January 25

k

kFor in Scrapy
Как получить текст из <a>?

Сам <p> я получил, но не понимаю, как получить <a> (жалобы на уличные банды)
bs.find('p', id='pageDescription')
источник

S

Serhii in Scrapy
kFor
Как получить текст из <a>?

Сам <p> я получил, но не понимаю, как получить <a> (жалобы на уличные банды)
bs.find('p', id='pageDescription')
А если дальше дописать,.find('a'),получится извлечь?
источник

k

kFor in Scrapy
Serhii
А если дальше дописать,.find('a'),получится извлечь?
да, спасибо
источник

П

Пастырь in Scrapy
Ребят, кто-нибудь парсил HH ? Сколько стоит спарсить 38кк записей ?
источник

П

Пастырь in Scrapy
источник

DO

Daniil Okhlopkov in Scrapy
У HH открытое апи
источник

П

Пастырь in Scrapy
для резюме оно платное
источник

A

Andrii in Scrapy
5$?
источник

S

SoHard 🎄 in Scrapy
Andrii
5$?
откуда цена?)
источник

DO

Daniil Okhlopkov in Scrapy
Пастырь
для резюме оно платное
А, ну ты не указал, что конкретно парсить надо)
источник