Телеграмм чат группы scrapy

Смотря какая задача - и что требуется скрапить....Вообще - селениум не быстрое решение......Если ты имеешь ввиду селениум в контейнере - то есть решения

источник

02:02пожаловаться #7

t

tfhx8 in Scrapy

Roma

Смотря какая задача - и что требуется скрапить....Вообще - селениум не быстрое решение......Если ты имеешь ввиду селениум в контейнере - то есть решения

селениум в контейнере сразу заточенный вместе с scrapy, чтобы вручную не настраивать итп)

источник

02:17пожаловаться #8

t

tfhx8 in Scrapy

Roma

Смотря какая задача - и что требуется скрапить....Вообще - селениум не быстрое решение......Если ты имеешь ввиду селениум в контейнере - то есть решения

а что быстрее селениума, но чтобы умело открывать сайты с поддержкой js?)

источник

02:17пожаловаться #9

R

Roma in Scrapy

tfhx8

селениум в контейнере сразу заточенный вместе с scrapy, чтобы вручную не настраивать итп)

такого не встречал - да и там не все так просто.....Я не специализируюсь на скрапинге, подожди утра - может кто подскажет что используют. Есть splash, puppeteer

источник

02:24пожаловаться #10

t

tfhx8 in Scrapy

Roma

такого не встречал - да и там не все так просто.....Я не специализируюсь на скрапинге, подожди утра - может кто подскажет что используют. Есть splash, puppeteer

если сейчас оно умеет многопоточно, то наверно подойдет

источник

02:27пожаловаться #11

ФФ

Фаза Фазов in Scrapy

ребят подскажите пожалуйста ...
не могу понять почему парсер приносит ссылку на загрузку не ту которая на самом деле на сайте....

источник

10:04пожаловаться #12

К

Кирилл in Scrapy

Он не может приносить не ту. Ссылка именно та, что на сайте. Может быть ты просто не ту выбрал

источник