Size: a a a

2020 July 28

A

Andrii in Scrapy
def parse_articles(self, response):
       category_name = response.xpath("//div[@id='MainContent_T5CE262F3001_Col00']/div/div/h1/text()").get()
       articles = response.xpath("//ul[@class='clearfix']/li/a/@href").getall()
       yield from response.follow(articles, callback=self.parse_attr, meta={'category_name': category_name})
пробую сделать без итерации response.follow, но что-то не так TypeError: Cannot mix str and non-str arguments
источник

TA

Trafik Apostle in Scrapy
Здравствуйте,не подскажите ,как спарсить данные с вкладок таблицы на сайте https://twitchtracker.com/Evelone192/statistics ?
источник

AR

Andrey Rahmatullin in Scrapy
Trafik Apostle
Здравствуйте,не подскажите ,как спарсить данные с вкладок таблицы на сайте https://twitchtracker.com/Evelone192/statistics ?
ещё один заказ взял?
источник

AR

Andrey Rahmatullin in Scrapy
Andrii
def parse_articles(self, response):
       category_name = response.xpath("//div[@id='MainContent_T5CE262F3001_Col00']/div/div/h1/text()").get()
       articles = response.xpath("//ul[@class='clearfix']/li/a/@href").getall()
       yield from response.follow(articles, callback=self.parse_attr, meta={'category_name': category_name})
пробую сделать без итерации response.follow, но что-то не так TypeError: Cannot mix str and non-str arguments
может там None?
источник

TA

Trafik Apostle in Scrapy
Andrey Rahmatullin
ещё один заказ взял?
нет для себя
источник

AR

Andrey Rahmatullin in Scrapy
берёшь  да парсишь, в чём проблема?
источник

TA

Trafik Apostle in Scrapy
Andrey Rahmatullin
берёшь  да парсишь, в чём проблема?
там вкладки переключаются и html меняется.я не знаю как это спарcить.
источник

A

Andrii in Scrapy
Andrey Rahmatullin
может там None?
Нет, там все ок
источник

AR

Andrey Rahmatullin in Scrapy
Trafik Apostle
там вкладки переключаются и html меняется.я не знаю как это спарcить.
а, с самих вкладок?
источник

A

Andrii in Scrapy
Trafik Apostle
там вкладки переключаются и html меняется.я не знаю как это спарcить.
Лучше купи учебник за первьій заказ
источник

TA

Trafik Apostle in Scrapy
Andrii
Лучше купи учебник за первьій заказ
чтобы его получить надо чтобы он уже был
источник

A

Andrii in Scrapy
Trafik Apostle
чтобы его получить надо чтобы он уже был
Тогда просто скачай учебник)
источник

TA

Trafik Apostle in Scrapy
не подскажите получается?
источник

AR

Andrey Rahmatullin in Scrapy
а какой таблицы-то?
источник

A

Andrii in Scrapy
Ну прям для себя такой сайт )))
источник

TA

Trafik Apostle in Scrapy
Andrey Rahmatullin
а какой таблицы-то?
которая выделенная.
источник

AR

Andrey Rahmatullin in Scrapy
"Scraping is prohibited. Violation will be detected and eliminated."
источник

AR

Andrey Rahmatullin in Scrapy
вообще я б сплешом скрейпил
источник

i

ildar in Scrapy
Andrii
def parse_articles(self, response):
       category_name = response.xpath("//div[@id='MainContent_T5CE262F3001_Col00']/div/div/h1/text()").get()
       articles = response.xpath("//ul[@class='clearfix']/li/a/@href").getall()
       yield from response.follow(articles, callback=self.parse_attr, meta={'category_name': category_name})
пробую сделать без итерации response.follow, но что-то не так TypeError: Cannot mix str and non-str arguments
а почему там from? если у тебя follow. ты либо from убери либо follow_all поставь. Ну или я не знаю что-то о синтаксисе...
источник

A

Andrii in Scrapy
ildar
а почему там from? если у тебя follow. ты либо from убери либо follow_all поставь. Ну или я не знаю что-то о синтаксисе...
Нашел такой пример, всунул не работает, сделал итерацию)) щас доработает, буду менять
источник