Size: a a a

2020 May 28

🎱

🎱 in Scrapy
источник

🎱

🎱 in Scrapy
источник

AR

Andrey Rahmatullin in Scrapy
по разметке обычно можно понять, это ссылка на продукт или на подкатегорию
источник

AR

Andrey Rahmatullin in Scrapy
ну или по урлу
источник

🎱

🎱 in Scrapy
ладно, вроде понял, спасибо за помощь
источник

AS

Alexander Serebrov in Scrapy
🎱
хм, ок.
не знаю, смог ли правильно описать проблему
но выглядит это так,
и так пока не дойду до листинга продуктов
Просто на каждой странице пытаться и найти подкатегории И собрать продукты
источник

AS

Alexander Serebrov in Scrapy
Селекторы для подкатегорий и продуктов должны отличатся, ага
источник

G

Georg in Scrapy
У меня есть задача максимально замаскировать пайтон скрипт под браузер андройд/айфон смартфона с помощью подделки ajax и работы с ffmpeg. Как можно сверить, насколько мой скрипт похож на реальный браузер?
П.с. а вообще, какие есть способы детекта со стороны сервера? Может ли сервер, например рассчитывать порядок и скорость запросов от клиента? Что ещё может сделать?
Большое спасибо.
источник

iz

izzz zzi in Scrapy
Georg
У меня есть задача максимально замаскировать пайтон скрипт под браузер андройд/айфон смартфона с помощью подделки ajax и работы с ffmpeg. Как можно сверить, насколько мой скрипт похож на реальный браузер?
П.с. а вообще, какие есть способы детекта со стороны сервера? Может ли сервер, например рассчитывать порядок и скорость запросов от клиента? Что ещё может сделать?
Большое спасибо.
Подделки Ajax?)
источник

G

Georg in Scrapy
izzz zzi
Подделки Ajax?)
Ajax запросов
источник

G

Georg in Scrapy
Georg
У меня есть задача максимально замаскировать пайтон скрипт под браузер андройд/айфон смартфона с помощью подделки ajax и работы с ffmpeg. Как можно сверить, насколько мой скрипт похож на реальный браузер?
П.с. а вообще, какие есть способы детекта со стороны сервера? Может ли сервер, например рассчитывать порядок и скорость запросов от клиента? Что ещё может сделать?
Большое спасибо.
Олды, неужели нету ответа на мой вопрос?(
источник

iz

izzz zzi in Scrapy
Georg
Олды, неужели нету ответа на мой вопрос?(
Думаю ты его не там задаёшь, чат тематический
источник

G

Georg in Scrapy
izzz zzi
Думаю ты его не там задаёшь, чат тематический
Можешь тогда посоветовать чат, куда лучше задать?
источник

iz

izzz zzi in Scrapy
Georg
Можешь тогда посоветовать чат, куда лучше задать?
Лучше тестить самому, тебе же советовали снифер, возьми логи снифера с сайта и сниф со своего софта/скрипта
источник

G

Georg in Scrapy
izzz zzi
Лучше тестить самому, тебе же советовали снифер, возьми логи снифера с сайта и сниф со своего софта/скрипта
Блин, вот мне кажется это не реально разобрать все. Поэтому и интересно, может какие то другие есть инструменты. Как это все разобрать?))
О, кстати, может есть дока какая-нибудь или статьи?
источник

iz

izzz zzi in Scrapy
Georg
Блин, вот мне кажется это не реально разобрать все. Поэтому и интересно, может какие то другие есть инструменты. Как это все разобрать?))
О, кстати, может есть дока какая-нибудь или статьи?
С учётом того что ты толком назвать не можешь что ты делаешь , думаю не смогут помочь
источник

МС

Михаил Синегубов... in Scrapy
Georg
Блин, вот мне кажется это не реально разобрать все. Поэтому и интересно, может какие то другие есть инструменты. Как это все разобрать?))
О, кстати, может есть дока какая-нибудь или статьи?
реально все, но обычно не хватает одной из двух вещей "время" и "деньги"
источник

G

Georg in Scrapy
izzz zzi
С учётом того что ты толком назвать не можешь что ты делаешь , думаю не смогут помочь
Кидай, у меня есть время
источник

МС

Михаил Синегубов... in Scrapy
а так, повторяешь заголовки (в том числе и алгоритмы генерации, если они есть).
источник

iz

izzz zzi in Scrapy
Georg
Кидай, у меня есть время
Кого кидать?
источник