т.е. через условный яндекс, верно понимаю? и это булет рабочий вариант?

Я про поиск вк

Но там не всю инфу видно конечно, я не помню что нет интересовало

спасибо, погляжу

я почему-то подумал что он без аккаунта не доступен

Сайт wine.com работает только через американский прокси, при этом никак не получается к нему через шел подключиться, ждешь три раза по три минуты и таймаут. При этом в браузере грузится . Что можно попробывать ? ?? Может надо запросы какие то повторить из Девтулза??

Может надо, попробуй

их там штук 15, может на какие то особое внимание обратить ?

На все

один из тех случаев, когда лучше промолчать

😹😹

Да, можно было сразу пробовать, не спрашивая

всем привет
пытаюсь решить одну задачку и вот в голове родился план)
хочу спросить, правильным путем ли я пытаюсь решить
суть задачи:
есть три сайта с которых паучек берет данные
но у каждого сайта свои методы защиты, один сайт пропускает все запросы и все ок
другой с жесткой защитой и я заколхозил Selenium - вроде получилось пробиться и брать данные
ну и третий только юезр агенты разные и тоже все ок
можно ли в рамках одного проекта для каждого сайта применять методы которые по своему обработают запросы?
как пример:
если сайт №2 - вызываем self.parse_2 - парсит с помощью Selenium
и так далее ко всем трем сайтов
или такая задача решается совсем по другому?

Один сайт == один паук. Никаких parse_2

весь мой план рухнул как карточный домик)
спасибо, понял

чисто теоретически такой велосипед можно собрать?

Теоретически можешь делать все что захочется

а это экономически оправданно при большом количестве сайтов?

да, это оправдано, когда у тебя что то надо исправлять

Большом количестве сайтов с одинаковой версткой что ли?