хз я никогда не пользовался linkextractor, мне кажется это не тот случай когда он нужен. не надо пытаться сделать универсальную функцию обработчик, раз у тебя сайты разные то и обработчики отдельно надо

что-то типа

start_urls = ['enu.kz']

def parse(self, response):
   faculty_links = response.xpath(...)
   for url in faculty_links:
         yield scrapy.Request(url, callback = process_faculty)

def process_faculty(self, response):
   do_smth

ну общая схема такая а там смотри по ситуации смотря что тебе в итоге надо, если надо зайти на определенную страницу на сайте факультета то соответственно делаешь отдельный обработчик для этой страницы

почекай примеры в документации, это тривиальная схема работы там должны быть примеры

вы имеет ввиду пауков под обработчиками?

надо будет попробовать хоть 1 парсер на рулах написать, вдруг я открою для себя крутотень)

в документации сложно разобраться если ты только не продвинутый юзер

Всем привет! А кто-нибудь собирает статьи с Techcrunch? Если да, то как, поделитесь, пожалуйста.

будет ахрененным подспорьем, если ты скажешь что делал и что не получается

Я понимаю, но я, видимо, решил схитрить. Я планирую это делать через несколько дней, но пока после первого просмотра я не нашел легкого способа достать статьи. Поэтому понадеялся, что кто-то просто сразу выложит все карты на стол

Я понимаю, но я, видимо, решил схитрить. Я планирую это делать через несколько дней, но пока после первого просмотра я не нашел легкого способа достать статьи. Поэтому понадеялся, что кто-то просто сразу выложит все карты на стол

подскажите пж