AK
Then tell me how can I store data into csv while running multiple spiders?
Size: a a a
2020 May 28
AR
set FEED_URI
AK
set FEED_URI
I'll try
AR
though of course files should be separate for separate spiders
AR
в чём вопрос?
AR
для одинаковых по структуре страниц один колбэк, для разных разные
AR
последний вопрос не понял
🎱
для одинаковых по структуре страниц один колбэк, для разных разные
можешь показать пример, пожалуйста? вообще не доходит.
С одинаковой структурой
С одинаковой структурой
AR
показать что? один колбэк?
AR
два колбэка?
🎱
показать что? один колбэк?
один колбэек который рекурсивно доходит до base case
AR
колбэки просто парсят страницу
🎱
https://pastebin.com/Vd0eDgCp
вот, в код приходит категория
он в свою очередь извлекает остальные сабкатегории,
и у этих сабкатегории есть еще категории.
Как по ним всем пройтись?
вот, в код приходит категория
он в свою очередь извлекает остальные сабкатегории,
и у этих сабкатегории есть еще категории.
Как по ним всем пройтись?
AR
если структура новых страниц такая же, то использовать этот же колббэк, если другая, то написать новый
AR
твой код уже рекурсивный, он не работает?
🎱
твой код уже рекурсивный, он не работает?
да, это понял)
он работает, но он начинает брать сабкатегорию и их сабкатегории, проходится по ним а остальные ссылки теряются.
он работает, но он начинает брать сабкатегорию и их сабкатегории, проходится по ним а остальные ссылки теряются.
AR
куда теряются?
A
А кто-то скрепил imdb?