МС
Size: a a a
2020 May 24
ПА
Так и делается, собирается всё в одно поле, но нужен скрипт который раскидает это по колонкам )
ПА
Просто нужно указать что в этом поле является характеристикой, что названием и значением.
МС
Просто нужно указать что в этом поле является характеристикой, что названием и значением.
по моему, тебя куда-то не туда понесло:)
ПА
Я привык так )
ПА
паук - https://gist.github.com/Mifody/6fb5d228aeb91c736c24f1847f880cec
конвертила - https://gist.github.com/Mifody/d7088ffb76fca8abc03527a42afff31b
но тут в монгу заливается :)
конвертила - https://gist.github.com/Mifody/d7088ffb76fca8abc03527a42afff31b
но тут в монгу заливается :)
Спасибо, буду разбираться в коде )
B
интересно, что можно без заголовков писать:
include_headers_line=True
AR
dont_filter=True
N
dont_filter=True
это мне?)
AR
Да
N
почитал, понял. а можно этот параметр указывать не во всех ScrapyRequest, а например указать его один раз в settings.py или в мидлварь, я не знаю
AR
Выключи dupefilter
N
Выключи dupefilter
спасибо, работает)
2020 May 25
ГЧ
Переслано от Гнида Черножопая...
В чем может быть проблема, не подскажете?
1 скрин - bot.py, telebot
2 скрин - user_client.py, telethon
Трейс ошибки: https://pastebin.com/m9Se7mrS
1 скрин - bot.py, telebot
2 скрин - user_client.py, telethon
Трейс ошибки: https://pastebin.com/m9Se7mrS
ГЧ
У
Всем привет
s
Добрый день! Подскажите, может кто решал вопрос:
если после некоторого количества запросов сервер начинает кидать 302 редирект и редиректить на каптчу, то как заставить скрапи заснуть на 5 минут и начать с того же места?
стаковерфло прочитал вдоль и поперек)
если после некоторого количества запросов сервер начинает кидать 302 редирект и редиректить на каптчу, то как заставить скрапи заснуть на 5 минут и начать с того же места?
стаковерфло прочитал вдоль и поперек)