VB
покажите плз коману запуска из скрипта
выше
Size: a a a
2020 May 28
OS
а где настройки на уровень логгирования?
VB
а где настройки на уровень логгирования?
В settings
VB
Подскажите пожалуйста. В setting настраиваю логирование -https://gist.github.com/bc7b702f454df5310d062926188a70db. Прохожусь дебагером - везде ERROR. Потом запускаю паука со скрипта https://gist.github.com/f24a20c232d75a4f7b94caf0d5fd7132. В настройках опять же нужный уровень. Внутри класса паука уже уровень логирования не задан вообще
@Shleif91 здесь чуть больше инфы
OS
А так пробовали?
LOG_LEVEL = 'ERROR'VB
А так пробовали?
LOG_LEVEL = 'ERROR'конечно
OS
CONCURRENT_REQUESTS = cr_count or int(app.registry.settings['getitems.threads_count'])
s = get_project_settings()
s.update({'INPUT_ASIN_FILE': input_file,
'CONCURRENT_REQUESTS': CONCURRENT_REQUESTS,
'CONCURRENT_REQUESTS_PER_DOMAIN': CONCURRENT_REQUESTS,
'CONCURRENT_REQUESTS_PER_IP': CONCURRENT_REQUESTS})
process = CrawlerProcess(s)
process.crawl('asin_parser', start_timestamp, input_file=input_file, app=app, daemon=daemon)
process.start()s = get_project_settings() отдаёт ERROR?OS
https://gist.github.com/Mo1far/f24a20c232d75a4f7b94caf0d5fd7132
тут у вас ещё и вызов
тут у вас ещё и вызов
configure_logging({'LOG_LEVEL': 'ERROR'})VB
https://gist.github.com/Mo1far/f24a20c232d75a4f7b94caf0d5fd7132
тут у вас ещё и вызов
тут у вас ещё и вызов
configure_logging({'LOG_LEVEL': 'ERROR'})Ну это я убрал по ненадобности
VB
s = get_project_settings() отдаёт ERROR?value 40 priority 20
OS
value 40 priority 20
не знаю что это
VB
Это буквально в дэбагере так отображается
VB
40 это уровень ERROR вроде
AR
да
OS
Предположений не имею((
AR
зачем так?
AR
скрейпи все продукты какие найдёшь
