В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Scrapy

490 membersпожаловаться на группу
2020 May 27

AR

Andrey Rahmatullin in Scrapy
Vladyslav Babych
Подскажите пожалуйста. В setting настраиваю логирование -https://gist.github.com/bc7b702f454df5310d062926188a70db. Прохожусь дебагером - везде ERROR. Потом запускаю паука со скрипта https://gist.github.com/f24a20c232d75a4f7b94caf0d5fd7132. В настройках опять же нужный уровень. Внутри класса паука уже уровень  логирования не задан вообще
Gist
settings.py
GitHub Gist: instantly share code, notes, and snippets.
странная идея в settings.py писать какой-то не относящийся к настройкам проекта код
источник
19:09пожаловаться#1

VB

Vladyslav Babych in Scrapy
Andrey Rahmatullin
странная идея в settings.py писать какой-то не относящийся к настройкам проекта код
Согласен, куда его вынести лучше?
источник
19:10пожаловаться#2

AR

Andrey Rahmatullin in Scrapy
не знаю, может в __init__
источник
19:10пожаловаться#3

A

Alex in Scrapy
Andrey Rahmatullin
в чём разница?
основной контент работает на js
вот нашел что надо Splash подключать в работе с такими сайтами
источник
19:14пожаловаться#4

AR

Andrey Rahmatullin in Scrapy
основной контент это что? список товаров работает без джс
источник
19:14пожаловаться#5

AR

Andrey Rahmatullin in Scrapy
и страница товара тоже
источник
19:14пожаловаться#6

AR

Andrey Rahmatullin in Scrapy
даже отзывы с комментариями работают
источник
19:15пожаловаться#7

AR

Andrey Rahmatullin in Scrapy
а, цены не отображаются, да
источник
19:16пожаловаться#8

AR

Andrey Rahmatullin in Scrapy
цены есть в джсоне в коде страницы, тоже сплеш не нужен
источник
19:16пожаловаться#9

AR

Andrey Rahmatullin in Scrapy
вообще не вижу аякса на сайте, для данных доставки разве что
источник
19:17пожаловаться#10

A

Alex in Scrapy
источник
19:17пожаловаться#11

A

Alex in Scrapy
это часть разве не на js?
источник
19:18пожаловаться#12

AR

Andrey Rahmatullin in Scrapy
🤷‍♂️ я всё сказал
источник
19:18пожаловаться#13

A

Alex in Scrapy
можно пример кода который достает текст или что то другое из карточки товара
источник
19:19пожаловаться#14

A

Alex in Scrapy
просто интересно
источник
19:19пожаловаться#15

AR

Andrey Rahmatullin in Scrapy
Alex
можно пример кода который достает текст или что то другое из карточки товара
что такое текст карточки товара?
источник
19:19пожаловаться#16

VB

Vladyslav Babych in Scrapy
Andrey Rahmatullin
не знаю, может в __init__
С этим, ты тоже так делаешь. Мне просто показалось что настройки логгирования это тоже настройки
источник
19:19пожаловаться#17

AR

Andrey Rahmatullin in Scrapy
Vladyslav Babych
С этим, ты тоже так делаешь. Мне просто показалось что настройки логгирования это тоже настройки
я не настраиваю логирование 🤷‍♂️
источник
19:19пожаловаться#18

A

Alex in Scrapy
Andrey Rahmatullin
что такое текст карточки товара?
источник
19:20пожаловаться#19

AR

Andrey Rahmatullin in Scrapy
response.css('.g-i-tile-i-title a::text').getall(), натурально
источник
19:21пожаловаться#20