Size: a a a

2020 June 11

f

fatklass in Scrapy
По сути и выполнить сможет по сценарию и уведомить если появилось много ошибко
источник

МС

Михаил Синегубов... in Scrapy
fatklass
Кто как отлавливает изменение кода на сайте донаре?
ходят слухи, что православные TRY программисты используют https://github.com/scrapinghub/spidermon
но я нехритсть, и не знаю как он
источник

МС

Михаил Синегубов... in Scrapy
а если серьезно - кто то тут по чатику пользовал его
ну и про контракты не забываем, могут чуток помочь..
источник

AB

Alexander B in Scrapy
Я юзаю его, но пока только ERROR в логах чекаю
источник

МС

Михаил Синегубов... in Scrapy
Alexander B
Я юзаю его, но пока только ERROR в логах чекаю
ну, человеку, по сути - то же самое надо. Определяешь критичные маркеры на сайте, и мониторишь их. :)
источник

P

Petr in Scrapy
Приветствую! Кто посоветует как в силениум на питоне обойти окошко фаерфокса - предупреждение системы защиты о передаче данный по открытому каналу?
источник

A

Alex in Scrapy
такое слишком по уродски выглядит?) или вполне нормально использовать
#i19285 > div > div > div > div > img
источник

МС

Михаил Синегубов... in Scrapy
Alex
такое слишком по уродски выглядит?) или вполне нормально использовать
#i19285 > div > div > div > div > img
если обоснованно - то да, если не обоснованное - то нет

как, не видя страницы, можно ответить :). Может у тебя 100500 картинок, и нужная лежит именно по этому адресу
источник

A

Alex in Scrapy
Михаил Синегубов
если обоснованно - то да, если не обоснованное - то нет

как, не видя страницы, можно ответить :). Может у тебя 100500 картинок, и нужная лежит именно по этому адресу
понял)
источник

AR

Andrey Rahmatullin in Scrapy
ни разу не видел контракты кстати
источник

МС

Михаил Синегубов... in Scrapy
Andrey Rahmatullin
ни разу не видел контракты кстати
ну, я их, вообщет, одним глазиком только глянул. Штука прикольная и пользительная - теперь бы придумать как ее использовать 😂
источник

SS

Stepan Smirnov in Scrapy
Я хочу записать код страницы в файл. Для этого использую response.body.decode('utf-8')
источник

SS

Stepan Smirnov in Scrapy
в консоли хрома document.characterSet выдает ютф-8
источник

SS

Stepan Smirnov in Scrapy
но в логе ошибка
источник

SS

Stepan Smirnov in Scrapy
UnicodeEncodeError: 'charmap' codec can't encode character '\u20b9' in position 338104: character maps to <undefined>
источник

SS

Stepan Smirnov in Scrapy
В чем может быть проблема?
источник

SS

Stepan Smirnov in Scrapy
JS отключен
источник

К

Кирилл in Scrapy
Используй response.text
источник

К

Кирилл in Scrapy
Или можешь включить миделвер кэша, он тоже будет сохранять респонсы
источник

AR

Andrey Rahmatullin in Scrapy
Stepan Smirnov
В чем может быть проблема?
питон второй что ли?
источник