можете помочь  👇

http://www.abrishotel.ru/booking?date=2020-06-25&nights=1&adults=2&children=&children-age=      - с этого сайта как можно получить / price  |   через  scrapy

смотри во вкладке XHR запросы к ibe.tlintegration.com

Ну через Python  из HTML DOM Element  получить можно />?

можно, если ты как-то сможешь получить DOM, для этого нужен хедлесс браузер

без JS этих данных в DOM не будет

что можете посоветовать как можно получить ||?

я выше написал

Всем привет. Неделю назад успешно парсил https://goldapple.ru/rasprodazha через crapy-splash . Пару дней назад видел что страница была на ремонте, саейчас доступна, но паук не собирает ничего. Проверил через scrapy view без splash - теперь вижу первую страницу с товарами, запросы к response из scrapy shell возвращает нормально, но когда запускаю спайдер - ничего не приносит. В логах ничего очевидного для меня. Подскажите в каком направлении копать?    Прикрепляю лог

1. зачем там спелш?
2. селекторы точно срабатывают? так то, по логу ощущение что просто ничего не собирает со страницы

вопрос по хранилищу амазон и скраппи - как передать линки на имиджи, которые скрапи туда загрузит или фрейморк это сам сделает?

А может кто видел эталонну архитектуру scrapy на AWS с возможностью масштабировать кол-во инстансов scrapyd?

1. ну раньше через view товары вообще не грузились, вот я и рендерил через splash.

2. вот респонс по одному из селекторов через shell

и? до йелда доходит? или где то раньше по условию вылетает? или еще что?