V
В смысле читал? Книгу начинал, первого паука сделал, а дальше уже больше гугл и документация. Курс вот только выложили недавно.
Там проектик был vagrant, кто будет делать, делайте через docker. Я вам сохранил два дня мучений😅
Size: a a a
2020 July 23
i
Ilkin Ramazanov
Ребят всем привет. Не могли бы подсказать хорошую книгу видеоролики про scrapy? Желательно на анг но можно и на русском
чем https://docs.scrapy.org/en/latest/intro/tutorial.html не устраивает?
ИБ
Подскажите, есть ряд тегов p
<p><strong>caption</strong>
text1
<br>text2</p>
Из них нужно вытащить текст, объединив для каждого его (text1 + text2).
Можно это сделать одним выражением (получить список из объединенных текстовых элементов для каждого тега).
<p><strong>caption</strong>
text1
<br>text2</p>
Из них нужно вытащить текст, объединив для каждого его (text1 + text2).
Можно это сделать одним выражением (получить список из объединенных текстовых элементов для каждого тега).
ИБ
response.css("p::text").extract() дает список из всех текстовых элементов всех тэгов без объединения. Текст в каждом теге произвольный, может состоять из одного или более кусочков.
AR
получаешь список p, достаёшь из каждого текст любым удобным способом
ИБ
Ну так то да. Поискал может есть возможность автоматически сделать join по каждому тэгу. Похоже, что нет.
AR
в скрапи, понятно дело, нет
AR
в xpath может и сможешь написать
AR
но читабельнее будет как я сказал
ИБ
спасибо, сделаю. Тем более, что мне еще и из span надо достать (название характеристики). Хотел их достать двумя списками и for по zip(названия, значения) сделать.... увидел, что иногда сбой получается, так как число элементов разное.
2020 July 24
💀Ҁ
ребят, а какая кардинальная разница в:
и
?
Как "правильнее"?
response.css('title::text').get()и
response.xpath('//title/text()').get()?
Как "правильнее"?
V
ребят, а какая кардинальная разница в:
и
?
Как "правильнее"?
response.css('title::text').get()и
response.xpath('//title/text()').get()?
Как "правильнее"?
=
💀Ҁ
та я вот вижу, что по функционалу работает одинаково
а вот мож... какой-то из методов шустрее или как..
просто "синтекс" обращения к объекту в DOMе разный
а вот мож... какой-то из методов шустрее или как..
просто "синтекс" обращения к объекту в DOMе разный
AR
Скорость селекторов обычно неважна
AR
А так разницы нет, юзай какой писать и читать проще, обычно это цсс
💀Ҁ
поняв, спасибо
💀Ҁ
в xpath я увидел возможность указания простых условий
в css такое есть?
в css такое есть?
💀Ҁ
я чё спрашиваю
планирую писать около десяти парсеров, хочу к какому-то виду одному придерживаться
планирую писать около десяти парсеров, хочу к какому-то виду одному придерживаться
AR
смотря каких условий
AR
xpath мощнее, css как правило лаконичнее и проще