'Где scrapy очень громоздок", не мог бы ты привести пример?

ну и ещё всякие защиты которым нужен браузер

табличку со страницы спарсить, скажем

Чистый парсинг html, без его получения, или если нужна всего одна страница и с неё несколько строк данных

@trefto, @IvanBaturin, Благодарю🙏

ну и bs4 достаточно быстро можно освоить вообще с нулевыми знаниями в парсинге, в интерактивном python побаловаться, сделать какую-то задачу, понять что такое селекторы, как с ними работать. Мне одной видяшки 20 минутной хватило, чтобы первый парсер написать. Потом уже когда надо обходить сайт, сохранять данные, обрабатывать  исключения - все это сочинять уже долго, гораздо проще scrapy. Зная наперед разницу, сразу бы полез в scrapy наверное без bs4.

селекторы в юпитере можно и парселом юзать

это тоже всё в скрапи делается, особенно учитывая scrapy shell

но кому что

суповые файнды юзучать действительно толку 0 по сравнению что с CSS, что c XPath

поэтому знал бы сразу, не трогал бы bs4 :)

Да кстати, после супа начал скрапи изучать, очень много пришлось перепривыкать

Просто scrapy getting started это создание проекта, паука и т.п. А bs4 - загрузил страницу, достал данные.

угу

https://parsel.readthedocs.io/en/stable/ да, вот как раз аналог квикстарта от супа

Везде бс рекомендуют, вот и все с него начинают

блин, а я до сих пор не могу вкурить этот суп....
сколько ни садился покопать, психовал и выпиливал нахрен его 😂
парсель чем подкупает - тупо xpath/css (я про сами селекторы)

А когда уже надоедает копипастить одно и тоже с проекта в проект и делать костыли с потоками переходят на скрапи

быстро надоедает... даже без потоков

в моей молодости выбор был между супом и lxml, типа lxml строже, а суп он же в честь тегсупа назван