В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Scrapy

591 membersпожаловаться на группу
2020 August 17

i

i in Scrapy
хм, ради интереса кстати глянул scrapy shell на поиск в гугле, класснеймы замороченные конеш, с названием типа белиберды, еще небось если дальше по пагинатору пойти, по-башке довольно быстро прилетит
источник
21:13пожаловаться#1

К

Кирилл in Scrapy
i
хм, ради интереса кстати глянул scrapy shell на поиск в гугле, класснеймы замороченные конеш, с названием типа белиберды, еще небось если дальше по пагинатору пойти, по-башке довольно быстро прилетит
это автогенерация классов, во многих js фреймворках так же
источник
21:14пожаловаться#2

AR

Andrey Rahmatullin in Scrapy
угу
источник
21:15пожаловаться#3

i

i in Scrapy
а, т.е. это даже не факт что они пытаются заныкаться? А просто оно там унутре пашет? с прозрачной для фреймворка трансляцией
источник
21:15пожаловаться#4

К

Кирилл in Scrapy
Да, там же сейчас области видимости в css, так что оно генерирует чтоб не дублировалось и т.п.
источник
21:16пожаловаться#5

К

Кирилл in Scrapy
В самом проекте могут быть два одинаковых класса у разных компонентов, но с разными стилями, и сгенерируются они в разные классы
источник
21:17пожаловаться#6

i

i in Scrapy
а, чтобы по-стандарту типа было правильно, а прогеру облегчение что 1 раз только написал?
источник
21:17пожаловаться#7

К

Кирилл in Scrapy
Может быть ещё какие-то причины есть, это точно не единственная
источник
21:17пожаловаться#8

К

Кирилл in Scrapy
i
а, чтобы по-стандарту типа было правильно, а прогеру облегчение что 1 раз только написал?
В данном случае скорее чтоб убрать длинные неймспейсы типа .main-top-slider__slide и т.д. А когда оно разбито на компоненты, уже сразу можно писать .slide и она само простроит иерархию
источник
21:20пожаловаться#9

i

i in Scrapy
Юлия
Всем привет. Может знает кто.. Как можно спарсить все ссылки по поисковому запросу в гугле?
можно стартануть отсюда: https://github.com/search?o=desc&q=google+scrapy&s=stars&type=Repositories
GitHub
GitHub is where people build software. More than 50 million people use GitHub to discover, fork, and contribute to over 100 million projects.
источник
21:22пожаловаться#10

i

i in Scrapy
не факт что там будет что-то сильно дельное, помушо гугль в борьбе весла с башкой обычно идет впереди планеты всей и быстро перекрывает краники
источник
21:22пожаловаться#11

К

Кирилл in Scrapy
Ещё оно вроде может выделять самые повторяющиеся куски css в классы, чтоб уменьшить объем css
источник
21:23пожаловаться#12

i

i in Scrapy
Юлия
Всем привет. Может знает кто.. Как можно спарсить все ссылки по поисковому запросу в гугле?
у гугля еще есть поисковое api, правда с каждым годом он все дороже
источник
21:37пожаловаться#13

i

i in Scrapy
чет я сейчас даже дошел до того, что "фиг вам, а не поиск":
https://enterprise.google.com/search/
Google
Google Enterprise Search - fast and efficient
Google Enterprise Search helps employees and customers find what they need, fast. Get more out of your intranet and extranet.
источник
21:38пожаловаться#14

i

i in Scrapy
там их много этих апи, и куча из них для настройки рекламы или для поиска только на своем домене
вот это к примеру - 5 баксов за тыщу запросов, только не понял я - это на своем домене, или по интернету:
https://developers.google.com/custom-search/docs/overview
Google Developers
Overview  |  Programmable Search Engine  |  Google Developers
источник
21:41пожаловаться#15
2020 August 18

МС

Михаил Синегубов... in Scrapy
люди очередной нубятский вопрос
1. есть основной код, написан под асинхроном, всякие async/await
2. в основной либе то же все Ок, async/await
3. но есть второстепенная либа, которая написана на чистых реквестах.

Внимание вопрос, что плохого будет, если смешать все в одну кучу?
источник
17:09пожаловаться#16

VB

Vladyslav Babych in Scrapy
асинхрона не будет
источник
17:11пожаловаться#17

К

Кирилл in Scrapy
Особо ничего плохого, просто синхронный код будет тормозить асинхрон
источник
17:12пожаловаться#18

VB

Vladyslav Babych in Scrapy
у тебя каждый запрос внутри этой либы будет останавливать всю приложуху
источник
17:12пожаловаться#19

МС

Михаил Синегубов... in Scrapy
это гуд....
не скажу что бы прям все прекрасно, но на первое время пойдет :)
источник
17:15пожаловаться#20