Size: a a a

2020 August 28

S

SoHard 🎄 in Scrapy
Михаил Синегубов
ну я хз, у меня с социалками проблема. Недавно клиент насел - дай аккаунт вконтакта, а у меня только тестовые учетки :))
У нас заблочили
источник

S

SoHard 🎄 in Scrapy
И я был рад, большинство контактов свалили
источник

К

Кирилл in Scrapy
хз, я не сильно рад был, все переехали в фб, а он отстойный
источник

МС

Михаил Синегубов... in Scrapy
ну, так то, телега у нас, до недавнего времени то же была "заблокированна" 😂
источник

S

SoHard 🎄 in Scrapy
Кирилл
хз, я не сильно рад был, все переехали в фб, а он отстойный
Шо то шо это)
источник

К

Кирилл in Scrapy
там лента была приятнее, в фб нихрена непонятно
источник

S

SoHard 🎄 in Scrapy
Был забавный сервис nimses даже в Киеве можно было что-то купить за их валюту, но они накуралесили потом и сделали обычный хайп
источник

A

Andriy in Scrapy
Михаил Синегубов
переделанный инсталоадер.
и, смотря что ты считаешь "быстрым"
Ну мне нужно по 10 ссылках проверить есть ли лайк и комментарий от пользователя.  Хорошее для меня время 5-15с
источник

МС

Михаил Синегубов... in Scrapy
А комментов по ссылкам много всего?
источник

A

Andriy in Scrapy
Михаил Синегубов
А комментов по ссылкам много всего?
До 30 обычно
источник

МС

Михаил Синегубов... in Scrapy
Ну, 300 комментов... Посмотри логику и запросы инсталоадера и сделай по своему
источник

SS

Sergey Sergey in Scrapy
коллеги, скрейпи по дефолту делает ретрай при такой ошибке?
WARNING: Got data loss in https://a…ru. If you want to process broken responses set the setting DOWNLOAD_FAIL_ON_DATALOSS = False -- This message won't be shown in further requests
источник
2020 August 29

A

Andriy in Scrapy
Кто-то сталкивался с instaloader? Там можно как-то запустить несколько параллельных потоков?
источник

✏d

✏️ Oleksandr dntPani... in Scrapy
SoHard 🎄
Как ни зайду сразу блевать тянет он ui
новый юи фейсбука - вообще вроде как "сайт для беременных младенцев"
источник

S

Spirit💎 in Scrapy
✏️ Oleksandr dntPanix |Worm|
новый юи фейсбука - вообще вроде как "сайт для беременных младенцев"
+
источник
2020 August 30

S

Spirit💎 in Scrapy
господа, а дружил кто scrapy с celery? отдаю таск, а мне после первого выдает twisted.internet.error.ReactorNotRestartable
источник

К

Кирилл in Scrapy
Что ты пытаешься сделать?
источник

AR

Andrey Rahmatullin in Scrapy
Не юзай CrawlerProcess
источник

S

Spirit💎 in Scrapy
вообще, послать задачу, чтобы запустился краулер, собрал страницы и выгрузил в пайплайне в json, пока только это. ну и подразумевается, что таск передает параметр в виде домена краулеру
источник

S

Spirit💎 in Scrapy
Andrey Rahmatullin
Не юзай CrawlerProcess
ага, понял
источник