AR
тебе нужно чтобы спайдер работал как корутина, что он и делает изначально
Ну, может и так. Только если корутины можно обернуть в таски, то что оборачивать у скрапи пока не очень понятно.
Так может есть какие-то примеры?
Size: a a a
2020 December 29
AR
а говорит читал
AR
runner.crawl - корутина. твистедовая.
A
Может у кого есть список урлов компаний с angellist?
DS
does anyone have experience with udemy api , i need assistand please
RP
Hi
RP
Does anyone build desktop based application using python Scrapy?
2020 December 30
A
Всем привет. Как скачать файл https://cyberleninka.ru/article/n/potreblenie-gls-v-ramkah-programmy-onls-v-2008-g.pdf если при откритии идет редирект?
AR
нет там редиректа
AR
урл впрочем странный, так что не знаю что именно ты хотел спросить
A
урл впрочем странный, так что не знаю что именно ты хотел спросить
ну мне нужно етот ПДФ скачать
AR
ну так нажми скачать
AR
просто по твоей ссылке открывается страница без .pdf, а сам файл по другому урлу, хз где ты этот взял
A
просто по твоей ссылке открывается страница без .pdf, а сам файл по другому урлу, хз где ты этот взял
😐точно есть такое
AR
ну ок
AR
главное что с моим вариантов файл скачивается, а тебе уж самому решать
A
<meta name="citation_abstract_html_url" content="https://cyberleninka.ru/article/n/potreblenie-gls-v-ramkah-programmy-onls-v-2008-g" />
<meta name="citation_pdf_url" content="https://cyberleninka.ru/article/n/potreblenie-gls-v-ramkah-programmy-onls-v-2008-g.pdf" />
<meta name="citation_publisher" content="Общество с ограниченной ответственностью «ГРУППА РЕМЕДИУМ»" />
<meta name="citation_issue" content="6-7" />
<meta name="citation_volume" content="" />
<meta name="citation_issn" content="1561-5936" />
A
а урл нашел в мета
A
спасибо за помощь