В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Scrapy

503 membersпожаловаться на группу
2020 June 18

i

ildar in Scrapy
Странно, если логиниться ручками через хром, не управляя им из селениума, то там в кукисах для ulogin.ru есть токен и этот же токен ulogin и для домена сайта пишется, а если логиниться через селениум, то этих токенов нет, но при этом я там также залогинен (т.к. цены товаров отличаются и кабинет я вижу). Бредятина.
источник
16:43пожаловаться#1

SS

Stepan Smirnov in Scrapy
а google shop сильно сопротивляется парсингу?
источник
20:00пожаловаться#2

AS

Alexander Serebrov in Scrapy
Oleg Shleiko
ufw у меня не установлен, а нули пробовал. Спасибо что помогаете
если мне не изменяет память, то чтобы контейнеры видели друг друга они должны быть в одной сети
источник
20:44пожаловаться#3

AS

Alexander Serebrov in Scrapy
или уже не актуально?
источник
20:44пожаловаться#4

OS

Oleg Shleiko in Scrapy
так они в одном docker-compose
источник
20:45пожаловаться#5

AS

Alexander Serebrov in Scrapy
да, но надо еще networks объявить
источник
20:46пожаловаться#6

AS

Alexander Serebrov in Scrapy
вот на примере упрощенного docker-compose для elasticsearch/kibana https://gist.github.com/al-serebrov/ac583ac799ebfaff1f27f96a3fdcc7db
Gist
docker-compose.example
docker-compose.example. GitHub Gist: instantly share code, notes, and snippets.
источник
20:47пожаловаться#7

AS

Alexander Serebrov in Scrapy
там есть инструкция networks для каждого контейнера и еще отдельно networks
источник
20:47пожаловаться#8

AS

Alexander Serebrov in Scrapy
и, кажется, сеть еще и надо создать)
источник
20:47пожаловаться#9

AS

Alexander Serebrov in Scrapy
https://docs.docker.com/compose/networking/
Docker Documentation
Networking in Compose
How Compose sets up networking between containers
источник
20:48пожаловаться#10

AS

Alexander Serebrov in Scrapy
это так, по памяти, когда-то давно в этом ковырялся))
источник
20:48пожаловаться#11

OS

Oleg Shleiko in Scrapy
Спасибо большое, завтра поковыряю
источник
20:48пожаловаться#12

AS

Alexander Serebrov in Scrapy
да, пожалуйста) let me know if it helps :)
источник
20:49пожаловаться#13

OS

Oleg Shleiko in Scrapy
Alexander Serebrov
да, пожалуйста) let me know if it helps :)
обязательно
источник
20:49пожаловаться#14

EB

Elisei Badanin in Scrapy
как из bs4 получить назад html?
источник
21:12пожаловаться#15

К

Кирилл in Scrapy
str() или obj.prettify()
источник
21:13пожаловаться#16

S

SoHard 🎄 in Scrapy
Elisei Badanin
как из bs4 получить назад html?
str()
источник
21:13пожаловаться#17

EB

Elisei Badanin in Scrapy
хм, и правда, не думал что может быть так просто, после lxml…спасибо
источник
21:17пожаловаться#18
2020 June 19

ПА

Павел Асеев... in Scrapy
Привет, подскажите пожалуйста как с помощью XPATH выбрать все <span> которые выделил на скриншоте https://prnt.sc/t2mbtg

Пробовал так:
//tr[contains(./span,"Текущие названия")]/td[2]/span

По аналогии с CSS селекторами:
tr:contains("Текущие названия") td:nth-of-type(2) span::text

Но почему то этот CSS в Scrapy не работает.

Не могу понять как решить проблему.
Lightshot
Screenshot
Captured with Lightshot
источник
12:44пожаловаться#19

AS

Alexander Serebrov in Scrapy
//tr/span/[contains(text(),'Текущие названия')]/td[2]/span/text()
источник
12:58пожаловаться#20