В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

R (язык программирования)

1391 membersпожаловаться на группу
2021 March 16

AP

Aleksandr Pidtykan in R (язык программирования)
Байкулов Антон
Собственно вопрос был про "чем парсить динамический контент". Выяснили что RSelenium. Буду пробовать

А парсить мне нужно изображения из карточки товара. Ссылка выше, а css элемента "p-card-single-b-media-details-slider-item-image"
Ничего там динамического нет, обычная карусль, вытягиваете адреса картинок а потом иг грузите
источник
16:55пожаловаться#1

БА

Байкулов Антон... in R (язык программирования)
Ed P
а вы на страницу каждого товара хотите смотреть или на сайте есть какой-то каталог или там результат поиска?
Страница каждого товара.
источник
16:55пожаловаться#2

EP

Ed P in R (язык программирования)
какой-то хитрый кейс. вроде rvest способен саму страницу загрузить, но у меня не парсится. Если ручками в R попробовать то м.б. норм.
источник
16:59пожаловаться#3

БА

Байкулов Антон... in R (язык программирования)
Aleksandr Pidtykan
Ничего там динамического нет, обычная карусль, вытягиваете адреса картинок а потом иг грузите
library(rvest)

url <- read_html('https://santehnika-online.ru/product/mebel_dlya_vannoy_keuco_edition_300_oliva_65_sm/')

read <- html_nodes(url, '.p-card-single-b-media-details-slider-item-image')

Никак
источник
17:01пожаловаться#4

AP

Aleksandr Pidtykan in R (язык программирования)
Байкулов Антон
library(rvest)

url <- read_html('https://santehnika-online.ru/product/mebel_dlya_vannoy_keuco_edition_300_oliva_65_sm/')

read <- html_nodes(url, '.p-card-single-b-media-details-slider-item-image')

Никак
Я насколько помню это так и не прасится
источник
17:02пожаловаться#5

БА

Байкулов Антон... in R (язык программирования)
Ну с другого сайта по такой же схеме я получил содержимое тега
источник
17:02пожаловаться#6

AP

Aleksandr Pidtykan in R (язык программирования)
Вы просмотрите весь html, и там будет видно есть ли все адреса картинок
источник
17:04пожаловаться#7

AP

Aleksandr Pidtykan in R (язык программирования)
И вроде как надо только .p-card-single-b-media-details-slider
источник
17:05пожаловаться#8

EP

Ed P in R (язык программирования)
используйте Xpath //div[@class='p-card-single-b-media-details-slider']
источник
17:38пожаловаться#9

EP

Ed P in R (язык программирования)
а, и там нужно сначала выбрать боди, потому ноду
источник
17:38пожаловаться#10

БА

Байкулов Антон... in R (язык программирования)
Ed P
а, и там нужно сначала выбрать боди, потому ноду
А можно пример кодом?
источник
17:45пожаловаться#11

EP

Ed P in R (язык программирования)
поковырялся, там, кажется, и правда динамическая страница. тэги как таковые не ищутся. если посмотрите на свой url, то там яваскрипт
источник
17:49пожаловаться#12

AP

Aleksandr Pidtykan in R (язык программирования)
Ed P
поковырялся, там, кажется, и правда динамическая страница. тэги как таковые не ищутся. если посмотрите на свой url, то там яваскрипт
Вы url есть адреса всех картинок ?
источник
17:55пожаловаться#13

EP

Ed P in R (язык программирования)
Байкулов Антон
А можно пример кодом?
xml2::as_list(url)

в странице помимо хедера и боди прячется длиннющий яваскрипт. как таковых полезных html тэгов нет (
источник
17:55пожаловаться#14

БА

Байкулов Антон... in R (язык программирования)
Aleksandr Pidtykan
Вы url есть адреса всех картинок ?
Нет. Собственно для этого и нужен парсинг. Есть страницы, откуда надо взять адреса картинок. Взять из конкретного html тега
источник
18:16пожаловаться#15

БА

Байкулов Антон... in R (язык программирования)
Ed P
xml2::as_list(url)

в странице помимо хедера и боди прячется длиннющий яваскрипт. как таковых полезных html тэгов нет (
Rselenium значит. Либо поиск и парсинг всяких xml. Там обычно для рекламных систем такое выкладывают
источник
18:17пожаловаться#16

БА

Байкулов Антон... in R (язык программирования)
типо site.ru/google_merchant.xml
источник
18:17пожаловаться#17

AP

Aleksandr Pidtykan in R (язык программирования)
Байкулов Антон
Нет. Собственно для этого и нужен парсинг. Есть страницы, откуда надо взять адреса картинок. Взять из конкретного html тега
У меня нет времени чтобы сесть за пример.
Но надо сделать:
1) прочитать страницу и посмотреть есть ли там все адреса  (по идее она должна быть практически такая же как и в браузере) т.к. при каждой трасформации страницы ты можешь потерять данные.
2) Из пункта два будет понятно что дальше делать. Возможно придется grep по html тексту тянуть.
источник
18:25пожаловаться#18

ЮМ

Юта Мата Ссс... in R (язык программирования)
Байкулов Антон
Нет. Собственно для этого и нужен парсинг. Есть страницы, откуда надо взять адреса картинок. Взять из конкретного html тега
а что если с другой стороны пойти?
источник
18:27пожаловаться#19

ЮМ

Юта Мата Ссс... in R (язык программирования)
там же есть апишка
источник
18:27пожаловаться#20