dd
Распарсить html-ку можно и селениумом, и дом-парсером, и регекспом и просто поиском по строке.
Size: a a a
2021 January 13
A
скорее понять как это достастать
Даже если у тебя супер комп и 100тб/с интернет, то на сервере можеь бьіть 1мб канал и на етом конец
dd
Скачать html можно обычным хттп клиентом, без селениума
D
есть 2-3 сайта, в них есть динамическая инфа, которая меняется каждую 1-2 секунды, мне надо успевать ее вынемать кидать в Java и анализировать данные. Ну с анализом проблем скорее всего не будет, проблема в том, как сделать выборку динамической информации
dd
есть 2-3 сайта, в них есть динамическая инфа, которая меняется каждую 1-2 секунды, мне надо успевать ее вынемать кидать в Java и анализировать данные. Ну с анализом проблем скорее всего не будет, проблема в том, как сделать выборку динамической информации
Оправшивай сайт раз в секунду
dd
Тогда ты будешь получать всегда одну страницу со свежими данными
A
Или за ддосит :)
D
😁,
dd
А как много инфы обновляется на сайте за 2-3 секунды?
D
250 значений примерно
A
есть 2-3 сайта, в них есть динамическая инфа, которая меняется каждую 1-2 секунды, мне надо успевать ее вынемать кидать в Java и анализировать данные. Ну с анализом проблем скорее всего не будет, проблема в том, как сделать выборку динамической информации
Если инфо динамическое оно идет через апи, ищи апишку
A
Селениум вообще не нужен
HW
Andrii
Селениум вообще не нужен
инфа может отрисовываться JSом, а апи закрытое
HW
Andrii
Селениум вообще не нужен
я как-то раз тоже думал, что просто html получу, и все
Vaadin мне сказал, что я очень неправ в этом момент
Vaadin мне сказал, что я очень неправ в этом момент
A
инфа может отрисовываться JSом, а апи закрытое
Может, а может и нет, проще поискать нежели селениум грузить
D
понял, спасибо вам ребят, для меня просто на данный момент это новая и сложная ситуация, спасибо за поддержку 😉
dd
Скорее всего будет какой то запрос на сервер, либо там вебсокеты
dd
Посмотри в дебаггере браузера (f12 -> сеть), как сайт подтягивает новые данные
A
понял, спасибо вам ребят, для меня просто на данный момент это новая и сложная ситуация, спасибо за поддержку 😉
Опять какой-то график крипт?
D
возможно)