R#
а как вот делают этих пауков, которые стучат на сервера? на сайты там и тд? это ж получается не руками задают адрес сайта, а паук сам находит сайт и парсит его
Конкретнее
Size: a a a
2021 January 22
ЕК
а как вот делают этих пауков, которые стучат на сервера? на сайты там и тд? это ж получается не руками задают адрес сайта, а паук сам находит сайт и парсит его
краулер?
🎃
нет
Web Crawler\Spider
V
Ну по айпишникам ходят же
ну по айпи да
V
а что б понять что это сайт
R#
А как может быть не сайт ))
ЕК
Ну по айпишникам ходят же
В курсе, зачем там хедер Host ?
R#
Пример дай лучше, что смущает
D
В курсе, зачем там хедер Host ?
В душе неебу
V
А как может быть не сайт ))
спокойно)
D
Попутал кажисб
И
как раз новую версию щас скачал
А в смысле новую? Последняя от 20 апреля же. Я думаю, они ждут php 8.1 и обновятся
V
любой сервер с открытыми портами
D
Я думал о херне,что на 22 порт ходит
V
ну а тут херня на 80/443
V
стучит
ЕК
В душе неебу
Просто айпишников мало, а сайтов много, на одном ип куча сайтов.
Когда до людей дошло. что IPv4 как-то узенький вышел по диапазону, закостылили Host
Когда до людей дошло. что IPv4 как-то узенький вышел по диапазону, закостылили Host
V
и тип в ответе вернет хост?
R#
Не всегда