KB
это все с приходом @load видать
Size: a a a
2020 October 13
p
2020 October 14
KB
Делаю @load к уникальному урл, вижу запросы из сети телеграм с TelegramBot (TwitterBot) а еще из 104.249.0.0/18 c старым абстрактным UA.
KB
149.154.161.2 - - [14/Oct/2020:11:13:23 +0300] GET /embed/1938900/?asd HTTP/1.1 "444" 0 "-" "TelegramBot (like TwitterBot)" "-"
104.249.46.34 - - [14/Oct/2020:11:13:23 +0300] GET /embed/1938900/?asd HTTP/1.1 "200" 4878 "-" "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/40.0.2214.115 Safari/537.36" "-"
104.249.46.34 - - [14/Oct/2020:11:13:23 +0300] GET /embed/1938900/?asd HTTP/1.1 "200" 4878 "-" "Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/40.0.2214.115 Safari/537.36" "-"
KB
Запретил подсеть, получил в редакторе iv Can't fetch iframe page, так что точно.
KB
как то не укладывается в голове
NS
Интересно. А если TelegramBot забанить, а новую подсеть разрешить?
NS
Может это специально для обхода таких решений с юзер агентом
KB
телеграмбот изначально забанен для этих урлов http 444.
KB
Может это специально для обхода таких решений с юзер агентом
ну да, но как бы это не очень а интересах площадки
KB
собственно за нашими видосами начали ходить
KB
выкладывает потом на telesco.pe
KB
в topnews.com оттуда сервятся.
KB
без рекламы! :) и в нарушение всяких лицензионных прав.
NS
Понял. Неприятная ситуация
KB
удивительно что их краулер еще хотя бы представляется
вот еще
w
без рекламы! :) и в нарушение всяких лицензионных прав.
вот это поворот.жпг
NS
Можно вместо 400 ошибки давать редирект на заглушку
NS
Тогда не надо будет не гоняться за подсетями