Size: a a a

2021 September 10

З

Захар in SEO chat
я хз просто что такое символьный код)
источник

VS

Viner Shakirov in SEO chat
там в настройках задается по регулярке
источник

A

Andrey in SEO chat
именно с символьным кодом.
ну например
сайт/каталог/ - нужно просканить, но исключить страницы, которые содержат в урл какой-то символный код сайт/каталог/коллекция-....
источник

A

Andrey in SEO chat
куда смотреть, подскажи_)
источник

VS

Viner Shakirov in SEO chat
источник

A

Andrey in SEO chat
ну я так понял, что это задаётся правило сканирования определённого каталога? или можно исключить страницы внутри этого каталога по регулярке?
источник

З

Захар in SEO chat
правило сканирования определенного каталога в include
источник

VS

Viner Shakirov in SEO chat
NOT be spidered
источник

VS

Viner Shakirov in SEO chat
че бы это значило?)
источник

A

Andrey in SEO chat
оке, спасибо, проверю
источник

A

Andrey in SEO chat
Всё, понял. Там есть ссыль на доки, спасибо за наводку))
https://www.screamingfrog.co.uk/seo-spider/user-guide/configuration/
источник

VS

Viner Shakirov in SEO chat
либо я не выспался, либо гугл тупит. как при таких правилах может быть запрещен урл вида site.ru/catalog/category ?
источник

З

Захар in SEO chat
при таких правилах запрещена вся индексация сайта)
источник

SI

Sergey Ignatyev in SEO chat
походу, не выспался
источник

VS

Viner Shakirov in SEO chat
ага, а  allow уже не учитывается типо?)
источник

VS

Viner Shakirov in SEO chat
allow: /catalog/
источник

A

Alexandr in SEO chat
Более точный allow должен перекрывать
источник

A

Andrey in SEO chat
вроде приориетт по кол-ву символов в правиле, не?
источник

VS

Viner Shakirov in SEO chat
я уже даже точный урл в аллоу закидывал, не помогает
источник

VS

Viner Shakirov in SEO chat
ну более специфичное должно учитываться
источник