d
Подскажите какие страницы нужно скрывать в robots.txt, а какие не нужно?
Size: a a a
2020 November 22
2020 November 23
AG
Подскажите какие страницы нужно скрывать в robots.txt, а какие не нужно?
Привет, то что не хотите отдавать в индекс (показывать миру) - скрываете.
A
включить переключатель в on?
Включил - ничего не работает
EP
Если б можно было управлять индексацией на другом домене, через свой, то все бы закрывали конкурентов или мешали им жить.
Вы можете на своëм домене проксировать данные с другого источника. Reverse proxy, чтобы они лежали на вашем домене в каком нибудь каталоге. Минусы трафик от облака к клиенту пойдет через ваш сервер.
Вы можете на своëм домене проксировать данные с другого источника. Reverse proxy, чтобы они лежали на вашем домене в каком нибудь каталоге. Минусы трафик от облака к клиенту пойдет через ваш сервер.
A
Можно проверить Айболитом https://revisium.com/ai/
Михаил, добрый день.
Подскажите пожалуйста, а как правильно пользоваться этим сервисом? Это скрипт для сервера? А как запустить его?
Я новичок, сорри....
Подскажите пожалуйста, а как правильно пользоваться этим сервисом? Это скрипт для сервера? А как запустить его?
Я новичок, сорри....
AG
Если б можно было управлять индексацией на другом домене, через свой, то все бы закрывали конкурентов или мешали им жить.
Вы можете на своëм домене проксировать данные с другого источника. Reverse proxy, чтобы они лежали на вашем домене в каком нибудь каталоге. Минусы трафик от облака к клиенту пойдет через ваш сервер.
Вы можете на своëм домене проксировать данные с другого источника. Reverse proxy, чтобы они лежали на вашем домене в каком нибудь каталоге. Минусы трафик от облака к клиенту пойдет через ваш сервер.
Спасибо, Евгений. Для того чтобы можно было управлять облаком робоса яндекс дублирует его от вашего сайта, соответственно все разрешающие и запрещающие директивы прописываются в своем робосе для управления роботсом облака.
MS
A.M
Михаил, добрый день.
Подскажите пожалуйста, а как правильно пользоваться этим сервисом? Это скрипт для сервера? А как запустить его?
Я новичок, сорри....
Подскажите пожалуйста, а как правильно пользоваться этим сервисом? Это скрипт для сервера? А как запустить его?
Я новичок, сорри....
На YouTube есть подробные инструкции:
https://prnt.sc/vo65yp
https://prnt.sc/vo65yp
ОЛ
Все привет! Ребят, поделитесь, пожалуйста, своим мнением.
У меня на сайте стали появляться страницы с динамическим урлом, робот их находит в Метрике, я закрыла такие страницы в robots.txt, по идеи, они должны выпасть у меня из индекса при следующем обходе. Я почитала материалы, некоторые рекомендуют ставить ещё каноникал, чтобы робот видел главную страницу. Вы сталкивались с таким? Как устраняли появление таких страниц в индексе. ? Сайт на ВордПрессе у меня.
У меня на сайте стали появляться страницы с динамическим урлом, робот их находит в Метрике, я закрыла такие страницы в robots.txt, по идеи, они должны выпасть у меня из индекса при следующем обходе. Я почитала материалы, некоторые рекомендуют ставить ещё каноникал, чтобы робот видел главную страницу. Вы сталкивались с таким? Как устраняли появление таких страниц в индексе. ? Сайт на ВордПрессе у меня.
d
Привет, то что не хотите отдавать в индекс (показывать миру) - скрываете.
Я где-то читал что нужно скрывать страницы типа /category/* /tag/* и тд, но не совсем понимаю зачем?!
A
На YouTube есть подробные инструкции:
https://prnt.sc/vo65yp
https://prnt.sc/vo65yp
Спасибо
В
Я где-то читал что нужно скрывать страницы типа /category/* /tag/* и тд, но не совсем понимаю зачем?!
Не "нужно" ничего скрывать. Можно, по желанию.
И
Ольга Лотц
Все привет! Ребят, поделитесь, пожалуйста, своим мнением.
У меня на сайте стали появляться страницы с динамическим урлом, робот их находит в Метрике, я закрыла такие страницы в robots.txt, по идеи, они должны выпасть у меня из индекса при следующем обходе. Я почитала материалы, некоторые рекомендуют ставить ещё каноникал, чтобы робот видел главную страницу. Вы сталкивались с таким? Как устраняли появление таких страниц в индексе. ? Сайт на ВордПрессе у меня.
У меня на сайте стали появляться страницы с динамическим урлом, робот их находит в Метрике, я закрыла такие страницы в robots.txt, по идеи, они должны выпасть у меня из индекса при следующем обходе. Я почитала материалы, некоторые рекомендуют ставить ещё каноникал, чтобы робот видел главную страницу. Вы сталкивались с таким? Как устраняли появление таких страниц в индексе. ? Сайт на ВордПрессе у меня.
robots.txt предусмотрен для ограничения СКАНИРОВАНИЯ, а не индексирования. Чтобы закрывать от индекса, необходимо ипользовать meta name="robots" content="noindex"
ОЛ
robots.txt предусмотрен для ограничения СКАНИРОВАНИЯ, а не индексирования. Чтобы закрывать от индекса, необходимо ипользовать meta name="robots" content="noindex"
Спасибо. Подскажите, по факту эти страницы где-то отображаются на нашем сайте или в cms? Я вижу, что они попадают в индекс, знаю, что робот их находит через метрику, но как мне установить на этих страницах - meta name = robots?
ОЛ
robots.txt предусмотрен для ограничения СКАНИРОВАНИЯ, а не индексирования. Чтобы закрывать от индекса, необходимо ипользовать meta name="robots" content="noindex"
вот такой вид у них
ОЛ
☀️
ЕК
всем привет:)
В
Ольга Лотц
вот такой вид у них
так они не в индексе или не должны быть
В
это просто утм метки, их видно в метрике, не больше
ОЛ
это просто утм метки, их видно в метрике, не больше
Они дублируют контент,так как Яндекс Вебмастер мне выдвинул список страниц с этой ошибкой.
В
сайт кстати офлайн