Size: a a a

SEO чат Shakin.ru

2020 November 22

d

dignity in SEO чат Shakin.ru
Подскажите какие страницы нужно скрывать в robots.txt, а какие не нужно?
источник
2020 November 23

AG

Alexandr Gudov in SEO чат Shakin.ru
dignity
Подскажите какие страницы нужно скрывать в robots.txt, а какие не нужно?
Привет, то что не хотите отдавать в индекс (показывать миру) - скрываете.
источник

A

A.M in SEO чат Shakin.ru
Mila 
включить переключатель в on?
Включил - ничего не работает
источник

EP

Evgenii Popov in SEO чат Shakin.ru
Если б можно было управлять индексацией на другом домене, через свой, то все бы закрывали конкурентов или мешали им жить.

Вы можете на своëм домене проксировать данные с другого источника. Reverse proxy, чтобы они лежали на вашем домене в каком нибудь каталоге. Минусы трафик от облака к клиенту пойдет через ваш сервер.
источник

A

A.M in SEO чат Shakin.ru
Михаил, добрый день.

Подскажите пожалуйста, а как правильно пользоваться этим сервисом? Это скрипт для сервера? А как запустить его?

Я новичок, сорри....
источник

AG

Alexandr Gudov in SEO чат Shakin.ru
Evgenii Popov
Если б можно было управлять индексацией на другом домене, через свой, то все бы закрывали конкурентов или мешали им жить.

Вы можете на своëм домене проксировать данные с другого источника. Reverse proxy, чтобы они лежали на вашем домене в каком нибудь каталоге. Минусы трафик от облака к клиенту пойдет через ваш сервер.
Спасибо, Евгений. Для того чтобы можно было управлять облаком робоса яндекс дублирует его от вашего сайта, соответственно все разрешающие и запрещающие директивы прописываются в своем робосе для управления роботсом облака.
источник

MS

Mike Shakin in SEO чат Shakin.ru
A.M
Михаил, добрый день.

Подскажите пожалуйста, а как правильно пользоваться этим сервисом? Это скрипт для сервера? А как запустить его?

Я новичок, сорри....
На YouTube есть подробные инструкции:
https://prnt.sc/vo65yp
источник

ОЛ

Ольга Лотц in SEO чат Shakin.ru
Все привет! Ребят, поделитесь, пожалуйста, своим мнением.
У меня на сайте стали появляться страницы с динамическим урлом, робот их находит в Метрике, я закрыла такие страницы в robots.txt, по идеи, они должны выпасть у меня из индекса при следующем обходе. Я почитала материалы, некоторые рекомендуют ставить ещё каноникал, чтобы робот видел главную страницу. Вы сталкивались с таким? Как устраняли появление таких страниц в индексе. ? Сайт на ВордПрессе у меня.
источник

d

dignity in SEO чат Shakin.ru
Alexandr Gudov
Привет, то что не хотите отдавать в индекс (показывать миру) - скрываете.
Я где-то читал что нужно скрывать страницы типа /category/* /tag/* и тд, но не совсем понимаю зачем?!
источник

A

A.M in SEO чат Shakin.ru
Mike Shakin
На YouTube есть подробные инструкции:
https://prnt.sc/vo65yp
Спасибо
источник

В

Влад 🍒 in SEO чат Shakin.ru
dignity
Я где-то читал что нужно скрывать страницы типа /category/* /tag/* и тд, но не совсем понимаю зачем?!
Не "нужно" ничего скрывать. Можно, по желанию.
источник

И

Илья 🤷‍♂️... in SEO чат Shakin.ru
Ольга Лотц
Все привет! Ребят, поделитесь, пожалуйста, своим мнением.
У меня на сайте стали появляться страницы с динамическим урлом, робот их находит в Метрике, я закрыла такие страницы в robots.txt, по идеи, они должны выпасть у меня из индекса при следующем обходе. Я почитала материалы, некоторые рекомендуют ставить ещё каноникал, чтобы робот видел главную страницу. Вы сталкивались с таким? Как устраняли появление таких страниц в индексе. ? Сайт на ВордПрессе у меня.
robots.txt предусмотрен для ограничения СКАНИРОВАНИЯ, а не индексирования. Чтобы закрывать от индекса, необходимо ипользовать meta name="robots" content="noindex"
источник

ОЛ

Ольга Лотц in SEO чат Shakin.ru
Илья 🤷‍♂️
robots.txt предусмотрен для ограничения СКАНИРОВАНИЯ, а не индексирования. Чтобы закрывать от индекса, необходимо ипользовать meta name="robots" content="noindex"
Спасибо. Подскажите, по факту эти страницы где-то отображаются на нашем сайте или в cms? Я вижу, что они попадают в индекс, знаю, что робот их находит через метрику, но как мне установить на этих страницах - meta name = robots?
источник

ОЛ

Ольга Лотц in SEO чат Shakin.ru
Илья 🤷‍♂️
robots.txt предусмотрен для ограничения СКАНИРОВАНИЯ, а не индексирования. Чтобы закрывать от индекса, необходимо ипользовать meta name="robots" content="noindex"
вот такой вид у них
источник

ОЛ

Ольга Лотц in SEO чат Shakin.ru
☀️
источник

ЕК

Евгений Козловский... in SEO чат Shakin.ru
всем привет:)
источник

В

Влад 🍒 in SEO чат Shakin.ru
Ольга Лотц
вот такой вид у них
так они не в индексе или не должны быть
источник

В

Влад 🍒 in SEO чат Shakin.ru
это просто утм метки, их видно в метрике, не больше
источник

ОЛ

Ольга Лотц in SEO чат Shakin.ru
Влад 🍒
это просто утм метки, их видно в метрике, не больше
Они дублируют контент,так как Яндекс Вебмастер мне выдвинул список страниц с этой ошибкой.
источник

В

Влад 🍒 in SEO чат Shakin.ru
сайт кстати офлайн
источник