#вопрос привет, а кто-нибудь продвигал аддоны на G-suite markeplace?

это значит надо для себя усвоить простое правило: robots не закрывает от индексирования, если есть внутренние или внешние ссылки на такие страницы, то гугл может их проиндексировать.
Если не надо индексировать страницы с параметрами(фильтра, сортировки и т.д.) и тратить бюджет краулера, то:
1.ставим noindex
2.после вылета с индекса, закрываем в robots от сканирования
3.так же можно настроить в консоли в Параметры URL - как обрабатывать страницы с параметрами.
4.если проблем с бюджетом краулера нет, то можно просто ставить canonical со страниц с параметрами на основную.

спасибо за подробный ответ)
ноуиндекс через мета роботс?

#вопрос
Может, кто сталкивался?
при просмотре сохранненой версии страницы в выдаче, гугл показыват 404 .
Страница рабочая - отдает 200.  В логах всегда отдавала 200.  Как это понимать? Типа нет кеша по этой странице вообще или в кеше 404?

я ставлю и в ответе сервера 😁

нет кеша, постоянно такое, пару дней и будет норм

это гугл просто себе кеш не сохраняет?

не успел ещё сохранить

не силен в этой теме это в хттп заголовке или где?))

да https://developers.google.com/search/reference/robots_meta_tag?hl=ru

через X-Robots-Tag?

да

а если страницы допустим и так не в индексе?стоит ли эти заниматься?

если проблем с краулером нет, то не стоит

а какие могут быть проблемы? страницы закрытые в роботс попадают в индекс?

очень часто и бот тратит на них свои ресурсы, смотрите логи сервера.

а то есть он даже на них может зайти, в индекс не закинуть но потратить на них свой бютжет крайлинговый?

а для страниц печати выходит тоже все аналогичное делать?

тоже самое, по факту они такие же дубли основного контента

а если через парметры урл настрраивать  то необходимо ли также проставлять ноиндекс в мета и хттп или не надо?