мета тегами, не стесняйтесь размещать его на своих страницах, если вы можете использовать его для других целей – это не будет штрафоваться». Джон Мюллер, Google.
Роботы Метатег SEO Лучшие практики SEO
Пример кода:
<meta name = «robots» content = «index, nofollow» />
Я мог бы использовать вышеуказанный мета тег, чтобы сказать Google индексировать страницу, но не переходить по каким-либо ссылкам на странице, если по какой-то причине я не хотел, чтобы страница отображалась в результатах поиска Google, но я хочу, чтобы Google следовал по ссылкам на этой странице.
«По умолчанию Googlebot будет индексировать страницу и переходить по ссылкам на неё. Так что нет необходимости отмечать страницы значениями содержимого INDEX или FOLLOW.» Google.
Существуют различные инструкции, которые вы можете использовать в своём мета теге роботов, но помните, что Google по умолчанию будет индексировать и переходить по ссылкам, поэтому вам не нужно включать это в качестве команды – вы можете полностью исключить метаданные роботов – и, вероятно, следует если у вас нет подсказки.
«Робот Google понимает любую комбинацию строчных и прописных букв.» Google.
Допустимыми значениями атрибута «CONTENT» для мета тега роботов являются: «INDEX», «NOINDEX», «FOLLOW», «NOFOLLOW». Довольно понятно.
Примеры:
· META NAME = «ROBOTS» CONTENT = «NOINDEX, FOLLOW»
· META NAME = «ROBOTS» CONTENT = «INDEX, NOFOLLOW»
· META NAME = «ROBOTS» CONTENT = «NOINDEX, NOFOLLOW»
· META NAME = «ROBOTS» CONTENT = «NOARCHIVE»
· META NAME = «GOOGLEBOT» CONTENT = «NOSNIPPET»
Google понимает следующее и интерпретирует следующие значения метатегов роботов:
· NOINDEX – предотвращает включение страницы в индекс.
· NOFOLLOW – запрещает роботу Google переходить по любым ссылкам на странице. (Обратите внимание, что это отличается от атрибута NOFOLLOW уровня ссылки, который не позволяет Googlebot переходить по отдельной ссылке.)
· NOARCHIVE – предотвращает доступ к кэшированной копии этой страницы в результатах поиска.
· NOSNIPPET – предотвращает появление описания под страницей в результатах поиска, а также предотвращает кеширование страницы.
· NONE – эквивалент «NOINDEX, NOFOLLOW».
На уровне страницы – это мощно. Когда я оптимизирую страницу для Google, я обычно сосредотачиваюсь на содержании страницы (MC) и опыте пользователя, и меня обычно интересуют следующие элементы страницы:
· Элемент заголовка – Важно – Уникальный.
· Мета-описание (необязательно, но желательно в большинстве случаев) – уникально.
· Роботы (опционально) – будьте осторожны.
Эти теги находятся в разделе [HEAD] на странице [HTML] и представляют собой единственные теги для Google, на которые действительно обращают внимание. Почти все остальное, что вы можете вставить в [HEAD] вашего HTML-документа, не значительно, и, возможно, даже бессмысленно.
Google прямо говорит в своих рекомендациях:
«Google будет игнорировать мета-теги, которые он не знает». Рекомендации Google для веб-мастеров, 2018
Как Google относится к «noindex, follow» в метатеге роботов на страницах
Это