Часто владельцам сайтов бывает нужно скрыть одну или несколько выборочных записей или страниц от индексирования. Это необходимо, например, когда на странице существует много ссылок, а, как общеизвестно, это не очень хорошо воспринимается поисковыми системами.
Как скрыть страницу/запись от поисковых систем?
Способ 1. Плагин Yoast SEO
Наиболее простым способом скрытия от индексирования контента является использование мощного SEO-плагина Yoast SEO. Итак, после его установки и активации, в админ-панели необходимо открыть запись или страницу на редактирование и найти там блок Yoast SEO, где выбрать раздел Дополнительно.
После перехода в раздел Дополнительно Вам откроется окно дополнительных параметров для выбранной записи/страницы.
Тут нас интересуют два поля: Meta robots index и Мета-тег robots follow. В первом поле нужно выбрать значение noindex, а второй поставить в положение nofollow.
После нажатия кнопки Обновить новые параметры страницы/записи вступят в силу.
Способ 2. Файл robots.txt
Этот способ предполагает редактирование конфигурационного файла robots.txt, специально предназначенного для поисковых систем. Итак, пусть мы хотим скрыть от индексирования запись, имеющую следующий адрес:
http://site.ru/2017/01/25/post1/
Для этого в файл следует добавить следующие строки:
User-agent: * Disallow: /2017/01/25/post1/
Первая строка указывает, что наши намерения скрыть страницу распространяются на все поисковые системы. Во второй строке мы собственно и сообщаем, адрес какой конкретно страницы/записи необходимо скрыть. Заметим, что тут не указывается адрес сайта, так как для robots.txt он уже известен. Единственным недостатком такого метода является то, что не все поисковые системы следуют заданным в нем правилам.
Способ 3. Установка пароля
Еще одним способом запрета индексации страницы или поста является установка на них пароля. Это означает, что для просмотра контента нужно ввести заданный заранее пароль. Этот метод рассматривать не будем, как он детально был описан в одной из наших статьях.
Нажмите, пожалуйста, на одну из кнопок, чтобы узнать понравилась статья или нет.
Привет! Может, кто и откликнется. У меня на сайте https://bonia.live/ в телеграм не получает превью, в инстант вью тоже не получает страницу. Разрешено всем роботам индексировать.
А как сделать функцию “Спрятать ссылку”, есть такой урок?