Закрыть сайт от индексации поисковыми роботами

Данный материал предоставлен сайтом PacificSky.Ru исключительно в ознакомительных целях. Администрация не несет ответственности за его содержимое.

Если вам по какой то причине понадобилось скрыть сайт от поисковых систем и их роботов, то вам необходимо:

Для начала в корне сайта необходимо создать файл robots.txt, разместить в нем строки в зависимости от требования и сохранить файл.
  1. Запрещаем индексацию для указанной поисковой системы.

    Скрываем сайт только от Google:
    User-agent: Google
Disallow: /

    Скрываем сайт только от Yandex:
    User-agent: Yandex
Disallow: /

    По аналогии вместо слов Google и Yandex необходимо указывать наименование поисковой системы, которую вы хотите исключить из индексации.
    User-agent: НАИМЕНОВАНИЕ ПОИСКОВОЙ СИСТЕМЫ
Disallow: /

  2. Запрещаем индексацию для всех поисковых систем.

    User-agent: *
Disallow: /

Полезное
22
Информация
Посетители, находящиеся в группе Гости, не могут оставлять комментарии к данной публикации.
Copyright © 2015–2022 PacificSky.Ru All Rights Reserved.
Top.Mail.Ru