Закрытие сайта от поисковиков

Опубликован в блог: Веб-мастеру
Возможны следующие варианты закрытия сайта от поисковиков:

В корне создаете файл robots.txt (т.е. чтобы его можно было открыть по адресу site.ru/robots.txt) и вставляете в него следующее содержимое:

User-agent: *
Disallow: /

Только это не гарантирует 100% закрытие сайта от поисковых роботов, они могут нарушить это правило. Поэтому для них этот файл носит лишь рекомендательный характер.

Чтобы закрыть от поисковиков сайт на 100% в движке Вашего сайта должна быть предусмотрена такая функция, как «Закрытие сайта». Если такого нет, то увы, можно применить лишь первый способ.

0 комментариев

Только зарегистрированные и авторизованные пользователи могут оставлять комментарии.