Закрытие сайта от поисковиков

Опубликован в блог: Веб-мастеру
Возможны следующие варианты закрытия сайта от поисковиков:

В корне создаете файл robots.txt (т.е. чтобы его можно было открыть по адресу site.ru/robots.txt) и вставляете в него следующее содержимое:

User-agent: *
Disallow: /

Только это не гарантирует 100% закрытие сайта от поисковых роботов, они могут нарушить это правило. Поэтому для них этот файл носит лишь рекомендательный характер.

Чтобы закрыть от поисковиков сайт на 100% в движке Вашего сайта должна быть предусмотрена такая функция, как «Закрытие сайта». Если такого нет, то увы, можно применить лишь первый способ.

Как добавить сайт в поисковики

Опубликован в блог: Веб-мастеру
Чтобы добавить сайт в поисковики – нужно чтобы поисковики узнали о сайте.

Это возможно двумя способами- принудительным (через пингаддурл) и естественным (простановка на сайт ссылки с уже проиндексированного сайта).

Самых-разных поисковиков наберется с десяток, но в рунете правят бал Яндекс (примерно 53% поискового трафика) и Google (35%), в Украине пропорция обратная Google/Яндекс 67%/26%. В буржунете доминирует Google (примерно 65% ) и Yahoo c Bing (по 15%).

Читать дальше →