Вам понадобится
- - иметь хотя бы начальные знания HTML
- - знать, как открыть корневую папку каталога файлов вашего сайта
Инструкция
1
2
3
Если система управления вашим сайтом позволяет редактировать этот файл прямо из корневой папки, то откройте robots.txt через вспомогательный сервис. При невозможности произведения каких-либо изменений с файлом через интерфейс системы сохраните документ на компьютер, а затем откройте его через программу «Блокнот».
4
Измените первые две строчки документа на такие:
"User-agent: *
Disallow:/".
Надпись "User-agent: *" показывает, что следующие за записью правила относятся ко всем поисковым роботам, а "Disallow:/" означает запрет индексации всего сайта. После коррекции содержания сохраните файл.
"User-agent: *
Disallow:/".
Надпись "User-agent: *" показывает, что следующие за записью правила относятся ко всем поисковым роботам, а "Disallow:/" означает запрет индексации всего сайта. После коррекции содержания сохраните файл.
5
В случае отсутствия на сайте файла robots.txt создайте новый документ в программе «Блокнот». Впишите в него те же самые две записи, располагая каждую из них на новой строчке, и сохраните файл с помощью команды «Файл-Сохранить как...» под именем robots.txt.
6
Залейте созданный документ в корневую папку вашего сайта и проверьте его функционирование, снова перейдя по ссылке http: ⁄ ⁄ www·site·ru ⁄ robots.txt ⁄ , где вместо "http: ⁄ ⁄ www·site·ru" впишите адрес вашего ресурса.
7
Другим способм запрещения индексации является вставка специальных метатегов в HTML-код страниц сайта. Для того, чтобы воспользоваться этим методом, найдите в коде одной из страниц сайта надписи "<html><head>" и поместите сразу после "<head>" строчку "<meta name="robots" content="noindex,nofollow">".
8
Если ваш сайта написан на языке HTML, то такой код необходимо вставлять на каждой странице. Для ресурса на PHP достаточно поместить такую запись в файле header.php.
Видео по теме
Источники:
- how-tos.ru