Вам понадобится
  • - файл robots.txt
Инструкция
1
Чтобы сайт был эффективно просканирован поисковой системой и добавлен соответствующим образом, следует большое влияние уделять доступности проекта. Следует убедиться в надежности хостера и в том, что сайт функционирует нормально, иначе эти факторы могут значительно снизить качество индексации страниц поисковым роботом.
2
Создайте файл robots.txt, который дает инструкции поисковым паукам и позволяет им быстрее и удобнее передвигаться по структуре сайта. Кроме того, в этом файле можно указать данные, не желательные для индексации, и робот пропустит их.
3
Чтобы сайт сделать более видимым, следует убедиться в том, что сайт удобен для обращения. Стоит указать на всех HTML страницах теги для ключевых фраз, описания и наличия авторских прав. Также при оптимизации нужно обязательно указывать параметр тегов ALT, который также широко используется роботами.
4
Организуйте удобную навигацию, которая нужна не только посетителям, но и поисковым системам. Устанавливайте простые текстовые ссылки внизу, включите ссылки на каждую страницу сайта.
5
Карта сайта также помогает роботам переходить по структуре сайта. Хорошей картой является страница, на которой указаны ссылки на все остальные файлы. Иногда включается описание.
6
Сделать проект видимым также позволяют системы обмена ссылками. Обменивайтесь ссылками с другими вебмастерами. Именно с различных сайтов поисковые системы узнают о существовании тех или иных проектов. Чем на большем количестве сайтов установлена ссылка, тем выше вероятность попадания под сканирование.