Что такое индексация



Когда вы только создали сайт, о нём не знает никто, кроме вас. Такой веб-ресурс не слишком полезен. Для того, чтобы о нём узнали другие люди, его нужно раскрутить. Один из способов раскрутки - поисковые системы. Для того, чтобы поисковая система узнала о вашем сайте, нужно специальным образом добавить ваш веб-ресурс. Поисковики о нём могут узнать и сами, но этот процесс займет значительно больше времени.
Само понятие индексации - это внесение страниц сайта в базу поисковой системы.

Как происходит индексация



Каждая система поиска обладает роботом. Но это не физический робот, а всего лишь программа, которая сканирует интернет и обнаруживает ссылки на новые сайты. Веб-разработчик с помощью специальных тегов, а также с помощью файла robots.txt может ограничить доступ роботам. В этом случае страницы, попавшие в ограничение, не будут проиндексированы.

Добавляя сайт в базу поисковой системы, вы лишь даёте знать о том, что появился новый сайт. Но это совершенно не означает того, что он сразу же будет проиндексирован.

Сколько времени занимает индексация



Ответить на этот вопрос однозначно невозможно. Какие-то сайты индексируются в течение нескольких часов, индексация других может занять до 2 недель.

Если ссылки на индексируемый сайт имеются на ресурсах, которые уже раскручены, то странички попадут в индекс быстрее. Зачастую это происходит в течение пары часов.

То же самое произойдет, если сам сайт уже находится в поиске и достаточно раскручен, а вы добавили к сайту новую страничку.
Грамотная перелинковка тоже будет способствовать ускорению индексации. Термин “перелинковка” означает что ссылки на странички должны перекрестно вести друг на друга, но не в хаотичном порядке, а так, как это было бы удобно пользователю сайта.

Если индексируемый ресурс только начинает своё существование в Сети, то время индексации зависит главным образом от поисковой системы. Это, конечно же, при условии, что сайт сделан грамотно с точки зрения верстки и содержания.

Выпадение из поиска



Если сайт проиндексирован, это ещё не гарантия, что он будет в базе поисковой системы постоянно. У последних есть свои определенные правила и регламенты. Если веб-ресурс в какой-то момент времени начинает нарушать эти правила, то часть его страниц или все они могут пропасть из поисковой системы. В этом случае пользователь, ищущий информацию о данном конкретном сайте, ничего не найдет.

Заключение



Индексация - это сложный процесс, зависящий от множества факторов. На длительность индексации можно повлиять, грамотно составив файл robots.txt и выполнив ряд других действий.