Индексация это процесс посещения вашего сайта поисковым роботом поисковика для анализа и дальнейшего занесения информации с его страниц в общую базу данных. Только после этого ваш сайт будет появляться в результатах поиска в поисковой системе, робот которой анализировал ваш сайт.
Таким образом, вполне логично, что если страница отсутствует в индексе поисковой системы, то это означает, что робот данную страницу не посещал и не индексировал, то есть попусту поисковая система ничего о вашей странице не знает и, следовательно, не может использовать информацию с нее.
Следует помнить, что поисковая система может узнать о новом сайте двумя путями:
1) Через ручное добавление адреса сайта. Вы можете сами сообщить поисковику о новом сайте, и его адрес сразу попадет в очередь на индексацию, при этом следует добавлять лишь главную страницу сайта – все остальные поисковой робот найдет по ссылкам на вашей главной странице.
2) Можно пустить все на самотек – со временем поисковой робот сам найдет ваш сайт. Особенно это касается новых сайтов, где уже есть хотя бы одна внешняя ссылка с других ресурсов, которые уже проиндексированны поисковой системой. В большинстве случаев рекомендую использовать именно этот вариант, то есть получить несколько внешних ссылок на сайт и просто дождаться посещения робота. Ручное добавление сайта может даже удлинить время ожидания робота.
Время, необходимое для индексации сайта составляет, как правило, от 2-3 дней до 2 недель, в зависимости от поисковой системы. Быстрее всех индексирует сайты поисковая система Google.
Важно сделать сайт легкодоступным и дружественным для поисковых роботов. При этом стоит обратить внимание на следующие моменты:
1) Следите, чтобы все страницы вашего сайта были доступны по ссылкам с главной страницы не более чем за 3 перехода. В случае, если структура вашего сайта этого не допускает, то не поленитесь сделать так называемую карту сайта, site map, которая позволит выполнять указанное правило;
2) Не повторяйте распространенных ошибок: например, идентификаторы сессий только затрудняют индексацию, а если вы используете навигацию через скрипты, то обязательно дублируйте ссылки обычным образом – поисковые системы не умеют их считывать.
3) Нужно помнить, что поисковые системы индексируют не более 100-200 кб текста на странице. Для страниц большего объема будет проиндексировано только начало страницы (первые 100-200 кб.). Соответственно не стоит использовать страницы размером более 100 кб, если хотите, чтобы они были проиндексированы полностью.
Базы данных поисковых систем находятся в постоянном обновлении, записи в базе могут подвергаться изменениям, исчезать и появляться снова, поэтому число проиндексированных страниц вашего сайта может периодически меняться. Одной из наиболее частых причин исчезновения страницы из индекса поисковой системы является недоступность сервера, то есть поисковый робот при попытке индексации сайта не смог получить доступ к нему. То есть гость пришел, а дома никого нет. Однако, после восстановления сервера сайт обязательно появится в индексе снова через некоторое время.
Важным моментом для индексации, является также то, что чем больше внешних ссылок имеет ваш сайт, тем быстрее происходит его переиндексация.
Сообщения
