Обеспечение индексации сайта роботами поисковых систем. Для многих сайтов системы поиска является основным источник притока посетителей. Поисковые роботы очень часто обходят интернет и находящиеся в нём сайты индексируют, после чего данные сайты обладают возможностью попасть на страницы результатов поиска и быть кем-то увиденными.
Если вы разместите ссылки своего сайта на каких-нибудь других, уже для роботов поисковых систем известных, сайтах, то такие роботы через некоторое время зайдут и на ваш сайт, индексируя находящиеся на сайте страницы. Впрочем, наилучше всего сообщить сразу роботам поисковых систем о существовании сайта.
Для ведущих поисковых систем, наиболее известных в Рунете — Рамблера, Яндекса и Гугла — это можно осуществить, соответственно, на страницах:
http://www.rambler.ru/doc/add_site.shtml
http://webmaster.yandex.ru/
http://www.google.ru/intl/ru/addurl.html.
Однако, до того момента времени, когда ваш сайт начнёт поисковыми роботами индексироваться, пройдёт определенное время — обычно примерно недели. Если на сайте будут много страниц, то тогда они будут индексироваться постепенно. Установить, какие страницы сайта уже проиндексированы, можно при помощи функции расширенного поиска — указать в поисковом поле «искать только на сайте» веб адрес сайта.
Иногда начинающие допускают ошибки, предотвращающие индексацию части различных страниц сайта роботами. Когда вы выставляйте свой сайт в очередь на индексирование в поисковиках, вы добавляете адрес основной страницы. Следовательно для того, чтобы были индексированы и остальные страницы вашего сайта, робот должен обладать возможность пробраться до таких страниц с главной по прямым ссылкам.
Что означает «прямая ссылка»? Это считается обычной ссылкой, которая задана с помощью html-тега, в коде страницы которая выглядит примерно таким образом —
<a href=»адрес страницы»> текст ссылки </a>. Но ссылку можно создать и другим способом — при помощи javascript, к примеру. Именно таким образом перенаправляют посетителей на другую страницу выпадающие меню сайтов. Однако в отличие от посетителя робот, не может перейти на другие страницы через подобное меню, поэтому для него необходимо обязательно быть в дополнение поставлены обычные ссылки. Помимо того, поисковые роботы совсем не любят редирект автоматический (зайдя на страницу, автоматически перенаправляется на другую страницу), и обычно по такому редиректу не переходят.