Индексация сайта в поисковых системах — процесс добавления сведений о сайте роботом поисковой системы в базу данных, которые впоследствии используются для поиска информации на проиндексированных сайтах.
Посмотреть проиндексированные страницы сайта в Яндексе или Google можно через панели вебмастера или применяя специальные поисковые запросы.
Примечание. В приведенных ниже запросах возможны разные результаты для доменов test.ru и www.test.ru.
Специальные поисковые запросы для Yandex:
http://yandex.ru/yandsearch?surl=www.test.ru
http://yandex.ru/yandsearch?serverurl=www.test.ru
http://yandex.ru/yandsearch?site=www.test.ru
Специальные поисковые запросы для Google:
http://www.google.com/search?q=site:www.test.ru
(http://www.google.com/support/webmasters/bin/answer.py?answer=35256)
Примечание. При использовании данного запроса Google показывает наиболее значимые результаты, опуская некоторые похожие на уже показанные. Для того, чтобы показать все результаты, необходимо применить следующий запрос:
http://www.google.com/search?q=site:www.test.ru&filter=0
Примечание. Чтобы показать на одной странице большее число результатов поиска, нужно использовать параметр numdoc для Яндекса (максимальное значение 50) и параметр num для Google (максимальное значение 100; работает только при отключенном «Живом поиске»):
http://yandex.ru/yandsearch?surl=www.test.ru&numdoc=50
http://www.google.com/search?q=site:www.test.ru&filter=0&num=100
Также можно воспользоваться следующими сервисами:
http://be1.ru/services/stat/
http://www.seolib.ru/script/ticpr/
Для управления индексацией используется файл robots.txt.
Для более быстрой и полной индексации сайтов поисковыми системами можно задействовать файл sitemap.
Добавление нового сайта в индекс:
Яндекс — http://webmaster.yandex.ru/addurl.xml
Google — http://www.google.ru/addurl/
Rambler — http://www.rambler.ru/doc/add_site.shtml
Апорт — http://catalog.aport.ru/rus/add/AddUrl.aspx
Bing — http://www.bing.com/docs/submit.aspx
Yahoo! — http://search.yahoo.com/info/submit.html