База, которая создается для хранения сетевых документов и содержащая в себе параметры этих документов, называется индексом. Служит для ускорения поиска документа по целевым ключевым запросам.
Поисковые роботы, обходя все страницы ресурсов, индексируют их, то есть – собирают о них все данные, необходимые для последующего их обнаружения в сети. Таким образом, поиск нужного вам документа значительно ускоряется. При создании индекса роботом убираются весь программный код страницы (HTML, PHP) и тэги HTML.
Из слов контента происходит формирование списков слов для поиска, которые сортируются или по алфавиту, или по значимости этого слова в документе. Также одновременно с этим проводится лингвистическое обрабатывание слов и словоформ. Каждое индексированное слово имеет свой вес.
При наличии внешних ссылок индексация ресурса может продолжаться от нескольких дней до нескольких недель.
