Индексация — это процесс, в котором поисковые системы обнаруживают документ (страницу сайта), затем сканируют его и сохраняют в своей базе.
Процесс индексации начинается с момента обнаружения краулером новой страницы и завершается занесением обработанных данных в поисковую базу.
Как проходит индексация
- Обнаружение – поисковый робот находит ссылку на новую страницу.
- Загрузка – получение полного содержимого страницы.
- Анализ – извлечение и структурирование информации.
- Каталогизация – размещение данных в поисковом индексе.
Эффективность индексации определяет скорость появления веб-ресурса в результатах поиска.