Индексация сайтов в Google

Главная - СЕО - Индексация сайтов в Google
Индексация сайтов в Google

Индексация сайтов в Google

Многих пользователей волнует вопрос, о том каким образом в поисковике Google индексируются сайты. Ответ довольно прост и понятен.

Каждая поисковая система имеют программу Бот. Такая программа специально создана

для хождения по страницам сайта (индексация сайта в гугле) для распределения их по категориям. Когда она определила категорию, то помещает страницу в базу данных.

Поисковая система Google имеет три бота: Adsense bot, Freshbot и DeepCrawl.

Программа Adsense bot предназначена для использования на тех страницах сайтов, куда включены Adsense рекламные блоки. Когда создаётся новая страница, имеющая такую рекламу, то язык JavaScript отправляет сообщение программе Adsense bot. Бот приходит на такую страницу по прошествии 15 минут. Он индексирует новую страницу и подаёт релевантные ссылки в блок рекламы.

По наиболее популярным сайтам и их страницам ходит программа Freshbot. Для него не важно сколько страниц имеет сайт. Например, на известных всем сайтах CNN.com и Amazon.com он проверяет некоторые страницы с периодичностью в десять минут. Поскольку они обновляются очень часто. Сайты с менее обновляемыми страницами бот посещает реже. Обычно один раз в 14 дней. Если же страница стала популярной, то он может зайти и раньше. Freshbot ищет все возможные линки, которые могут быть выложены на сайте. В последствие перемещает их в базу. Когда работа бота выполнена, он сообщает о ней программе DeepCrawl.

Поделиться знанием: