Как Google индексирует ваш сайт?

Давайте для начала определимся с основными понятиями, и о том, что мы будем рассматривать в этой статье?

Бот (англ. bot) является частью программного обеспечения поисковой системы, цель которого – найти и пройти по каждой странице вашего сайта, классифицировать ее по определенным признакам, и поместить в MySQL базу Google.

На данный момент Google имеет следующих хорошо известных вам ботов:
1) Adsense Bot
2) Freshbot
3) DeepCrawl

Adsense Bot, как вы могли, наверное, догадаться, используется для вебмастеров, которые имеют рекламные блоки Adsense на своих сайтах. Как только новая страница появляется на вашем сайте, нужный скрипт в пределах кода Adsense посылает сообщение боту -Adsense Bot, и в течение 10-20 минут, он начнет индексировать страницу сайта, для того чтобы показывать наиболее релевантные объявления.

Если вас не интересует Adsense Bot, переходим к следующим, наиболее важным ботам - DeepCrawl и Freshbot.

Freshbot выполняет задачу сканирования наиболее популярных страниц на вашем сайте. Не имеет значение, одна это страница или несколько тысяч. Такие крупные сайты, как DIGG. com и YouTube. com имеют несколько сотен тысяч страниц, которые сканируются каждые пять минут, и все потому, что Google отслеживает сайты с высокой степенью изменений контента. Известно, что эти страницы имеют большое количество частых изменений. Будь Google медлительнее, страницы утратили бы свою актуальность. Обычный сайт с более-менее обновляемым контентом, может рассчитывать на то, что Freshbot посетит его до 14-ти дней, в зависимости от того, как популярны эти страницы.

Что происходит с вашим сайтом, когда его посещает Freshbot?

Он сканирует страницы, начиная с главной и проходит все глубже в ваш сайт. Затем он помещает найденные ссылки в MySQL базу (базу данных). Так что, когда DeepCrawl наведывает ваш сайт, он знает какие ссылки есть на нем.

Примерно раз в месяц, DeepCrawl посещает ваш сайт и переходит по всем ссылкам, которые были найдены Freshbot. Это и есть та причина, почему индексация вашего сайта в Google может занять до одного месяца. Не спасает, даже добавление карты сайта.

В подведении итогов, хочу сказать, что будьте терпеливы и продолжайте пополнять свой сайт интересной и нужной информацией. Работайте на получение ценных и качественных ссылок с уважаемых порталов и Google, непременно, воздаст вам за это!
Статья предоставлена сервисом по анализу сайта и рекомендуется к прочтению вебмастерам и оптимизаторам.
15:26 14.12.2016

---

Ваше имя (псевдоним):

Проверка на спам:

Введите символы с картинки:

---

Таиланд. Как получить больше впе...

Знание или незнание традиций страны, в которую вы едете, может значительно повлиять на качество отдыха. Я бы добавила: «…а невыполнение простых правил, может помешать получить удовол...

Самый быстрый Интернет в мире

75-летняя шведская пенсионерка Сигбритт Лотберг вписала себя в историю Всемирной паутины. У нее дома стоит самый быстрый в мире Интернет: скорость соединения составляет 40 гигабит в секунду. Сейчас Си...

Республика Гондурас любопытна св...

республика Гондурас расположена на американском материке. Столичным городом является город Тегусигальпа. Соседствует с Гватемалой,Сальвадором, Никарагуа. Так же к территории ее относятся о-ва Ислас-де...

Кому он нужен, этот русский пись...

Это мне так кажется, или очень безграмотен стал народ? Ни чины, ни звания, ни возраст, ни пол — ничто не устанавливает границы этой безграмотности. Впрочем, чему удивляться, все объяснимо. ...

Вкусные рецепты: Самые нежные ко...

Самые нежные котлеткиХочу предложить вам рецепт очень вкусных котлет.Я,если честно,сама в первый раз такие приготовила.Просто тают во рту,нежнейшие,сочные,ароматные и очень вкусные. Из исходного колич...

Выбираем обои для спальни

Спальня – то место, где мы встречаем первые минуты нового дня. Очень важно, чтобы мы находили свою спальню комфортной, уютной, чистой, доброй и приятной. Здесь же мы и заканчиваем наш день, что тоже с...