Как Google индексирует ваш сайт?

Давайте для начала определимся с основными понятиями, и о том, что мы будем рассматривать в этой статье?

Бот (англ. bot) является частью программного обеспечения поисковой системы, цель которого – найти и пройти по каждой странице вашего сайта, классифицировать ее по определенным признакам, и поместить в MySQL базу Google.

На данный момент Google имеет следующих хорошо известных вам ботов:
1) Adsense Bot
2) Freshbot
3) DeepCrawl

Adsense Bot, как вы могли, наверное, догадаться, используется для вебмастеров, которые имеют рекламные блоки Adsense на своих сайтах. Как только новая страница появляется на вашем сайте, нужный скрипт в пределах кода Adsense посылает сообщение боту -Adsense Bot, и в течение 10-20 минут, он начнет индексировать страницу сайта, для того чтобы показывать наиболее релевантные объявления.

Если вас не интересует Adsense Bot, переходим к следующим, наиболее важным ботам - DeepCrawl и Freshbot.

Freshbot выполняет задачу сканирования наиболее популярных страниц на вашем сайте. Не имеет значение, одна это страница или несколько тысяч. Такие крупные сайты, как DIGG. com и YouTube. com имеют несколько сотен тысяч страниц, которые сканируются каждые пять минут, и все потому, что Google отслеживает сайты с высокой степенью изменений контента. Известно, что эти страницы имеют большое количество частых изменений. Будь Google медлительнее, страницы утратили бы свою актуальность. Обычный сайт с более-менее обновляемым контентом, может рассчитывать на то, что Freshbot посетит его до 14-ти дней, в зависимости от того, как популярны эти страницы.

Что происходит с вашим сайтом, когда его посещает Freshbot?

Он сканирует страницы, начиная с главной и проходит все глубже в ваш сайт. Затем он помещает найденные ссылки в MySQL базу (базу данных). Так что, когда DeepCrawl наведывает ваш сайт, он знает какие ссылки есть на нем.

Примерно раз в месяц, DeepCrawl посещает ваш сайт и переходит по всем ссылкам, которые были найдены Freshbot. Это и есть та причина, почему индексация вашего сайта в Google может занять до одного месяца. Не спасает, даже добавление карты сайта.

В подведении итогов, хочу сказать, что будьте терпеливы и продолжайте пополнять свой сайт интересной и нужной информацией. Работайте на получение ценных и качественных ссылок с уважаемых порталов и Google, непременно, воздаст вам за это!
Статья предоставлена сервисом по анализу сайта и рекомендуется к прочтению вебмастерам и оптимизаторам.
15:26 14.12.2016



Отзывы и комментарии
Ваше имя (псевдоним):
Проверка на спам:

Введите символы с картинки:



Создадим скрытую грязезащиту

Создадим скрытую грязезащиту

Наверное, до сих пор можно отыскать тех людей, которые не имеют ни малейшего понятия о том, что такое скрытая грязезащита. То есть, расшифруем: если мы говорим о грязезащите вообще, то путаницу мыслей...
Вкусные рецепты: вкуснейший грушевый пирог с шоколадом, Яблочный кекс с хрустящей корочкой (Apple Crumble Cake), для Ирочки!, Фаршированная хала

Вкусные рецепты: вкуснейший грушевый пирог с шоколад...

вкуснейший грушевый пирог с шоколадомДля начала займемся подготовкой продуктов. Неочищенные груши нарезаем вдоль ломтиками для украшения пирога. Сбрызнем немного соком лимона чтобы не потемнели. Можно...
Командообразование в период кризисной экономики.

Командообразование в период кризисной экономики.

Командообразование – залог успеха! На субботу и воскресенье едем в лес на тренинг командообразования, будем сплачивать команду на «веревочном» курсе! Едут все!Теперь подобного заявления от руководства...
Автоматический трейдинг на Форексе: каковы его плюсы и минусы?

Автоматический трейдинг на Форексе: каковы его плюсы...

Торговля на валютном рынке Форекс стала настолько популярной, что в мире биржевой торговли появляются все новые способы, новые разработки и даже открытия. Таким открытием для трейдеров можно считать с...
Почему все реже слышны песни лягушек?

Почему все реже слышны песни лягушек?

Кажется, еще совсем недавно с наступлением тепла любая мало-мальски крупная лужа вечерами превращалась в сцену для выступления зеленых певцов — лягушек. Невзрачное кваканье отдельных предст...
Сексуальные качества

Сексуальные качества

Для того чтобы понять какая именно проблема существует между мужчиной и женщиной, необходимо для начала ее осознать, учитывая личностные особенности каждого из партнеров. Это я люблюНельзя смешивать п...
Познавательное

Алмазная резка и бурение отверстий в железобетоне.

Алмаз - это один из наиболее твердых материалов во всем мире. Благодаря современным технологиям, алм...

Девичий виноград. Для чего он нужен на дачном учас

Когда возникает потребность задекорировать глухую стену загородного дома или бетонный забор, скрыть ...

Не бойтесь брать животных из приютов!

Итак, давайте рассмотрим вопрос о том, почему же не стоит покупать породистых животных, а гораздо лу...

Бисероплетение: что-то новое или хорошо забытое ст

Какие появляются мысли при слове «бисероплетение»? Обычно вспоминается, как мастерицы на...

Вкусные рецепты: вкуснейший грушевый пирог с шокол

вкуснейший грушевый пирог с шоколадомДля начала займемся подготовкой продуктов. Неочищенные груши на...

Таиланд. Как получить больше впечатлений за те же

Человек, который и расходует деньги, и экономит, это самый довольный человек, так как он получает об...

Как успешно подготовиться к зачёту?

     Подготовка к зачётам – дело, порой, непростое. Ингода она сопоставима с под...

Вкусные рецепты: Вариация на тему: Рогалики, Салат

Вариация на тему: РогаликиМуку перетереть с маслом, добавить разведённые дрожжи, сметану, сахар, сол...

Ломаем пароль в ноутбуках Toshiba

Вот всё, что вам необходимо иметь: 1.    Ваш ноутбук Toshiba 2.    Чистая отформатированная дискет...

Музыка Средневековья: какой она была? Церковная му

Вопрос «деления» исторических эпох — неоднозначный, о нем спорят уже не менее...



О портале:

Наш интернет-портал является ресурсом, который включает в себя полный каталог полезных и отличных статей. Каждый посетитель найдет для себя что-нибудь полезное. Адаптированный дизайн позволяет вам максимально быстро находить необходимую информацию. Самые разнообразные тематические статьи дают возможность вам совершенствоваться в той или иной сфере. Быть более начитанным и грамотным. Современный дизайн сайта позволяет просматривать статьи на всех электронных устройствах. Теперь отыскать подходящую информацию стало просто.

Мы собрали для вас полезные и увлекательные статьи. На нашем портале вы найдете ответы на интересующие вас вопросы. Стандартная система поиска позволяет вам стремительно отыскать нужную информацию. Адаптированный дизайн позволяет вам просматривать информацию на абсолютно любых гаджетах. Отныне, поиск необходимой информации будет занимать у вас секунды.