Как Google индексирует ваш сайт?

Давайте для начала определимся с основными понятиями, и о том, что мы будем рассматривать в этой статье?

Бот (англ. bot) является частью программного обеспечения поисковой системы, цель которого – найти и пройти по каждой странице вашего сайта, классифицировать ее по определенным признакам, и поместить в MySQL базу Google.

На данный момент Google имеет следующих хорошо известных вам ботов:
1) Adsense Bot
2) Freshbot
3) DeepCrawl

Adsense Bot, как вы могли, наверное, догадаться, используется для вебмастеров, которые имеют рекламные блоки Adsense на своих сайтах. Как только новая страница появляется на вашем сайте, нужный скрипт в пределах кода Adsense посылает сообщение боту -Adsense Bot, и в течение 10-20 минут, он начнет индексировать страницу сайта, для того чтобы показывать наиболее релевантные объявления.

Если вас не интересует Adsense Bot, переходим к следующим, наиболее важным ботам - DeepCrawl и Freshbot.

Freshbot выполняет задачу сканирования наиболее популярных страниц на вашем сайте. Не имеет значение, одна это страница или несколько тысяч. Такие крупные сайты, как DIGG. com и YouTube. com имеют несколько сотен тысяч страниц, которые сканируются каждые пять минут, и все потому, что Google отслеживает сайты с высокой степенью изменений контента. Известно, что эти страницы имеют большое количество частых изменений. Будь Google медлительнее, страницы утратили бы свою актуальность. Обычный сайт с более-менее обновляемым контентом, может рассчитывать на то, что Freshbot посетит его до 14-ти дней, в зависимости от того, как популярны эти страницы.

Что происходит с вашим сайтом, когда его посещает Freshbot?

Он сканирует страницы, начиная с главной и проходит все глубже в ваш сайт. Затем он помещает найденные ссылки в MySQL базу (базу данных). Так что, когда DeepCrawl наведывает ваш сайт, он знает какие ссылки есть на нем.

Примерно раз в месяц, DeepCrawl посещает ваш сайт и переходит по всем ссылкам, которые были найдены Freshbot. Это и есть та причина, почему индексация вашего сайта в Google может занять до одного месяца. Не спасает, даже добавление карты сайта.

В подведении итогов, хочу сказать, что будьте терпеливы и продолжайте пополнять свой сайт интересной и нужной информацией. Работайте на получение ценных и качественных ссылок с уважаемых порталов и Google, непременно, воздаст вам за это!
Статья предоставлена сервисом по анализу сайта и рекомендуется к прочтению вебмастерам и оптимизаторам.

Автор статьи: неизвестный | Дата публикации: 15:26 14.12.2016 Armymails.Ru




Отзывы и комментарии
Ваше имя (псевдоним):
Проверка на спам:

Введите символы с картинки:



Нужно ли смотреть «дареному коню» в зубы?

Нужно ли смотреть «дареному коню» в зубы?


Мало кто может поспорить с тем, что «дарёному коню в зубы не смотрят». Хотя бы потому, что не столько, в принципе, важен сам подарок, сколько внимание. Важно то, что о нас помнят. И б...


Стоит ли надеяться северянам на компенсацию их расходов на проезд к местам отдыха?

Стоит ли надеяться северянам на компенсацию и...


И вот обрадовали всех нас. Говорят, днями посовещались конституционные судьи между собой, сверили правильность сделанных выводов с Основным законом страны и огласили на всю Россию-матушку —...


Есть ли в России реабилитация после заключения? Часть 2

Есть ли в России реабилитация после заключени...


Многое зависит от личности человека, организующего центр реабилитации заключённых. Иногда — от страны или региона, где функционирует подобная организация. Вот самые успешные примеры в Европ...


Какие бывают шейкеры

Какие бывают шейкеры


ШейкерыШейкер (от англ. shake — трясти) — прибор для изготовления напитков и коктейлей методом встряхивания.Чаще всего шейкер на 75% наполнен льдом. В основном шейкеры изготавливаются из металла, но е...


Что такое РАФ? Часть вторая

Что такое РАФ? Часть вторая


Будущие городские партизаны начинали свой нелегкий путь в антифашистских организациях. Они еще верили в то, что можно просто опубликовать фамилии бывших палачей, стоящих у власти в стране, для того, ...


Поздравления на день рождения, конечно, должны быть интересными

Поздравления на день рождения, конечно, должн...


Поздравления с днем рожденья, конечно, получать всем очень приятно. Человек получает истинное удовольствие, когда его расхваливают, когда стараются угодить, особенно если это день его рождения. В таки...


Читаемые

Боли внизу живота у женщин

Болезненные ощущения внизу живота – самая распространенная причина жалоб у женщин. Причины и проявления симптомов могут радикально разниться, поскольку множество органов расположено в брюшной полости,...

Триллер «Шестое чувство». Есть ли лекарство от кош

Самый натуральный индус М. Найт Шьямалан, уроженец страны слонов и чая, не снял на родине ни одного фильма. Даже его дебютный проект, драма «Яростная молитва» (1992), хоть и укомплектована...

Чабрец, он же тимьян. Почему на Руси его считали л

Чабрец (тимьян, богородничная трава, чабер, чепчик) хорошо известен во многих странах, где его применяют и как лекарственное средство, и как ароматную приправу к блюдам. Кроме того, чабрец используют ...

Как художник Поль Сезанн, не желая того, стал осно

В восьмидесятые годы XIX века жизнь Поля Сезанна протекала неспешно вдали от Парижа в городке Экс-ан-Прованс. Получив в 1886 году, после смерти отца, большое состояние, художник всецело посвятил себя ...

Акупунктура

Акупунктура – это компонент традиционной китайской медицины, которая признана во всем мире благодаря своей эффективности в лечении большого числа болезней. С помощью нее можно вылечить практически все...

Что такое капучино?

Нет никакого сомнения, что капучино придумали итальянские монахи-капуцины. В средние века черный кофе был под запретом у католической церкви и считался дьявольским напитком, так как придавал бодрость ...

KiD CuD - Erase Me: живое выступление на TV

Про "Man on the Moon II: The Legend of Mr. Rager" (тобишь второй альбом KiD CuDi) до выступления Cudi на позднем шоу Дэвида Леттермана говорилось еще мало, но предпосылки последующих появлен...

Неаполитанский мастиф: особенности породы

Наверное, во всем мире не существует ни одного человека, который бы спокойно отреагировал на появление перед ним мастино-наполетано. Этот могучий и серьезный пес, который выглядит настоящим Цербером, ...

Как успешно подготовиться к зачёту?

     Подготовка к зачётам – дело, порой, непростое. Ингода она сопоставима с подготовкой к экзаменам в период сессии, если преподаватели отличаются крайне высокой требовательностью...

Итальянское постельное белье – наполняем душу крас

Италия не терпит занудства. Здесь жизнь бьет ключом через край всех древнеримских фонтанов. Здесь красоток провожают бесстыжими глазами и цоканьем смуглые испанцы. Здесь постельное белье сушат прямо н...

О портале:

Наш интернет-портал является ресурсом, который включает в себя полный каталог полезных и отличных статей. Каждый посетитель найдет для себя что-нибудь полезное. Адаптированный дизайн позволяет вам максимально быстро находить необходимую информацию. Самые разнообразные тематические статьи дают возможность вам совершенствоваться в той или иной сфере. Быть более начитанным и грамотным. Современный дизайн сайта позволяет просматривать статьи на всех электронных устройствах. Теперь отыскать подходящую информацию стало просто.

Мы собрали для вас полезные и увлекательные статьи. На нашем портале вы найдете ответы на интересующие вас вопросы. Стандартная система поиска позволяет вам стремительно отыскать нужную информацию. Адаптированный дизайн позволяет вам просматривать информацию на абсолютно любых гаджетах. Отныне, поиск необходимой информации будет занимать у вас секунды.