Как Google индексирует ваш сайт?

Давайте для начала определимся с основными понятиями, и о том, что мы будем рассматривать в этой статье?

Бот (англ. bot) является частью программного обеспечения поисковой системы, цель которого – найти и пройти по каждой странице вашего сайта, классифицировать ее по определенным признакам, и поместить в MySQL базу Google.

На данный момент Google имеет следующих хорошо известных вам ботов:
1) Adsense Bot
2) Freshbot
3) DeepCrawl

Adsense Bot, как вы могли, наверное, догадаться, используется для вебмастеров, которые имеют рекламные блоки Adsense на своих сайтах. Как только новая страница появляется на вашем сайте, нужный скрипт в пределах кода Adsense посылает сообщение боту -Adsense Bot, и в течение 10-20 минут, он начнет индексировать страницу сайта, для того чтобы показывать наиболее релевантные объявления.

Если вас не интересует Adsense Bot, переходим к следующим, наиболее важным ботам - DeepCrawl и Freshbot.

Freshbot выполняет задачу сканирования наиболее популярных страниц на вашем сайте. Не имеет значение, одна это страница или несколько тысяч. Такие крупные сайты, как DIGG. com и YouTube. com имеют несколько сотен тысяч страниц, которые сканируются каждые пять минут, и все потому, что Google отслеживает сайты с высокой степенью изменений контента. Известно, что эти страницы имеют большое количество частых изменений. Будь Google медлительнее, страницы утратили бы свою актуальность. Обычный сайт с более-менее обновляемым контентом, может рассчитывать на то, что Freshbot посетит его до 14-ти дней, в зависимости от того, как популярны эти страницы.

Что происходит с вашим сайтом, когда его посещает Freshbot?

Он сканирует страницы, начиная с главной и проходит все глубже в ваш сайт. Затем он помещает найденные ссылки в MySQL базу (базу данных). Так что, когда DeepCrawl наведывает ваш сайт, он знает какие ссылки есть на нем.

Примерно раз в месяц, DeepCrawl посещает ваш сайт и переходит по всем ссылкам, которые были найдены Freshbot. Это и есть та причина, почему индексация вашего сайта в Google может занять до одного месяца. Не спасает, даже добавление карты сайта.

В подведении итогов, хочу сказать, что будьте терпеливы и продолжайте пополнять свой сайт интересной и нужной информацией. Работайте на получение ценных и качественных ссылок с уважаемых порталов и Google, непременно, воздаст вам за это!
Статья предоставлена сервисом по анализу сайта и рекомендуется к прочтению вебмастерам и оптимизаторам.
15:26 14.12.2016



Отзывы и комментарии
Ваше имя (псевдоним):
Проверка на спам:

Введите символы с картинки:



На уроках - Интернет: эффективно или нет?

На уроках - Интернет: эффективно или нет?

Время неумолимо ускоряет свой бег. Все торопятся жить. Нужно многое успеть. Для этого нужно многое знать. Нужны общение, информация и быстрота. Чтобы удовлетворять этим требованиям, во всех сферах чел...
Лечение шизофрении

Лечение шизофрении

Шизофрения - серьезное психическое заболевание, которое разрушает сознание человека. Личность больного кардинально меняется - несчастный с головой уходит в мир личных переживаний и теряет контакт с ок...
Египетские женщины глазами россиянина: какие они?

Египетские женщины глазами россиянина: какие они?

Египетские женщины невольно приковывают к себе взгляд иностранцев. Да, наверное, нам намного привычнее иная внешность, чем у египтянок. Судя по описаниям историков, Клеопатра была удивительно красива...
Кто такие кенгуру?

Кто такие кенгуру?

Обитает это животное лишь в одном месте Земного шара, на материке загадок и неожиданностей, в Австралии. Оно не похоже ни на какого другого зверя. Даже о его открытии и названии существует несколько в...
Петр Бойцов: безопасность, власть и время, или Кто построил не воздушные замки в России?

Петр Бойцов: безопасность, власть и время, или Кто п...

Только в России возможно подобное… Мы не знаем биографию этого человека, даже годы рождения и смерти точно неизвестны. Толком неизвестно и отчество. А ведь речь идет о 19−20 веках&hellip...
Как грамотно купить встраиваемую бытовую технику?

Как грамотно купить встраиваемую бытовую технику?

Свой интернет магазин техники на сегодня имеют фактически все центры бытовой техники и крупные фирмы Москвы. Весьма логично, ведь это не только намного увеличивает круг потенциальных клиентов, но и пр...
Читаемые

Культовое кино

У каждого из нас есть собственный список любимых фильмов. Это те фильмы, которые затронули в нас что...

На чем основаны любовные привороты

"Потомственная колдунья приворожит любимого, снимет порчу и сглаз, предскажет будущее". Ка...

Nokia представила дешевую модель телефона с сенсор

Финская компания Nokia представила модель X3 Touch and Type, которая стала первым недорогим устройст...

Как пишутся воспоминания о знаменитостях? С юмором

Писателя Хвостогривова, автора популярных воспоминаний о своих встречах со знаменитыми людьми, трудн...

Дикие кролики

Научная классификация кроликов - Царство: животные, Тип: хордовые, Класс: млекопитающие, Инфракласс:...

«А поговорить?» Мужской и женский языки

Вечное недопонимание между мужчинами и женщинами давно стало не только темой анекдотов, причиной раз...

Кредитные долги: как выжить

В первую очередь разрешите обратиться к цифрам: только в 2014 году (достаточно ещё стабильном году) ...

Кто такие кенгуру?

Обитает это животное лишь в одном месте Земного шара, на материке загадок и неожиданностей, в Австра...

Как работают американские страховые компании? Част

В США жизнь немыслима без различного рода страховок. Имея недвижимость, нужно в обязательном порядке...

Значимость договора для компании

Договора в деловой сфере отличаются от бытовых тем, что обычно обе стороны заинтересованы в заработк...



О портале:

Наш интернет-портал является ресурсом, который включает в себя полный каталог полезных и отличных статей. Каждый посетитель найдет для себя что-нибудь полезное. Адаптированный дизайн позволяет вам максимально быстро находить необходимую информацию. Самые разнообразные тематические статьи дают возможность вам совершенствоваться в той или иной сфере. Быть более начитанным и грамотным. Современный дизайн сайта позволяет просматривать статьи на всех электронных устройствах. Теперь отыскать подходящую информацию стало просто.

Мы собрали для вас полезные и увлекательные статьи. На нашем портале вы найдете ответы на интересующие вас вопросы. Стандартная система поиска позволяет вам стремительно отыскать нужную информацию. Адаптированный дизайн позволяет вам просматривать информацию на абсолютно любых гаджетах. Отныне, поиск необходимой информации будет занимать у вас секунды.