Индексация сайта

Как известно, для того, чтобы поисковая система смогла обработать текст страницы и в дальнейшем успешно выдавать определенные страницы сайта по какому-либо запросу, она должна занести их в индекс.

Этим занимают поисковые роботы (crawler). Они обходят определенную страницу сайта по определенному алгоритму. Проиндексировав выбранную страницу, робот выбирает все находящиеся на ней разрешенные для индексации ссылки для последующего просмотра, "продвигаясь" по иерархии сайта и находя другие, еще неизвестные ему веб-сайты.

Таким образом составляется определенный список страниц (причем для одного сайта этот список может быть ограничен). Если страница новая, то добавляет ее в базу. "Старые" страницы, которые он уже индексировал, иногда сравнивает с имеющимся у него в базе и если изменения есть - обновляет. В итоге роботы выкачивают большое количество нового текста, который хранится на серверах поисковика.

Далее в работу включается индексный робот, который обрабатывает весь текст, сортирует и располагает в нужно порядке, т.е. составляет индекс. Это можно сравнить с картотекой, где все упорядоченно и располагается в алфавитном порядке. Найти нужную информацию можно достаточно быстро.

Т.е. если сайта нет в базе поисковой системы (говорят, что сайт не проиндексирован), то, естественно, и в результатах поиска он не будет отображен. А значит и посетителей мы не получим...

Индексация сайта - самый начальный этап в продвижении сайта! В тоже время он достаточно важен. Но его частенько не берут в расчет. Хотя качественно сделанный сайт (СДЛ) это и не должно волновать: при внутренней оптимизации, уникальном контенте и частом обновлении сайт должен (но не обязан) хорошо индексироваться. Обычно о проблемах индексирования говорят создатели сателлитов.

Google
Добавить сайт: http://www.google.ru/addurl
Проверить индексацию: введите в поисковой форме фразу "allinurl:site.ru/ site:site.ru"

Яндекс
Добавить сайт: http://webmaster.yandex.ru
Проверить индексацию: введите в адресную строчку браузера http://yandex.ru/yandsearch?surl=site.ru&pag=u&numdoc=50&rd=0

Рамблер
Добавить сайт: http://www.rambler.ru/doc/add_site.shtml
Проверить индексацию сайта в Рамблере можно, введя в адресную строчку браузера следующее: http://nova.rambler.ru/search?sort=0&filter=site.ru&short=2&limit=50

Добавление сайта в поисковые системы с помощью официальных форм добавления (аддурилок) не является гарантированным и самым быстрым способом попадания попадания в индекс. Есть куда более эффективные методы.

Поэтому планируется написать по этой теме несколько статей, чтобы в полной мере раскрыть тему индексации сайтов. А также хотел бы провести эксперимент с доменом .net.ru, т.к. по своем прошлому опыту знаю, как плохо они индексируются. Опробую определенный "рецепт", который потом можно будет применять для индексации сателлитов.

Постовой:

Блог бомжа из Новосибирска.
Блоггер Rasuvaeff открыл портал Новости Воронежа
Вы строитесь? Используете бетон? Тогда металлическая фибра отлично подойдет в качестве добавки!

• Twit

Подписаться на RSS