Во все времена любому web мастеру или SEO оптимизатору хотелось, чтобы поисковые системы как можно быстрее индексировали сайты. Конечно-же особое внимание при поисковой оптимизации и продвижении русскоязычных сайтов уделяется поисковой системе Яндекс.

До недавнего времени приходилось ждать от  двух недель до двух, а то и больше, месяцев до полной индексации ресурса Яндексом. С недавних пор ситуация кардинально изменилась. Поисковая система Яндекс, поменяла алгоритм ранжирования сайтов, а именно к индексации принимаются только качественные страницы сайта. Также стали гораздо жестче применяться санкции на вылет “мусорных” страниц и сайтов, всевозможных дорвеев и т.д.

Одновременно с этим появился “быстрый робот” для индексации сайтов. Теперь с помощью сервиса для web мастера, который бесплатно предоставляется Яндексов, можно значительно ускорить процесс индексации ресурса. Для этого необходимо создать карту сайта в формате xml - sitemap.xml или тестовом формате - sitemap.txt, далее закачать карту в корневую директорию на сервер и представить Яндексу данную страницу через сервис web мастера.

Правильно составленная карта обрабатывается Яндексом уже на второй-третий день, после ее подачи.

Как правильно составить карту сайта?

Все предельно просто. Даже если вы не знаете, что такое формат xml никаких трудностей не возникнет. Заходите по этой ссылке: http://www.seolib.ru/script/mapgen/ , вводите адрес вашего сайта в окне для ввода, выбираете частоту обновлений сайта и жмете сгенерировать. Примерно через 1 минуту вы получаете готовую карту сайта в формате xml, которая одинаково хорошо подойдет, как для Яндекса, так и для Гугла.

Для составления карты в текстовом формате хорошо подойдет редактор - блокнот. Вам необходимо перечислить все страницы вашего сайта, по одной в троке, и сохранить данную страницу в кодировке UTF-8 под именем sitemap.txt.

Вот фрагмент карты sitemap.txt:
http://mysait.ru/pay.html
http://mysait.ru/gorschok.html
http://mysait.ru/price.html
http://mysait.ru/otpravka.html
http://mysait.ru/svadba.html
http://mysait.ru/price_ekvador.html
и так далее.

Не должно быть: пустых строк, отступов от верхнего и нижнего краев. Также в карте сайта должны присутствовать страницы, которые относятся только к доменному имени, для которого составляется карта:
http://mysait.ru/pay.html
http://tvoisait.ru/gorschok.html - не верно не относиться к домену mysait.ru
http://mysait.ru/price.html

Далее закачиваем карту к себе на сервер и представляем ее Яндексу. Не возбраняется, если вы будете составлять несколько карт, для каждого раздела свою и представлять их поисковику. В этом случае карту надо закачивать в ту-же папку, в которой размещен на сервере раздел. Соответственно и путь для карты будет выглядеть примерно так: http://mysait.ru/папка с разделом/sitemap.txt

Для тех кто не знает, что такое сервис web мастера в Яндексе

Очень хорошая служба. С ее помощью вы будете знать сколько страниц у вас проиндексировано, сколько Яндекс увидел внешних и внутренних ссылок на ваш ресурс, ошибки на страницах, неработающие ссылки и др.

Чтобы воспользоваться сервисом, необходимо зарегистрировать на Яндексе почтовый ящик и после этого авторизоваться в сервисе веб мастера. Логин и пароль от почтового ящика одновременно являются данными для авторизации на сервисе.

После того, как у вас готов почтовый ящик заходим на www.yandex.ru и далее по ссылке “Все службы”

Далее внизу ищем раздел “Вебмастеру” и в нем заходим по ссылке “добавить сайт”

В появившемся окне заходим по ссылке “Мои сайты”

Перед вами откроется окно, где надо ввести логин и пароль от своего почтового ящика, который вы зарегистрировали в Яндексе.

Как только вы войдете в персональную зону, то можете спокойно добавлять сайты и страницы

Вот так будет выглядеть страница для каждого добавленного сайта.

В разделе “Файлы Sitemap” вы будете добавлять карту сайта. Зайдите по ссылке “Добавить?” и, в открывшемся окне, введите путь до вашей карты вида: http://www.mysait.ru/sitemap.txt (или sitemap.xml). Примерно секунд через 5-15 появится сообщение, что файл добавлен.

Покажу результат обработки карты одного из моих сайтов.

Желаю удачи и быстрой индексации сайтов.

источник