Карты сайта, написанные на языке XML - это самый легкий путь для веб-мастеров показать поисковым систем страницы на сайте, которые могут быть обработаны роботами поисковых систем. Обычная карта сайта, написанная на языке XML, содержит все единые указатели ресурсов, вместе с информацией о том, когда они были последний раз обновлены, как часто они обычно изменяются, и насколько они важны по отношению к другим страницам сайта. Это помогает поисковым системам обрабатывать ваш сайт более разумно.

В ноябре 2006 года Google, Yahoo! и MSN объединили усилия для поддержания нового стандарта, применяемого для карт сайтов. Он называется Sitemaps 0.90. Когда веб-мастера следуют указаниям протокола, они могут лично убедиться, что их сайты полностью и разумно проиндексированы во всех основных поисковых системах (заметный шаг вперед). Эта статья особенно важна для всех тех страниц, которые плохо или недостаточно ранжированы.

Официальный сайт совместного предприятия находится по адресу sitemaps.org. Он содержит очень много информации о новом стандарте и его синтаксисе. То, что любой сайт постоянно не может сделать – это правильно объяснить, как настроить карту вашего сайта под большую тройку поисковых систем! Форма, представленная на следующем сайте (http://search-engine-url/ping?sitemap=your sitemap_url), в настоящее время не работает ни на одной из этих поисковых систем. Пока это так, в этой статье вашему вниманию будут представлены инструкции как: a Создать карту сайта.
b Утвердить карту сайта на каждой из трех основных поисковых систем… Создание карты сайта.

Некоторые хостинг-провайдеры (например, 1 и 1) предоставляют сервисные программы, получаемые посредством панели управления сети, для того чтобы создать карту сайта. Поэтому для начала вам всегда нужно проверять вашего провайдера. Если такой вид услуг недоступен, тогда посетите сайт xml-sitemaps.com и введите единый указатель ресурсов вашего сайта в генераторное поле. Скопируйте в буфер и затем вставьте полученную карту сайта в блокнот, затем сохраните и загрузите ее на ваш сайт под именем sitemap.xml. Если вы хотите утвердить карту сайта, написанную на языке XML, перед тем, как загружать ее в поисковые системы (полезно, если вы сделали вручную какие-либо поправки), то обратите внимание на контрольное устройство карт сайта, написанных на языке XML (расположенный на этом же сайте). Туда вы можете поместить единый указатель ресурсов вашей карты сайта и проверить ее в соответствии со стандартом.

Утверждение карты сайта в MSN


MSN все еще пытается разработать формальный интерфейс для представления карт сайтов (также как в июле 2007 года). Для того чтобы быть в курсе дел, пожалуйста, посещайте (время от времени) официальный онлайн поиск блогов поисковой системы MSN, где можно с легкостью найти будущие объявления. Пока MSN пытается разработать интерфейс, вы можете воспользоваться лазейкой, через которую можно утвердить карту вашего сайта в поисковом индексе системы MSN, а именно на сайте moreover.com! Вы должны ввести следующий адрес в поле для поиска единого указателя ресурсов вашего браузера (http://api.moreover.com/ping?u=http://yourdomain.com/yoursitemap.xml).

С февраля 2005 года сайт moreover.com был официальным провайдером по передаче технологии RSS на портал myMSN (смотрите пресс-релиз). И проверенный источник информирует, что утверждение на сайте moreover.com способствует более быстрой обработке спайдерами поисковой системы MSN страниц вашего сайта. Это может быть сделано в пределах 2-3 недель.

Заметьте, что, пока MSN не поддерживает прямого утверждения, эта поисковая система советует на своем блоге, что вы должны добавить ссылку на карту вашего сайта в файл robots.txt (что-то в наши дни поддерживается sitemaps.org). Например:

User-agent: *
Sitemap: http://www.yourdomain.com/sitemap.xml
Disallow: /cgi-bin/

Это подскажет MSN (и всем другим поисковым системам), что они должны обрабатывать файл карты вашего сайта, но не должны трогать директорию cgi-bin. Для получения большего количества информации по поводу, как применять файл robots.txt (в корень веб-сервера вашего сайта), пожалуйста, посетите сайт http://www.robotstxt.org.

Утверждение карты сайта в Google


Google первее всех поисковых систем разработал XML-схему для карт сайтов и создал портал, посвященный веб-мастерам, откуда вы можете утвердить карту вашего сайта http://www.google.com/webmasters. Во-первых, вы должны перечислить Google все сайты, которые вы имеете, затем подтвердить, что вы действительно являетесь их владельцем. Подтверждение осуществляется путем добавления мета-тега между заголовочными тегами на основной странице вашего сайта. Синтаксис для этого тега следующий: полную инструкцию, как это сделать, вы найдете на сайте поисковой системы Google.

Утверждение карты сайта в Yahoo!

Yahoo! использует практически такой же подход, что и Google. Опять-таки, Yahoo! предлагает услуги, посвященные веб-мастерам (они называются Yahoo! Site Explorer), и процедуру по подтверждению того, что именно вы являетесь владельцем сайта. Сначала зайдите на сайт http://siteexplorer.search.yahoo.com. Добавьте сайт. Затем кликните мышью на кнопку, которая осуществит подтверждение.

Затем вы сможете скачать верификационный ключ в виде html-файла, который вам нужно будет загрузить в корневой каталог вашего веб-сервера. Затем вы можете вернуться на Site Explorer и дать добро Yahoo! на осуществление аутентификации. Этот процесс может занять до 24 часов. В то же самое время вы также можете добавить карту вашего сайта, кликнув на соответствующую кнопку и затем добавив карту сайта как загрузку.

Утверждение карты сайта в Ask

Поисковая система Ask придерживается самого простого метода, чем три предыдущих поисковых системы. Для того чтобы утвердить карту вашего сайта, вам просто нужно ввести утилиту ping единого указателя ресурсов вместе с тем единым указателем ресурсов, в котором находится карта вашего сайта http://submissions.ask.com/ping?sitemap=http%3A//www.yourdomain.com/sitemap.xml. После нажатия на кнопку «Назад», вы получите обнадеживающее уведомление от поисковой системы Ask о том, что она приняла ваше предложение. Все предельно понятно!