Карта сайта – что это такое?
Это файл или страница с перечислением всех страниц сайта, включая его категории и подкатегории. Это своеобразный каталог, в котором содержатся все web-документы интернет-ресурса со ссылками на них.
Если ваш сайт создан не на CMS, имеет незначительное число страниц и малую вложенность, трудностей с попаданием в базу данных поисковых машин возникать не должно. Такому статичному ресурсу можно исключить создание карты из списка обязательных мероприятий по его продвижению.
А вот если вы владелец масштабного информационного портала или магазина онлайн, где вложенность категорий не менее 4-5 уровней, вам необходимо помочь роботам поисковых систем, посещающим гипертекстовые ссылки, разобраться в том, как организован ресурс. Это облегчит и ускорит процесс добавления в базу данных информации о сайте.
Зачем нужна карта сайта и какой отдать предпочтение (XML или HTML)?
Прежде такой документ в формате html предназначался для того, чтобы упростить посетителям поиски ответов на их запросы. Сегодня она особенно необходима для веб-краулеров, чтобы дать им возможность не запутаться в структуре ресурса и облегчить его индексацию, если создать автономную xml-карту не представляется возможным.
Если структура ресурса разработана грамотно, и она удобна для пользователя, такой указатель может и не понадобиться. Все документы, товары и тексты должны быть доступны либо через поиск, либо посредством меню. У пользователя должна иметься возможность найти все необходимое в несколько щелчков мыши самостоятельно.
Владелец сайта обязан позаботиться о том, чтобы у потенциального клиента не возникло необходимости использовать для этого специальную карту. Главные категории меню сайта следует вынести в футер в нижней части страницы. Для простых посетителей это упростит навигацию, а сайт скорее попадет в индекс.
Поисковый паук с главной страницы получит урлы на основные навигационные разделы, и они проиндексируются в первых рядах. Оптимально, если посетитель сможет за пару кликов оказаться на любой страничке ресурса. Организация вложенности должна быть ясна и краулерам и живым людям. Чем меньше вложенность, тем лучше, а большую вообще предпочтительно не использовать. Желательно, чтобы она не превышала 3-4 уровня.
Если не следовать этой рекомендации, вы рискуете тем, что страницы будут очень медленно добавляться в поисковую базу. Это чревато тем, что вы так и не увидите пользователей из поиска.
Если вас терзают смутные сомнения на предмет удобства использования вашего сайта напишите нам. Посредством файла sitemap.xml роботы поисковой системы просканируют все внутренние гиперссылки и скорее проиндексирует сайт. Учитывается вложенность, определенные URLы документов и графики. Все это делает процесс попадания в поисковую базу проще.
Файл Sitemap позволяет донести до поисковых машин не только какие странички ресурса необходимо проиндексировать, но и как часто происходит обновление контента, а также какие из документов важнее для индекса. Начнем разбор с формата html, а чуть позже перейдем к xml.
Карта сайта в виде HTML-страницы
Её нужно разместить на отдельной странице и поставить ссылку в нижнем меню сайта, чтобы она была доступна для индексации и на неё можно было перейти. Иерархия страничек ресурса должна отображаться в документе и ясно давать понять, где главные разделы, а где подкатегории.
Не стоит сильно перегружать изображениями данную страницу. Их отсутствие предпочтительнее. Чтобы поисковый робот или пользователь мог быстро зайти в необходимый ему раздел, обязательно поставьте ссылки с разделов карты на внутренние страницы.
Непременно проследите за тем, чтобы она всегда сохраняла актуальность. Отобразите в ней, если добавляете или, напротив, удаляете какие-либо страницы. По возможности сделайте ее обновляемой в автоматическом режиме. На одной страничке лучше располагать не более сотни ссылок, тогда роботу проще будет добавить её в индекс.
Прислушайтесь к этим советам, и карта сайта поможет и индексирующим краулерам, и людям на нем прекрасно ориентироваться.
Карта сайта в виде файла Sitemap.xml
Это файл, который размещается в корень сайта. Он содержит информацию для поисковиков о страницах ресурса. Этот документ необходим, чтобы роботам поисковиков легче было просканировать ваш сайт и добавить его в базу.
В файле robots.txt прописаны инструкции, как нужно проиндексировать ваш сайт. Робот, заходя на ресурс, читает их в первую очередь. Если в файле указано, что у сайта есть карта xml, в которую внесены все внутренние ссылки, робот сразу перейдет на нее. Перед генерацией этого файла нужно решить, какие адреса можно передавать в индекс, а какие не нужно. Не размещайте в нем урлы служебных страниц – таких, как вход в админку сайта или на страницы, где пользователи регистрируются и авторизуются.
Страницы без опубликованных материалов тоже лучше не указывать в Sitemap.xml, пока на них не появится текстовый или графический контент. Допустимо размещать не более пятидесяти тысяч ссылок. Если число страниц превышает это количество, предпочтительно сделать несколько документов. Файл должен иметь Unicode Transformation Format, 8-bit. Как он выглядит, вы сможете увидеть на рисунке.
Чтобы передать данные веб-краулерам из поиска, используются нижеперечисленные теги:
- Элемент с адресом страницы.
- Lastmod — дата последней редакции документа. Сообщает данные роботу, когда страничка видоизменилась. Если это произошло после предыдущего визита, тогда робот обойдет ее снова.
- Changefreq — указание рекомендованной частоты модификации страницы.
- Priority — первенство загрузки документа (от 0.0 до 1.0), Показатель не дает предпочтений при сортировке вебдокументов в выдаче поисковика. Однако он указывает Яндексу и Google, какие документы, на ваш взгляд, важнее для попадания в индекс.
Так, если на домашней странице портала каждый день появляются новости и анонсы публикаций, рекомендуется поставить высшее значение приоритета. Содержимое карты сайта носит собой рекомендательный характер для поискового робота. Параметры индексации Яндекс и Google может не учитывать. Этот факт желательно иметь в виду.
Карта сайта всегда обязана оставаться актуальной. Этот момент необходимо контролировать. Если существует техническая возможность, лучше сделать так, чтобы она обновлялась сама. Если подобная манипуляция невозможна, обязательно добавляйте все «новорожденные» страницы сайта вручную. Или в таком документе вообще будет отсутствовать всякий смысл.
Поисковый робот не будет оповещен о появлении нового контента на сайте. Это сильно задержит индексирование вновь созданных страниц. Соответственно, и «посещалка» на такие веб-документы не будет увеличиваться.
Адрес карты следует сообщить поисковому роботу сразу после её создания. Он прописывается в файле robots.txt, директива sitemap. Карта упрощает задачу роботу и обеспечивается ресурсу попадание в индекс. Почти во всех существующих системах управления контентом xml-карта создается штатными средствами системы.
В «Битрикс» она настраивается в разделе «Сервисы», где нужно войти в соответствующую вкладку и перейти в нужную категорию. В настройках задайте протокол для урлов страниц — http/https. Если ресурс имеет Secure Sockets Layer, выбирайте https. Адреса веб-документов в карте вашего сайта не должны отличаться от основного протокола.
Затем во вкладке «Файлы» отмечаем модули, которые необходимо внести в поисковую базу и разместить в XML файле. Все служебные страницы обязательно нужно убрать из него.
В OpenCart заходим во вкладку «Google Sitemap, активируем модуль, и карта формируется на автомате. И обновляться она будет в таком же режиме, если оставить настройки по умолчанию.
Обычно необходимость настраивать что-то автоматически отсутствует. Для «Вордпресс» тоже есть несколько дополнений, которые мы советуем применять для этой цели. В частности, это могут быть: Google XML Sitemaps, либо Yoast SEO, All in WP SEO. Они инсталлируются также, как и другие в этой системе.
В Joomla рекомендуется использовать дополнения Xmap, OSMap, JL Sitemap. Большей части простых сайтов подойдет бесплатный вариант OSMap. После инсталляции плагина, вы увидите его в главном меню ресурса.
После этого нужно будет перейти в раздел «Компоненты» OSMap и на карте сайта Default кликнуть на иконку в столбике «Edit Links». Тогда плагин просканирует ваш ресурс и сформирует карту.
Если ваш сайт создан на нестандартной системе управления, либо возможность подключения дополнений отсутствует, используйте сторонние сервисы, чтобы создать карту сайта. Их вы легко найдете в Сети.
Как сделать карту на xml-sitemaps.com:
1. Копируем адрес сайта в соответствующее поле. После чего сервис сканирует ресурс.
2. После того, как этот процесс будет завершен, переходим в поле Sitemap Details.
3. Здесь скачиваем созданную карту сайта.
До того, как загрузить веб-документ на сервер, обязательно проверьте и удалите все страницы, которые не нужны для индексирования. Для редактирования такой карты можно использовать Блокнот. Для этого на скачанный файл достаточно нажать правой кнопкой мышки и выбрать «открыть с помощью Блокнота».
Как разместить карты в панелях инструментов для владельцев сайтов?
После того, как карта будет создана, её потребуется загрузить в Вебмастер. В сервисе Яндекса во вкладке Индексирование — Файлы Sitemap нужно будет прописать адрес файла и кликнуть по надписи «Добавить». Обработка документа займет немного времени.
В аналогичном сервисе Google нужно будет проделать все тоже самое, только раздел будет называться Индекс — Файлы Sitemap. Роботу тоже понадобятся какие-то минуты на сканирование. После того, как документ будет обработан, появится статистика индексации по каждой странице. Это позволит отслеживать в поиске их число, а также количество выпавших из него веб-документов.
