Файл Sitemap XML (карта сайта)

Тег <urlset>

Обязательный тег, являющийся общим контейнером, указывающим на применяемый в файле стандарт с помощью атрибута xmlns.

<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
...
</urlset>

Тег <url>

Обязательный тег, являющийся контейнером для остальных тегов, относящихся к одному URL-адресу. Не имеет атрибутов.

<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
  <url>
    ...
  </url>
</urlset>

Тег <loc>

Обязательный тег, содержащий полный (с указанием протокола) URL-адрес страницы сайта. Не имеет атрибутов.

<url>
   <loc>http://site.net</loc>
</url>

При заполнении тега loc придерживайтесь следующих правил:

• указывайте URL-адреса только главного зеркала сайта,
• не допускайте URL-адресов страниц с дублируемой информацией – в таком случае указывайте только канонический URL,
• не допускайте в URL-адресах наличия идентификаторов, не влияющих на содержание страницы.

Тег <lastmod>

Необязательный тег, содержащий информацию о дате и (или) времени последнего изменения контента страницы в формате W3C Datetime. Допускается указывать только дату в формате ГГГГ-ММ-ДД.

<url>
    <loc>http://site.net</loc>
    <lastmod>2005-01-01</lastmod>
</url>

Следует отметить, что значение этого тега поисковые роботы особенно принимают во внимание: оно позволяет быстро определить страницы для очередного сканирования, не теряя время на оставшиеся неизменными с момента последнего сканирования страницы.

Тег <changefreq>

Необязательный тег, содержащий информацию о приблизительной частоте обновления контента страницы в виде следующих допустимых значений:

• always – обновление при каждом обращении к странице,
• hourly – обновление раз в час,
• daily – ежесуточное обновление,
• weekly – еженедельное обновление,
• monthly – ежемесячное обновление,
• yearly – ежегодное обновление,
• never – не обновляется.

  <url>
   <loc>http://site.net</loc>
   <changefreq>weekly</changefreq>
</url>

Данная информация носит рекомендательный характер для роботов и они могут её игнорировать.

Тег <priority>

Необязательный тег, определяющий важность определенных страниц относительно других страниц в пределах сайта. Приоритет выражается в числах от 0.1 (минимальный) до 1.0 (максимальный).

<url>
	<loc>http://site.net</loc>
	<priority>0.5</priority>
</url>

Рекомендации по применению тега priority:

• если все страницы, указанные в карте сайта, желательны для попадания в индекс, а очередность их сканирования не важна, то можно не указывать данный тег,
• если определенную страницу (страницы) желательно сканировать раньше других, то следует установить для неё соответствующий приоритет,
• высшее значение тега не гарантирует попадания (или непопадания) страницы в индекс поисковой системы.

Ручной способ

Создать Sitemap XML вручную достаточно просто и целесообразно в случе, если карта сайта будет содержать список из небольшого количества страниц, обновление содержания которых происходит достаточно редко. Следует учесть, что если контент сайта обновляется регулярно, то в файл придется также регулярно вносить изменения самостоятельно, а это очень неудобно даже для небольших сайтов (5-10 страниц) и практически невозможно для крупных сайтов (от 50 страниц).

Как создать файл самостоятельно?

Предположим что у нас есть сайт site.net, у которого есть страница «Контакты» (site.net/kontakty) и «Услуги» (site.net/uslugi).

С этими знаниями мы уже можем создать простейшую карту сайта, понятную поисковым роботам:

1. Создаем текстовый файл sitemap.txt и изменяем расширение файла на .xml.
2. Открываем файл и прописываем тип файла и кодировку:

   <?xml version="1.0" encoding="UTF-8"?>

3. Ниже прописываем тег urlset, в качестве атрибута тега указываем применяемый стандарт:

   <?xml version="1.0" encoding="UTF-8"?>
   <urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
   </urlset>

4. Теперь прописываем тег url и указываем в нем тег loc, содержащий абсолютный URL главной страницы:

   <?xml version="1.0" encoding="UTF-8"?>
   <urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
    <url>
     <loc>http://site.net</loc>
    </url>
   </urlset>

   5. Теперь дополняем список информацией об остальных страницах:

   <?xml version="1.0" encoding="UTF-8"?>
   <urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
    <url>
     <loc>http://site.net</loc>
    </url>
    <url>
     <loc>http://site.net/uslugi</loc>
    </url>
    <url>
     <loc>http://site.net/kontakty</loc>
    </url>
   </urlset>

   Простейшая карта сайта со списком URL-адресов сайта, необходимых для индексации, создана. Такой вариант Sitemap будет нуждаться в обновлении только в случае увеличения количества страниц сайта.

5. Теперь применим необязательные теги стандарта. Допустим, что мы располагаем информацией о том, как часто будут вноситься изменения на сайте:
   • главная страница будет меняться не чаще 1 раза в год,
   • страница Контакты будет меняться не чаще 1 раза в месяц,
   • страница Услуги будет меняться не чаще 1 раза в неделю.
6. Мы можем указать поисковым роботам о возможной частоте обновлений, чтобы роботы могли посещать страницы с необходимой частотой. Для этого в каждом теге url указываем тег changefreq с нужными значениями:

   <?xml version="1.0" encoding="UTF-8"?>
   <urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
    <url>
     <loc>http://site.net</loc>
     <changefreq>yearly</changefreq>
    </url>
    <url>
     <loc>http://site.net/uslugi</loc>
     <changefreq>weekly</changefreq>
    </url>
    <url>
     <loc>http://site.net/kontakty</loc>
     <changefreq>monthly</changefreq>
    </url>
   </urlset>

7. Мы также знаем, что страницу «Услуги» мы желаем увидеть в результатах поиска раньше, чем другие страницы. Мы можем сообщить об этом роботам с помощью тега priority:

   <?xml version="1.0" encoding="UTF-8"?>
   <urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
    <url>
     <loc>http://site.net</loc>
     <changefreq>yearly</changefreq>
     <priority>0.5</priority>
    </url>
    <url>
     <loc>http://site.net/uslugi</loc>
     <changefreq>weekly</changefreq>
     <priority>1.0</priority>
    </url>
    <url>
     <loc>http://site.net/kontakty</loc>
     <changefreq>monthly</changefreq>
     <priority>0.5</priority>
    </url>
   </urlset>

8. После внесения изменений на страницах, мы также можем указать на это поисковым роботам, прописывая дату обновления каждой страницы с помощью тега lastmod:

   <?xml version="1.0" encoding="UTF-8"?>
   <urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
    <url>
     <loc>http://site.net</loc>
     <lastmod>2005-01-01</lastmod>
     <changefreq>yearly</changefreq>
     <priority>0.5</priority>
    </url>
    <url>
     <loc>http://site.net/uslugi</loc>
     <lastmod>2005-01-01</lastmod>
     <changefreq>weekly</changefreq>
     <priority>1.0</priority>
    </url>
    <url>
     <loc>http://site.net/kontakty</loc>
     <lastmod>2005-01-01</lastmod>
     <changefreq>monthly</changefreq>
     <priority>0.5</priority>
    </url>
   </urlset>

Мы разобрали ручной процесс создания и заполнения файла Sitemap в качестве ознакомления, однако на практике такой способ не применяется вовсе. Давайте рассмотрим более актуальные способы создания карты сайта в формате XML: онлайн-генераторы и программы.

Онлайн-генераторы

Онлайн-генераторы – это веб-сервисы, способные создавать карту сайта, полностью автоматизируя процесс ручного составления.

Существует много сервисов, предлагающих создание файла Sitemap XML в режиме онлайн с небольшими ограничениями бесплатно, или без ограничений за небольшую плату. При этом вы сможете выбрать, какую информацию следует размещать в XML-файле карты сайта. Вот список наиболее популярных сервисов:

• www.mysitemapgenerator.com
• sitemapgenerator.ru
• www.xml-sitemaps.com

Все указанные сервисы идентичны и без проблем создают Sitemap XML онлайн. Это удобно, однако в действительности данные сервисы не более чем автоматизируют ручной труд. Для сайта с небольшим числом статических (не обновляемых) страниц этого будет достаточно: создал, скачал, разместил на сайте и дал знать об этом поисковым системам. Однако если сайт имеет большое количество как обновляемых, так и статических страниц, а также регулярно пополняется новыми страницами – что делать в таком случае? Генерировать файл с помощью сервиса при каждом добавлении и обновлении страниц? Это будет, мягко говоря, не удобно. А если речь идет о тысячах страниц? Решить такую задачу помогут серверные программы для создания карты сайта.

С помощью программ

Использование специальных программ, установленных в серверной части сайта, позволяет не только автоматически создавать файл Sitemap в формате XML, но и автоматически обновлять его при:

• изменении существующих страниц,
• появлении новых страниц,
• удалении страниц.

Как создать файл Sitemap автоматически?

В настоящее время подавляющее большинство сайтов базируется на системах управления контентом (CMS), для наиболее популярных из которых не составит труда найти необходимое стороннее расширение (программу), позволяющее автоматизировать процесс создания и обновления XML карты сайта:

• Google XML Sitemaps – плагин для WordPress
• OSMap – компонент для Joomla
• XML sitemap – модуль для Drupal

При использовании расширений для CMS, способных создавать динамический (обновляемый на сервере) файл Sitemap XML, крайне рекомендуется разобраться в их настройках и верно настроить их функционирование, т. к. расширение не может читать мысли веб-мастера и способно добавить (или не добавить) в файл нежелательные (или желательные) к индексированию URL-адреса, а так же задать неверную частоту обновления и приоритеты для страниц.

Где взять файл Sitemap для самописной CMS?

Если сайт построен на самописной СMS, или для CMS не предусмотрена программа для создания карты сайта, то следует обратиться к веб-разработчику и поставить соответствующую задачу.

Пример для одностраничного сайта

Ниже представлен пример карты сайта в XML-формате для одностраничного сайта (только один URL-адрес в списке) с использованием всех стандартных тегов.

<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">

 <url>
  <loc>http://site.net</loc>
  <lastmod>2005-01-01</lastmod>
  <changefreq>monthly</changefreq>
  <priority>0.5</priority>
 </url>

</urlset>

<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9"><!--Открывает список URL-адресов-->

 <url><!--Открывает список значений для URL-->
  <loc>http://site.net</loc><!--URL-адрес страницы-->
  <lastmod>2005-01-01</lastmod><!--Дата последнего обновления-->
  <changefreq>monthly</changefreq><!--Регулярность обновлений (в данном случае ежемесячно)-->
  <priority>0.5</priority><!--Приоритет URL (в данном случае не актуален, т. к. страница только одна)-->
 </url><!--Закрывает список значений для URL-->

</urlset><!--Закрывает список-->

Пример для многостраничного сайта

Теперь рассмотрим пример карты сайта в XML-формате для ресурса из нескольких страниц:

<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">

 <url>
  <loc>http://site.net</loc>
  <lastmod>2005-01-01</lastmod>
  <changefreq>monthly</changefreq>
  <priority>0.5</priority>
 </url>
 
 <url>
  <loc>http://site.net/uslugi</loc>
  <lastmod>2005-01-01</lastmod>
  <changefreq>weekly</changefreq>
  <priority>1.0</priority>
 </url>
 
 <url>
  <loc>http://site.net/kontakty</loc>
  <lastmod>2005-01-01</lastmod>
  <changefreq>yearly</changefreq>
  <priority>0.5</priority>
 </url>

</urlset>

<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9"><!--Открывает список URL-адресов-->

 <url><!--Открывает список значений для URL-->
  <loc>http://site.net</loc><!--URL-адрес страницы-->
  <lastmod>2005-01-01</lastmod><!--Дата последнего обновления-->
  <changefreq>monthly</changefreq><!--Регулярность обновлений (ежемесячно)-->
  <priority>0.5</priority><!--Приоритет перед другими страницами =0.5-->
 </url><!--Закрывает список значений для URL-->
 
  <url><!--Открывает список значений для URL-->
  <loc>http://site.net/uslugi</loc><!--URL-адрес страницы-->
  <lastmod>2005-01-01</lastmod><!--Дата последнего обновления-->
  <changefreq>weekly</changefreq><!--Регулярность обновлений (еженедельно)-->
  <priority>1.0</priority><!--Приоритет перед другими страницами =1.0 (высший)-->
 </url><!--Закрывает список значений для URL-->
 
 <url><!--Открывает список значений для URL-->
  <loc>http://site.net/kontakty</loc><!--URL-адрес страницы-->
  <lastmod>2005-01-01</lastmod><!--Дата последнего обновления-->
  <changefreq>yearly</changefreq><!--Регулярность обновлений (ежегодно)-->
  <priority>0.5</priority><!--Приоритет перед другими страницами =0.5-->
 </url><!--Закрывает список значений для URL-->

</urlset><!--Закрывает список URL-адресов-->

Зачем Google нужна карта вашего сайта?

Файл Sitemap позволяет сообщить Google и другим поисковым системам о том, как организован контент на вашем сайте. Поисковые роботы (например, Googlebot) просматривают этот файл, чтобы более точно индексировать ваши страницы.

Справка Google

Это стандартное описание значимости файлов Sitemap для поисковых систем. Однако, Google, как и Яндекс, не гарантирует, что все URL-адреса, указанные в карте сайта, будут проиндексированы:

Даже если вы создали файл Sitemap, это не гарантирует, что Google будет сканировать и индексировать все ваши страницы, так как эти процедуры выполняются при помощи сложных алгоритмов. В большинстве случаев эти файлы приносят пользу и не приводят к ошибкам.

Справка Google

Какие данные распознаёт Google?

Не удивительно, что роботы Google способны корректно распознавать все стандартные теги:

Файлы Sitemap также можно использовать для предоставления системе Google метаданных о ваших страницах. Это такие сведения, как дата последних изменений, периодичность обновления контента и важность страницы в сравнении с другими URL на сайте.

Справка Google

Иными словами, робот Googlebot без проблем поймет следующее содержание:

<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
 <url>
  <loc>http://site.net</loc>
  <lastmod>2005-01-01</lastmod>
  <changefreq>yearly</changefreq>
  <priority>0.5</priority>
 </url>
</urlset>

Однако, в отличие от других роботов поисковых систем, роботы Google способны распознавать дополнительные данные о других типах контента:

Файлы Sitemap также можно использовать для предоставления системе Google метаданных о типах контента, в том числе о видео и изображениях.

Справка Google

Это значит, что вы можете помочь Google упорядочить процесс индексации не только URL-адресов веб-страниц, но и медиа-контента. Робот Googlebot способен различать дополнительные теги, предоставляющую данную информацию:

<?xml version="1.0" encoding="UTF-8"?>
<urlset
xmlns="http://www.sitemaps.org/schemas/sitemap/0.9"
xmlns:image="http://www.google.com/schemas/sitemap-image/1.1"
xmlns:video="http://www.google.com/schemas/sitemap-video/1.1"
>
<url>
 <loc>http://site.net</loc>
 <image:image>
  <image:loc>http://site.net/image.jpg</image:loc>
  <image:caption>Подпись к изображению</image:caption>
 </image:image>
 
 <video:video>
  <video:content_loc>http://site.net/video-1.flv</video:content_loc>
  <video:player_loc allow_embed="yes" autoplay="ap=1">
   http://site.net/videoplayer.swf?video=1
  </video:player_loc>
  <video:thumbnail_loc>http:/site.net/thumbs/1.jpg</video:thumbnail_loc>
  <video:title>Название видео</video:title>
  <video:description>Краткое описание видео</video:description>
 </video:video>
 
<lastmod>2005-01-01</lastmod>
<changefreq>monthly</changefreq>
<priority>0.5</priority>

</url>
</urlset>

Робот Яндекса проигнорирует нестандартные теги из данного примера, а робот Google учтет их при сканировании и индексировании.

Какие форматы карт сайта поддерживает Google?

Google поддерживает файлы Sitemap в форматах XML или TXT. Кроме того, Google может использовать URL-адрес фидов RSS или Atom:

Если у вас есть блог с фидом RSS или Atom, можно отправить URL этого фида в качестве источника файла Sitemap. Большинство сервисов для ведения блогов позволяют создать фид, но нужно учитывать, что в нем может быть представлена информация только о последних URL.

Справка Google

Как создать Google Sitemap?

В большинстве случаев не требуется создавать отдельные карты сайта для разных поисковых систем: при их сканировании поисковые роботы примут к сведению понятную им информацию. О том, как создать файл Sitemap, понятный всем поисковым системам, смотрите выше по тексту. После этого при необходимости расширьте данный файл дополнительной информацией с помощью перечисленных ниже тегов, понятных роботу googlebot.

Как добавить Sitemap в Google?

Существует 2 способа указать поисковой системе Google на карту сайта:

1. С помощью файла robots.txt
   

   Для этого необходимо указать в файле robots.txt ссылку на файл. Подходит для указания на карту сайта роботам всех поисковых систем.

2. С помощью сервиса Google Search Console
   

   Актуально только для поисковой системы Google.

Карта сайта для изображений

Для изображений можно создать отдельный файл Sitemap или обновить уже существующий.

Справка Google

Для указания используемого пространства имен в теге urlset указывается атрибут xmlns:image со значением http://www.google.com/schemas/sitemap-image/1.1.

<?xml version="1.0" encoding="UTF-8"?>
<urlset 
xmlns="http://www.sitemaps.org/schemas/sitemap/0.9"
xmlns:image="http://www.google.com/schemas/sitemap-image/1.1"
>
<url>
 <loc>http://site.net</loc>
 <image:image>
  <image:loc>http://site.net/image.jpg</image:loc>
  <image:title>Название изображения</image:title>
  <image:caption>Подпись к изображению</image:caption>
  <image:geo_location>Геолокация объекта изображения</image:geo_location>
 </image:image>
 <lastmod>2005-01-01</lastmod>
 <changefreq>monthly</changefreq>
 <priority>0.8</priority>
</url>
</urlset>

Карта сайта для видео

Предоставляя роботу Google структурированную информацию о видеороликах на сайте, мы способствуем скорейшему их индексированию и лучшему отображению на странице результатов поисковой выдачи:

Отправив в Google файл Sitemap для видео, вы сделаете URL своих роликов доступными для поиска в Google Видео.

Справка Google

Вот пример XML-кода карты сайта, содержащего все возможные теги для передачи данных о видеороликах, используемые Google:

<?xml version="1.0" encoding="UTF-8"?>
<urlset
xmlns="http://www.sitemaps.org/schemas/sitemap/0.9"
xmlns:video="http://www.google.com/schemas/sitemap-video/1.1"
>
<url> 
 <loc>http://site.net/page.html</loc>
 <video:video>
  <video:thumbnail_loc>http://site.net/thumbs/1.jpg</video:thumbnail_loc>
  <video:title>Video Title</video:title>
  <video:description>Описание видеоролика</video:description>
  <video:content_loc>http://site.net/video1.flv</video:content_loc>
  <video:player_loc allow_embed="yes" autoplay="ap=1">
   http://site.net/videoplayer.swf?video=123</video:player_loc>
  <video:duration>600</video:duration>
  <video:expiration_date>2009-11-05T19:20:30+08:00</video:expiration_date>
  <video:rating>4.2<video:rating>
  <video:view_count>12345</video:view_count>   
  <video:publication_date>2007-11-05T19:20:30+08:00</video:publication_date>
  <video:family_friendly>yes</video:family_friendly>  
  <video:restriction relationship="allow">IE GB US CA</video:restriction>
  <video:gallery_loc title="Поисковая оптимизация">http://seo.site.net</video:gallery_loc>
  <video:price currency="RUB">1.99</video:price>
  <video:requires_subscription>yes</video:requires_subscription>
  <video:uploader info="http://site.net/users/vpupkin">
   Vasya Pupkin
  </video:uploader>
  <video:live>no</video:live>
 </video:video> 
</url> 
</urlset>

Карта сайта для сервиса «Google Новости»

Роботы Google способны распознавать отдельный синтаксис Sitemap XML, предназначенный для сайтов, включенных в сервис Google Новости:

<?xml version="1.0" encoding="UTF-8"?>
<urlset
xmlns="http://www.sitemaps.org/schemas/sitemap/0.9"
xmlns:news="http://www.google.com/schemas/sitemap-news/0.9"
>
<url>
 <loc>http://site.net</novost>
 <news:news>
  <news:publication>
   <news:name>Известия</news:name>
   <news:language>ru</news:language>   
  </news:publication>
  <news:genres>PressRelease, Blog</news:genres>
  <news:publication_date>2005-01-01</news:publication_date> 
  <news:title>Название новости</news:title>  
  <news:keywords>ключ, ключ, ключ</news:keywords> 
  <news:stock_tickers>NASDAQ:AMAT</news:stock_tickers>  
 </news:news>
</url>
</urlset>

Следует учитывать, что данный синтаксис не применяется совместно со стандартным синтаксисом, и его необходимо включать в отдельный XML-файл с картой сайта, предназначенный для поискового робота googlebot-news. Кроме того, существуют отдельные официальные рекомендации по созданию файлов Sitemap для Google Новостей.

Для чего Яндексу нужны файлы Sitemap?

Файл sitemap учитывается при индексировании сайта роботом, однако Яндекс не гарантирует, что все URL, указанные в файле, будут добавлены в поисковый индекс Яндекса.

Яндекс.Помощь

Из данного утверждения можно сделать вывод, что робот Яндекса не обязан индексировать все URL-адреса, указанные в файле карты сайта, но принимает их к сведению.

Обычно робот Яндекса узнает о страницах сайта, переходя по ссылкам со страницы на страницу. В большинстве случаев этого достаточно для полного индексирования сайтов. Однако робот может не найти некоторые страницы или неверно определить их важность: проблемными обычно становятся динамически создаваемые страницы или страницы, на которые можно попасть, только пройдя по длинной цепочке внутренних ссылок. Файл sitemap помогает решить эти проблемы.

Яндекс.Помощь

Иначе говоря, файл с картой сайта способствует скорейшему сканированию страниц сайта роботом Яндекса, а следовательно, и скорейшему их индексированию.

Какие данные Sitemap XML поддерживает Яндекс?

Роботы Яндекса воспринимают только стандартные теги:

Поиск Яндекса не поддерживает передачу информации об изображениях, RSS/Atom-фидов с помощью файла sitemap.

Яндекс.Помощь

Возникает вопрос: нужно ли создавать отдельный файл карты сайта с расширенными данными, например, для Google? И как робот Яндекса воспринимает нестандартные теги?

Вот ответ из службы поддержки Яндекса:

В такой ситуации можно использовать один файл для всех, данные из неподдерживаемых тегов будут проигнорированы нашим роботом.

Платон Щукин

Какие форматы Sitemap поддерживает Яндекс?

Роботы Яндекса обрабатывают 2 формата карты сайта: XML и TXT.

Есть мнение службы поддержки Яндекса относительно использования страницы с картой сайта в формате HTML в качестве альтернативы:

HTML-карта сайта может стать альтернативой XML файлу sitemap, но робот воспринимает её в качестве обычной страницы сайта. Файлы в таком виде не позволяют передавать роботу дополнительные данные (частоту обновления страниц или приоритет при обходе сайта), также такие страницы будут обновляться роботом в соответствии с внутренними политиками обхода, XML же обрабатывается не реже 1 раза в 2 недели.

Платон Щукин

Как создать файл Sitemap для Яндекса?

Исходя из вышесказанного, не следует создавать отдельные карты сайта для роботов разных поисковых систем: каждый из роботов обработает ту информацию, которую способен воспринимать (робот Яндекса примет к сведению только стандартные теги).

Как добавить файл Sitemap в Яндекс?

После того, как файл будет создан, проверен и, если необходимо, откорректирован, на него следует указать Яндексу, чтобы поисковой робот как можно скорее начал его обрабатывать. Существует 2 способа это сделать:

1. с помощью файла robots.txt
   

   Для этого необходимо указать в robots.txt ссылку на файл с картой сайта. Это подходит для указания на файл роботам всех поисковых систем.

2. с помощью сервиса Яндекс.Вебмастер
   

   Актуально только для поисковой системы Яндекс.

Проверка онлайн в Яндекс

Сервис Яндекс.Вебмастер предоставляет разработчикам и оптимизаторам отличный и удобный валидатор Анализатор файлов Sitemap. Он обладает рядом преимуществ и незначительными недостатками.

Проверка онлайн в Google

Google предоставляет возможность проверки файлов Sitemap с помощью инструмента в сервисе Search Console. Данный инструмент имеет ряд недостатков по сравнению со способом проверки от Яндекса при одном явном преимуществе.