Как создать Sitemap XML для "Яндекса" и Google: пошаговая инструкция. Создание Sitemap Что значит файл sitemap недоступен

Конструктор сайтов – это система из набора инструментов, которая позволяет создавать сайты и администрировать их без каких-либо специализированных знаний. С её помощью Вы сможете выбрать тип будущего сайта (визитка, магазин и т. д.), готовый шаблон дизайна, цветовое оформление и модули, которые будут на нём отображаться. Вам не понадобится годами изучать языки программирования для публикации различных страниц – конструкторы сайтов сделают всю рутинную и сложную работу за Вас.

Что касается удобства использования, то маленькие студии часто пасуют перед конструкторами, поскольку они всегда требуют плату за внесение даже незначительных изменений ресурса. Используя конструктор, Вы сможете по желанию самостоятельно и оперативно вносить поправки, причём совершенно бесплатно!

Рейтинг конструкторов сайтов (TOP10)

Мы подготовили для вас рейтинг лучших бесплатных конструкторов сайтов 2019 года, при это постарались быть максимально объективными и учесть как преимущества, так и недостатки, отсортировав их по важности. Более подробную информацию о каждом из конструкторов, вы сможете найти в обзорах доступных для каждого и в них же ознакомиться с подробной инструкцией по созданию сайта на нем.

Перечислим основные преимущества конструктор сайтов:

  • Они просты в использовании. Всё делается пошагово и легко. Вам не придётся возиться со сложными кодами HTML и FTP.
  • Разделение дизайнерской и текстовой частей: макет хранится отдельно от текста. Захотите сменить дизайн – без проблем, несколько кликов и всё готово!
  • Наличие готовых шаблонов макетов, для создания которых вне конструктора требуется знание языка программирования HTML.
  • Лёгкость загрузки изображений. Картинки можно добавлять, не выходя из браузера и сразу размещать на страницах, создавать галереи либо делать их частью дизайна макета.
  • Надёжность – все файлы хранятся на сервере конструктора. Поэтому Вам не стоит беспокоиться о создании резервных копий данных или о возможности взлома — обо всём этом заботится персонал по обслуживанию серверов выбранного конструктора сайтов.
  • Кроме того, некоторые конструкторы позволяют переносить готовый сайт на другой хостинг.

№1: Конструкторов сайтов Wix

Солидный зарубежный проект, вполне возможно, это лучший конструктор сайтов на сегодняшний день. Предоставляет богатейший инструментарий для создания действительно красивых и функциональных сайтов, будь то Интернет-магазин, сайт-визитка либо блог. Интерфейс мощный и удобный, сразу видно профессионализм команды разработчиков, что внушает доверие к ресурсу.

К преимуществам относятся:

Недостатки:

  • Недостаточно запоминающийся адрес страницы в бесплатной версии, имеет вид Вашwixлогин.wix.com/название сайта;
  • На бесплатной версии есть ограничение по скорости загрузки сайта. Множество сложных элементов могут дольше грузиться, чем обычно.

Итак, Wix — шикарный конструктор с большими возможностями по оформлению сайта и очень лояльными условиями. Мы подробно описали как на Wix создать сайт , запустить свой интернет-магазин и сделать целевую страницу (landing page) .

Создать свой сайт на Wix!

№2: Конструкторов сайтов Nethouse

Отличный конструктор, который приемлем для создания сайтов для малого бизнеса (портфолио, визитка, магазин). Достаточно прост в освоении. По заверениям разработчиков, создать сайт на портале не сложнее, чем заполнить страничку в Одноклассниках.
Каждый зарегистрировавшийся по нашей ссылке получит 300р на счет бесплатно!

Преимущества:

  • Готовый сайт можно привязать к своему домену;
  • Неограниченное дисковое пространство;
  • Нет навязчивой рекламы;
  • Бесплатный доступ к основной части возможностей портала;
  • Удобный интерфейс, красивые шаблоны;
  • Возможность реализации системы приёма электронных платежей;
  • Интеграция с социальными сетями;
  • Подарок новым пользователям в виде рекламы в GoogleAdWords;
  • Возможность SEO-настройки страниц.
  • 100р на счету для пробы платных услуг.
  • Приличная техподдержка.

Недостатки:

  • Нет возможности вставить HTML-код, баннеры;
  • Нет форума.

Создать сайт на nethouse

№3: Конструкторов сайтов uKit

Весьма перспективный и функциональный конструктор сайтов. Его создали разработчики, которые еще совсем недавно работали над сервисом . На текущий момент конструктор сайтов uKit вышел из стадии бета-тестирования и весь его функционал доступен всем желающим за символическую плату в месяц сравнимую со стоимостью простого шаред хостинга.
Для того, чтобы попробовать его — есть бесплатный 14 дневный пробный период.

Преимущества:

  • Обширный функционал;
  • Возможность создавать привлекательные полнофункциональные сайты без технических знаний;
  • Достаточно широкие возможности для последующего SEO-продвижения созданного сайта;
  • Моментальный доступ к обширной статистике и аналитике работы созданного сайта.

Недостатки:

  • Некоторые недоработки функционала и пользовательского интерфейса.

Конструктор uKit , безусловно, заслуживает внимания тех, кто хочет создать современный полнофункциональный сайт с весьма привлекательным дизайном, но при этом не обладает специальными знаниями. Специально для того чтобы вы могли это сделать максимально эффективно мы создали пошаговое руководство по созданию сайта в конструкторе uKit .

Создать сайт на ukit

№4: Конструкторов сайтов Umi

Также простой в освоении конструктор. Сайт или магазин можно создать примерно за 5-10 минут. К тому же, есть возможность переноса на другой хостинг, хотя услуга и платная. В основе сервиса лежит собственный фирменный движок Umi.CMS.

Преимущества:

  • Богатый функционал, много возможностей;
  • Настройки SEO-оптимизации страниц;
  • Использование формата XML для отображения любых данных системы;
  • Использование REST-протоколов для доступа к XML-представлению данных;
  • Интеграция с социальными сетями и возможность подключения комментариев;
  • Инструменты для интернет-магазинов (синхронизация каталога и заказов с 1С, создание категорий и характеристик товара, синхронизация каталога и заказов с 1С,синхронизация склада и цен, подключение платежных систем и пр.);
  • Поддержка Drag&Drop;
  • Есть выгодная партнёрка.

Недостатки:

  • Всего 100 Мб дискового пространства в бесплатном пакете.
  • Высокие цены выкупа.

Создать сайт на umi

№5: Конструкторов сайтов Jimdo

Еще один интересный онлайн-конструктор сайтов, который особенно подойдет для тех, кто не имеет особого желания вникать в процесс создания шаблонов, а также серьезно изучать такие технологии как HTML и CSS.

Преимущества:

  • Достаточно большой выбор готовых шаблонов;
  • Интуитивно понятный пользовательский интерфейс;
  • Тонкая настройка параметров создаваемого сайта;
  • Возможность SEO-настройки страниц;
  • Нет навязчивой рекламы;
  • Возможность загрузки собственного шаблона.

Недостатки:

  • Относительная сложность интеграции собственного шаблона;
  • Некоторые ограничения при работе с графическими элементами сайта.
  • Привязка блоков создаваемого сайта к конкретным координатам (на базовых шаблонах).

Несмотря на определенные сложности в пользовательском интерфейсе, онлайн-конструктор сайтов Jimdo определенно заслуживает вашего внимания. А специально для того чтобы вы смогли приступить к работе максимально быстро и эффективно мы создали пошаговое руководство по работе с Jimdo .

Создать сайт на jimdo

№6: Конструкторов сайтов Redham

Качественный сервис, но полностью ориентирован на коммерческую выгоду — тестовый период бесплатного использования составляет 30 дней, дальше нужно платить. В принципе, это и является его наибольшим недостатком (стоимость начального тарифа в год составляет 2000 рублей, премиума — 5000 рублей). Для желающих действительно бесплатно содержать сайт больше месяца данная платформа сразу отпадает.

В качестве преимуществ стоит отметить:

  • Простоту;
  • Достаточный набор возможностей для создания функционального сайта;
  • Приветливую техподдержку.

Недостатки:

  • Все вышеуказанные преимущества бесплатны лишь 1 месяц, а дальше придётся платить.

Существуют альтернативы, готовые обеспечить то же самое, пусть и с некоторыми ограничениями, но бесплатно. Если уж платить столько, то лучше купить себе отдельный хостинг и создать сайт на Joomla или WordPress. Но это для продвинутых пользователей. А новички смогут найти не менее простой и бесплатный конструктор. Тем не менее, мы рекомендуем ознакомиться с инструкцией по созданию сайта в Redham .

Создать сайт на redham

№7: Конструкторов сайтов Setup

Один из наиболее простых для новичков конструктор: удобный и понятный интерфейс, 5000 настраиваемых вариантов дизайна. К тому же,в качестве бонуса портал предлагает бесплатный домен в зоне.ru и возможность продвижения по низкочастотным запросам, что позволит без дополнительных затрат привлечь посетителей на Ваш сайт.

Перечислим преимущества:

  • Красивые и многочисленные шаблоны;
  • Изначально оптимальные параметры для SEO-продвижения;
  • Полная интеграция с SeoPult — системой, позволяющей автоматически покупать ссылки на популярных ссылочных биржах;
  • Неплохая техподдержка.

Недостатки:

  • Ваш сайт полностью привязан к платформе Setup без возможности переноса на другой хостинг (в бесплатной версии);
  • Бесплатный домен трудно получить — необходимо заполнить 20 страниц сайта, после чего он будет на модерации с возможностью отклонения заявки;
  • Мало дискового пространства в бесплатной версии (100 Мб);
  • Невозможность индексации внешних ссылок поисковиками (в бесплатной версии).

Создать сайт на setup

№8: Конструкторов сайтов uCoz

Наверное, один из самых известных и старых сервисов в рунете, хотя с противоречивой репутацией. Подойдёт для создания практически любого сайта. По сравнению со многими другими конструкторами обладает более богатым функционалом, поэтому требует определённой степени осведомлённости для использования.

Преимущества:

  • Большое количество шаблонов и настраиваемых модулей (форум, опросы, галереи, магазин, блог и т. д);
  • Обилие возможностей и настроек;
  • Постепенно растущий объём дискового пространства по мере развития сайта (без дополнительной оплаты);
  • Хорошо индексируется поисковиками;
  • Доступен PHP (платно);
  • Возможен RSS импорт и экспорт;
  • Доступность техподдержки.

Недостатки:

  • Огромный рекламный баннер в правом верхнем углу, закрывающий четверть экрана, причём не всегда пристойного содержания;
  • Невозможность полного переноса сайта на другой хостинг;
  • Нельзя устанавливать на хостинг сторонние скрипты, можно использовать только штатные;
  • Иногда администрация банит сайты без возможности восстановления, обжалованию не подлежит;
  • Конструктор будет сложным для новичков;
  • Достаточно однообразные шаблоны.

uCoz противоречив. Если Вы новичок, то Вам будет сложно, если продвинутый пользователь — то он Вам не нужен попросту.

Создать сайт на ucoz

№9: Конструкторов сайтов A5

Сервис чем-то напоминает западный Wix . Функционал похож тем, что работа по созданию сайта может происходить как в HTML5-редакторе, так и во флеш. Подробный обзор конструктора А5 .

Преимущества:

  • Удобный редактор сайта;
  • Возможность создания собственного уникального шаблона;
  • 150Mb дискового пространства и неограниченное кол-во страниц;
  • Наряду с HTML5 есть возможность создания сайтов на flash;
  • Отзывчивая служба поддержки;
  • Большое кол-во шаблонов (около 300);
  • Несложный интерфейс плюс наличие качественных видео-уроков по его использованию.
  • Отличное соотношение цена/качество при переходе на платный пакет.

Недостатки:

  • Незапоминающийся цифровой домен 3го уровня, вида 2834234.mya5.ru, в бесплатной версии;
  • Присутствует реклама конструктора в верхнем правом углу и липкие копирайты в бесплатном пакете.

А5 — простой, но достаточно ограниченный на бесплатном пакете конструктор. Однако, этот конструктор замечательно подходит для определенных целей, что хорошо отражено в статье: создаем сайт на A5 .

Создать сайт на a5

№10: Конструкторов сайтов Fo.ru

Данный сервис отлично подойдёт для создания сайта-визитки или блога. Он очень прост в использовании даже по сравнению с другими конструкторами. Идеально подходит для абсолютных новичков, которым не нужен большой функционал.

Преимущества:

Недостатки:

  • Слабая техподдержка, нередко не отвечают;
  • Мало возможностей для продвинутых пользователей, слабоватая панель администратора, в код залезть не получится;
  • Сайт нельзя регистрировать на биржах продажи ссылок;
  • Администрация всячески навязывает платные пакеты.

Fo.ru — в целом, неплохой ресурс, особенно для новичков, желающих на скорую руку создать свой первый сайт. Для серьёзных проектов недостаточно гибок в настройке и функционален. Если Вас заинтересовал проект Fo.ru, то детальное описание создания на нём сайтов находится .

Создать сайт на foru

Ответы на распространенные вопросы

Кому подойдут конструкторы сайтов?

В первую очередь конструкторы сайтов предназначены для новичков. То есть для людей, которые интересуются темой создания сайтов, но при этом еще не имеют никаких специальных знаний и навыков.

Как показывает практика, большую часть пользовательской аудитории конструкторов сайтов составляют начинающие вебмастера, у которых достаточно часто нет вообще никакого бюджета на создание сайта, но при этом он им необходим, что называется здесь и сейчас.

Еще одна значительная группа пользователей конструкторов сайтов – это физические лица и молодые компании, которые предпринимают первые попытки организовать собственный онлайн-бизнес. Чаще всего у представителей подобной аудитории нет возможности (реже – желания) вкладывать большие деньги в быструю разработку и запуск сайта, на котором будет представлена информация об их начинаниях

Еще одним важным моментом является то, что на данный момент весьма успешно существуют и развиваются узкоспециализированные конструкторы сайтов, заточенные именно под потребности бизнеса, причем, как только стартующего, так и уже состоявшегося.

Конструктор сайтов или CMS-система – что выбрать?

Для новичков в сфере сайтостроения идеальным решением станет именно использование современного конструктора сайтов. У подобного решения действительно много преимуществ. Вот только некоторые из них:

  1. Для того чтобы создать сайт с помощью конструктора не нужно иметь знаний HTML, CSS, PHP.
  2. Простота наполнения созданного сайта необходимым контентом.
  3. Отсутствие необходимости работать с разнообразными дополнительными плагинами.
  4. Наличие простых и понятных подсказок, позволяющих действительно быстро освоить работу с конструктором сайтов.
  5. Практически гарантированное отсутствие проблем, связанных с взломом сайта и распространением спама.
  6. Полностью автоматическое и не требующее участия пользователей обновление функциональных возможностей конструктора сайтов.

Преимущества конструкторов сайтов

  • Быстрота создания сайтов – если считать время от момента регистрации аккаунта в понравившемся конструкторе до запуска первого собственного сайта чаще всего проходит всего несколько часов. А элементарный сайт-визитку даже абсолютный новичок сможет создать менее чем за час.
  • Простота дальнейшего обслуживания созданного сайта – фактически чтобы вы не захотели реализовать на своем сайте – вам нужно будет лишь кликать мышкой по красивым кнопкам, которые будут дополнены качественными подсказками, которые так необходимы новичкам. Весь процесс конструирования и наполнения сайта будет происходить в визуально наглядном и простом формате.
  • Большое количество элементов уже готовых к использованию и работе . Современные конструкторы сайтов не только позволяют использовать красочные профессиональные шаблоны, но и с легкостью редактировать их под свои нужды, не имея при этом специальных знаний и навыков.
  • Бесплатно или очень дешево . Конструкторы сайтов охотно предлагают начинающим пользователям бесплатные тарифы, а если их возможностей окажется недостаточно, то всегда можно будет перейти на платный тарифный план, предоставляющий расширенные возможности.

Недостатки конструкторов сайтов

Прежде чем говорить о недостатках современных конструкторов сайтов стоит понимать, что они весьма относительны и столкнется с ними далеко не каждый пользователь. Изучив приведенные ниже примеры подобных «недостатков» вы наверняка поймете, что мы имеем в виду под их относительностью.

  • Относительно медленная скорость загрузки сайта. Однако с проблемами, связанными с медленной загрузкой и работой сайта, скорее всего, столкнуться только пользователи бесплатных тарифных планов. Совершенно очевидно, что любой сервис будет тратить чуть больше своего внимания именно на платных клиентов. Вполне вероятно, что перейдя на подходящий платный тариф, вы перестанете замечать проблемы со скоростью загрузки, так как они просто исчезнут.
  • Ежемесячная оплата — на самом деле это очень относительный недостаток. Ведь кому-то даже проще вносить небольшие ежемесячные платежи. А кто-то наоборот привык платить за собственный сайт раз в год и получать за это приятную скидку. Более того нельзя забывать о том, что большинство современных конструкторов сайтов обязательно предлагают своим пользователям бесплатный тарифный план, который позволяет создать полноценный интернет-ресурс достойного уровня, не заплатив за это ни копейки.
  • Недостаточная техническая поддержка — опять же, этот недостаток в первую очередь затрагивает тех людей, которые пользуются бесплатными тарифами конструкторов сайтов. Совершенно очевидно, что возможность получения качественной и быстрой технической поддержки стоит денег. И, конечно же, первоочередное внимание конструктор сайтов, как и любой другой сервис, будет уделять своим платным клиентам.
  • Ограниченные возможности уникализации сайта — справедливости ради необходимо отметить, что все современные конструкторы сайтов предоставляют своим пользователям действительно обширный функционал. Однако до сих встречаются случаи, когда пользователям конструкторов сайтов приходится сталкиваться с определенными ограничениями. Особенно при использовании бесплатных тарифных планах.

Бесплатные тарифы конструкторов сайтов: за и против

Как выбрать конструктор сайтов – на что обратить внимание?

При выборе наиболее подходящего конструктора сайтов необходимо обращать особое внимание на следующие моменты:

  1. На какой платформе работает конструктор? Оптимально если он работает на основе наиболее современной технологии – HTML5.
  2. Насколько большой выбор шаблонов предлагает тот или иной конструктор сайтов – в этом случае отлично работает правило «чем больше – тем лучше».
  3. Насколько профессиональные и визуально привлекательные шаблоны предоставляет конструктор сайтов? Совершенно очевидно, что в этом вопросе важно не только количество доступных вариантов, но и их качество.
  4. Важно чтобы конструктор сайтов предоставлял максимально удобный редактор, работающий по принципу Drag & Drop.
  5. Насколько прост и понятен пользовательский интерфейс конструктора сайтов. Этот момент особенно важен для абсолютных новичков.
  6. Насколько конструктор и создаваемые с его помощью сайты адаптированы для дальнейшего SEO-продвижения. Крайне важно, чтобы сайт, созданный с помощью конструктора, корректно индексировался всеми основными поисковыми системами.
  7. Качество предоставляемой технической поддержки. Здесь, скорее всего, вам придется делать выводы, руководствуясь собственным опытом, но перед выбором конструктора можно поискать отзывы других пользователей, которым уже пришлось взаимодействовать со специалистами службы поддержки.
  8. Определитесь с тем, какое количество страниц будет на вашем сайте. Не забывайте о том, что некоторые бесплатные тарифы конструкторов сайтов включают в себя определенные ограничения по количеству страниц.
  9. Доступный объем дискового пространства. Чем больше места будет предоставлено вашему сайту, тем лучше.
  10. Возраст и репутация конструктора. Выбирая конструктор для создания собственного сайта, обязательно обратите внимание на его репутацию в Сети, а также то, сколько лет сервис уже присутствует на рынке. Это поможет вам выбрать действительно надежный сервис.

Все просто. Никто не любит конкуренцию и удешевление собственного труда. Пора признать, что современные конструкторы значительно упростили и ускорили процесс создания сайтов. Кроме того с помощью специального конструктора сайт можно создать бесплатно. Подумайте, какое количество потенциальных клиентов уже потеряли веб-разработчики.

Выводы

Итак, какой конструктор сайтов выбрать? Как Вы можете заметить, идеальных решений нет. Для начала нужно определиться, каким Вы хотите видеть Ваш сайт и какие конструкторы сайтов смогут предоставить наиболее ценные именно для Вас преимущества, имея при этом малозначительные конкретно для Вас недостатки.

Большинство конструкторов сайтов бесплатны (расширение функционала потребует перехода на платный тариф ), имеют более-менее удобный интерфейс, неплохой набор шаблонов, акции и т. д. Конкуренция велика, поэтому каждый ресурс стремится привлечь как можно большее количество клиентов всеми доступными средствами.

Лучшие конструкторы сайтов дают возможность даже на бесплатном пакете сделать нечто более-менее приличное и продвигать сайт в Интернете. Из вышеописанных конструкторов хотелось бы обратить внимание на Wix , Nethouse и uKit . Они несколько лучше выглядят на фоне конкурентов. Но выбор, конечно, за Вами!

С помощью файла Sitemap можно сообщить Яндексу об актуальной структуре сайта, указав специальную директиву в robots.txt или добавив в Яндекс.Вебмастер.

Вебмастер позволяет:

Загрузка Sitemap

    Выберите из списка сайт.

    В поле впишите URL, по которому доступен файл. Например, https://example.com/sitemap.xml .

    Нажмите кнопку Добавить .

После добавления файл попадает в очередь на обработку. Робот загрузит его в течение двух недель. Каждый добавленный файл, в том числе вложенный в файл индекса Sitemap , обрабатывается роботом отдельно.

После загрузки напротив каждого файла вы увидите один из статусов:

Статус Описание Примечание
«OK»
«Редирект» Удалите редирект и сообщите роботу об обновлении
«Ошибка» Файл сформирован неправильно сообщите роботу об обновлении
«Не проиндексирован»

Проверка ответа сервера

Disallow сообщите роботу об обновлении
Статус Описание Примечание
«OK» Файл сформирован правильно и загружен в базу робота

Напротив файла отобразится дата последней загрузки.

Проиндексированные страницы появятся в результатах поиска в течение двух недель

«Редирект» Указанный URL перенаправляет на другой адрес Удалите редирект и сообщите роботу об обновлении
«Ошибка» Файл сформирован неправильно Нажмите ссылку Ошибка , чтобы узнать подробности. После внесения изменений в файл сообщите роботу об обновлении
«Не проиндексирован» При обращении к Sitemap сервер возвращает HTTP-код, отличный от 200

Проверьте, доступен ли файл для робота с помощью инструмента Проверка ответа сервера , указав полный путь к файлу.

Если файл недоступен, обратитесь к администратору сайта или сервера, на котором он расположен.

Доступ к файлу запрещен в robots.txt с помощью директивы Disallow Разрешите доступ к Sitemap и сообщите роботу об обновлении

Обновление Sitemap

Если вы изменили добавленный в Яндекс.Вебмастер файл Sitemap , его не надо удалять и загружать снова - робот регулярно проверяет файл на обновления и ошибки.

Чтобы ускорить обход файла, нажмите значок . Если вы используете файл индекса Sitemap , можно запустить обработку каждого перечисленного в нем файла. Робот загрузит данные в течение трех дней. Использовать функцию можно до 10 раз для одного хоста.

Когда вы израсходуете все попытки, следующая будет доступна через 30 дней после первой. Точная дата отображается в интерфейсе Вебмастера.

Удаление Sitemap

В интерфейсе Яндекс.Вебмастера можно удалить те файлы, которые были добавлены на странице Файлы Sitemap : Если для Sitemap была добавлена директива в файле robots.txt , удалите ее. После внесения изменений информация о Sitemap пропадет из базы робота и Яндекс.Вебмастера в течение нескольких недель.

Файл sitemap.xml - это инструмент, который позволяет вебмастерам информировать поисковые системы о страницах сайта, доступных к индексации. Также, в XML карте можно указывать дополнительные параметры страниц: дата последнего обновления, частота обновлений и приоритет относительно других страниц. Информация в sitemap.xml может влиять на поведение поискового краулера и, в целом, на процесс индексации новых документов. Sitemap содержит в себе директивы включения страниц в очередь на обход и дополняет robots.txt, содержащий директивы исключения страниц.

В этом руководстве вы найдете ответы на все вопросы, касающиеся использования sitemap.xml.

Нужен ли мне sitemap.xml

Поисковые системы используют sitemap для поиска новых документов на сайте (это могут быть html-документы или медиа-контент), которые недоступны через навигацию, но их необходимо просканировать. Наличие ссылки на документ в sitemap.xml не гарантирует его сканирование или индексацию, но чаще всего файл помогает большим сайтам индексироваться лучше. К тому же, данные из XML карты используются при определении канонических страниц, если это специально не указано в теге rel=canonical.

Sitemap.xml важен для сайтов, где:

  • Некоторые разделы недоступны через навигационное меню.
  • Имеется множество изолированных страниц или плохо связанных между собой.
  • Используются технологии, слабо поддерживаемые поисковыми системами (например, Ajax, Flash или Silverlight).
  • Присутствует очень много страниц и есть вероятность, что поисковый краулер пропустит новый контент.

Если это не ваши случаи, то скорей всего sitemap.xml вам не нужен. Для сайтов, где каждая важная для индексации страница доступна в пределах 2х кликов, где для отображения контента не используются технологии JavaScript или Flash, где при необходимости используются канонические и региональные теги, и свежий контент появляется не чаще, чем на сайт заходит робот, в файле sitemap.xml нет необходимости.

Для небольших проектов при наличии проблемы лишь большого уровня вложенности документов, ее легко решить с помощью HTML карты сайта, не прибегая к использованию XML карты. Но если вы решили, что sitemap.xml вам все-таки нужен, то прочитайте это руководство полностью.

Техническая информация

  • Sitemap.xml является текстовым файлом формата XML . Однако, поисковые системы также поддерживают текстовый формат (см. следующий раздел).
  • Каждый сайтмап может содержать максимум 50 000 адресов и весить не более 50Мб (10Мб для Яндекса).
  • Можно использовать gzip-сжатие для уменьшения размера файла sitemap.xml и увеличения скорости его передачи. В таком случае используйте расширение gz (sitemap.xml.gz). При этом, ограничения по весу остаются для несжатых сайтмапов.
  • Местоположение файла Sitemap определяет набор URL-адресов, которые можно включить в этот Sitemap. Карта, содержащая адреса страниц всего сайта, должна располагаться в корне. Если сайтмап располагается в папке, то и все URL в этом сайтмапе должны располагаться в этой папке или глубже ().
  • Адреса в sitemap.xml должны быть абсолютными.
  • Максимальная длина URL - 2048 символов (1024 символа для Яндекса).
  • Спецсимволы в URL (типа амперсанда "&" или кавычек) должны маскироваться в HTML-сущности.
  • Указанные в карте страницы должны отдавать 200 http-код статуса.
  • Перечисленные в карте адреса не должны быть закрыты в файле robots.txt или в meta-robots.
  • Sitemap не должен быть закрыт в robots.txt, иначе поисковая система его не просканирует. Сам файл может находиться в индексе, это нормально.

Форматы XML карт

Поисковые системы поддерживают простой текстовый формат карты сайта, где просто списком перечислены URL-адреса страниц без дополнительных параметров. В таком случае файл должен иметь кодировку UTF-8 и иметь расширение .txt .

Также поисковиками поддерживается стандартный XML-протокол . Google дополнительно поддерживает сайтмапы для изображений, видео и новостей.

Пример файла Sitemap, содержащий только один адрес.

https://сайт/ 2018-06-14 daily 0.9

XML-теги
urlset
url (обязательный) - родительский тег для каждого URL-адреса.
loc (обязательный) - URL-адрес документа, должен быть абсолютным.
lastmod - дата последнего изменения документа в формате Datetime .
changefreq - частота изменения страницы (always, hourly, daily, weekly, monthly, yearly, never). Значение этого тега является рекомендацией поисковым системам, а не командой.
priority - приоритетность URL относительно других адресов (от 0 до 1) для очередности сканирования. Если не указывается, то по умолчанию равна 0.5.

XML карта для изображений

Некоторые оптимизаторы вставляют в sitemap.xml ссылки на изображения аналогично ссылкам на html-документы. Так можно делать, но лучше для Google использовать расширение стандартного протокола и вместе с урлами отправлять дополнительную информацию об изображениях. Создавать XML карты изображений полезно, если картинки необходимо сканировать и индексировать, и при этом, они напрямую не доступны боту (например, используется JavaScript).

Пример карты сайта, содержащей одну страницу и принадлежащие ей изображения

http://example.com/primer.html http://example.com/kartinka.jpg http://example.com/photo.jpg Вид на Балаклаву Севастополь, Крым http://creativecommons.org/licenses/by-nd/3.0/legalcode

XML-теги
image:image (обязательно) - информация об одном изображении. Максимум может использоваться 1000 изображений.
image:loc (обязательно) - путь к файлу изображения. Если используется CDN, то допустимо ссылаться на другой домен, если он подтвержден в панели для вебмастеров.
image:caption - подпись к изображению (может содержаться длинный текст).
image:title - название изображение (обычно короткий текст).
image:geo_location - место съемки.
image:license - URL лицензии изображения. Используется при расширенном поиске по картинкам.

XML карта для видео

Подобно карте для изображений, Google также имеет расширение sitemap протокола для видео, где можно указывать подробную информацию о видео-контенте, влияющую на отображение в поиске по видео. Видео-сайтмап необходим, когда на сайте используются видео, которые хостятся локально, и когда индексация этих видео затруднена из-за используемых технологий. Если вы на сайте внедряете видео из YouTube, то video-sitemap здесь не нужен.

Файл Sitemap для новостей

При наличии на сайте новостного контента и участии в Google Новостях полезно использовать Sitemap для новостей, так Google будет быстрей находить ваши свежие материалы и индексировать все новостные статьи. В этом случае Sitemap должен содержать только адреса страниц, опубликованных за последние 2 дня и содержать не более 1000 урлов.

Использование нескольких карт

При необходимости можно использовать несколько карт сайтов, объединяя их в один индексный сайтмап. Несколько sitemap.xml используются в случаях, когда:

  • На сайте используется несколько движков (CMS).
  • На сайте больше 50 000 страниц.
  • Необходимо настроить удобное отслеживание ошибок в разделах.

В последнем случае каждый большой раздел сайта имеет свой sitemap.xml и все они добавляются в панель для вебмастеров, где удобно наблюдать, в каком из разделов больше всего ошибок (см. раздел поиска ошибок в карте сайта).

Если у вас 2 и более сайтмапа, их необходимо объединить в индексный сайтмап, который выглядит также как обычный (за исключением наличия тегов sitemapindex и sitemap вместо urlset и url), имеет аналогичные ограничения и может ссылаться только на обычные XML карты (не на индексные).

Пример Sitemap Index:

http://www.example.com/sitemap-blog.xml.gz 2004-10-01T18:23:17+00:00 http://www.example.com/sitemap-webinars.xml.gz 2005-01-01

sitemapindex (обязательный) - указывает стандарт текущего протокола.
sitemap (обязательный) - содержит информацию об отдельном sitemap.
loc (обязательный) - местоположение sitemap (в формате xml, txt или rss для Google).
lastmod - время изменения сайтмапа. Позволяет поисковикам быстро обнаруживать новые URL на сайтах больших размеров.

Как создать sitemap.xml

Методы создания XML Sitemap:

  • Внутренние средства CMS. Многие CMS уже поддерживают создание карты сайта. Чтобы это выяснить, почитайте документацию к вашей CMS, посмотрите пункты меню в администраторской панели или обратитесь в техподдержку движка. Загрузите на вашем сайте файл https://вашсайт.com/sitemap.xml , возможно он уже существует и динамически формируется.
  • Внешние плагины. Если в CMS нет функционала генерации карты сайта, и она поддерживает плагины, погуглите, какой из плагинов закрывает вопрос sitemap.xml для вашего движка и установите его. В некоторых случаях необходимо обратиться к программистам, чтобы они написали вам подобный плагин.
  • Отдельный скрипт на сайте. Зная протокол XML карты и технические ограничения, можно создать sitemap.xml самостоятельно, добавив скрипт генерации в CRON. Если вы не программист, используйте другие пункты этого списка.
  • Генераторы Sitemap. Существует множество генераторов sitemap.xml, которые сканируют ваш сайт и дают скачать готовую карту. Недостаток здесь в том, что при каждом обновлении сайта необходимо вручную генерировать сайтмап.
  • Парсеры. Десктопные программы, предназначенные для технического анализа сайта, обычно предоставляют возможность скачать sitemap.xml, сгенерированный на основе просканированных страниц. Работает аналогично генераторам sitemap, только запускается локально на своей машине.

Популярные онлайн-генераторы карты сайта

XML-Sitemaps.com

Позволяет получить sitemap.xml в несколько кликов. Поддерживает форматы XML, HTML, TXT и GZ. Удобно использовать для небольших сайтов (до 500 страниц).

Похожий генератор, но имеет чуть больше настроек и позволяет создать карту до 2000 страниц бесплатно.

Имеет множество настроек, позволяет импортировать URL-адреса из CSV-файла. Бесплатно сканирует до 500 урлов.

Не имеет лимитов на количество страниц для сканирования. Но для больших сайтов процесс генерации может подвисать на несколько десятков минут.

Локальные программы для генерации XML Sitemap

G-Mapper Sitemap Generator

Бесплатная десктопная версия генератора карты сайта под Windows.

Screaming Frog SEO Spider

Гибкий инструмент генерации карты сайта с множеством настроек. Удобно, если вы уже пользуетесь скримин фрогом для других SEO-задач. После сканирования сайта используйте пункт меню Sitemaps -> Create XML Sitemap.

Netpeak Spider

Менее гибкое, но тоже удобное решение для быстрой генерации sitemap.xml. После сканирования сайта необходимо использовать пункт меню Инструменты -> Генерация Sitemap.

Что такое карта сайта

Содержимое любого веб-ресурса рано или поздно будет проиндексировано поисковыми системами. А как сделать так, чтобы этот процесс происходил побыстрее?

Один из наиболее эффективных способов – использование так называемой карты сайта (Sitemap ).

Карта сайта (Sitemap ) – это xml -файл с информацией для поисковых систем о страницах веб-ресурса, которые подлежат индексации. Sitemap помогает поисковикам определить местонахождение объектов веб-ресурса, время их последнего обновления, частоту обновления, приоритетность.

Формат протокола Sitemap состоит из XML -тегов.

В файле необходимо использовать кодировку UTF-8 .

Атрибуты XML -тегов Sitemap

– обязательный атрибут. Инкапсулирует этот файл и указывает стандарт текущего протокола;

– обязательный атрибут. Родительский тег для каждой записи URL . Остальные теги являются дочерними для этого тега;

– обязательный атрибут. URL страницы; должен начинаться с префикса (например, http:// ) и заканчиваться косой чертой, если ваш веб-сервер требует этого. Длина этого значения не должна превышать 2048 символов;

– необязательный атрибут. Дата последнего изменения файла; должна быть в формате W3C Datetime . Этот формат позволяет при необходимости опустить сегмент времени и использовать формат ГГГГ-ММ-ДД;

– необязательный атрибут. Вероятная частота изменения этой страницы. Это значение предоставляет общую информацию для поисковых систем и может не соответствовать частоте сканирования этой страницы. Допустимые значения: always , hourly , daily , weekly , monthly , yearly , never ;

– необязательный атрибут. Приоритетность URL относительно других URL на вашем сайте. Допустимый диапазон значений – от 0,0 до 1,0. Это значение не влияет на процедуру сравнения ваших страниц со страницами на других сайтах – оно только позволяет указать поисковым системам, какие страницы, по вашему мнению, более важны для сканеров (приоритет, который вы назначили странице, не влияет на положение ваших URL на страницах результатов той или иной поисковой системы). Приоритет страницы по умолчанию – 0,5.

Пример XML -файла Sitemap

(необязательные теги выделены ):

http://сайт/

2010-04-19

daily

0.8


http://сайт/aldan.htm
2009-10-03
monthly

0.5

http://сайт/aldan-weather.htm

2010-04-15

weekly

0.5

Если ваш сайт содержит много веб-страниц, вы можете опустить необязательные атрибуты (это позволит значительно уменьшить размеры файла Sitemap ):

http://сайт/

http://сайт/aldan.htm

http://сайт/aldan-weather.htm

Использование файлов индекса Sitemap

Файл Sitemap должен содержать не более 50000 URL , при этом его размер не должен превышать 10МБ .

При необходимости файл Sitemap можно сжать с помощью архиватора gzip , чтобы уменьшить требования к пропускной способности канала.

Если необходимо перечислить более 50000 URL , следует создать несколько файлов Sitemap . При этом необходимо перечислить каждый из этих файлов в файле индекса Sitemap . В файле индекса Sitemap может быть перечислено не более 50000 файлов Sitemap . Размер этого файла не должен превышать 10МБ .

Как создать карту сайта

Для создания карты сайта можно воспользоваться так называемыми генераторами Sitemap , а можно всё сделать самому:

– откройте Блокнот ;

– соблюдая правила протокола Sitemap , заполните файл Sitemap ;

– в соответствующее текстовое поле введите имя файла (например, sitemap.xml );

– в выпадающем списке Тип файла выберите Все файлы (*.*) ;

– в выпадающем списке Кодировка выберите UTF-8 , нажмите Сохранить ;

– закачайте Sitemap в корневую директорию вашего сайта.

Уведомления для сканеров поисковиков о наличии и месторасположении файла Sitemap

После того, как файл Sitemap создан и размещен на веб-сервере, необходимо сообщить о его местонахождении поисковым системам, поддерживающим этот протокол. Это можно сделать следующими способами:

Передача файла Sitemap с помощью веб-интерфейса поисковой системы

Чтобы отправить файл Sitemap напрямую в поисковую систему, которая предоставляет возможность получать информацию о статусе и ошибках обработки, обратитесь к справочной системе поисковика.

Например, передать

На этой странице сосредоточена почти вся информация, которую нужно знать о Sitemap .

Sitemap — это карта сайта, предназначенная для помощи роботам поисковых систем в индексации сайта. Имя Sitemap является стандартным, то есть принятым по умолчанию.

Sitemap обычно хранится на сервере хостинга в каталоге public_html сайта. Sitemap принято прописывать в двух последних строчках файла — там можно задать и иные имена двух файлов карты сайта, а также иное местоположение файлов, чтобы попытаться скрыть эти файлы от злоумышленных программ и людей. А наиболее популярным поисковым системам сообщать имя и координаты файлов индивидуально, посылая прочие поисковики подальше в лес.

Считаю это дешёвыми хитростями, ибо файл обязан находиться в каталоге public_html сайта. Даже если его удалить, так как он необязателен, злоумышленник, способный добраться до этого каталога, способен и подменить три файла, чтобы перенаправить посетителей сайта на любой другой сайт и его страницы. Думаю, что таким образом и атакуют порой некоторые сайты.

Sitemap моего сайта создаёт плагин Google XML Sitemaps версии 3.4 На сервере хостинга в каталоге public_html сайта хранятся два файла: Sitemap.xml и Sitemap.xml.gz , причём оба файла создаются практически одновременно.

Файл Sitemap.xml , имеющий сейчас длину 103-ри КБ, формируется вышеупомянутым плагином при изменении любой страницы сайта.

Файл Sitemap.xml.gz , имеющий длину 10-ть КБ, является вспомогательным и содержит в зашифрованном виде некую нужную роботу информацию.

07.03.14 мне удалось после поисков советов в Интернете вытянуть из Интернета расшифрованную карту моего сайта. Сегодня мне не удалось это повторить, а записать алгоритм извлечения карты вчера не догадался. Впрочем, теперь это уже неважно — чуть позже поймёте почему.

Вот начало и конец преобразованного мной вчера файла:
http://сайт/ 2014-03-07T19:23:22+00:00 daily 1.0
http://сайт/stroitelstvo/sayt/cms-wordpress 2014-03-07T19:23:22+00:00 daily 0.6
http://сайт/posadki/ogorod/pomidoryi 2014-03-07T18:06:27+00:00 daily 0.6
…… http://сайт/voprosyi/otvet-15 2013-03-19T13:25:35+00:00 daily 0.6
http://сайт/sample-page/roshhi/hvoynyie/listvennitsa 2013-03-05T13:01:35+00:00 daily 0.6
http://сайт/sample-page/roshhi/listvennyie/lipyi 2013-03-05T12:30:19+00:00 daily 0.6

В полученном файле записи, относящиеся к отдельным страницам, шли сплошняком и были лишь разделены двумя пробелами. Не поленился разделить в редакторе Notepad файл на строки и сохранил в формате TXT. Затем скопировал дважды содержимое файла в столбцы чистого листа Excel . Выяснил, что создана 591-на запись с адресами страниц сайта. Во втором столбце отсортировал записи по алфавиту.

Так как в редакторе Notepad содержится примитивная команда замены, скопировал всё содержимое преобразованного файла в Word . Затем по команде замены «Ctrl+H » заменил http на htp, а потем наоборот. В обоих случаях была сделана 591-на замена.

Таким образом, можно было не тратить время на разделение на строки, а сразу копировать в Word и делать замену, чтобы выяснить число страниц сайта, внесенных в Sitemap .

Вот начало и две строчки конца файла Sitemap.xml , скопированные с хостинга:





http://сайт/
2014-03-08T18:55:00+00:00
daily
1.0


http://сайт/stroitelstvo/sayt/sitemap
2014-03-08T18:55:00+00:00
daily
0.6


http://сайт/voprosyi/otvet-15
2013-03-19T13:25:35+00:00
daily
0.6


http://сайт/sample-page/roshhi/hvoynyie/listvennitsa
2013-03-05T13:01:35+00:00
daily
0.6

Крайняя запись относится к странице, созданной более года тому назад!

В шапке файла содержится информация о том, какими средствами был создан этот файл: версия WordPress, имя плагина и, судя по записи в шапке, имя внешнего сайта, расположенного в Германии, где находится эталон программы, создающей записи, относящиеся к страницам сайта, а также дата и время и дата создания карты сайты. Кроме того, там содержится информация, в соответствии с какими стандартами создана карта сайта.

Сами записи наверняка создаёт плагин, используя процессор ноутбука, с которого вносятся изменения в страницы сайта.

Эти записи находятся между и .

В 4-х строках содержится адрес страницы сайта, время последней модификации, рекомендуемая роботу частота просмотра страницы и рекомендуемый приоритет просмотра. Что означают присутствующие в каждой второй строке отдельной записи 6-ть символов «+00:00″ и зачем они нужны, совершенно непонятно. Думаю, это можно понять, изучив использованный стандарт записи. Но оно нам надо?

Существенно, во-первых, то, что записи отсортированы по времени создания страниц файла — это помогает роботам экономить время, не просматривая те страницы, которые не изменились со времени последней индексации.

Во-вторых, всегда можно с хостинга скопировать в Word всё содержимое длинного файла Sitemap и быстро выяснить число страниц, вписанных в карту сайта. Сделал это примерно за одну минуту — теперь есть 593-ри страницы в карте сайта, так как сегодня добавил две страницы.

В-третьих, совершенно очевидно, что файл Sitemap.xml имеет избыточную длину и что создатели стандартов предпочли почему-то создавать его в виде, понятном людям. Почему? Если интересно, ищите информацию в Интернете или спросите у корифеев, гуру и прочих знатоков.

В-четвёртых, поисковые роботы наверняка читают файл не целиком, а только до записи той страницы, которая не изменилась с прошлого посещения роботом карты сайта. И поэтому избыточность длинного файла карты сайта при нынешних процессорах для них неважна.

В-пятых, вышеупомянутый плагин прекрасно справляется с созданием карты сайта — его можно и нужно смело использовать.

В-шестых, всегда можно посмотреть в карте сайта имена старых страниц и, копируя их в адресную строку браузера, вызывать страницы на переделку. Мне это нужно сделать со многими страницами, чтобы избавить страницы от чрезмерного числа сохранённых редакций, а заодно и перепроверить их.

В-седьмых, уверен, что можно придумать ещё много полезных способов использования понятной карты сайта. По мере придумывания буду сообщать.

Приглашаю всех высказываться в