Нужен ли Вашему сайту sitemap ?

Sitemap - она же карта сайта в специальном формате для поисковых систем, с перечнем страниц сайта, которые нуждаются в индексировании.  О sitemap написано в интернете очень много. Настолько много, что чуть ли не на каждом сайте сегодня встретишь этот самый sitemap. Некоторые даже вообще полагают, что сайт без sitemap - вообще не сайт. Sitemap, якобы, способствует быстрой индексации сайта, выводит страницы в топы, предотвращает кражу контента (за счет быстрой индексации), помогает ПС правильнее понимать структуру сайта, гарантирует включение страницы в индекс и т.д. и т.п. Увы, это всего лишь мифы!

Друзья. Sitemap - это прошлый век. О нем написано настолько много неправильного и противоречивого, что мне сегодня будет трудно переубедить вас в том, что сайтам сегодня не нужны sitemap.

ФАКТ 1. О необходимости использовать на сайте sitemap - нигде не сказано. Более того, вот что содержится в определении этого термина согласно Википедии (обратите внимание на слова жирным шрифтом):

 Sitemaps может помочь поисковикам определить местонахождение страниц сайта, время их последнего обновления, частоту обновления и важность относительно других страниц сайта для того, чтобы поисковая машина смогла более разумно индексировать сайт. Использование протокола Sitemaps не является гарантией того, что веб-страницы будут проиндексированы поисковыми системами, это всего лишь дополнительная подсказка для сканеров, которые смогут выполнить более тщательное сканирование сайта.

Из этого определения не следует, что использование sitemap является обязательным атрибутом сайта и какой-либо интернетной панацеей. Так, sitemaps мог играть решающую роль лет 5-10 назад, когда сайты зачастую писались руками в html, без использования "хлебных крошек"  и вообще, без использования "систем управления сайтом", которые сегодня автоматически поддерживают создание правильной структуры сайта (рубрики, метки, календарь и т.д.).

Указать поисковой системе на новые страницы посредством Sitemaps - еще ничего не значит, а порой таит в себе негативные последствия (о которых позднее). Сегодня ПС (эволюционирующие) не нуждаются в ваших подсказках при индексировании (вы думаете, они будут вести себя именно так, как вы это укажете в Sitemaps?), а повальное культивирование культа sitemaps (устаревшего) - скорее всего от незнания.

ФАКТ 2. Многие вебмастера замечали такой парадоксальный факт: новые страницы, которые вскармливались ПС через sitemap очень скоро теряют позиции в результатах поиска. Ответ простой: ПС не воспринимают всерьез страницы, на которых  никто и нигде не ссылается (нет ни внешних, ни внутренних ссылок). Такие страницы могут влететь в индекс и тут же вылететь. Замечали такую ситуацию? Совершенно другая ситуация, когда на страницу, предлагающуюся к индексации, имеются ссылки с других страниц или сайтов! Вам также, наверное, знакома такая ситуация (быстрая индексация страницы посредством социальных лайков). Поэтому у вебмастеров, у которых перелинковка материалов не настроена должным образом - использование sitemap равносильно генерированию дорвеев.

ФАКТ 3. Sitemap содержит практически полную структуру сайта, что облегчает воровство контента, дублирование сайта, создание локальных копий. Если сайт большой (содержит много рубрик и тем), то получить, скажем, нужный перечень ссылок на нужные статьи на сайте без наличия sitemap - можно, но хлопотно. Совершенно другое дело если есть sitemap - содержащий, по сути, все пути на страницы сайта. Многие современные парсеры, нацеленные на воровство и сбор чужого контента, как правило, содержат функцию импорта материалов посредством sitemap. А многие горе-вебмастера даже и не прячут файл sitemap, порядочно размещая его в корне - http://www.example.com/sitemap.xml и даже прописывая расположение в файле robots.txt посредством директивы: Sitemap: <sitemap_location> (хотя он может располагаться где угодно и быть доступен ПС только по извещению через панели вебмастера).

ФАКТ 4. Sitemaps не ускоряет индексирование и не гарантирует включение страниц в индекс ПС. Об этом сказано везде! Так, при извещении Яндекса о наличии sitemap на сайте, он сразу предупреждает, что ему потребуется около 2-ух недель на знакомство с вашей "картой сайта". Более того, здесь же он предупреждает: "Как правило, робот обрабатывает файлы Sitemap не реже раза в две недели". И лишь только потом он принимает решение, подходит ли ему ваша страница или не подходит? На самом деле, sitemap никак не влияет на скорость и важность вашей страницы. Распространенное мнение - что sitemap ускоряет индексирование ("быстрее индексирует сайт") - всего лишь миф.

Нужно ли мне создавать файл Sitemap?

Этот вопрос есть в справочной документации Яндекса. Ответ на него гласит:

Обычно робот Яндекса узнаёт о страницах сайта, переходя по ссылкам со страницы на страницу. В большинстве случаев этого достаточно для полного индексирования сайтов. Однако, если ваш сайт содержит много динамически создаваемых страниц или страницы, для попадания на которые требуется много переходов по ссылкам, робот Яндекса может не найти некоторые из страниц сайта или неверно определить их важность. Файл Sitemap помогает решить эти проблемы.

А теперь задайтесь вопросом: нужен ли sitemap для вашего сайта? Вот-вот, конкретно, для вашего сайта он нужен? Насколько у вас сайт со сложной структурой, в которой Яндексу не разобраться своими силами? Большинство сайтов в интернете - редкообновляемые справочные ресурсы на какой-нибудь CMS (как у автора на WordPress), для которых sitemap - ни что иное как пятое колесо (несмотря на разнообразие свободнодоступных плагинов по этой теме, основная полезная работа которых - нагрузка на сервер.

Спасибо всем, кто дослушал до конца. Несогласных выслушаю в комментариях. Отсутствие у данного сайта sitemap - говорит о том, что я свято верю в то, что говорю.

Оцените материал:
Звёзд: 1Звёзд: 2Звёзд: 3Звёзд: 4Звёзд: 5 (17 голоса, рейтинг: 4,76 из 5)
Загрузка...

Вячеслав - типичный интернетчикВячеслав Скоблей (ака files) - типичный интернетчик. Скитаюсь интернетом, пишу на PHP, увлекаюсь созданием веб-сайтов на Wordpress, решаю многочисленные проблемы, которые до появления интернета не существовали...

Специализируюсь на безопасности сайтов: защищаю сайты от атак и взломов, занимаюсь лечением вирусов на сайтах и профилактикой...

Наверняка у Вас есть вопросы, просьбы или пожелания. Не стесняйтесь спросить, я отвечаю всегда быстро...

20 комментарий

  1. Анна says:

    Спасибо автору за полезную статью. А то пристают всякие гуру сео анализа с тем, что у нас такая проблема, что нет карты сайта и нужно срочно что-то с этим делать, иначе не жить нашему сайту

    1. Вячеслав Скоблей says:

      Не удивлюсь, если Вам говорили, что без sitemap не растут позиции :)

  2. Катя says:

    Вот что сейчас говорит Яндекс:
    ===================
    В каких случаях нужен файл Sitemap
    Яндекс разрабатывает специальные алгоритмы, по которым индексирующий робот узнает о сайте. Например, с помощью внутренних и внешних ссылок — переходя с одной страницы на другую. Иногда робот может пропустить страницы. Используйте Sitemap, если на сайте:
    большое количество страниц;
    отдельные страницы без навигационных ссылок;
    глубокая вложенность.
    Примечание. Яндекс не гарантирует, что все указанные в файле URL попадут в результаты поиска.
    ===================
    Так что автор полностью прав.

    1. Вячеслав Скоблей says:

      Катя, спасибо, что нашли для себя полезной статью 6-ти летней давности! Тем не менее, все актуально для современных горе-SEOшников :)

    2. скучный says:

      У меня вообще такая штука произошла , поставил seo плагин ?все работало индексировалось.Черт дернул ,прописать в robots адрес sitemap , сразу начал пропадать сайт !

  3. Николай says:

    Молодцы! Прям всё додумали за поисковики и их команду, функционал консолей. Вот им нефиг делать везде просить карту сайта)). Карта - это как у врача, то ли Вы сами рассказываете что с вами и что хочешь, то ли догадайся сам врач)) ты ведь умный))).
    "Деревня! - карту купи!" - прям про Вас))
    Карта - Ваше прямое подтверждение Вашего же сайта от Вас, а не догадки робота.

    1. Вячеслав Скоблей says:

      Я не видел проблем на грамотно сделанных сайтах без карты. Карта нужна, если вы криво или нестандартно сделали сайт!

  4. Антоха says:

    Я уже на первых своих сайтах даже не собирался их делать. Когда припёрся "умный" менеджер и стал требовать сделать ему сайтмап - не думая послал его к черту.

  5. says:

    10 лет сайту, на сайте более 10000 страниц. Никогда sitemap не пользовался.
    Если все добротно сделать, то поисковики сами все найдут.
    Я думаю, что на продвижение sitemap вообще никак не влияет!

  6. Инфокиоск says:

    Стоит использовать если сайт не большой, до 300 страниц с постоянным контентом (по крайней мере – хуже не будет). Если же сайт огромный – имхо – лишняя трата времени!

  7. Спасибо, что наткнулась случайно на вашу статью!Теперь все сомнения отсеились, ну ее к черту эту карту!Я в этом деле новичок, долго ломала голову о создании файла сайтмапа, что,да как!А теперь точно пошлю Яндекс с их сайтмапом!

    1. Мне кажется, лучше все таки делать карту. Может помочь потом, если сбой какой на сайте. У меня было такое - по сайтмапу искал некоторые статьи.
      Если у Вас проблемы с созданием сайтмап - сделайте обычный файл sitemap.txt и простое перечисление урлов. У меня такая. И нормально все индексируется.

      Вот только не упрощает ли наличие сайтмап поиск непроиндексированных статей ворам контента? Это может быть проблема.

      1. Антоха says:

        Никакого смысла. Оригиналы сайта просто всегда бэкапить надо на компе. И иногда ещё куда-нибудь.

  8. Геродот says:

    sitemap однозначно уже не нужен! Давно не пользуюсь им: проблем с индексацией никаких! Робот же ПС как настроен: он переходит по ссылкам на сайте, а они ведь все перелинкованы, даже таким минимальным набором как навигация (меню), хлебные крошки.
    И даже если нигде вашей ссылки нет, но если человек когда-либо как-либо по ней перейдет - робот рано или поздно ее посетит! Вы наверное охреневали, как это в поиске иногда появляется мусор, на который нигде никогда не было ссылок? Так зачем тогда роботу sitemap, если он лезет во все щели, даже иногда игнорируя предписания htaccess, роботс и т.д.?
    Сегодня sitemap - это такой древний инструмент, как и каталоги сайтов! Они сейчас никому не нужны, а ведь это в свое время была основная навигация в интернете, и без них интернет был вообще не мыслим! Нельзя было найти сайт в интернете, если только его нельзя было встретить в каком-нибудь каталоге сайтов!
    Извините за поучения, но с автором согласен, поэтому и аргументирую. Давно не пользуюсь sitemap и от этого никаких проблем не возникает. Соответственно: зачем заморачиваться?

    1. Вячеслав says:

      Геродот, про каталоги сайтов - это из фильма "Война браузеров"?

      1. Геродот says:

        Не помню какой файл :)

  9. GladWeb says:

    ФАКТ 1. О необходимости использовать на сайте sitemap - нигде не сказано
    Ну почему нигде не сказано. Практически в каждой инструкции от поисковиков (яндекс и гугл) фигурирует то, что сайтмап очень даже желателен.

    Факт 2 использование sitemap равносильно ссылка генерированию дорвеев.
    Тоже не понятно. Сайтмап это инструкция, а не страница.

    Дальше уже не стал комментировать, ибо это не факты, как вы называйте - а лишь мнение.

    1. Вячеслав says:

      - Практически в каждой инструкции от поисковиков (яндекс и гугл) фигурирует то, что сайтмап очень даже желателен

      Очень бы хотелось взглянуть! Кроме как инструкций - что такое сайтмап и куда его вбивать :)

      - использование sitemap равносильно генерированию дорвеев

      Выразился каламбурно, прошу прощения. Здесь имеется ввиду, что попытки скормить ПС через сайтмап генерированные, на не кого и никуда ссылающиеся страницы (не перелинкованные) если и влетают в индекс, то быстро вылетают.

  10. Антон says:

    Наконец-то все сомнения прошли и мозаика сложилась! Про размещение НЕ в корне файла сайтмап вообще отлично сказано.
    Статья супер. Прочитал влет!
    Передумал генерить sitemap на наши несколько тысяч страниц.
    У наших  конкурентов их нет. Или заброшены. Роботы умнеют. 

  11. Прочитал немало статей по поводу карты сайта - мнения противоречивые. Пожалуй автор прав - не стоит заморачиваться с картой сайта

Добавить комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *