Добавление файла Sitemap не обеспечивает гарантированной индексации всех страниц в Google

Таким стал ответ на вопрос одного из экспертов данной отрасли. Специалист сообщил, что он добавил на сайт файл Sitemap, который состоит из около 40 тысяч адресов страниц, но на текущий момент поисковая система проиндексировала только 100 из них. Затем эксперт еще раз сообщил поисковику о том, что на его сайте присутствует Sitemap, так как подумал, что такое решение поможет Google проиндексировать все URL. Но желаемого результата он так и не добился. Его заинтересовал вопрос о том, почему поисковик не хочет индексировать те страницы, которые указаны в вышеупомянутом файле, учитывая тот факт, что сам файл составлен по всем правилам системы.

 «В первую очередь, стоит отметить, что наличие данного файла вовсе не обеспечивает попадания всех адресов страниц, которые в нем перечислены, в индекс поисковой системы. Нужно понимать, что Sitemap – это лишь вспомогательное решение, благодаря которому поисковый робот может выявить добавленные материалы. Если адреса страниц не будут указаны в файле, индексация может занять больше времени. То есть, Sitemap всего лишь ускоряет процедуру индексации материалов сайта.

Кроме этого, необходимо брать во внимание то, что алгоритмы поисковой системы могут решить не добавлять в индекс все страницы конкретного сайта, которые указаны в Sitemap. Данная ситуация является вполне обычной. В большинстве случаев, в индекс не добавляются те страницы, на которых опубликованы материалы, которые не приносят какой-либо пользы», – говорит Гэри Илльес. Таким образом необходимо помимо технических аспектов заботиться и о юзабилити сайта.

Необходимо упомянуть о том, что команда специалистов отечественной поисковой системы Яндекс также предупреждает о подобном. Они говорят, что хотя Sitemap учитывается поисковым роботом, однако это вовсе не значит, что абсолютно все указанные там адреса окажутся в индексе российского поисковика.

Напомним, что весной текущего года в API Яндекс.Вебмастера добавили функцию использования файлов Sitemap. Кроме этого, появилась возможность ознакомления с историей индексирования ресурса.