Google напоминает: наличие файла Sitemap не гарантирует попадания в индекс всех указанных URL
Как
Вопрос отраслевого специалиста,
«Прежде всего, обращаю ваше внимание на то, что наличие файла Sitemap не подразумевает того, что абсолютно все указанные в нём адреса страниц попадут в индекс Google. Вам следует расценивать файл Sitemap как дополнительный способ, позволяющий алгоритму сканирования Googlebot обнаружить ваш контент. Если URL-ы не будут добавлены в Sitemap краулерам потребуется больше времени на индексацию вашего сайта. Иными словами, без Sitemap сайт будет индексироваться еще дольше.
Еще один аспект, на который стоит обратить внимание: наши алгоритмы вполне могут «принять решение» не индексировать абсолютно все URL-ы вашего сайта, добавленные в файл Sitemap. И это повсеместная ситуация. Как правило, не индексируются страницы, содержащие малозначимый контент», - отвечает Гэри Илльес на вопрос пользователя.
В свою очередь напомним, что представители российского поисковика Яндекс на странице Помощи вебмастеру также
Также напомним, что в апреле 2013 года в API Яндекс.Вебмастера появилась возможность работы с файлами Sitemap, а также просмотра истории индексирования сайта.