Screaming Frog SEO Spider обновлён до версии 10.0

Команда разработчиков Screaming Frog SEO Spider сообщила о том, что инструмент обновлён до версии 10.0. Основные нововведения:

Расписание сканирования

В сервисе теперь можно настраивать автоматические проверки – как однократные, так и через заданный интервал времени.

Пользователи смогут предустановить режим («Spider» или «List»), сохранённую конфигурацию, а также API (Google Analytics, Search Console, Majestic, Ahrefs, Moz).

Также можно будет автоматически сохранить файл с результатами сканирования и экспортировать любые вкладки, фильтры, отчёты и файлы XML Sitemap в выбранное место.

Работа с SEO Spider через командную строку

В этом режиме можно будет запускать краулер, настраивать его конфигурацию, а также сохранять и экспортировать практически все данные и отчёты.

Полный список доступных команд и информация о том, как использовать командную строку, содержится в обновлённом руководстве для пользователей.

Индексируемость и статус индексируемости

Это третье самое крупное нововведение в данном релизе. Теперь каждый URL будет классифицироваться как «индексируемый» (indexable) или «неиндексируемый» (non-indexable).

Каждый URL также получит статус индексируемости. Если URL неиндексируемый, то будут указаны причины, почему. Например, «blocked by robots.txt», «noindex» и т.д.

Сканирование XML Sitemap в рамках аудита сайта

Ранее в SEO Spider можно было сканировать файлы XML Sitemap в режиме списка – List mode. Теперь пользователи смогут сканировать эти файлы в рамках общей проверки сайта.

Просмотреть основные проблемы с файлами XML Sitemap можно будет на новой вкладке Sitemaps.

Internal Link Score

Новая метрика определяет относительную ценность страницы на основании её внутренних ссылок. Оценка производится по 100-балльной шкале, что позволяет понять, когда внутренние ссылки необходимо улучшить.

Анализ после сканирования

SEO Spider теперь может выполнять анализ по окончанию сканирования для предоставления большего количества данных пользователям.

Crawl analysis может выполняться автоматически при завершении сканирования или запускаться вручную пользователем.

Сканирование и проверка AMP

Пользователи теперь могут автоматически извлекать и сканировать ускоренные мобильные страницы (AMP) и проверять их.

Отдельные вкладки для «Canonicals» и «Pagination»

Подпункты «Canonicals» и «Pagination» ранее были расположены на вкладке «Directives». Теперь они получили свои собственные вкладки с обновлёнными и более точечными фильтрами.

Обновлённый отчёт по редиректам

SEO Spider теперь предоставляет данные по цепочкам канонических ссылок и «смешанным цепочкам». Найти эту информацию можно в переименованном отчёте «Redirect & Canonical Chains».