Для проверки использовали
Netpeak Spider - инструмент для комплексного внутренего SEO-аудита сайта. для сканирования страницы или весь сайт целиком, переходит" выбранные для сканирования страницы или весь сайт целиком, переходя по внутренним сылкам.
процессе Spider анализирует свойства страницы, проверя метаданные, атрибуты, редиректы, инструкции для поисковых роботов, а также множество других данных, важных для поисковой оптимизации.