Для проверки использовали
Netpeak Spider - инструмент для комплексного внутреннего SEO-аудита сайта. Фактически программа "обходит" выбранные для сканирования страницы или весь сайт целиком, переходя по внутренним ссылкам.
В процессе Spider анализирует свойства страницы, проверя метаданные, атрибуты, редиректы, инструкци для поисковых роботов, а также множество других данных, важных для поисковой оптимизаци.