Crawler tester

crawler.realtysev.ru

Тестовый стенд аудита сайта

NoFollow: слово nofollow только в тексте описания

Ожидается: без предупреждения Nofollow.

Директив для роботов на странице нет, слово nofollow встречается только в мета-описании. Старая проверка noindex искала подстроку в любом meta-теге и ошибалась на таких страницах, особенно на сайтах, которые пишут про SEO. Здесь проверяем, что новая логика смотрит только на теги для роботов.