Crawler tester

crawler.realtysev.ru

Тестовый стенд аудита сайта

Ссылки на страницы, которые не загрузились

Ожидается: на странице «Не загрузились» у обоих адресов по два источника — главная и эта страница.

1. Ссылка на страницу, которая не отвечает

Сервер не отвечает дольше 15 секунд, и паук бросает загрузку. Кода ответа нет, поэтому битой эта ссылка не считается, но на странице «Не загрузились» эта страница должна быть среди источников адреса — рядом с главной.

Ссылка: Медленная страница со страницы «не загрузились»

<a href="/tests/ttfb-timeout.php">Медленная страница со страницы «не загрузились»</a>

2. Ссылка на слишком большую страницу

Страница весит больше 8 МБ, и паук её не скачивает. Как и в первом случае, кода ответа нет: ссылка видна только на странице «Не загрузились», среди источников адреса.

Ссылка: Тяжёлая страница со страницы «не загрузились»

<a href="/tests/html-size-over-8mb.php">Тяжёлая страница со страницы «не загрузились»</a>