
Как найти ошибки 404 на сайте с FriendlySpider
Проверить сайт на битые ссылки и найти все проблемные точки можно быстро с помощью краулера FriendlySpider.
Краулер просканирует все страницы сайта и выдаст список битых ссылок с их расположением на страницах.
Сканирование сайта на ошибки с помощью краулера является более точным и быстрым по сравнению с ручной проверкой. Так аудит небольшого сайта до 500 страниц в среднем займет пару минут, среднего от 1000 до 10 000 страниц – меньше часа, большого – от часа. Скорость сканирования зависит также от отклика сайта и параметров ПК, на котором установлена программа.
Как найти битые ссылки на сайте с помощью FriendlySpider
1. Добавьте новый проект для старта сканирования, добавив в строку сканирования адрес сайта и нажав на «+».

2. Откроется окно «Сканирование сайта». Выберите вкладку «Настройки» и задайте параметры сканирования.
Если вы хотите проверить все страницы сайта на битые ссылки, отключите с помощью ползунка настройки: «Следовать правилам файла robots.txt», «Следовать правилам <meta name="robots">, «Следовать правилам заголовка X-Robots-Tag». Если вы хотите посмотреть на сайт «глазами» поисковых систем с заданными ограничениями обхода, то наоборот включите учет robots.txt, мета-тега "robots" и заголовка X-Robots-Tag.
Включите сканирование картинок, скриптов и стилей для получения наиболее полного аудита сайта.

3. Дождитесь окончания сканирования. По окончании сканирования во вкладке «Ход сканирования» будет показан прогресс 100% и сообщение о готовности.

4. Чтобы посмотреть все битые ссылки сайта перейдите во вкладку «Что-то пошло не так». Тут будут представлены все страницы с кодом: 404 (страница не найдена), 500 (внутренняя ошибка сервера), 403 (доступ запрещен), 600 (что-то пошло не так).

5. Посмотреть, где расположена битая страница, можно кликнув по ней дважды левой кнопкой мыши. Местонахождение страницы будет показано в блоке «На каких страницах расположено».

6. Устранить битую ссылку можно несколькими способами:
- Удалить ее со страницы, где она расположена
Установить редирект со старого адреса страницы на новый
- Битые редиректы можно посмотреть в блоке «Анализ ошибок» с типом «Критические».
7. Битые редиректы можно посмотреть в блоке «Анализ ошибок» с типом «Критические».


