404-я ошибка, она же Not Found (от англ. «не найдено»), – это код ответа сервера, сообщающий о том, что он доступен для обращения клиента, но запрашиваемые данные не удается найти.
Ошибка 404 является одной из наиболее часто встречающихся. Пользователи видят ее, переходя по ссылкам, ведущим на несуществующие в данный момент документы. В результате пользователь не видит ожидаемую информацию и, как правило, сразу же уходит с сайта, что пагубно сказывается на поведенческих факторах ранжирования и лояльности к ресурсу.
Механизм и причины появления
Ошибка 404 может возникать, когда:
- пользователь неправильно ввел адрес страницы;
- страница была удалена с сайта;
- документ переместили на новый адрес, но не сделали редирект (перенаправление).
Перед тем как открывается содержимое любой страницы, устройство пользователя отправляет запрос к веб-сервису о работоспособности. В ответ сервер посылает браузеру HTTP-заголовок со статусом страницы. В норме это «200 ОК». Если искомый материал не обнаружен, сервер выдает сообщение об ошибке «404 Not Found», и пользователь видит его вместо нужной ему страницы.
Каждая цифра кода несет информацию: первая четверка обозначает, что произошла ошибка клиента, ноль – синтаксическая ошибка в URL, конечная цифра четыре означает, что запрашиваемой страницы на сервере нет.
Как избавиться
Сначала нужно найти все документы с этим кодом ответа сервера. Чтобы это сделать, можно:
- посмотреть выгрузку проиндексированных страниц в Вебмастерах Яндекса и Гугла и выгрузить список URL с обнаруженной ошибкой 404;
- воспользоваться любой программой, позволяющей просканировать сайт для поиска ошибок (Xenu, Screaming Frog SEO Spider и т. д.).
Если страницы были полностью удалены с сайта, но на них приходят пользователи из поисковых систем, можно вручную отправить запрос на их исключение из индекса. Обычно этого не требуется, несуществующие документы сами выпадают из выдачи, но бывают исключения, когда нужно вмешательство.
В Яндекс.Вебмастере нужно добавить список страниц с ошибкой 404 в специальное поле «Удалить URL» в разделе «Инструменты».
В Search Console Гугла нужно указывать документы по одному в разделе «Удалить URL-адреса» в блоке «Индекс Google».
Важно убедиться, что удаленных файлов нет в XML-карте сайта.
Если материалы не были удалены, а сменили адреса, нужно настроить перенаправление со старых на новые. Для этого используется 301-й редирект. Документы автоматически заменятся в выдаче после переиндексации и обновления поисковой базы.
Чтобы ускорить процесс, при небольшом количестве адресов можно воспользоваться возможностью отправить поискового бота на переобход. В Яндекс.Вебмастере это раздел «Индексирование» – «Переобход страниц». Лимит определяется индивидуально для каждого сайта. Для некоторых он может составлять 30, 60, 80 URL.
В Search Console это раздел «Сканирование» – «Просмотреть как Googlebot», а потом нужно нажать на «Запросить индексирование».
Если URL очень много, нужно отправить на переобход пересозданную карту сайта.
Как быть с внутренними ссылками? Их лучше исправить в любом случае, потому что, даже если настраивать перенаправления, не очень хорошо, когда их много.
Если материалы были удалены, появляются битые ссылки. Их нужно найти с помощью сканирующих программ и обновить, удалить или заменить подходящими.
Если на страницы c 404-й ошибкой есть внешние ссылки, при возможности их нужно изменить, если покупные – необходимо снять.
Оформление
Чтобы минимизировать возможный вред от того, что пользователь попал на несуществующую страницу, ее нужно корректно настроить:
- обязательно сделать оригинальное оформление для 404-й ошибки в стиле сайта, чтобы не было стандартной «заглушки»;
- пояснить, что случилась ошибка, указать ссылку на главную, поиск, популярные категории или другие полезные материалы;
- можно написать контакты для связи с веб-мастером.
Иногда владельцы сайтов превращают страницу 404 в маркетинговый инструмент или вирусную фишку.
Например, предлагают скидку по промокоду тем, кто увидел ошибку 404, или размещают там забавную картинку, анимацию и т. д.