Ошибки 404 на сайте: приоритеты и поиск источников

Что означают ошибки 404 на сайте#

HTTP-статус 404 Not Found означает, что сервер не нашёл запрошенный ресурс. Это допустимый ответ для удалённой страницы без подходящей замены. Восстанавливать все такие адреса не требуется. Для бизнеса ответ становится проблемой, когда посетитель ждёт карточку товара, услугу или материал и видит сообщение об отсутствии. Смотрите и технический статус, и путь перехода.

Покупатель может открыть каталог и нажать на товар. Карточка отсутствует, хотя ссылка осталась. Нужно выяснить, товар удалили намеренно, ошиблись в адресе или страница сломалась. Один экран ошибки скрывает разные причины.

Google не индексирует URL с ответом 404. Ранее проиндексированные адреса с таким ответом поисковая система постепенно исключает из индекса. По одному списку ошибок нельзя судить о состоянии всего сайта. Обработку ответов описывает документация Google.

Отдельно проверяйте soft 404. Так Google классифицирует страницу, содержимое которой похоже на сообщение об отсутствии или ошибке. Сервер при этом может возвращать ответ 200. Надпись «страница не найдена» сама по себе не подтверждает HTTP-статус 404 Not Found.

Исправление 404 начинается с вопроса: должна ли эта страница существовать и кто сейчас пытается её открыть?

Какие ошибки 404 исправлять в первую очередь#

В первую очередь исправляйте действующие страницы, которые исчезли по ошибке. Затем берите ссылки из меню, каталога, разделов услуг, рекламы и рассылок. Приоритет зависит от назначения страницы, подтверждённых переходов, места ссылки и наличия замены. Намеренно удалённый материал без замены может оставаться с ответом 404, если сайт больше не предлагает его открыть.

Адрес услуги из действующего объявления проверяйте вместе с рекламой. Если услуга сохранилась, восстановите посадочную страницу или исправьте адрес объявления. Если предложение закрыли, решите, куда должен вести этот переход. Перенаправление на случайный раздел на этот вопрос не отвечает.

Ссылка в меню бьёт сразу по многим посетителям. Случайный запрос сканера к несуществующему пути обычно не прерывает покупку. Поэтому очередь строится по прерванному пути человека, а не по длине отчёта.

Когда ошибки появились после переноса сайта, проверьте маршруты, соответствие старых и новых адресов и правила перенаправления. Общая причина может затронуть целый раздел. Связанные проверки описаны в плане миграции на HTTPS.

Неизвестный URL сначала исследуйте. Он может появиться из опечатки, старой публикации или запроса автоматического сканера. Не создавайте страницу только ради исчезновения строки в отчёте. Google допускает корректный 404 для удалённого содержимого без замены.

Очередь исправлений должна отражать прерванные пути посетителей. Само присутствие адреса в отчёте ещё не задаёт его приоритет.

Где искать адреса с ответом 404#

Собирайте адреса из Google Search Console, обхода сайта и журнала запросов сервера. Эти источники отвечают на разные вопросы: какие URL нашёл Google, куда ведут доступные ссылки и какие адреса реально запрашивали. Сопоставьте найденные URL и проверьте текущий HTTP-ответ, прежде чем назначать исправление. Накопленные сведения могут расходиться с состоянием сайта.

В Google Search Console откройте отчёт об индексировании страниц и группу «Не найдено (404)». Так вы получите адреса, известные поисковой системе. Обход означает получение страницы роботом. Индексирование означает включение содержимого в поисковый индекс. Эти события при чтении отчёта нужно различать.

Инструмент проверки URL показывает сведения об известной Google версии. Отдельно откройте опубликованный адрес. Отчёт копит данные прошлых обходов и может не совпадать с тем, что сервер отдаёт сейчас.

Для проверки ссылок запустите Screaming Frog SEO Spider. Откройте Response Codes, примените фильтр Client Error (4xx) и отдельно отберите ответы 404. Фильтр захватывает и другие ошибки клиента, поэтому весь список нельзя считать отсутствующими страницами.

Обход по ссылкам не находит изолированные URL. Адрес может отсутствовать в навигации и встречаться в старой рассылке. Тогда смотрите журнал запросов сервера. Набор полей в журнале зависит от настроек записи.

Если задача шире битых ссылок, используйте чек-лист поискового аудита. Для отдельного URL сохраняйте источник обнаружения и результат текущей проверки.

Как найти источники ссылок на отсутствующие страницы#

Чтобы найти источник ошибки, разделите отсутствующий URL и место размещения ссылки. Первый адрес показывает, куда пытались попасть. Второй показывает, что нужно изменить. Начните со ссылок внутри сайта, затем проверьте подтверждённые внешние публикации, объявления и рассылки. Карту сайта XML исследуйте отдельно: она может сообщать URL роботу, даже если посетителям этот адрес нигде не предлагают.

В Screaming Frog SEO Spider выберите строку с отсутствующим адресом и откройте Inlinks. Поле From показывает страницу-источник, To — адрес назначения. Этот порядок описан в инструкции производителя.

Если один ошибочный путь встречается на разных страницах, проверьте меню, подвал и общие блоки шаблона. Исправление общего блока убирает повторение. Затем повторите обход.

Поищите старый путь в системе управления сайтом и в доступных файлах. Проверяйте полный URL и относительный путь: ссылку могли сохранить в любой форме.

В журнале ищите HTTP-заголовок Referer, если настройки его сохраняют. Найденное значение используйте как подсказку и проверьте указанную страницу. Если значения нет, происхождение запроса остаётся неподтверждённым.

Заведите реестр: отсутствующий URL, текущий статус, источник, подтверждение, действие, ответственный. Для сайта с автоматическим потоком статей проверьте также общие блоки ссылок.

Найти отсутствующую страницу недостаточно. Для исправления ссылки нужно установить место, где она размещена.

Как выбрать исправление для каждого адреса#

Выбирайте действие по причине отсутствия страницы и по наличию смысловой замены. Опечатку исправляйте в источнике ссылки. Случайно удалённое нужное содержимое восстанавливайте по прежнему адресу. При постоянном переносе настройте постоянный редирект на эквивалентную страницу. Если содержимое удалили без замены, сохраните ответ об отсутствии и уберите устаревшие ссылки из действующих разделов.

Ситуация	Действие с адресом	Действие с источником
В ссылке опечатка	Проверить существующую целевую страницу	Заменить ошибочный URL
Нужную страницу удалили случайно	Восстановить содержимое по прежнему URL	Проверить переход после восстановления
Страница переехала навсегда	Настроить редирект на подходящую замену	Указать конечный адрес
Страницу удалили без замены	Оставить ответ 404 или 410	Удалить устаревшую ссылку и запись XML

Постоянный серверный редирект использует коды 301 или 308. Временные перенаправления используют 302 или 307. Тип выбирайте по характеру изменения: перенос навсегда или временная замена.

404 Not Found сообщает, что ресурс не найден. 410 Gone обозначает, что ресурс больше недоступен, предположительно постоянно. Google сходным образом обрабатывает эти ответы.

Если старую услугу заменила эквивалентная, проверьте соответствие предложения и настройте перенос. Массовое перенаправление на главную может запутать посетителей и привести к soft 404.

На странице ошибки оставьте понятное сообщение и навигацию по действующим разделам. Сервер при этом должен сохранять ответ 404.

Как проверить результат и предотвратить повторение#

Проверяйте исправление с исходного адреса и со страницы, где стояла ссылка. Убедитесь, что сервер возвращает нужный HTTP-ответ. Если настроено перенаправление, просмотрите цепочку и конечную страницу. Источник больше не должен содержать ошибочный путь. Затем повторите обход сайта. Данные Google Search Console сверяйте с текущей проверкой и учитывайте момент последнего обхода робота.

После восстановления откройте прежний URL и проверьте содержимое. После правки шаблона проверьте страницы, где этот блок встречался. Конечная страница должна отвечать ожиданиям человека, который открыл старую ссылку.

Ошибка может оставаться в отчёте, хотя ссылка уже работает. Google объясняет это тем, что исправление могло произойти после последнего обхода. Сохраните результат текущей проверки и дождитесь новых данных. Повторная смена адреса без найденной причины усложняет расследование.

Для профилактики привяжите проверку ссылок к удалению, переименованию и переносу страниц. Сохраняйте соответствия старых и новых URL. Периодичность остальных проверок определите вместе с ответственной командой: универсального обязательного интервала нет.

В отчёте по SEO просите показывать закрытые случаи с подтверждением: исходный адрес, найденную причину, выполненное действие и результат.

Работа закончена, когда посетитель проходит исправленный путь, а проверка подтверждает выбранный ответ сервера.

Что подготовить до исправления#

До начала работы подготовьте доступы, список проблемных адресов и сведения о назначении страниц. Исполнитель должен понимать, какое содержимое сохранилось, что удалили намеренно и какие каналы продолжают приводить посетителей. Без этого правка может убрать строку в отчёте и оставить человека без нужного товара или услуги. Для каждого случая заранее определите, кто принимает решение и кто меняет сайт.

• Доступ к Google Search Console. Подготовьте отчёт с адресами и сведения о последнем обходе, чтобы сопоставить их с текущей проверкой.
• Доступ к системе управления сайтом. Уточните, кто может исправить ссылки в материалах, меню и общих блоках.
• Возможность проверить настройки сервера. Назначьте исполнителя, который проверит HTTP-ответы и правила перенаправления.
• Список удалённых и перенесённых страниц. Укажите причину изменения и подходящую замену, если она существует.
• Перечень действующих каналов перехода. Добавьте объявления, рассылки и подтверждённые внешние публикации со старыми адресами.
• Реестр решений и ответственных. Отделите подтверждённые причины от предположений, назначьте действие и способ проверки результата.

Перед передачей задачи согласуйте границы работы. Восстановление страниц, исправление источников и настройка переносов могут требовать разных исполнителей. Это удобно зафиксировать вместе с составом работ по SEO. К реестру приложите ссылки на рекомендации, по которым будете принимать результат.

Ниже — отдельные случаи, которые не выбирают исправление за вас, но часто путают расследование. Если источник недоступен или происхождение запроса не подтверждено, зафиксируйте это в реестре. Отсутствие сведений нельзя подменять выводом, что страницы или ссылки никогда не было.

Источники#

Проверяйте решения по документации Google и по инструкции производителя инструмента обхода. Эти документы описывают обработку ответов сервера, допустимое удаление страниц без замены, чтение отчёта об индексировании и связь найденного адреса с местом ссылки. Назначение страницы и подходящую замену всё равно устанавливайте по содержимому своего сайта.

• HTTP-коды и обработка Google — Google.
• Рекомендации по ошибкам 404 — Google Search Console.
• Отчёт об индексировании страниц — Google Search Console.
• Поиск неработающих ссылок — Screaming Frog.

Если нужна помощь с расследованием ошибок 404, оставьте заявку на аудит сайта и приложите найденные адреса.