404 Not Found – значение для SEO, причины, поиск, устранение

Коды состояния (Status Codes) определяются стандартом протокола HTTP RFC9110 HTTP Semantics принятым в июне 2022 года. Впервые коды состояния попали в стандарт еще в 1996 году RFC1945 HTTP/1.0 всего их было 15 штук и одним из них был код 404.

В предыдущей версии стандарта HTTP/0.9 от 1990 года коды состояния не упоминаются. На данный момент только 4хх кодов в стандарте описано 22 штуки.

Согласно актуальной версии стандарта RFC9110:

Код состояния (status code) - это техзначное число от 100 до 599, которое описывет результат запроса от клиента к серверу.

Первая цифра кода состояния определяет класс ответа, таким образом, всего существует пять классов.

404 принадлежит к классу 4хх (Client Error) – запрос содержит неверный синтаксис или не может быть выполнен и указывает на то, что клиент, скорее всего ошибся.

Google прямо заявляет, что 404 не влияет на индексацию и ранжирование сайта. В справке Яндекса так же не говорится про вред 404 для SEO. Если резюмировать официальную информацию поисковиков и данные от представителей Google, то картина такая:

Наиболее свежая позиция Google по 404 ошибке была озвучена в июне 2024 года Гэрри Иллисом (Gary Illyes) – представителем Google.

Также есть мнение SEO сообщества о влиянии 404 на ранжирование:

Таким образом, если все стандартные настройки сайта корректны и Soft 404 отсутствует, то на продвижении сайта наличие ответа 404 никак не сказывается. И это логично, так как в ином случае, нечестные конкуренты могли бы влиять на выдачу массой битых ссылок на чужие сайты. Однако, есть случаи, когда Google советует разобраться в причинах появления 404:

Можно резюмировать, что если следовать рекомендациям Яндекс и Google, то 404 ошибка не станет проблемой в продвижении сайта. Но причины появления 404 ошибки различны и некоторые из них могут влиять на поведенческие факторы, а это, в свою очередь, будет влиять на ранжирование, и такие причины нужно выявлять и вовремя устранять.

Был у меня один сайт. Старый, относительно большой (5000 – 6000 страниц), постоянно пополняемый магазин. Когда-то переехал на CMS будучи изначально самописным. Пережил попытку внедрения мультиязычности, но откатился. Пострадал от попытки внедрения региональности – откатился, вторая попытка была удачна и в этом состоянии я его и застал. После переезда, внедрений и откатов, установки и удаления различных модулей с ним активно работали, но про 404 забыли.

Сбор данных из Яндекс Метрики дал такие цифры:

Поскольку на сайте была настроена сквозная аналитика и электронная коммерция, было можно посчитать среднюю конверсию в покупку, средний чек и среднюю наценку (в терминологии Метрики «Прибыль») и сделать вывод о целесообразности дальнейших работ.

Главное - выявить причины появления 404, чтобы устранить текущие ошибки и не допустить ошибок в будущем:

В работе по устранению причин потребовалось активное участие контентщика и программиста - ребята понимающие и инициативные. Все было сделано быстро и процент 404 упал до 0,1%. После чего остановились и решили заняться этим как-нибудь потом, ибо были и другие задачи.

Было посчитано затраченное рабочее время специалистов и сделан вывод – работы окупятся за 3-4 месяца.

В рамках борьбы за поведенческие была также переработана, по мере возможности, сама страница 404 ошибки. Изменен дизайн, добавлен блок «Рекомендуемые товары», блок «Акции» и выделено небольшое пространство под последнюю актуальную новость. Вообще, различных дизайнерских вариантов оформления 404 страницы найти можно много.

Существует несколько способов нахождения ошибки 404 на сайте. В общем-то не хитрые настройки в Яндекс Метрике или Google Tag Manager.

В идеале использовать все варианты, чтобы сравнивать данные между собой.