Битые ссылки

Что означает термин

Битая ссылка — это страница, которая обычно отдает код ответа сервера 404 и по факту не существует. 

Смоделируем ситуацию: seo-специалист занимался продвижение страницы “Установка кондиционеров Indesit”: 

• оптимизировал структуру, 
• текст, 
• купил ссылок на страницу.

То есть потратил определенное количество бюджета и времени. 

Работа дала свои плоды — позиции выросли, пошел трафик, все счастливы.

Прошло какое-то время, клиент перестал оказывать подобную услугу и со спокойной совестью удалил страницу. Её код ответа вместо 200 стал 404. Все свои накопленные положительные временные, поведенческие и ссылочные факторы страница утратила, так как с 404 кодом ответа сервера её показатели обнуляются. 

К тому же данный URL участвовал во внутренней перелинковке сайта: в основном меню, на html-карте, на внутренних страницах услуг. И никто его из перелинковки не удалил. 

Получается, что помимо “обнуления” показателей, на эту страницу ссылались другие страницы, размывая свой вес. 

Также все внешние домены, ссылающиеся на данную страницу, перестали передавать вес домену. 

А теперь представьте, что такая битая ссылка не 1, а их 1000. Это очень плохо. 

На этом примере мы рассмотрели, как битые ссылки могут появляться на сайте и вредят его продвижению.

Откуда берутся такие ссылки

К сожалению, вариантов возникновения наличия битых ссылок на сайте великое множество. Перечислим самые частые причины возникновения адресов, прекративших своё существование.

• Удаление страниц.
• Изменение URL-адреса существующей страницы без настройки 301-редиректа. Даже если будет изменена только одна буква – изменится URL-адрес, и ссылка по прежнему адресу станет недоступной.
• Изменение архитектуры и структуры сайта без настройки 301-редиректов. Адрес может меняться и в том случае, когда происходит изменение URL родительского раздела. Например, первоначально на сайте был раздел под названием «Одежда», а в нем – категории «Верхняя одежда», «Платья», «Брюки» и прочие. Если администратор сайта решит сначала сделать категорию по полу (женская или мужская), а к ней привязать раздел «Одежда», то и весь адрес страницы может изменится, а ссылка, ведущая на нее, будет 404.
• Некорректная настройка переезда на https протокол. 

Зачем нужно удаление битых ссылок

Повторим почему Broken links могут навредить вашему сайту:

• Мешают сканированию сайта поисковым роботам — тратят краулинговый бюджет впустую.
• Размывают “внутренний вес”. 
• Ведут пользователей в никуда.
• Не передают статический вес другим страницам.

Поэтому необходимо периодически, хотя бы раз в 3 месяца, проводить анализ ресурса на наличие Broken links. 

Как обнаружить ссылки, ведущие на удаленные страницы

Заниматься ручным поиском битых ссылок могут себе позволить только владельцы маленьких веб-сайтов и сеошники-мазохисты. Перейдем к эффективным автоматическим и полуавтоматическим методам обнаружения страниц с ошибками.

Google Search Console

Найти битые ссылки можно в панели Google Вебмастера. 

• Воспользуемся отчетом “Покрытие”. 
• Ошибка со статусом “Отправленный URL не найден (ошибка 404). 
• Выгружаем, чекаем каждый и делаем выводы.

Яндекс.Вебмастер

Рассмотрим вариант обнаружения битых ссылок в панели Вебмастера Яндекс.

1. Открываем раздел “Индексирование” — “Страницы в поиске”

Далее “Исключенные страницы” — “Статус” — “Ошибка HTTP 404”

Также можно посмотреть какого числа произошло появления подобных ошибок

В панели Яндекса битые ссылки найти можно, открыв подраздел «Ссылки». Он расположен в разделе «Статистика обхода».

Xenu

Достаточная старая программа, хорошо известная веб-мастерам «со стажем», но при этом не теряющая актуальности. Программа достаточно функциональная. Она работает быстро, легко находит перенаправления, позволяет делать неоднократные проверки, к тому же пользоваться программой можно бесплатно.

1. Парсим сайт — дожидаемся окончания парсинга, когда в правом нижнем углу будет написано 100%
2. Далее выбираем Retry broken links и получаем отчёт с битыми ссылками

Netpeak Spider

Работает так же, как и Xeny, но с недавнего времени может взломать ваш компьютер и реализовывать рассылку. Плюс весомый недостаток  – утилита представлена только в платном варианте.

Screaming Frog SEO Spider Website Crawler

Универсальная программа для проверки всего, чего сеошная душа пожелает. Помимо платной версии, есть и бесплатная. 

Расширение для Google Chrome  

Значительно облегчит поиск битых ссылок, если необходим постраничный анализ небольшого ресурса. 

Ahrefs

Удобный инструмент, предназначенный для анализа ссылочной массы. Наряду с другими опциями и возможностями, он  занимается проверкой сайта на битые ссылки и их сбором в специальном отчете, который можно экспортировать.

Как исправить Broken links

Чтобы не ошибиться в своих действиях и не навредить сайту еще больше, нужно внимательно проанализировать Broken links, найденные с помощью любого из перечисленных сервисов, разнести их в несколько категорий и исправить обнаруженные ошибки. 

1. Анализ ссылок

Главное правило устранения любой ошибки – понимание ее причины. Чтобы ситуация не повторилась, важно провести анализ битых ссылок на сайте и понять в чем причина появления оной, и как эту причину устранить. 

Какие причины возникновения могут быть:

• Проблема может скрываться в человеческом факторе — в несогласованности действий клиента, разработки и seo-специалиста. Чтобы нивелировать проблему может помочь внедрение в рабочие процессы определенных устных регламентов, которые рекомендуют согласовывать удаление страниц с seo-специалистом. 
• Страницы карточек товара могут удаляться системой автоматически, после того как товар закончился в 1С. Эту проблему может пофиксить внедрение дополнительного статуса товара — “товар закончился”.
• Плагин админки перестал работать, а ссылки на его утилиты остались в коде с 404. 

Вариантов может быть несколько, необходимо проанализировать каждую ссылку и принять решения относительно её дальнейшей судьбы.

Результат анализа на наличие битых ссылок можно оформить в виде простой таблицы, которая демонстрирует, для каких ссылок стоит настроить 301- редирект, а вывод каких проще полностью удалить с сайта, поскольку практической пользы они не приносят.

2. Настройка 301-редиректов

После того как стало понятно, как найти и как удалить битые ссылки, стоит заняться настройкой 301-редиректов с битой страницы на 200. 

Таблица, о которой говорилось выше, показывает, куда должна переехать та или иная страница. Этот вариант исправления ошибок актуален в следующих случаях:

• На удаленном URL есть внешние ссылки.
• Страница приносила достаточно трафика и прошло не так много времени с момента её удаления, и запросы кластера ещё в топе.

Почему массовая настройка 301 не выход

При большом количестве отработки 301-редиректов на сайте идёт большая нагрузка на сервер. Может тормозить сайт. В основном это касается сайтов интернет-магазинов. Лучше реализовать новый статус товара “нет в наличии”, сохранить положительные факторы на странице и её место в топе до того момента пока товар не появится на складе. Чем загонять в индекс новую страницу и еще желательно в топ. 

Сервис онлайн-проверки Rush Analytics

Поиск битых ссылок на сайте онлайн можно с помощью сервиса Rush Analytics — “Аудит сайта”. Программа находится в Beta-версии, но уже может выгрузить битые ссылки вашего сайта. 

Помимо этого сайт можно проверить на:

Внешние битые ссылки

Ситуация простая — ссылку на сайт купили, но её со временем удалили. Что же делать? 

1. Связаться с владельцем сайта. 

Объяснить ситуацию и попросить восстановить ссылку. 

2. Если вы купили вечную ссылку на бирже, а вебмастер вам не отвечает на ваши просьбы о восстановлении, то можно обратиться в арбитраж биржы, описать ситуацию. Тогда возможно ссылку восстановят или вам вернут деньги.

Вывод

Наличие большого количества битых ссылок может значительно ухудшить индексацию, передачу внутреннего веса и внешней ссылочной массы страниц. Необходимо взять за правило выполнять проверку битых ссылок хотя бы раз в несколько месяцев на сайте.