Как не допустить “битых ссылок” на сайтах

Для оптимизации сайта необходимо провести работу по поиску ошибок и затем их устранить. В число факторов проверок входят битые ссылки (broken links). В данной статье разберемся: битые ссылки на сайте что это, как сказывается их наличие на SEO-продвижении. А также как проверить сайт на битые ссылки для дальнейшего их устранения. Скорее всего вы попадали в ситуации, когда кликнешь по ссылке на сайте и, попадешь на страницу с текстом «404 Error», «Not Found» или «Страница не найдена».

Неприятная ситуация, не правда ли? Такая картинка раздражает, практически, всех пользователей! Следовательно, владельцы сайтов не должны допускать такой оплошности – нужно своевременно отслеживать и удалять такие нерабочие ссылки.

Битые ссылки на сайте что это

Для начала уточним, битые ссылки на сайте что это? Битые ссылки, или как еще их принято называть «мертвые ссылки», представляют собой гиперссылки, которые ведут на несуществующую веб-страницу, сайт или отдельный файл (изображение, файл с музыкой, фотографии и многое другое). Такие гиперссылки, сопровождаются ошибками (чаще всего 404-й). Для сравнения представьте: вы приехали впервые в город и захотели пойти в приятное кафе, почитали отзывы и рекомендации, нашли адрес, приехали, а на месте кафе расположен офис или любое другое здание, но только не ваше кафе. Немного обидно, затрачено время и надежды рухнули. Такая же ситуация и с битыми ссылками.

В процессе продвижения сайта придется часто вносить изменения: удалить устаревшие статьи, объединить разделы в интернет – магазине или переименовать URL. И есть закономерность – от усложнения ресурса увеличивается шанс что-то забыть или допустить ошибку. Сайт, веб-страница или файл были удалены. Например, в статье вы делали обзор какого-либо сервиса, а со временем он перестал существовать, в тексте же ссылка на него осталась. Читатель перейдет по ссылке и попадет на этот несуществующий сервис, вот и причина возникновения битой ссылки на вашем сайте.

Причины появления битых ссылок

Причины появления битых ссылок могут быть разными, например:

• изменилась структура сайта, заменены адреса страниц. К примеру, раньше ваш каталог назывался /products, а тут вы решили сменить URl и указать /catalog. А о ссылках, которые уже были размещены по всему сайту, не подумали, вот и образовалась «гора» битых ссылок – только из-за смены одного слова в URL.
• при добавлении ссылки была допущена опечатка в адресе. Например, ваш вебмастер, добавляя ссылки, случайно, вставил ненужную букву в окончании адреса.

К примеру, страница имела адрес «site.ru/page123», а получила «site.ru/price-list». При чем не было настроено перенаправление с первого URL на второй, и соответственно, все ссылки, ведущие на «site.ru/page123», получатся битыми. При попытке перехода по ним пользователь увидит в браузере ошибку 404.

Broken links появляются также в результате банальных опечаток и ошибок. Так, например, копирайтер при написании статьи может случайно вставить в текст ссылки лишний символ, что тоже сделает её нерабочей. Сервер не догадается интуитивно, что «site.ru/statya-» — это вроде похоже на «site.ru/statya» и, значит, можно открыть её. Получается, битые ссылки, не дело рук хакеров или конкурентов, а вполне естественное явление.

Виды битых ссылок

Различают два вида битых ссылок: внешние и внутренние:

1. Внутренние – это ссылки веб-сайта, которые ведут на страницы, документы и файлы этого же сайта.
2. Внешние  – это гиперссылки, которые ведут на сторонние ресурсы, а не на страницы внутри одного сайта.

Чем опасны битые ссылки на сайте

Битые ссылки существенно ухудшают продвижение в поисковых системах. Для роботов поисковиков они могут быть признаком неудобного, некачественного, а для пользователей – устаревшего ресурса. Однако пока нет подтверждённых данных, что битые ссылки напрямую влияют на ранжирование. Есть мнение специалистов, что битые ссылки расходуют краулинговый бюджет. Проще говоря, это лимиты по количеству URL вашего сайта, которые сканирует поисковый робот Google. Однако представитель компании Джон Мюллер говорил, что ошибки 404 не снижают этот бюджет и не ухудшают рейтинг всего сайта.

И всё же, битые ссылки напрямую влияют на поведение посетителей на сайте. Например, пользователь хочет прочесть статью, кликает и видит ошибку. В такой ситуации он может просто вернуться назад, воспользоваться меню или поиском по сайту. Однако, скорее всего, он просто покинет ресурс с “заморочками” А такие поведенческие показатели, как: отказы, количество просмотров страниц, продолжительность посещения, играют уже значительную роль в SEO.  Для наглядного примера воспользуемся данными исследования, которое проводила компания «Ашманов и партнёры». Здесь явно видно корреляцию с топом или позициями и в Google, и в Яндексе.

В итоге получаем, что самая основная опасность битых ссылок в том, что они ухудшают пользовательский опыт. А именно: затрудняют потребление контента, изучение товаров/услуг и выполнение целевых действий предусмотренных сайтом. А это важно при любом, не только поисковом трафике.

Как найти битые ссылки

Проверить сайт на наличие битых ссылок можно несколькими способами:

1. Вручную, если ваш сайт не слишком объемный и вам под силу пройтись по всем его страничкам и проверить битые ссылки по пути, сделайте это как можно быстрее. Иначе очередной визит поискового бота, который непременно обнаружит «не вынесенный вовремя мусор», повлечет за собой санкции со стороны поисковиков.
2. Просмотр проиндексированных страниц в поисковике. Проанализируйте полученный с помощью оператора «site:» список и выполните ручной поиск неработающих ссылок на каждой страничке из выдачи.
3. При помощи инструментов вебмастера в Яндексе. В этом сервисе доступна проверка сайта на битые ссылки, которая дает возможность ознакомиться с их количеством и адресами.
4. Онлайн сервисы, которые специализируются на подобных услугах. Обычно от Вас требуется лишь ввести адрес веб-ресурса, для которого хотите проверить битые ссылки, и капчу, чтобы доказать, что Вы не робот.
5. Еще есть способ, с помощью специализированного программного обеспечения (например, Xenu), в отличие от онлайн сервисов обычно дают возможность настроить будущее сканирование.

Как исправить битые ссылки

Автоматическая переадресация

Для исправления битых ссылок, самое лучшее решение — настроить автоматическую переадресацию, то есть перенаправить посетителей сайта на нужную страницу. Когда посетители перейдут по старой ссылке, они сразу попадут на интересующий материал, несмотря на изменение его адреса. К сожалению, исправление таким вариантом работает не всегда. Поэтому проводите дополнительную диагностику, чтобы найти битые ссылки на вашем сайте. Когда ссылка стала битой из-за ошибки или опечатки в адресе, то нужно просто указать правильный URL. При изменении URL-структуры настройте постоянное постраничное перенаправление с помощью 301 редиректа в файле .htaccess.

Монетизация сайта: зарабатываем на ссылках

В том случае, когда сайт с большим количеством страниц, становится просто невозможно вручную проверять каждую и кликать по всем имеющимся ссылкам. Для этих целей воспользуйтесь специальным инструментом –  официальный вебмастер.

Вебмастер

• Google Search Console, в старом интерфейсе ошибочные ссылки показывались в отчёте «Ошибки сканирования». В новом — в разделе «Покрытие».

• Xenu Link Sleuth, представляет собой бесплатную десктопную программу, достаточно функциональную, хоть и немного устаревшая

• Яндекс.Вебмастер. Аналогичная функция есть в Яндексе. В их Вебмастере есть раздел «Ссылки», где можно взглянуть на все поломанные. Только вот здесь есть сложности с экспортом отчета. Раньше не было удобного способа вытащить все данные об ошибках, чтобы потом их устранить. Сейчас можно скачать TSV-файл с 10 000 битых ссылок. Кому-то даже этого будет мало. Данные лежат в разделе «Индексирование» → «Статистика обхода». Ещё можно посмотреть в разделе «Ссылки».

• Screaming Frog SEO Spider. Платная десктопная программа. Проверка 500 URL бесплатно.
• SEO HYPERLINK “https://chrome.google.com/webstore/detail/seo-analysis-website-revi/hlngmmdolgbdnnimbmblfhhndibdipaf/related”&HYPERLINK “https://chrome.google.com/webstore/detail/seo-analysis-website-revi/hlngmmdolgbdnnimbmblfhhndibdipaf/related” Website Analysis. Бесплатный и удобный плагин для Chrome.

• Check My Links. Ещё один бесплатный плагин для Google Chrome. Можно скопировать список битых ссылок в CSV-формате.

• Badlinks.ru. Платный онлайн-сервис. Стоит от 50 рублей, сумма зависит от количества страниц и регулярности проверки.
• Программа Netpeak Spider. Программа очень полезна для вебмастеров и владельцев сайтов, с ее помощью вы сможете не только найти 404-е страницы на сайте, но и проанализировать свой ресурс, посмотреть важные для продвижения теги (Title, Desсription, заголовки Н), узнать состояние редиректов и атрибута <canonical>.  Для поиска 404 страниц вам нужно установить программу, указать в строке URL-адрес сайта, запустить проверку кнопкой Play:

Затем выбираем вкладку «Ошибки» и смотрим список страниц с ответом 404.

 Поиск битых ссылок на сайте с помощью плагинов

Broken Link Checker и WP Broken Link Status Checker

Для сайтов на WordPress существуют два плагина: Broken Link Checker и WP Broken Link Status Checker. Эти плагины проверяют контент на наличие битых ссылок, несуществующих картинок и оповещают через админ – панель, страницу самого плагина или по email. Вы сможете не только быстро находить нерабочие ссылки, но и удалять, корректировать их через плагин. Это даже не отдельная программа, а плагин для WordPress. Дико популярный и полезный. Из плюсов можно выделить то, что он бесплатный и встраивается в WordPress. А из минусов — то, что он не всегда работает корректно и сложно настраивается. Часто приходится запускать модуль по несколько раз, чтобы был какой-то прок. Но другие дополнения к WordPress подобного рода оказываются еще хуже.

Как сделать страницу сайта релевантной запросу

Check My Links

Неплохое расширение для проверки битых ссылок предлагает Google – Check My Links. Туллбар позволяет найти на странице все ссылки, указывает как действующие, а какие нерабочие. Минус в том, что сканирование через плагин постраничное, целиком сайт проверить не получится.

Google и Yandex Вебмастер

При наличии вашего сайта в поисковой консоли Google и Yandex Вебмастер вам не составит труда с их помощью проверить битые ссылки. Но в отличие от онлайн сервисов эти инструменты игнорируют внешние «мертвые» ссылки. Проверить сайт в Яндексе очень просто: зайдите в раздел «Ссылки», а потом во «Внутренние ссылки». Здесь находится база всех неправильно указанных адресов с ошибкой и подробная информация о битых адресах.

Консоль от Google также может дать вам информацию о некорректно работающих адресах. Для этого зайдите в раздел «Сканирование», а оттуда — в «Ошибки сканирования». В данном разделе указаны не только внутренние ссылки вашего сайта, но и адреса с ошибками других сайтов. Будьте внимательны. Проверка битых ссылок с помощью инструментов от поисковых систем не требует установки дополнительных плагинов. Кроме того, они бесплатны.

Netpeak Spider

Netpeak Spide. Это дорогой и сложный инструмент для скрупулезного SEO-аудита. Он справляется с поиском сломанных страниц, но создавался для решения более широкого круга задач. Скорее всего, его покупка себя полностью не оправдает. Но функциональность хвалят, да.

Dead Link Checker

Dead Link Checker, платный онлайн-сервис для поиска ошибок 404 на ресурсе. Работает по подписке. То есть платите 10$ в месяц и получаете возможность отсканировать до 50 000 ссылок. Когда есть бесплатные альтернативы, кажется, что это не самый лучший выбор. Возможно, он творит какие-то чудеса и находит то, что не способны найти конкуренты. Есть еще с десяток подобных приложений и сайтов, но они так себе. Либо работают чересчур медленно, либо стоят неадекватно дорого.

Плюсы и минусы ускоренных страниц Яндекс турбо: как это работает

Инструкция, что делать, когда нашел битую ссылку

После того, как нашли у себя битую ссылку, необходимо ее исправить. Будем действовать по следующей схеме:

• Разберем все ссылки.
• Категоризируем их.
• И исправим все ошибки.

Анализируем ссылки

Сначала надо организовать данные, полученные из сервисов по поиску битых ссылок. Надо понять, почему те или иные ссылки поломаны. Например, если дело в опечатке, то проще всего исправить эту самую опечатку в коде сайта. Если страницы больше не существует, то надо удалить ссылку и добавить заглушку с соответствующим сообщением. Мол, «410 Gone, ребята, странички не будет». А если вы недавно переехали на другой домен, то самым адекватным решением будет — настроить массовый редирект.

Поэтому, уяснив, битые ссылки на сайте что это, для начала можно создать такую простенькую табличку:

Мертвая ссылка	Количество посещений	Редирект сюда
kakaya-to-statya.net	17	kakaya-to-statya.blog.net
sayt-s-opechatkay.ru	12	–
sayt-s-opecahtloy-2.ru	1	–

На ней сразу будет видно ссылки, которым нужен редирект, ссылки, для которых стоит заморочиться с исправлением опечаток, и те, о которых можно забыть.

Но это, конечно, исключительно, пример. Вы можете организовать полученную информацию, как вздумается.

Исправляем опечатки

Опечатки бывают двух типов. Те, что допустили вы как владелец сайта. И те, что допускают посетители, надумавшие зайти к вам вручную, указав адрес страницы (страшные люди). Какие опечатки стоит исправлять и так понятно. Те, что допустили сами.

Но есть еще один момент. Если по ссылке с опечаткой пытаются пройти регулярно, то имеет смысл настроить перенаправление на правильную страницу. Или сделать вариант с опечаткой рабочей альтернативой для самых настойчивых.

Настраиваем редирект

Теперь займемся ссылками, которые, по-вашему, мнению нуждаются в перенаправлении. Тут и пригодится таблица, приведённая выше. Наглядно показано, что и куда должно переехать.

Пример, как можно сделать 301 редирект в CMS WordPress и с помощью файла .htaccess

Для WordPress:

• Открываем вкладку «Инструменты»

• Переходим в подпункт «Плагины».
• Кликаем по поисковому полю.
• Ищем плагин Redirection и устанавливаем его.

В поисковике будут и другие плагины, с помощью которых можно настроить редирект. Можете попробовать их. Это уже дело вкуса. Потом снова открываем вкладку «Инструменты».

• Переходим к настройкам плагина «Перенаправления».
• Нажимаем на Add new redirection.
• Указываем Source URL (ссылку, с которой надо перенаправить).
• А потом Target URL (куда надо перенаправить).
• И сохраняем заданные параметры.

Ну и так придется повторять до тех пор, пока все ссылки, нуждающиеся в перенаправлении, не получат его. Эти задачи нередко достаются верстальщикам на аутсорсе или «разнорабочим» с UpWork и других бирж.

Приводим внешний вид битой ссылки в порядок

Уяснив, битые ссылки на сайте что это, следует оформить их. И, в том случае, если вам удастся сделать это правильно, Вы сможете перенаправить пользователей на другие страницы и удержать их сайте. Для этого используйте юмор, будьте оригинальны, но не нарушайте основную концепцию сайта:

При проведении поисковой оптимизацией сайта не забывайте о такой проблеме, как битые ссылки. Даже эта малейшая деталь может повлечь за собой ряд серьезных проблем, влияющих на позиции веб-ресурса в поисковой выдаче. Учитывайте это при разработке и анализируйте битые ссылки на уже существующем сайте. Если же у вас нет возможности или времени самостоятельно заниматься этим вопросом, делегируйте его специалистам.