Поиск битых ссылок на сайте

Поисковые системы Яндекс и Google, систематически улучшают свои алгоритмы ранжирования. Им важно, чтобы первые позиции занимали качественные и полезные для посетителей сайты. Следовательно, владельцы ресурсов заинтересованы в том, чтобы их сайты полностью соответствовали требованиям поисковых машин. Однако бывают ситуации, когда человек находит в поисковике нужный сайт (например, ему необходимо купить ноутбук), он кликает на страницу с понравившейся ему моделью, но возникает неприятное явление – такой страницы не найдено. Как правило, появляется надпись «404 Not Found». Она может быть другой. Но суть одна – человек натыкается на битую ссылку.

Что такое битые ссылки?

Битые ссылки – это неработающие внутренние ссылки на страничку интернет-портала, адрес которой недавно был скорректирован или вовсе удален. Говоря простым языком, адреса страницы более не существует, и потому появляется злополучная надпись, которая упомянута выше. Реже встречается такая: «410 Not Found». Она означает, что адрес был безвозвратно удален с поисковых машин.

Есть еще один тип битых ссылок – внутренние. То есть на них ведут ссылки на самом интернет-ресурсе. Вы попадаете на них, находясь непосредственно на сайте, допустим, магазина по продаже ноутбуков. Такие «ляпы» сильно влияют на качество продвижения ресурса. Задача владельца – оперативно устранить их, чтобы провести грамотную оптимизацию портала.

Почему битые ссылки – это плохо?

Причина простая – они наносят ущерб интернет-порталу. Действует простое правило: чем больше некорректных ссылок, тем хуже. Для наглядной демонстрации приведем пример. На ресурсе публикуется актуальная статья о социальных проблемах. Она вызывает широкий резонанс, ее активно репостят соцсети, она появляется на сторонних площадках. Но затем страничка со статьей меняется (либо вовсе удаляется). Все люди, которые перешли по ссылке в надежде прочитать актуальную статью, в итоге видят ошибку 404. Конечно, ЦА покидает портал.

Теперь самое неприятное. Из-за битых ссылок растет показатель отказов. Поисковые машины видят эти неблагоприятные явления и существенно снижают позицию страницы при выдаче. Владелец ресурса многое теряет: и клиентов, и трафик, и прибыль.

Надеяться на то, что поисковики не заметят «ляпов», не стоит. У «Гугла» есть специальный фильтр Broken links. Он систематически следит именно за качеством ссылочной массы. У сайта высокий риск попасть под фильтр, если присутствует даже незначительное число битых ссылок.

Еще один их недостаток – растрата краулингового бюджета. Битые ссылки могут впустую растратить лимит страниц. Да, для маленького интернет-портала это вряд ли обернется масштабными проблемами. Но если представить, что с битыми ссылками столкнулся развивающийся проект (к примеру, онлайн-магазин), то трудности будут серьезными.

Наконец, некорректная ссылочная масса приведет к потере интереса со стороны ЦА. Человек, перешедший по ссылке и видящий ошибку, больше не доверяет сайту. Если не устранить проблему, число таких посетителей будет только расти.

Как именно битые ссылки появляются на сайтах?

Неработающие ссылки появляются в следующих случаях:

• произведено удаление второстепенных файлов или страниц, но при этом на других страницах остаются ссылки на них, следовательно, они будут битыми;
• если веб-мастер ссылается на другой ресурс, однако какие-то важные данные на нем были изменены, в том числе, если данный сайт уже прекратил свое существование или просто поменяли домен;
• автоматическое обновление контента;
• сбои в данных с внешних источников (допустим, в случае с интернет-магазином произошел технический сбой в службе доставки) – это служит причиной появления неработающих ссылок;
• изменения визуального и технического характера, из-за переноса контента появляются битые ссылки.

Опытные блогеры, веб-мастера, СЕО-оптимизаторы и администраторы ресурсов прекрасно понимают, что появление некорректных линков – рабочий и естественный процесс. Но при этом он необратим. Когда интернет-портал растет, в нем увеличивается число обратных ссылок, то пропорционально этому вырастает вероятность появления нерабочих линков. Чтобы избежать проблем, необходимо периодически сканировать ресурс полностью. Оперативное выявление и коррекция битых линков поможет сайту не потерять трафик и клиентов.

Как удалить битые ссылки на сайте

Все зависит от того, что именно послужило катализатором их появления:

• Утрата целевой страницы. Действия просты: веб-мастер восстанавливает ее, после чего отлаживает функциональность.
• Устаревшая перелинковка. Веб-мастеру нужно провести ряд действий. Во-первых, обновить данные перелинковки, удалить некорректные ссылки, а также сделать так, чтобы конечные адреса для них стали актуальными.
• Ликвидация товарных остатков (актуально для интернет-магазинов). В данном случае самое действенное решение – настройка редиректа с удаленной продукции на другие категории магазина (например, каталог с товарами). Также веб-мастер может в ручном режиме исправлять некорректные линки. Какой способ эффективнее, зависит от конкретной ситуации.
• Удален старый материал. Алгоритм действий такой же, как и в предыдущем пункте. Желательно, чтобы замена ссылок осуществлялась в автоматическом режиме.
• Коррекция УРЛ конечной странички. Веб-мастер применяет 301-е редиректы как наиболее эффективный способ.

Способы выявления битых ссылок

Анализ битых ссылок на сайте может быть произведен разными способами:

Консоли вебмастеров

Google Search Console

Панель управления от «Гугл» считается оптимальным способом выявления и избавления от нерабочих линков. Вы легко отловите с ее помощью неприятные ошибки 404. Пользоваться консолью довольно просто. Вы совершаете два действия:

• подтверждаете права на конкретный домен;
• открываете раздел «Покрытие».

Несмотря на простоту, консоль очень эффективна. Вы оперативно поймаете битые ссылки, исправите их и убережете свой ресурс от потери трафика и ЦА.

Яндекс.Вебмастер»

Каких-то принципиальных различий с консолью от «Гугла» нет. В вебмастере от «Яндекса» есть специальный раздел, посвященный ссылкам. Здесь вы сразу можете обнаружить поломанные линки. Однако у сервиса есть недостаток – трудности с экспортом отчетности. Конечно, эти проблемы можно обойти, скачав TSV-файл с десятью тысячами нерабочих линков. Однако не все веб-мастера соглашаются на это. Им кажется, что способ затратный и не стоит на него обращать внимания.

Счетчики WEB-аналитики

Яндекс.Метрика

В главном меню сервиса необходимо выбрать раздел «Отчеты». Затем «Стандартные отчеты», «Содержание» и «Заголовки страниц». Так как страницы с неработающими ссылками содержат в своем заголовке код ответа сервера 404, то осуществляем поиск именно через них. Система выведет число подобных страниц на сайте. Вы также увидите количество переходов по линкам, что позволит определить число юзеров, которые столкнулись с ошибкой.

Google Analytics

Опять же, существенных различий между сервисами «Яндекса» и «Гугла» нет. Вы ищите страницы, которые в своем заголовке содержат код ошибки. Для этого предварительно перейдите на страницу инструмента через раздел «Поведение».

Программы для поиска битых ссылок

Все описанные выше методы действенны. Их преимуществом является бесплатность. Однако веб-мастерам стоит взять во внимание тот факт, что УРЛ-странички, содержащие ошибки, отобразятся только в одном случае – если есть индексация. Если ее нет, для поиска битых линков придется использовать специальный софт. А именно – дескоптные программы.

Xenu’s Link Sleuth

Программа представляет собой сканер с довольно обширным перечнем применений. Но так как нам важен в первую очередь поиск страниц с ошибкой, то нужно перейти по следующему пути – «File – Check URL..». В пустом поле вы указываете адрес проверяемого интернет-портала, после чего запускаете краулер.

Преимуществом софта является подробная отчетность. Веб-мастер видит не только перечень страниц ресурса, а также их заголовки и различные технические сведения. Обратите внимание на столбец «Статус», который, собственно, и демонстрирует статус линка. Если напротив нее вы видите «Not found», значит, ссылка является неактивной, битой. Ключевым достоинством софта является возможность сортировки столбцов. Это позволяет пользователю вывести сначала все страницы с нерабочими линками.

Screaming Frog

Программа предоставляет обширные возможности в первую очередь для СЕО-специалиста. С ее помощью можно не только детально проанализировать текущее состояние портала, но и беспроблемно отыскать битые ссылки.

Просканировав сайт, система выведет перечень страниц, демонстрируя коды ответов от них. Вы можете провести сортировку УРЛ, чтобы сгруппировать 404-ответы. В нижней части выводится подробная информация по адресу, который выделен. Это позволит найти страницу, ведущую на нерабочий адрес. Подобная «фишка» удобна в первую очередь тем, что вы не только быстро корректируете линки, но и сразу находите источник, который ведет на них.

Однако у софта можно отметить недостаток – за работу с ним придется платить. Конечно, вы можете опробовать демонстрационную версию. Но в бесплатном режиме можно парсить только до 500 страниц. Хотя, если у вас маленький проект, такого числа вполне хватит. Судя по отзывам веб-мастеров, затраты на софт программу полностью оправданы теми возможностями, которые она предоставляет.

Site Analyzer

В какой-то степени софт можно сравнить со Screaming Frog. Веб-мастеру предоставляется обширный перечень инструментов для СЕО и технического анализа интернет-ресурса. Чтобы найти нерабочие ссылки, нужно совершить простейшие действия:

• укажите в специальном поле адрес портала;
• активируйте сканирование;
• дождитесь окончания сканирования, после чего включите отображение только по HTML-документам;
• осуществите сортировку по коду ответа.

Преимущество программы – понятный и довольно простой интерфейс. У нее есть явное преимущество перед Screaming Frog – русификация. Если вы не владеете английским языком, то для поиска битых линков, лучше использовать именно Site Analyzer.

В нижнем сегменте софта выводится подробная информация по тому адресу, который выделен. Так вам гораздо проще искать и в дальнейшем работать с битыми ссылками.

Comparser

Преимущество дескоптной программы – возможность глубокой аналитики индексации портала. Используя возможности Comparser, вы анализируете различные параметры сайта и оперативно выявляете битые ссылки. Процесс простой:

• скачиваете и инсталлируете софт;
• активируете сканирование портала;
• переходите в раздел «Статистика» (здесь указываете число страничек с ошибкой 404).

Преимущество программы – предоставление полного перечня страниц, содержащих ошибку.

Онлайн-сервисы для анализа битых ссылок

Удобство работы с дескоптными программами напрямую зависит от мощности «железа». Если компьютер слабенький, то работать с софтом проблематично. Поэтому все больше веб-мастеров предпочитает искать битые ссылки через специальные онлайн-сервисы. Для поиска не нужно инсталлировать программу. К тому же вы не зависите от скорости доступа в интернет.

Serpstat

По заверениям разработчиков, Serpstat представляет собой мультифункциональную площадку, разработанную в первую очередь для СЕО-мастеров. Можно долго перечислять все полезные возможности ресурса, но нас интересует одна – поиск битых ссылок. Надо сказать, что с этой задачей онлайн-сервис хорошо справляется.

За пользование придется платить 69 долларов в месяц (это базовый тариф). Разработчики предлагают персональные решения специально для крупных компаний.

Brokenlinkcheck.com

Ключевое достоинство сервиса бросается в глаза – он бесплатный. И у него узконаправленная специализация – поиск нерабочих линков. Пользоваться ресурсом очень простой: указываете адрес интернет-портала, сканируете его, а затем изучаете страницы, которые выведены в виде информативной таблицы.

Drlinkcheck.com

Сервис сканирует сайт и осуществляет поиск битых ссылок. Во многом его интерфейс схож с предыдущим ресурсом. К тому же оба онлайн-сервиса являются бесплатными. Однако если ваш интернет-портал содержит более полутора тысяч страниц, то за пользование Drlinkcheck.com придется платить. Он подходит исключительно для небольших проектов (если желаете пользоваться им бесплатно).

Ahrefs

Если сайт содержит огромное количество страниц, веб-мастер сталкивается с громадными трудностями. Представьте, что ему необходимо заходить в каждый документ и проводить его коррекцию. Поэтому чтобы сэкономить себе время и силы, лучше воспользоваться платным сервисом Ahrefs. Тем более что инвестиции в него полностью оправданы. Благодаря функциональным возможностям ресурса вы ищите и экспортируете нерабочие ссылки с вашего интернет-сайта в течение нескольких минут.

SEOTO.ME

Сайт представляет собой площадку для комплексного СЕО-аудита вашего сайта. При этом поиск нерабочих линков и изображений – лишь одна из многочисленных опций, доступных пользователю. Онлайн-программа подойдет для разных проектов, в том числе крупных. Но помните, что аудит платный. Одна полноценная проверка ресурса обойдется вам в 500 рублей. Бесплатных функций, например, в демо-версии нет.

Плагины

Можно воспользоваться и плагинами, чтобы отыскать битые ссылки через административную панель. Например, для ресурсов, работающих на WordPress, подойдут такие плагины, как Link Checker и WP Broken. Искать нерабочие линки можно разными способами: вручную или в автоматическом режиме. Если вы используете второй вариант, то экономите время. Просто задаете расписание, и система проводит проверку по расписанию. Администратору сайта приходит уведомление о ее результатах.

Что такое битые редиректы, и почему они появляются

Суть примерно та же, что и с битыми ссылками – редиректы ведут на страницу, которая по каким-то причинам удалена. Но при этом нет повторного редиректа, который направляет пользователя на актуальную страничку. Конечно, если обе страницы уже забыты посетителями ресурса, каких-то хлопот у вас, как у владельца портала, не будет. Но если юзеры попадают на страничку с конкретной целью (допустим, найти ценный контент), тогда проблем не избежать. Если поисковыми машинами систематически фиксируется статистика поведения юзеров, то их попадание на страницу с ошибкой – уже повод наложить штрафы на интернет-портал.

Как удалить битые редиректы

Одного удаления мало. Необходимо понять и отыскать причину, по которой возникают эти неприятные нерабочие редиректы. Для этого ответьте на три важнейших вопроса:

1. для какой цели был поставлен редирект с изначальной на отсутствующую на текущий момент страницу;
2. какая именно причина является появлением на целевом адресе ошибки 404;
3. по какой конкретно причине пропала страница: это случайность или результат каких-то спланированных действий.

Если страница все-таки исчезла случайно, то восстановите ее. В других случаях измените путь редиректа, чтобы он был правильным и полезным для людей, которые попадают на ваш интернет-портал.

Как часто проверять линки на сайте?

Наверняка читатель, освоив информацию выше, задается вопросом: а как часто вообще проверять сайт на наличие битых ссылок? Здесь все индивидуально. Но действует простое правило: чем больше ресурс, тем чаще его нужно проверять. Если страниц много, повышается вероятность появления нерабочего линка.

Если проект небольшой, достаточно проверки раз в несколько месяцев. В случае с крупными порталами (допустим, интернет-магазинами или новостными ресурсами) желательно проводить сканирование хотя бы пару раз в течение месяца.

Выводы

Подытожим:

• битые ссылки – это линки, в которых есть коды ошибок;
• нерабочие ссылки вредят вашему сайту, поэтому их оперативно нужно устранить;
• выявить битые линки достаточно просто, используя специальные софты, плагины и онлайн-сервисы.