Как удалить битые ссылки с сайта: Массово удаляем или заменяем все битые ссылки

Массово удаляем или заменяем все битые ссылки

Поговорим о битых ссылках. Но не о там как они влияют на сео продвижение, а конкретно о том как быстро их найти, удалить или заменить на нормальные.

Виды ссылок которые можно будет убрать:

Анкорные:

<a href=»https://convertmonster.ru/blog/» title=»Блог монстров»>Супер статьи</a>

Безанкорные:

https://convertmonster.ru/blog/

Обычные текстовые:

convertmonster.ru/blog/

Битые изображения:

<img class=»alignnone size-medium wp-image-20410″ src=»https://convertmonster.ru/wp-content/uploads/2018/05/konversiya-150×150.pngjpg» alt=»Коэффициент конверсии интернет магазинов» />

Итак нам понадобится плагин Broken Link Checker и любой парсер сайта для поиска битых ссылок.

Начнем с нахождения 404 страниц через парсер

Можно использовать Xenu, ScreamingFrog, WebsiteAuditor и другие подобные программы или онлайн-сервисы, главное найти битые ссылки на нашем сайте. Так же можно выгрузить их из яндекс webmaster’а

На примере screamingfrog:

Запускаем и идем в настройки, далее в «spider«:

 Настраиваем парсер как на скриншоте:

Нажимаем ок.

Далее возвращаемся на первый экран и действуем по пунктам:

1. Вводим адрес нашего сайта.
2. Жмем старт и ждем окончания процедуры.
3. Фильтруем страницы и ссылки по статусу.
4. Копируем все адреса 404 страницы.

Вообщем-то все, с первой частью мы справились.

Перейдем к установке плагина broken link checker

!Важно перед любыми манипуляциями с плагинами и сторонним софтом делаем бэкап сайта.

Заходим в админку идем в «плагины» и «добавляем новый«

Далее нам нужно найти плагин Broken Link Checker, после чего установить и активировать.

Переходим в «настройки», далее «проверка ссылок». Мы оказываемся в настройках плагина.

Далее идем во вкладку «искать ссылки в» и выбираем страницы и записи

Далее во вкладку «что проверять» и отмечаем «html ссылки«, «html изображения«, «обычные текстовые url«

Переходим во вкладку «дополнительно«.

Листаем вниз, «сохраняем изменения» и жмем «перепроверить все страницы«

Остальные настройки оставим по умолчанию, потому как глобально на поиск ссылок они не влияют.

Поиск, анализ и проверка битых ссылок

После того как мы нажали «перепроверить все страницы«, плагин начал сканировать сайт на предмет ссылок на страницах блога и главных страницах. Плагин находит все ссылки быстро, но вот анализ этих ссылок на «битость» у плагина занимает долгое время. Поэтому не будем дожидаться пока он все проанализирует, так как все 404 страницы которые нам нужно удалить, мы уже спарсили…

Идем в «перейти к битым ссылкам«

Далее нажимаем «искать» и вводим свои урлы с кодом ответа 404 по одному и нажимаем «Искать ссылки«

Далее мы попадаем на результат поиска который выглядит таким образом

Перейдем к удалению/изменению битой 404 ссылки

1. Можно сразу перепроверить ссылку, действительно ли 404
2. Нажимаем подробности
3. Обращаем внимание на количество экземпляров — эта графа учитывает все битые урлы(которые мы ввели в поиске), на всех страницах, поэтому если где-то на сайте есть другие такие же урлы, плагин обязательно покажет сколько их.
4. Здесь уже все просто, либо мы меняем url, либо удаляем (с сохранением анкора ссылки)

Такую же процедуру следует провести с оставшимися 404 страницами.

Проверка результатов

Для проверки можно перейти на эту страницу на которой стояла битая ссылка и просмотреть как удалилась или изменилась ссылка, но можно и запустить парсер заново.

Надеюсь материал оказался полезным.

Делитесь в комментариях как Вы боритесь с битыми ссылками?

Накопились битые ссылки, их много, но заниматься ими лень? Мы поможем! Начнем с сео аудита вашего сайта, найдем все битые урлы, после чего заменим их или удалим!

Получить предложение!

Подпишись и следи за выходом новых статей в нашем монстрограмме.

Получайте бесплатные уроки и фишки по интернет-маркетингу

что это и как их удалить или исправить

Что такое битые ссылки

Под данным термином подразумеваются гиперссылки, размещенные на страницах с кодом 200, но ведущие на страницы с кодом 404. Иными словами, это ссылки, направляющие пользователя на пустые страницы. Переходы пользователей по ссылкам и качественная перелинковка очень важны в плане работоспособности сайта. Во многих проектах используются довольно сложные схемы взаимосвязи между страницами и сторонними ресурсами, однако одновременно в них встречаются и битые ссылки. Данную проблему можно охарактеризовать как «открытые люки» или «черные дыры», через которые посетитель проваливается на «дно» сайта. А поисковики в каждом таком случае отмечают низкое качество веб-ресурса.

Почему появляются битые ссылки

Опытный веб-мастер, как правило, замечает повторяющиеся ситуации, при которых образуются ссылки на отсутствующие страницы. Обобщив этот опыт, можно выделить несколько причин этого явления.

1. Случайная утрата конечной страницы. Чаще всего это происходит из-за небрежного проведения работ по проекту веб-сайта. Например, страница может пропасть при переносе сайта на хостинг.
2. Устаревание перелинковки. Эта ситуация чаще всего случается, если веб-мастер по невнимательности забывает актуализировать ее в проекте. В результате ссылки продолжают отсылать на старые, но уже не существующие страницы.
3. Очистка остатков ассортимента (в онлайн-магазинах). Чаще всего это происходит, если на складе заканчивается товар и веб-мастер устраняет соответствующие позиции с сайта. Однако, если техническая реализация данного процесса некорректна, могут остаться страницы 404.
4. Удаление материалов (в блогах). Похожая ситуация случается также в информационных порталах. Часто ответственный за их наполнение человек удаляет старые материалы, но забывает о том, что в других статьях имеются ведущие на них ссылки.
5. Смена URL без 301-х редиректов. Иногда по каким-то причинам при изменении адреса страницы не осуществляется 301-й редирект с устаревшего URL на актуальный. Эта ошибка вызывает как образование битых ссылок, так и утрату внутреннего веса старой страницы. Данный вариант имеет фатальное значение для особенно важных посадочных страниц.

Как проверить наличие битых ссылок

Сегодня имеется много платных веб-сервисов, с помощью которых можно обнаруживать битые ссылки на сайте. Однако они различаются по эффективности и, как следствие, по надежности выдаваемой ими информации. К числу действенных инструментов для нахождения битых ссылок относятся следующие ресурсы:

• https://www. brokenlinkcheck.com/
• https://www.deadlinkchecker.com/
• https://www.drlinkcheck.com/

Среди наиболее эффективных сервисов можно отметить Netpeak Spider и Screaming Frog – работа с ними значительно упрощает нахождение битых ссылок. Для некоторых распространенных систем управления контентом (CMS) также разработаны готовые расширения и модули, с помощью которых можно не только искать, но и удалять и предотвращать образование битых ссылок. Проблема этих инструментов состоит в том, что при случайном появлении broken links плагин в любом случае удаляет ее, что часто приводит к утрате важной страницы. Для отслеживания битых ссылок рекомендуется применять также Яндекс.Вебмастер или Google Search Console.

Как удалить битые ссылки

В зависимости от того, что привело к возникновению битых ссылок, используются разные способы их исправления.

• При случайной утрате целевой страницы. В этой ситуации достаточно просто провести ее восстановление и отладить функциональность.
• При устаревании перелинковки. Необходимо обновить параметры перелинковки, а также удалить битые ссылки или сделать актуальными конечные адреса для них. Это не самый эффективный путь, так как выполнять эти операции нужно довольно часто. Но в некоторых ситуациях это единственный действенный способ справиться с проблемой.
• При ликвидации товарных остатков (в онлайн-магазинах). Оптимальный способ в таком случае – настроить автоматические редиректы с удаленных товаров на товарные категории или вручную исправлять битые ссылки с помощью 301-х редиректов. Какой вариант подходит, зависит от размеров номенклатуры продукции и числа битых ссылок.
• При удалении старых материалов (для блогов). Решение аналогично предыдущему пункту – нужно отладить автоматические редиректы и рекомендуется автоматизировать замену ссылок.
• При изменении URL конечной страницы. При замене адресов нужно использовать 301-е редиректы.

Как окончательно избавиться от битых ссылок

Во многих случаях окончательно исправить битые ссылки можно с помощью автоматизированных редиректов. Одним из самых эффективных методов для онлайн-магазина является автоматическое перенаправление с отсутствующего товара на его категорию. Благодаря этому, даже если посетитель попадет на такую страницу, он будет отправлен в раздел с похожей продукцией. С одной стороны, это позволит ему найти необходимый товар, с другой – предотвратит его уход с сайта. Если рассматривать техническую сторону данного решения, то страница с товаром передает всю историю поведения и внутренний вес, категории схожей продукции.

Что такое битые редиректы и почему они появляются

Такие редиректы когда-то также вели на существующую страницу, которая была по каким-либо причинам удалена. При этом отсутствует повторный редирект, направляющий с нее на актуальную страницу. Если обе страницы были благополучно забыты посетителями, особой проблемы нет. Однако, если пользователи сайта попадают на них и к тому же ищут информацию, последствия для сайта могут быть весьма плачевными. Дело в том, что поисковики постоянно фиксируют статистику поведения пользователей, поэтому их попадание на страницу с кодом 404 – повод поисковым роботам наложить на веб-ресурс штрафные санкции.

Как удалить битые редиректы

Для эффективного исправления необходимо, как и в случае с битыми ссылками, понять причину их появления. Прояснить эту ситуацию позволят ответы на следующие вопросы:

• зачем был поставлен редирект с изначальной страницы на отсутствующую в данный момент;
• по какой причине на целевом адресе появилась ошибка 404;
• пропала ли страница по объективным причинам или это следствие непреднамеренных действий и случайных обстоятельств.

В зависимости от ответов на данные вопросы дальнейшие действия могут быть следующими:

• восстановление пропавшей страницы, если она исчезла из-за случайности;
• изменение пути редиректа на более правильный и полезный для посетителя сайта.

Что делать дальше

Чтобы предотвратить в дальнейшем появление битых ссылок и редиректов, необходимо понять, почему они возникали на сайте. Выше уже были перечислены основные причины, из-за которых владелец веб-ресурса может наблюдать на нем такое явление. Стоит сказать, что битые ссылки – проблема распространенная, встречающаяся на 90 % сайтов. Тем не менее у вас не должно возникать мысли, что из-за этого она не требует решения. Появление битых ссылок однозначно свидетельствует о том, что необходимо пересмотреть отношение к проекту. Если они возникают регулярно и в большом количестве, а удаляются несвоевременно, это может вызвать недоверие к веб-ресурсу со стороны поисковых систем и отрицательно сказаться на его ранжировании в топ выдачи, а то и вообще исключить из нее на длительный срок. Соответственно, проект, в котором такой проблемы не возникает вообще или она оперативно устраняется, оценивается поисковиками гораздо выше. Он также пользуется большим спросом среди пользователей, так как они не сталкиваются при его посещении с «дырами», которые затрудняют поиск нужной информации и/или товара. Очевидно, что поиск и устранение битых ссылок даже с использованием специальных сервисов и плагинов требуют определенного времени. Есть два пути решения этой проблемы:

1. разбираться с ней самостоятельно. Такой вариант подразумевает, что владельцу сайта необходимо будет тратить свое время и к тому же освоить навыки веб-мастеринга. Наем специалиста, ответственного за техническую поддержку веб-ресурса, в штат потребует дополнительных расходов на оплату его труда;
2. отдать на аутсорс. Если проблема возникает периодически, в постоянном мониторинге сайта на наличие битых ссылок и редиректов нет особой нужды. В этом случае можно доверить эту работу стороннему специалисту или компании, занимающимся поддержкой интернет-ресурсов и их продвижением в поисковых системах. Как правило, услуги SEO-оптимизации сайтов подразумевают поиск и устранение технических неполадок на сайте.

В любом случае понимание явления битых ссылок и причин их возникновения будет полезным как техническому специалисту, так и владельцу бизнеса. Эта проблема может существенно повлиять на удобство пользования веб-ресурсом со стороны посетителя, негативно сказаться на его продвижении в интернете, уменьшить приток клиентов, а значит, в конечном итоге снизить прибыль от проекта.

 

Другие термины на букву «Б»

БагБаза данныхБайнетБаннерная рекламаБаннерная слепотаБидБиржа ссылокБуржунетБыстрые ссылкиБэки поплыли

Все термины SEO-Википедии

Теги термина

Как найти и удалить неработающие ссылки на вашем веб-сайте

Неработающие ссылки — это ссылки, ведущие на несуществующие страницы. При переходе по неработающей ссылке страница, на которую вы попадаете, называется страницей ошибки 404. Что означает 404? Страница ошибки 404 не найдена — это стандартный ответ HTTP, который указывает, что запрошенный URL-адрес не существует.

Что вы делаете, когда с удовольствием просматриваете веб-страницы и вдруг сталкиваетесь с ошибкой 404? Для большинства из нас немедленной реакцией было бы просто покинуть текущий сайт в пользу другого, потому что и люди, и поисковые системы считают неработающие ссылки непрофессиональными. Ошибки 404 и неработающие ссылки также негативно влияют на ваш рейтинг в поисковых системах, поэтому вполне разумно проявлять инициативу, избегая их, чтобы улучшить экспозицию и увеличить посещаемость сайта.

Примечание: в этом руководстве представлены термины и методы, предназначенные для блоггеров WordPress, однако эта статья актуальна для любого владельца веб-сайта.

Блогеры обновляют содержание своих блогов чаще, чем другие владельцы сайтов. Следовательно, у них больше шансов найти неработающие ссылки на своем веб-сайте. Для блогов WordPress есть два типа плагинов, которые можно использовать для работы с этими ссылками:

1. Плагины, которые обнаруживают неработающие ссылки на вашем сайте, такие как Broken Links Checker.
2. Плагины, которые автоматически управляют переадресацией 301, например Redirection.

Как минималист плагинов, я всегда настаиваю на том, чтобы делать что-то вручную, чтобы избежать использования и установки плагинов.

В этом случае вы можете быть уверены, что возможность эффективно решать эти проблемы стоит установки другого плагина. (См. краткий список плагинов, которые использует Six Revisions. ) Независимо от того, используете ли вы плагин или нет, я настоятельно рекомендую время от времени проверять ваш сайт на наличие неработающих ссылок и ошибок 404.

Обнаружение и удаление недействительных URL-адресов с помощью Google WebMaster Tools

Есть две причины, по которым страницы индексируются в Google, даже если они не существуют на вашем сайте:

1. Вы сослались на недействительную внутреннюю ссылку по ошибке из-за опечатка. Настало время порекомендовать очень простой, но важный плагин для авторов постов — плагин Link to Post, чтобы избежать таких ошибок).
2. Вы опубликовали пост и решили впоследствии изменить его постоянную ссылку
   (URL поста) после того, как Google уже проиндексировал исходную ссылку.

Лучший способ обнаружить эти ошибки — использовать Инструменты Google для веб-мастеров.

Если вы еще этого не сделали, зарегистрируйте свой сайт там. Это важный инструмент для любого, кто работает с веб-сайтом. Одним из наиболее важных инструментов, предоставляемых в GWT, является инструмент «Удалить URL», который позволяет удалять недействительные страницы из результатов поиска Google.

Давайте посмотрим, как удалить эти плохие URL-адреса из индекса Google.

Обнаружение недействительных страниц, проиндексированных Google

После того, как вы зарегистрировались в Инструментах Google для веб-мастеров, настроили их и подтвердили свой сайт (см. руководство Google по началу работы для GWT), вот процесс поиска недействительных страниц.

1. Щелкните Диагностика
   в меню слева и выберите Ошибки сканирования .
2. Выберите категорию Не найдено .
3. Если доступно, щелкните, чтобы просмотреть страницу, содержащую неработающую ссылку.
4. Чтобы убедиться, что URL-адрес действительно проиндексирован в Google, скопируйте и вставьте URL-адрес в поиск Google и посмотрите, появится ли какой-либо результат.

Удаление URL-адресов из результатов поиска Google

1. Нажмите Конфигурация сайта и выберите Доступ для сканирования .
2. Выберите Удалить URL .
3. Нажмите Новый запрос на удаление .

4. Выберите первый вариант, чтобы полностью удалить страницу из результатов поиска Google. ИЛИ Выберите четвертый вариант, если вы хотите сохранить страницу в результатах поиска, но хотели бы удалить кешированную версию страницы. Это полезно, если Google показывает устаревшую версию страницы в «кэшированной» ссылке.

5. Нажмите Далее .

6. Введите URL-адрес страницы, которую вы хотите удалить из Google.

7. Убедитесь, что выбран первый вариант, а затем нажмите Добавить .

8. URL-адрес, который нужно удалить, теперь должен появиться в списке. Если вы хотите, вы можете добавить больше страниц для удаления.

9. Нажмите Отправить запрос на удаление .

Ваш запрос находится на рассмотрении. В большинстве случаев Google удаляет URL-адрес в течение 2-3 дней.

10. Щелкните Конфигурация сайта и выберите Доступ для сканирования .

11. Выберите Удалить URL .

12. Убедитесь, что URL-адрес, который вы просили удалить, не отображается в списке ожидающих запросов.

13. Щелкните Удаленные URL-адреса , чтобы увидеть, что URL-адрес теперь указан там. Чтобы убедиться, что URL-адрес действительно был удален из Google, скопируйте и вставьте URL-адрес в окно поиска Google и посмотрите, появится ли какой-либо результат.

Обнаружение неработающих ссылок с помощью Xenu Link Sleuth

Еще один отличный инструмент, который мне нравится использовать для поиска неработающих ссылок на моих веб-сайтах, — Xenu Link Sleuth. Вы можете скачать это здесь.

В отличие от подключаемых модулей WordPress, упомянутых ранее в этой статье, Xenu — это автономное настольное приложение для Windows, которое выводит все ссылки на ваши сайты — действительные или недействительные — и группирует их в удобном для чтения виде.

После установки Xenu использовать его очень просто.

1. Щелкните Файл и выберите Проверить URL .
2. Введите URL вашего веб-сайта (например, https://www.webfx.com/blog/web-design/.
3. Подождите, пока все ссылки (по всему сайту!) будут проверены.
4. Когда Xenu спросит, хотите ли вы отчет, нажмите Да .

Вы можете ввести данные своего FTP-сервера, но я просто нажимаю Отмена , и Xenu генерирует XHTML-отчет локально (он автоматически открывает диалоговое окно). В сгенерированном отчете нажмите на Неработающие ссылки .

Отсортируйте его по ссылке в оглавлении, чтобы увидеть все страницы, на которых есть неработающие ссылки (и неработающие ссылки, конечно).

Наконец, когда вы обнаружите все неработающие ссылки, вам останется перейти к сообщениям и страницам, содержащим ссылки на неработающие ссылки. Вы должны либо исправить, либо удалить эти ссылки.

Какие у вас есть методы и инструменты для поиска битых ссылок?

Как часто вы ищете на своем сайте битые ссылки? Насколько важно удалять недействительные ссылки и почему?

Связанный контент

• 6 важных плагинов WordPress, которые вы должны были установить

Как найти и удалить неработающие ссылки с вашего веб-сайта

Если вы являетесь владельцем веб-сайта, одним из ваших главных приоритетов должно быть обеспечение превосходного пользовательского опыта (UX). К сожалению, неработающие ссылки являются серьезной проблемой, которая может мешать. Если вы хотите поддерживать свой сайт в хорошем состоянии, вам в конечном итоге придется иметь с ними дело.

По сути, неработающие ссылки на вашем веб-сайте указывают на отсутствующие внутренние или внешние ресурсы. Когда они сохраняются, они причиняют посетителям вашего сайта значительные неудобства. Вот почему вам нужно исправить их быстро.

В этой статье мы покажем вам, как найти и удалить неработающие ссылки с вашего веб-сайта, а также порекомендуем некоторые инструменты, которые помогут вам сделать это легко. Давайте приступим!

Зачем нужно исправлять неработающие ссылки на вашем веб-сайте

Неработающей ссылкой (также иногда называемой «мертвой» ссылкой) можно считать любую гиперссылку на веб-сайте или странице, которая не работает. Когда вы нажимаете на неработающую ссылку, вместо перенаправления на предполагаемую целевую страницу вы увидите страницу с ошибкой с сообщением, например «404 Страница не найдена».

Есть несколько причин, по которым вы можете столкнуться с этой проблемой на своем веб-сайте. Вот некоторые из самых популярных:

• Вы ввели неправильный унифицированный указатель ресурсов (URL) для ссылки
• Вы или владелец веб-сайта (в случае внешних ссылок) удалили связанную страницу
• Веб-сайт, внешняя ссылка направляет на был перемещен навсегда или больше не существует
• Существует брандмауэр, ограничивающий доступ к связанному сайту или странице

Какой бы ни была причина, неработающие ссылки могут стать настоящей проблемой для посетителей вашего сайта. Помимо влияния на репутацию вашего сайта, вы никогда не сможете сказать, сколько клиентов вы теряете в результате.

Если вы оставите свой сайт без присмотра слишком долго, у вас может возникнуть так называемая «гниль ссылок» — сайт с большим количеством неработающих ссылок. Это также может повлиять на ранжирование вашего сайта в поисковых системах. Хотя Google говорит, что наличие двух или более неработающих ссылок на вашем сайте не обязательно повредит вашему рейтингу, сканеры поисковых систем полностью перестают сканировать вашу страницу, когда натыкаются на неработающую ссылку. Другими словами, эти заброшенные страницы не индексируются.

Теперь мы установили, что неработающие ссылки могут нанести ущерб общему состоянию вашего сайта, давайте посмотрим, как мы можем их найти и избавиться.

Как найти и удалить неработающие ссылки с вашего веб-сайта (в 2 шага)

Неработающие ссылки могут вызвать у вас много головной боли, но найти и исправить их гораздо проще. Вы можете легко найти множество бесплатных и платных инструментов в Интернете, которые могут помочь вам в этом. Наиболее эффективным и доступным бесплатным инструментом, который мы рекомендуем, является Google Analytics.

В целом процесс поиска и устранения неработающих ссылок с помощью Google Analytics можно разбить на два этапа. Давайте взглянем!

Шаг 1. Создание отчета о неработающих ссылках

Поиск неработающих ссылок с помощью Google Analytics требует двух разных подходов к внутренним и внешним ссылкам. Начнем с первого.

Во-первых, вам нужно выяснить, как ваш сайт генерирует страницу с ошибкой неработающей ссылки. Вы можете легко сделать это, введя URL-адрес, который, как вы знаете, не существует на вашем веб-сайте. Таким образом, вы можете просто проверить на соответствующей вкладке браузера название отображаемой страницы с ошибкой.

Затем войдите в свою учетную запись Google Analytics. После входа перейдите к Настройка > Пользовательские отчеты . Затем нажмите кнопку + Новый пользовательский отчет :

Здесь вам нужно будет указать название по вашему выбору в разделе «Общая информация». Затем заполните следующие поля в разделе Содержимое отчета следующим образом:

• Тип: плоская таблица
• Размеры: выберите страницу, путь к предыдущей странице и заголовок страницы
• Показатели: Уникальные просмотры страниц

Под Фильтры , исключить Путь к предыдущей странице . Это гарантирует, что в отчете будут отображаться только неработающие внутренние ссылки. Наконец, включите заголовок страницы и добавьте имя страницы с ошибкой, которую вы обнаружили ранее, в поле Regex . Вы также можете просто ввести «404» в качестве общего значения.

Наконец, сохраните отчет. Теперь, когда вы откроете его в будущем, вы найдете полный список всех страниц вашего сайта с неработающими внутренними ссылками:

Чтобы найти неработающие внешние ссылки, процесс почти такой же. Однако вам потребуется внести несколько изменений в поле «Размеры» при создании пользовательского отчета, а именно включить параметры Страница , Полный реферер и Заголовок страницы :

После создания оба отчета, вы успешно идентифицировали все неработающие ссылки на вашем веб-сайте. К счастью, исправить их — самая простая часть.

Шаг 2. Исправьте неработающие ссылки

Как только вы обнаружите неработающие ссылки на своем сайте, вы можете приступить к их исправлению. Первый порт захода — ваш веб-сайт, и здесь вы можете просто вручную обновить любые неправильные URL-адреса.

Однако это не будет решением всей проблемы, так как могут быть другие сайты, отправляющие посетителей на ваши страницы с неработающими ссылками. В этом случае вы захотите изменить URL-адреса этих страниц либо с помощью ручного перенаправления 301, либо с помощью плагина, такого как Redirection:

. Этот плагин упростит процесс поиска ваших мертвых ссылок и управления процессом перенаправления.