Проверить сайт на ошибки яндекс: возможные проблемы, рекомендации, фатальные и критические ошибки — Блог Яндекса для вебмастеров

Условия использования сервиса «API Яндекс.Спеллер»

Настоящий документ «Условия использования сервиса «API Яндекс.Спеллер»» (далее – Соглашение) представляет собой предложение Общества с ограниченной ответственностью «ЯНДЕКС» (далее – Яндекс) пользователю сети Интернет (далее — Пользователь) заключить соглашение об использовании сервиса «API Яндекс.Спеллер» (далее – Сервис) на изложенных ниже условиях.

1. Общие положения.

1.1. Использование Пользователем Сервиса регулируется настоящим Соглашением, а также Пользовательским соглашением Яндекса (https://yandex.ru/legal/rules).

1.2. К настоящему Соглашению и отношениям между Яндексом и Пользователем, возникающим в связи с использованием Сервиса, подлежит применению право Российской Федерации. Везде по тексту настоящего Соглашения, если явно не указано иное, под термином «законодательство» понимается как законодательство РФ, так и законодательство места пребывания Пользователя.

1.3. Разместив код API Яндекс.Спеллер на сайте Пользователя или воспользовавшись любой иной функциональной возможностью Сервиса, Пользователь выражает свое безоговорочное согласие со всеми условиями настоящего Соглашения и обязуется их соблюдать или прекратить использование Сервиса, удалив соответствующий код с сайта Пользователя.

2. Термины и определения

«Яндекс.Спеллер» — интернет-сервис, предоставляющий онлайновые инструментальные средства проверки правописания и коррекции орфографических ошибок.

«API Яндекс.Спеллер» — интерфейс программирования, который предоставляет доступ к Сервису Яндекс.Спеллер.

3. Условия пользования Сервиса

3.1. Пользователь может использовать содержание, функции и услуги, полученные при помощи Сервиса, только в рамках функциональности, предоставляемой Сервисом, в любых целях, в том числе коммерческих, при условии соблюдения требований и ограничений, предусмотренных настоящим Соглашением.

3.2. Яндекс оставляет за собой право устанавливать любые лимиты и ограничения, включая далее перечисленное, но не ограничиваясь этим:

• на количество обращений к Сервису — в размере 10 тысяч обращений в сутки;

• на объем проверяемого текста — в размере 10 миллионов символов в сутки.

3.3. Яндекс может менять лимиты и ограничения по собственному усмотрению, без предварительного письменного уведомления Пользователей.

3.4. В случаях превышения установленных Яндексом ограничений на размер проверяемого текста и/или на количество обращений к Сервису, Яндекс оставляет за собой право отказать в доступе к Сервису.

3.5. Ограничения. Используя Сервис, Пользователь не имеет права:

• Удалять, скрывать или модифицировать любые содержащиеся в Сервисе товарные знаки, логотипы, ссылки или иные указания на правообладателей, равно как и любые другие уведомления и/или информацию, передаваемые Сервисом.

• Использовать Сервис для создания сервисов, нарушающих законодательство, права и законные интересы третьих лиц, а также противоречащих требованиям п. 5 Пользовательского соглашения Яндекса.

3.6. Изменения и версии. Яндекс оставляет за собой право изменять/исправлять или обновлять Сервис в любой момент, без предварительного уведомления. При выпуске очередной стабильной версии Яндекс сообщает о её выпуске на веб-страницах Сервиса. После выпуска новой версии Яндекс не гарантирует стабильность и продолжительность работы устаревшей версии. Пользователь, не согласный использовать обновленную версию Сервиса, может либо продолжать на свой страх и риск использовать устаревшую версию Сервиса, либо прекратить использование Сервиса, удалив соответствующий код с сайта Пользователя.

3.7 Яндекс имеет право приостановить или прекратить доступ Пользователя к API Яндекс.Спеллер, полностью или частично, в любой момент по собственному усмотрению, без объяснения причин, в частности, в случае нарушения таким Пользователем требований настоящего Соглашения, но не ограничиваясь этим.

3.8. При использовании Сервиса обязательно указание на технологию Яндекса путём размещения в описании программного продукта, либо в соответствующем разделе помощи, на официальном сайте программного продукта, либо на страницах/экранах с результатами проверки текста «Проверка правописания: Яндекс.Спеллер» с активной гиперссылкой на http://api.yandex.ru/speller/. Данное указание должно быть выполнено шрифтом, размер которого не менее размера шрифта основного текста, и цвет которого не отличается от цвета шрифта основного текста.

4. Права и правообладатели

4.1. Исключительное право на Сервис принадлежит Яндексу.

4.2 Исключительное право на словарные базы ОРФО (СБ ОРФО) для русского и украинского языков, используемые в Яндекс.Спеллере, принадлежат компании Информатик: СБ ОРФО © ОРФО™, ООО «Информатик», 2009

4.3 Настоящее Соглашение не дает Пользователю каких-либо прав на использование Сервиса помимо тех возможностей, которые предоставляются непосредственно в интерфейсе Сервиса в соответствии с настоящим Соглашением.

4.4. Используя Сервис, Пользователь предоставляет Яндексу право использовать логотип, товарный знак и/или фирменное наименование Пользователя и/или сайта Пользователя в информационных, рекламных и маркетинговых целях, связанных с сервисами Яндекс.Спеллер и/или API Яндекс.Спеллер, в частности, без необходимости получения дополнительного согласия Пользователя и без выплаты ему какого-либо вознаграждения за такое использование.

5. Отказ от ответственности

5.1. Сервис предоставляется Яндексом «как есть». Яндекс не гарантирует соответствие Сервиса целям и ожиданиям пользователей, его бесперебойную и безошибочную работу. Яндекс не несет ответственности и не возмещает никакой ущерб, прямой или косвенный, причиненный пользователю Сервиса или третьим лицам в результате использования или невозможности использования Сервиса.

5.2. Пользователь самостоятельно несет ответственность перед третьими лицами за свои действия при использовании Сервиса, в том числе за то, что они соответствуют требованиям законодательства и не нарушают права и законные интересы третьих лиц. Пользователь самостоятельно и за свой счет обязуется урегулировать все претензии третьих лиц, связанные с действиями Пользователя при использовании Сервиса.

6. Заключительные положения

6.1. Все претензии, связанные с использованием/невозможностью использования Сервиса, должны направляться через форму обратной связи на веб-странице Сервиса.

6.2. Яндекс вправе в любое время без уведомления Пользователя изменять текст настоящего Соглашения и/или любые иные условия использования Сервиса. Актуальный текст настоящего Соглашения размещается по адресу: https://yandex.ru/legal/speller_api

Что делать, если найдены проблемы на сайте

Яндекс.Вебмастер ежедневно проверяет ваш сайт. Найденные ошибки отображаются на странице . Вы можете подписаться на уведомления об обнаружении ошибок.

Шаг 1. Исправьте выявленные ошибки

Выберите категорию обнаруженной проблемы и следуйте инструкциям:

Категория	Описание	Примечание
Фатальные	Проверяется соединение с сервером, доступность сайта для индексирования, безопасность и соблюдение правил Яндекса.	Могут вести к исключению отдельных страниц или всего сайта из результатов поиска. Рекомендуем отслеживать и исправлять их в кратчайшие сроки.
Критичные	Проверяется наличие и корректность SSL-сертификата, количество неработающих внутренних ссылок и время ответа сервера.
Возможные проблемы	Проверяется корректность файлов Sitemap и robots.txt, включение обхода страниц со счетчиком Яндекс.Метрики, настройки отображения несуществующих файлов, количество страниц-дублей, наличие редиректов, раздражающей рекламы и пр.	Могут влиять на качество и скорость индексирования страниц сайта.
Рекомендации	Как правило, касаются улучшения представления сайта в результатах поиска.	Позволяют улучшить представление сайта в результатах поиска.

Шаг 2. Дождитесь перепроверки сайта

Робот Яндекса узнает об обновлениях на сайте при очередном посещении. Чтобы это произошло быстрее:

1. Отправьте на переобход страницы с внесенными изменениями. Робот обойдет страницу в течение двух недель.
2. Убедитесь, что робот обошел страницу — проверьте статус URL.

3. На странице проверьте, отображается ли проблема, которую вы устранили. Если да, нажмите кнопку Проверить.

Если Вебмастер не обнаружит проблему повторно, то сообщение о ней пропадет.

Если вы уверены, что исправили ошибку, но сообщение о ней все еще отображается в Вебмастере, подождите. В этом случае само отображение ошибки не влияет на индексирование вашего сайта.

Как провести SEO аудит сайта — инструкция

SEO-аудит сайта – это комплекс мер, позволяющий выявить ошибки сайта, которые необходимо устранить для лучшего продвижения сайта, или же, наоборот, убедиться в том, что с вашим сайтом все хорошо.

SEO аудит сайта включает в себя:

1. Анализ данных из Яндекс.Вебмастер, Google Search Console
2. Технический аудит сайта
3. Аудит содержания

Анализ данных из Яндекс.Вебмастер, Google Search Console

Google Search Console и Яндекс.Вебмастер – это инструменты, которые помогут понять как поисковые системы относятся к сайту.

Яндекс.Вебмастер

Индексирование → Страницы в поиске

В нем находится информация о страницах, которые участвуют или же не участвуют в поиске Яндекса.

С помощью информации из данного раздела вы сможете:

1. следить за изменением количества страниц в поисковой выдаче Яндекса и за соотношением числа добавленных и исключенных страниц;
2. получать информацию о дате последнего посещения сайта роботом и обновления поисковой выдачи;
3. выяснить причину исключения страницы из результатов поиска.

Индексирование → Структура сайта

Здесь показаны разделы сайта, которые содержат не менее 10 страниц и составляют более 1% от общего числа страниц, загруженных в базу Поиска. Разделы представлены в виде дерева в соответствии со структурой URL сайта. По каждому разделу сайта доступна информация о количестве страниц, которые были загружены роботом Яндекса и участвуют в поиске.

Представленные данные помогут определить, что робот загружает именно те разделы сайта, которые вы считаете интересными для пользователей.

Индексирование → Статистика обхода

Индексирующий робот Яндекса регулярно обходит страницы сайтов и загружает их в поисковую базу. При этом робот может загрузить не все нужные вам страницы из-за их недоступности.

На данной странице можно узнать, какие страницы вашего сайта обходит робот и выявить адреса страниц, которые робот не смог загрузить из-за недоступности сервера, на котором находится сайт, или из-за ошибок в содержимом самих страниц.

Информация о сайте → Региональность

Яндекс уделяет большое внимание учету региональности в результатах поиска. Вводя в поисковую строку геозависимый запрос, пользователь предпочитает увидеть ответы из своего региона, а не из других городов.

Соответственно, для того, чтобы ваш сайт ранжировался в нужном вам регионе (городе, области и т.д.) необходимо это указать.

Для начала надо понимать какой у вас тип сайта: информационный или предлагающий услуги, товары – и на основании этого зависит нужно ли вам указывать региональность сайта.

Информационный общей тематики. В данном случае региональность не обязательна.

Информационный сайт региональной тематики (например, региональный портал). Необходимо указать региональность. Выполнить следующие шаги:

1. Убедитесь, что на сайте правильно размещены контактная информация и данные о региональной принадлежности.
2. Укажите предпочтительный регион в интерфейсе Яндекс.Вебмастера (если не был указан).

Сайт, предлагающий услуги или товары. Также необходимо указать региональность. Выполнить следующие шаги:

1. Убедитесь, что на сайте правильно размещены контактная информация и данные о региональной принадлежности.
2. Укажите предпочтительный регион в интерфейсе Яндекс.Вебмастера (если не был указан).
3. Добавьте сайт в Яндекс.Справочник (если не был добавлен ранее).

Основываясь на информации выше, вы сможете понять правильно ли у вас указан региональность сайта и нужна ли он вообще.

Диагностика → Безопасность и нарушения

В данном разделе отображаются нарушения и угрозы, найденные на сайте.

Проверяем на наличие. Если раздел пуст – все ок.

Google Search Console

Отчет об эффективности содержит различные показатели, связанные с эффективностью сайта в результатах поиска Google (частоте нахождения по запросам, средней позиции, CTR и т. д.), а также сведения по специальным функциям (например, расширенным результатам). Этот отчет позволит:

1. выяснить, как поисковый трафик меняется со временем, откуда приходят посетители и по каким запросам показывается ваш сайт;
2. узнать, у каких страниц наибольший и наименьший CTR в результатах Google Поиска.

В данном разделе отображаются страницы с ошибками, страницы с предупреждениями и исключенные страницы.

Если ваши нужные страницы относятся к одной из вышеперечисленных категорий, то необходимо провести повторную проверку, т.к. иногда данные могут быть неактуальными. Если же опасения подтвердились, то необходимо применить соответствующие меры.

Проблемы безопасности

На данные отчеты обращаем внимание в первую очередь. Если у вас есть проблемы с этими пунктами, то, вероятнее всего, они являются (или будут являться) первопричиной низких позиций и упадки трафика.

Технический аудит

Он состоит из проверки технической стороны сайта: дубли страниц, дубли мета-тегов, валидация html-кода, анализ скорости загрузки страниц, адаптивность для мобильных устройств и т.д

Проверка на наличие ссылок с неверными кодами ответа сервера

В идеале все страницы сайта должны отдавать 200 код ответа сервера. Для полноценного анализа лучше использовать приложение Screaming Frog SEO Spider или Netpeak Spider.

Данные инструменты позволяют выявить страницы сайта с 3хх, 4хх и 5хх кодами ответа сервера.

1. 3хх. Зачастую это ссылки с 301 и 302 кодами ответа сервера. Их необходимо исправить на прямые, если это сделано непреднамеренно.

   То есть, к примеру раньше у вас была страница /auto/, но вы создали новую – /cars/ и со страницы /auto/ вы настроили 301 редирект на страницу /cars/.
   Но на сайте у вас до сих пор стоят ссылки на старую страницу /auto/. Переходя по этой ссылке робота и пользователя сервер перенаправляет на новую страницу (/cars/).
   Заменив старую ссылку на новую мы избавимся от ненужного 301 редиректа, что в свою очередь благотворно влияет на краулинговый бюджет и сокращает время ожидания пользователя.
   

2. 4хх. В основном это страницы с 404 и 403 кодами ответа сервера. 404 – говорят, что страница не существует. 403 – доступ запрещен.
   Необходимо проверить к нужным ли страницам запрещен доступ и для нужных ли страниц сервер отдает 404.
   404 исправляем путем удаления ссылок с сайта.
   
3. 5хх. Ошибки, возникшие по вине сервера. Стоит изучить код ответа сервера и принять меры.

HTTPS-протокол

Если вы храните, обрабатываете персональные данные, то необходимо позаботиться о приобретении и установке SSL-сертификата.
Соответственно, надо все страницы перевести на защищенный протокол с помощью 301 редиректа.

Дубли страниц

Склейка
Смотрим доступен ли сайт с www и без www – должна открываться одна и та же страница в обоих случаях. Если этого не происходит, то необходимо настроить 301 редирект.

Дубли мета-тегов
В первую очередь необходимо выявить страницы с одинаковыми title. Это можно сделать с помощью инструментов: Netpeak Spider и Screaming Frog SEO Spider.

Вводите адрес сайта и запускаете анализ. Далее смотрите отчет по дублям title.

Если страницы с одинаковыми title являются дублями (контент идентичен), то необходимо настроить 301 редирект, либо canonical.
Если же контент отличается, то необходимо уникализировать title этих страниц. Например, на одной странице у вас представлены автокресла, а на другой – коляски, при этом title у них одинаковый, пусть будет: “Интернет-магазин Блублу”. Title должен отражать суть страницы. Тогда пусть title будут выглядеть следующим образом:

1. Купить коляски в интернет-магазине Блублу
2. Автокресла – купить в интернет-магазине Блублу

404 страница

Если пользователь попал на несуществующую страницу, то необходимо это отображать путем информирования и возможностью вернуться на главную или на другую страницу из меню.

В мета-тегах и h2 должна быть соответствующая информация.
Страница должна отдавать 404 код ответа сервера. Проверить можно здесь.

robots.txt

Необходимо убедиться:

1. в наличии данного файла в корне сайта. Должен открываться по адресу: site.ru/robots.txt
2. в корректном заполнении. Валидатор есть в панели Яндекс.Вебмастер (Инструменты → Анализ robots.txt)
3. что нужные страницы доступны к индексации. Добавьте в валидатор несколько типовых страниц и нажмите “Проверить”.
   Если страница не заблокирована в robots.txt, то увидите зеленую галочку.
   Если страница заблокирована, то увидите красное правило, которое блокирует данную страницу.
4. что ненужные страницы запрещены к индексации. Обычно такими являются сервисные страницы: корзина, сравнение, вход, регистрация и т.д. 
5. что есть ссылка на карту сайта – sitemap.xml

Примечание. robots.txt не является строгим правилом, поэтому некоторые страницы, заблокированные в нем, могут все равно участвовать в поиске.

Если вы хотите строго запретить добавлять в индекс определенные страницы, то необходимо разместить на них мета-тег robots – <meta name=”robots” content=”noindex”>, либо  с помощью http-заголовка X-Robots-Tag со значением noindex или none.

Sitemap.xml

1. Проверить наличие файла. Если файла нет – создать. Если присутствует, то проверяем какие страницы находятся в нем.
2. Обязательно должны присутствовать все страницы, которые являются важными.
3. Проверить коды ответа страниц. Должны быть только страницы с 200 кодом ответа сервера
4. Проверить файл с помощью валидатора в Яндекс.Вебмастере (Инструменты → Анализ файлов Sitemap)

Оптимизация для мобильных устройств (Mobile-friendly)

Доля пользователей, посещающих сайты с мобильных устройств, уже выше, чем доля посетителей с десктопов. Поэтому необходимо убедиться, что ваш сайт оптимизирован под мобильные устройства.

Инструмент Mobile-friendly

Проверяем несколько типовых страниц и смотрим на результат.
Если будут какие-либо ошибки, то инструмент укажет на них и даст рекомендации по их устранению.

Удобство для мобильных

В Google Search Console есть отчет “Удобство для мобильных”. 

Если присутствуют ошибки, то увидите их в соответствующем столбце.

Кликнув на отчет, внутри найдете анкор “Подробнее”, при клике на который вы попадете на страницу с рекомендациями устранения соответствующей проблемы.

Доступность ресурсов сайта для поисковых роботов

При загрузке страницы у робота Google могут возникнуть сложности с обработкой ресурсов сайта.

Для того, чтобы убедиться, что ваш сайт корректно обрабатывается краулером Google необходимо провести следующие тесты:

Инструмент Mobile-friendly
Чтобы увидеть заблокированные ресурсы необходимо нажать на кнопку “Подробнее” (см. скриншот)

Основная причина недоступности ресурсов это их блокировка в файле robots.txt. Скорректируйте данный файл, основываясь на информации полученной из отчета.

Проверка URL в Google Search Console
Для проверки URL необходимо открыть отчет “Проверка URL”, добавить адрес интересующей страницы и запустить проверку.

После проверки в правом верхнем углу необходимо нажать на кнопку “Проверить на сайте”. После этого вы сможете увидеть заблокированные ресурсы.

Нажмите на “Изучить проверенную страницу”. В правой стороне экрана появится блок с тремя вкладками: HTML, Скриншот, Подробнее.

Переходим на вкладку “Подробнее” и смотрим с загрузкой каких ресурсов возникают трудности.

Так же, как и в пункте выше, основная проблема – это блокировка ресурсов в robots.txt. Корректируем данный файл с учетом полученной информации.

Валидность HTML-кода

С помощью данной процедуры можно узнать соответствует ли код ваших страниц общепринятым стандартам. Если да, то поисковые роботы без труда смогут понять что из себя представляем ваш сайт.

Если нет – необходимо исправить ошибки.

Проверку лучше производить с помощью сервиса Markup Validation Service.

Скорость загрузки сайта

Используем инструмент Google Pagespeed Insights.

Проверяется скорость загрузки для мобильных устройствах и для десктопов. Результаты содержатся на соответствующих вкладках.

Следуя рекомендациям, необходимо улучшить показатели скорости загрузки минимум  до оранжевой зоны, в идеале – до зеленой.

Примечание. Частая проблема низкой скорости загрузки в неоптимизированных изображениях. Если вы столкнулись с аналогичной проблемой, то необходимо оптимизировать все изображения сайта с помощью рекомендуемого сервиса.

Аудит содержания

Данный пункт подразумевает проверку сайта на наличие необходимых блоков/элементов, а также сравнение с конкурентами.

Рассмотрим на примере:

Интернет-магазин

Необходимо удостовериться, что вы предоставляете всю необходимую информацию пользователям. Такой информацией могут быть:

1. карточки товаров с изображениями
2. цены
3. возможности сортировки и фильтрации по параметрам
4. характеристики, описание и свойства товара
5. информация о доставке и способов оплаты товара

!Всегда анализируйте ТОП по нужным вам запросам. Смотрите конкурентов. Обращайте внимание на их контент: какие страницы и фишки у них есть, какой тип контента публикуется. Прикидывайте это на свой сайт, делайте выводы. Не надо все копировать.

Сайт, предоставляющий услуги

Например, на вашем сайте представлены услуги по производству стеклянных перегородок для душа. Скорее всего пользователям будет полезно следующее:

1. текст с описанием процесса и преимуществами
2. возможные варианты изготовления
3. указание цены
4. возможные варианты фурнитуры
5. возможный выбор цветов фурнитуры
6. возможность оставить заявку или заказать звонок
7. примеры работ

!Не забываем смотреть ТОП и анализировать конкурентов.

Неважно какой у вас сайт (коммерческий, информационный и т.д.), старайтесь делать  его максимально удобным и отзывчивым для пользователей. Чем удобнее он будет, тем лучше будут поведенческие характеристики сайта. Поведенческие характеристики, в свою очередь, являются одним из факторов ранжирования.

Также не стоит забывать и про поисковые системы. Ведь если поисковые роботы не смогут понять, что находится на вашем сайте, то и ранжироваться высоко он не будет.

Итог: это не все параметры для анализа. Но для проведения самостоятельного SEO анализа сайта и выявления базовых ошибок оптимизации сайта этого будет достаточно.

Как проверить и найти ошибки 404 на сайте и почему это важно сделать.

Сегодня я подготовил для вас материал, в котором я решил собрать свой опыт при работе с ошибками 404. Как проверить и найти ошибки 404 на своем сайте и почему это важно сделать?

Ошибка 404 на сайте означает то, что пользователь обратился к вашему сайту по такому url-адресу, страницы для которого в данный момент не существует.

Обратите внимание, что это не означает, что данной страницы вообще никогда не существовало. Она могла быть создана вами ранее, но позже вы могли переместить ее в другой раздел сайта, поменять ее название или что-то еще и автоматически изменился ее url-адрес. Кроме того, вы могли просто ее удалить.

Все бы ничего, но если на эту страницу были ссылки с вашего сайта, либо с других сайтов или она попадала в ранжирование поисковых систем, все переходы с таких мест на эту страницу, будут выдавать ошибку 404 — страница не найдена.

Как думаете есть ли на вашем сайте такие ошибки?

Признаться честно, я думал, что на моем сайте если такие ошибки и есть, то их не слишком много. Каково было мое удивление и ужас, когда я все настроил, проверил свой сайт и увидел реальную картину с ошибками 404 на своем сайте.

Вот скриншот из системы Яндекс Метрика:

Только за первые несколько дней, мне удалось найти 22 такие страницы.

Как думаете, сколько таких страниц у вас?

Большое количество 404 ошибок на вашем сайте может очень серьезно сказаться на показателях и посещаемости вашего сайта.

 Почему так происходит?

Большое количество 404 ошибок означает для поисковой системы:

+ Автор не следит за своим сайтом.

+ Автор пытается обмануть своих посетителей.

+ На сайте какие-то неполадки.

Зачем поисковой системе давать высокие позиции в поисковой выдаче таким сайтам? Соответственно, доверие поисковых систем к ним довольно серьезно снижается.

Чтобы этого не допускать, нужно постоянно проверять свой сайт на ошибки 404, находить их и устранять.

Как это можно сделать и где посмотреть есть ли они на вашем сайте или нет?

Здесь есть несколько вариантов, как это можно сделать. Давайте рассмотрим самые основные.

Вариант 1. Система Яндекс Метрика.

https://metrika.yandex.ru

Это система веб-аналитики сайта, которая может показать наиболее точную и информативную картину из всех вариантов, которые будут рассмотрены ниже.

Но, основная проблема здесь — это сложность настройки и передачи данных в эту систему.

По умолчанию, Яндекс Метрика не умеет учитывать такие переходы с ошибками 404. Для того, чтобы это стало возможным, необходимо настроить так называемые параметры визитов.

Но, человеку, который плохо разбирается в веб-разработке, сделать это может быть не совсем просто. Если у вас возникли трудности, можете обратиться ко мне, у меня есть специальная услуга по настройке ошибок 404 в системе Яндекс Метрика для вашего сайта.

Услуги веб-аналитики сайта.

Этот способ хорош также тем, что вы можете данные об ошибках 404 как метрики и использовать их при построении отчетов веб-аналитики. Это дает возможность отвечать на такие вопросы как:

1) С каких именно страниц приходили на ваш сайт и натыкались на ошибку 404.

2) Какая доля таких посещений от общего числа визитов

3) Когда именно была зафиксированна ошибка 404.

Вариант 2. Как посмотреть 404 ошибки в Яндекс.Вебмастер?

http://webmaster.yandex.ru

Страницы 404 находятся в разделе «Индексирование – Статистика обхода — Исключенные страницы»

Это хорошо, но таким способом вы можете увидеть не совсем полную информацию о вашем сайте, а только о тех страницах, которые так или иначе попадали в индекс поисковой системы Яндекс.

Вариант 3. Как посмотреть 404 ошибки в Google инструменты вебмастера.

http://www.google.com/webmasters/tools/

Этот способ аналогичен проверки ошибок 404 с помощью Яндекс Вебмастера. Картина здесь будет не совсем полная, но тем не менее, общую информацию вы можете получить.

Ошибки 404 в Google вебмастер можно найти здесь:

«Сканирование – ошибки сканирования».

После того, как вы отследите ошибки 404, на вашем сайте, нужно сделать 301 редирект на то место, где эти страницы на самом деле находятся.

Например, на wordpress это можно сделать с помощью следующего плагина.

Хороших позиций вашему сайту!

7 способов проверить сайт на фильтры поисковых систем Яндекс и Google

Площадки, нарушающие правила поисковых систем, могут попасть под действие специальных алгоритмов, «в народе» именуемых фильтрами. Как результат, проседают позиции отдельных страниц или всего сайта или сайт выпадает из индекса. Мы расскажем, как проверить, находится ли сайт под санкциями поисковых систем.

Фильтры в Яндекс и Google могут накладываться по разным причинам:

• неуникальный контент;
• переоптимизация текстов ключами;
• скрытый текст;
• бессистемный линкбилдинг;
• злоупотребление продажей ссылок;
• накрутка поведенческих показателей;
• агрессивная реклама, всплывающие окна;
• заражение сайта вирусами;
• использование аффилиатов;
• другие «серые» технологии: кликджекинг, клоакинг, криптоджекинг, фишинг и проч.

Это лишь часть возможных нарушений — каждая поисковая система выдвигает свои требования, причем они регулярно обновляются и дополняются. По ссылкам вы найдете списки нарушений Яндекса и Google, за которые они применяют санкции. Цель фильтрации — сделать поиск более качественным.

Если вы заметили, что позиции сайта резко просели, страницы выпали из индекса одного из поисковиков и трафик упал, то это серьезный повод проверить сайт на попадание под фильтры. Сделать это можно несколькими способами.

1. Уведомления о санкциях в панелях для вебмастеров

Это самый надежный способ. Поисковики уведомляют о применении санкций в панелях для вебмастеров: Яндекс — в Яндекс.Вебмастере, Google — в Search Console.

Яндекс.Вебмастер

В Вебмастере сначала нужно проверить уведомления — если были применены санкции в ручном режиме, здесь будет сообщение с пояснением, что не так. Например, такое:

Если сообщения нет, но вы подозреваете, что сайт попал под фильтр, перейдите в раздел «Диагностика сайта» и обратите внимание, есть ли фатальная ошибка «Обнаружены нарушения или проблемы с безопасностью».

Google Search Console

Об автоматических фильтрах, которые накладываются вследствие обновления основного алгоритма, Google не уведомляет. Но о мерах, принятых вручную, будет сообщение в Search Console. Перейдите в раздел «Проблемы безопасности и меры, принятые вручную» / «Меры, принятые вручную».

Если санкций нет, то будет такое сообщение:

В случае наложения санкций будет описана причина и дальнейшие действия. Например, при спаме в разметке структурированных данных сообщение будет таким:

Обнаружив проблему, приступайте к устранению недочетов. После этого нажмите кнопку “Запросить проверку” в сообщении. Если вы все сделали верно, через некоторое время Google снимет фильтр.

2. Проверка на фильтры с помощью ИКС

Способ подходит только для Яндекса. Суть в том, что Яндекс аннулирует ИКС при попадании сайта под фильтр.

Для справки. Раньше для проверки сайта на фильтры Яндекса можно было перейти по ссылке https://yandex.ru/yaca/cy/ch/[в конце — ваш домен] и посмотреть на значение тИЦ — если все в порядке, то это значение было 0 или выше (в противном случае напротив тИЦ была надпись «не определен»). Но в конце 2017 года Яндекс.Каталог закрыли, а с сентября 2018 года тИЦ заменили на ИКС.

Теперь проверить любой домен на фильтры можно с помощью бесплатного парсера ИКС — введите адрес главной страницы сайта, и если ИКС обнулен или аннулирован, это верный признак фильтрации.

Для проверки собственного сайта на санкции Яндекса достаточно зайти в Яндекс.Вебмастер и посмотреть на значение ИКС интересующей площадки в списке сайтов.

3. Проверка на фильтры путем анализа трафика

Если вы заметили, что в одной из поисковых систем трафик «обвалился», а в другой остался стабильным, это вероятный признак фильтрации.

Оценить трафик можно с помощью подключенной системы аналитики: Яндекс.Метрика, Google Analytics или Liveinternet. Если график посещаемости напоминает представленный ниже, то начинайте искать причины такого положения дел.

Полезный совет: сопоставьте дату проседания трафика с датой выхода очередного обновления алгоритма поисковика. Например, все обновления алгоритмов Google фиксируются на сервисе moz.com. О фильтрах Яндекса можно узнать из официального блога или из новостных публикаций от PromoPult. Если даты совпадают, то вам будет проще понять, какой именно фильтр повлиял на работу сайта.

4. Проверка на фильтры путем анализа количества страниц в индексе

Поисковые системы по-разному наказывают сайты за нарушение правил. Они могут понижать позиции в выдаче или исключать страницы из индекса. Если вы заметили, что в одной из ПС из индекса резко выпала существенная доля страниц, дело может быть именно в фильтрах.

Но тут важно правильно установить диагноз. Помимо фильтров могут быть следующие причины исключения страниц из индекса:

• запрет индексации сайта или отдельных страниц в robots.txt, .htaccess или настройках CMS;
• заражение сайта вирусами или взлом;
• блокирование доступа роботам к сайту со стороны хостинг-провайдера;
• сайт некоторое время был недоступен для сканирования роботами (например, если не был вовремя оплачен хостинг) и исключен из поиска.

Для быстрой проверки количества страниц в индексе зайдите в интересующий поисковик и введите запрос site:вашдомен.ru (без пробела).

Резкое сокращение количества страниц — признак фильтрации.

Проверить индексацию страниц и точно узнать, какие из них выпали из индекса, вы можете с помощью Яндекс.Вебмастера и Google Search Console. Одновременная проверка в Яндексе и Google возможна с помощью инструмента от PromoPult.

5. Проверка позиций по топовым запросам

Выделите самые важные для вас запросы и регулярно снимайте по ним позиции в Яндексе и Google. Просадка в одной из ПС — возможное следствие применения автоматических санкций.

Снять позиции в поисковиках можно инструментом системы PromoPult. Укажите домен, список ключевиков, выберите ПС и тип выдачи (десктоп/мобайл). Рекомендуем снимать позиции регулярно — инструмент позволяет делать это раз в месяц, раз в неделю или даже каждый день.

Подробно о парсинге позиций читайте здесь.

6. Быстрая проверка позиции по брендовому запросу

Этот способ хорошо подходит, если вы покупаете домен и хотите проверить, не наложены ли на него санкции. Заходим в поисковик и вбиваем брендовый запрос типа «promopult ru» (то есть адрес сайта без точки с пробелом). Если на первой позиции не находится проверяемый домен, то с ним почти наверняка что-то не так.

7. Анализ на фильтры с помощью онлайн-сервисов

Есть ряд сервисов, анализирующих наличие санкций со стороны поисковых систем. Например, фильтры Яндекса (АГС, Минусинск и др.) неплохо определяет Xtool.ru. Вводите интересующий домен, и если есть проблемы, они будут отражены в таблице:

Даже если фильтр не наложен, сервис все равно предупредит о возможных проблемах:

Проверить сайт на АГС Яндекса можно с помощью pr-cy.ru. Среди результатов проверки есть строка с проверкой на АГС:

Проверить наличие санкций в ПС Google можно с помощью англоязычного инструмента Panguin Tool для обнаружения «Панды», «Пингвина» и других фильтров. Для работы сервиса нужно разрешить доступ к Google Analytics и выбрать представление.

На графике отмечены даты обновления алгоритмов Google — таким образом, вы можете сопоставить изменения трафика с обновлениями и сделать выводы.

Похожий инструмент — Website Penalty Indicator. Он подходит только для Google и отображает изменение трафика сайта с привязкой к обновлениям алгоритмов.

Еще один сервис — Google Penalty Checker. Он показывает уровень влияния изменений в алгоритмах Google на трафик сайта (синий — позитивное влияние, оранжевый и красный — нейтральное и негативное).

Как видите, есть много способов узнать о наложении фильтров на ваш сайт. Используя один или несколько из них, вы узнаете, что с вашим сайтом не так. Оптимизируйте сайт правильно, получайте безопасные внешние ссылки — и у вас не будет проблем с поисковиками.

Яндекс обновил Диагностику Турбо-страниц для контентных сайтов

Яндекс представил улучшенную диагностику Турбо-страниц для контентных сайтов. Теперь система подробно рассказывает о текущем статусе Турбо-страниц и информирует об ошибках, чтобы их было проще исправить.

Обновленная Диагностика поможет следить, чтобы не было расхождений между содержанием оригинальных страниц сайта и Турбо-страниц. Теперь в ней показывается подробное описание ошибок, приводятся примеры, а также причины отключения Турбо-страниц, если это произошло.

Система присылает уведомление на почту, когда распознает ошибку, а также отображается их в сообщениях в Сводке Вебмастера и Сводке по Турбо.

О качестве Турбо-страниц сообщают статусы разного цвета:

Зеленый – значит Турбо-страницы прошли все проверки и подтвердили качество. Если есть незначительные ошибки, они будут показаны в интерфейсе, чтобы их можно было исправить.

Желтый предупреждает о снижении качества Турбо-страниц и наличии ошибок, которые нужно исправить. Если количество ошибок вырастет, и они будут заметны пользователям, Турбо-страницы пропадут из поиска. Когда ошибки исправлены, нужно нажать кнопку «Проверить».

Красный:

• Есть критические ошибки, Турбо-страницы будут удалены, если их не исправить. Внести исправления нужно в течение 21 дня. Когда ошибки исправлены, нужно нажать кнопку «Проверить».
• Турбо-страницы на проверке. Она занимает несколько дней. Если ошибки не были исправлены до проверки, Турбо-страницы сайта будут удалены. Если ошибки были исправлены, статус изменится на желтый или зеленый.
• Турбо-страницы сайта удалены. Чтобы восстановить страницы в поиске, нужно исправить ошибки, нажать кнопку «Проверить» и дождаться успешной проверки. Если снова появятся ошибки, нужно исправить их и повторить проверку.

Регулярный мониторинг и уведомления помогают вовремя замечать ошибки и обновлять содержание Турбо-страниц.

Подробнее об обновленной Диагностике контентных Турбо-страниц можно найти в Справке.

Источник: Блог Яндекса для Вебмастеров

Пошаговое руководство пользования Яндекс.Вебмастер — 1C-UMI

Яндекс.Вебмастер ― незаменимый сервис для владельцев сайтов. Он помогает анализировать веб-ресурсы, выявлять ошибки, отслеживать индексацию, поисковые запросы, проверять работоспособность сайта и многое другое. В этом руководстве мы рассмотрим самые интересные инструменты и функции панели вебмастера от Яндекс. А еще расскажем, какую пользу они несут бизнесу и как с ними работать.

Сводка

Здесь собрана основная информация о веб-ресурсе. Отображаются данные о наличии или отсутствии проблем на сайте, недавно добавленные или удаленные страницы, поисковые клики и популярные запросы, история обхода роботом, внешние ссылки и показатель ИКС.

Сведения показываются в урезанном, компактном виде. Если есть желание просмотреть более детальные отчеты, нажмите на заголовок каждого блока в этом разделе, и вы попадете на соответствующую страницу в панели вебмастера. Данных из общей сводки достаточно для экспресс-мониторинга текущего положения дел и отслеживания потенциальных ошибок на сайте.

Показатели качества

В этом разделе отображаются все показатели качества площадки. Самый главный из них — ИКС, который не так давно заменил устаревший тИЦ. Чем выше индекс качества сайта, тем более высокие позиции занимает ресурс в поисковой выдаче Яндекс. График изменения ИКС отображается за несколько месяцев, но можно выбрать свой диапазон дат.

Также сайту могут быть присвоены особые знаки отличия:

• Популярный сайт.
  Ресурс получает такую награду, если у него есть стабильная высокая посещаемость и постоянная аудитория, которая регулярно просматривает его контент.

• Выбор пользователей.
  Этот знак присваивается тем сайтам, которые могут похвастаться высокой вовлеченностью и лояльностью целевой аудитории.

В этом же разделе можно добавить сайты конкурентов для сравнения со своими показателями. Добавив другой сайт, вы увидите значение ИКС и шкалу прогресса получения отличительных знаков.

Диагностика

Диагностика сайта

В этом подразделе отображаются все проблемы вашего сайта. Если есть фатальные или критичные, их следует устранять в первую очередь. Возможные особого вреда не принесут, но к ним тоже лучше присмотреться и, если это в ваших силах, исправить.

Отдельно показываются рекомендации. Им присвоен зеленый цвет. По умолчанию они отображаются наряду с проблемами на текущий момент. Но у вас есть возможность просмотреть все зафиксированные ошибки за другие дни. Для этого просто воспользуйтесь соответствующей кнопкой, которая располагается справа вверху.

Если вы устраните возможные ошибки или прислушаетесь к рекомендациям и внесете необходимые изменения, можете отправить сайт на проверку вручную. Напротив обнаруженной проблемы кликните по кнопке «Проверить». Процесс займет до 2 недель.

Безопасность и нарушения

Тут показываются данные о вирусах и уязвимостях на вашем ресурсе, если таковые есть. При желании можно не только узнать, какой код вредит вашему сайту или его посетителям, но и отследить все цепочки, чтобы устранить источник.

Помимо угроз безопасности, сюда собираются оповещения о нарушении правил Яндекса. Имеется в виду попадание под фильтры ― такие как, например, АГС-фильтр или Баден-Баден. Если никаких угроз или нарушений выявлено не было, вы увидите соответствующее уведомление.

Поисковые запросы

Статистика запросов

В данном разделе отображается график, на котором высвечивается общее количество показов, кликов по всем запросам, CTR и другие показатели. Включить дополнительные можно, кликнув по значку с шестеренкой рядом с пунктом «Группа запросов».

Если переключиться на вкладку «Популярные запросы», под графиком появятся те из них, которые чаще всего вводятся в поисковую строку Яндекса.

При желании можно активировать вспомогательные фильтры. Например, указать конкретный регион или тип устройств, с которых посетители заходят на сайт. Доступна детализация информации по дням, неделям, месяцам и за произвольный период.

Все запросы и группы

Подраздел содержит все ключевые слова, по которым находят ваш сайт в интернете. Если вы загружали свои, чтобы отслеживать по ним статистику, они будут во вкладке «Загруженные».

Тут же вы можете создать собственную группу и перенести туда отдельные запросы или добавить последние в «Избранное», поставив галочки напротив нужных и воспользовавшись одной из кнопок внизу.

Рекомендованные запросы

Здесь могут показываться те запросы, которые Яндекс рекомендует для вашего ресурса. По умолчанию функция неактивна. Чтобы ее задействовать, кликните по кнопке «Получить рекомендованные запросы». Подготовка может занять до нескольких дней. Наберитесь терпения.

Индексирование

Статистика обхода

В этом подразделе отображается график со статистическими данными об обходе поисковым роботом страниц вашего ресурса. Вы можете выбрать период и увидеть, сколько изменений и новых страниц учёл Яндекс при очередном посещении сайта.

Под графиком показывается дата обхода и выводится перечень конкретных веб-страниц, на которых побывал робот. У вас есть возможность скачать ее в формате XLS (Excel) или CSV.

Если кликнуть по пункту «История обхода», на графике будут отображаться даты обхода и количество возвращенных ответов от сервера. Зеленый цвет графика говорит о том, что поисковый робот не столкнулся ни с какими проблемами, когда посещал ресурс. Если же будут красные или желтые, проверьте свой сайт на наличие ошибок или запретов индексации.

Страницы в поиске

Тут показываются все страницы, которые добавляются или исключаются из поиска Яндекса.

Под графиком отображаются адреса веб-страниц: все, последние измененные, либо исключенные из поисковой выдачи. Одобренные страницы подсвечиваются зеленым цветом, а исключенные — синим. Под последними указывается причина исключения.

Структура сайта

Здесь отображаются разделы вашего сайта, которые имеют от 10 страниц и составляют не менее 1 процента от общего объема находящихся в индексе страниц. Если кликнуть по структуре, вас перекинет в подраздел со статистикой обхода.

Если какой-то раздел сайта отсутствует в Яндекс.Вебмастере, то его можно добавить вручную, кликнув по кнопке «Добавить раздел» и введя его путь. Например: /content или /blog.

Проверить статус URL

Если вы подозреваете, что какая-либо страница вашего сайта не индексируется Яндексом, это легко проверить при помощи данного инструмента. Введите полный адрес или путь страницы и кликните по кнопке «Проверить». В результате вы получите отчет о том, индексируется ли данная страница.

Здесь же можно добавить страницу в мониторинг (кнопка «Отслеживать»). Тогда проверка на индексацию будет производиться автоматически.

Мониторинг важных страниц

Простая опция, которая позволяет отслеживать добавленные вручную веб-страницы на предмет каких-либо изменений. Для добавления страницы введите ее адрес и нажмите на кнопку «Отслеживать».

В блоке ниже появится введенный вами URL и статус «Данные собираются». После окончания сбора данных отобразится информация о последнем изменении страницы, дате обхода роботом, код ответа (если все хорошо, то 200), число и статус.

Еще ниже располагаются рекомендованные страницы. Они собраны Яндексом автоматически, исходя из наибольшего количества показов и кликов. Напротив каждой страницы есть кнопка «Отслеживать», нажав на которую, вы добавите раздел мониторинг.

Уведомления об изменениях можно получать как в самой панели вебмастера, так и по e-mail. Чтобы настроить уведомления, воспользуйтесь кнопкой в правом верхнем углу.

Переобход страниц

В статье о переиндексации страниц сайтов мы уже рассказывали об этом инструменте. Поэтому не будем вдаваться в детали, но напомним, что с его помощью вы можете отправить любые страницы своего ресурса на повторную индексацию Яндексом. Просто введите адреса страниц (до 20 ссылок в день) и нажмите на кнопку «Отправить».

Файлы Sitemap

В этом подразделе вы можете загрузить карту своего сайта. Если она у вас уже загружена и нуждается в обновлении, делать ничего не нужно. Робот сам просмотрит карту и обновит ее, при условии, что она доступна по прежней ссылке.

Для ускорения обновления нажмите на иконку с зацикленными по кругу стрелками. Это отправит sitemap на переобход, и карта обновится в течение 3 дней.

Переезд сайта

Этот инструмент пригодится в тех случаях, когда вы решите переехать с HTTP на HTTPS-протокол, добавить или удалить из домена www или у вас есть 2 сайта с одинаковым содержимым и вы хотите оставить в поиске лишь один.

Перед тем, как назначить в качестве основного зеркала новый ресурс, добавьте оба сайта в Яндекс.Вебмастер, настройте 301 редирект, затем введите доменное имя, отметьте галочками нужные вам опции и нажмите «Сохранить».

Скорость обхода

Этот подраздел позволит вам отрегулировать скорость обхода поисковым роботом страниц вашего сайта. Рекомендуем оставить значение по умолчанию — «Доверять Яндексу». Но если вы заметили, что во время обхода сильно нагружается сервер, вы можете снизить скорость, установив собственные настройки. Для этого выберите пункт «Задать вручную» и укажите количество запросов в секунду, передвинув ползунок и сохранив.

Ссылки

Внутренние ссылки

Здесь отображается список тех ссылок, которые находятся внутри веб-ресурса и не работают по причине запрета индексации, удалении, изменении или из-за ошибки на стороне сервера.

Чтобы просмотреть, какие именно ссылки Яндекс посчитал проблемными, пролистайте страницу раздела вниз.

Если ссылки рабочие, а вы на них поставили запрет индексации, ничего делать не нужно. Но если линки уже давно неактуальны или запрет стоит необоснованно, лучше это исправить.

Внешние ссылки

Подраздел содержит все внешние ссылки со сторонних сайтов, которые ведут на ваш ресурс. Сверху отображается график с количеством площадок и ссылок с них за конкретное число. При желании можно переключить на диаграмму и посмотреть ИКС сайтов-доноров.

Ниже графического отображения приведен текстовый список ссылок. Вы можете его группировать по сайтам или же отобразить только неработающие или удаленные линки. О сайте, с которого ведет ссылка на вашу площадку, вы узнаете: его индекс качества, количество ссылок на ваш сайт, дату создания и обновления данных об URL, на какую страницу ссылается и какой анкор (текст ссылки) используется.

Информация о сайте

Региональность

В этом месте указывается регион веб-ресурса. Это необходимо в тех случаях, когда вы работаете в определенном городе или области и хотите, чтобы ваш сайт показывался по ключевым запросам жителям конкретного региона. Если регион по умолчанию не задан, вы увидите те же настройки, что на скриншоте ниже.

Чтобы добавить регион вручную, кликните по иконке с шестеренкой напротив «Вебмастер». Затем кликните по кнопке «Добавить регион».

Наберите в поисковой строке нужный вам город, выберите его из раскрывшегося списка, затем в поле ниже укажите ссылку на страницу своего сайта с контактами.

После этого нажмите на кнопку «Сохранить». Введённую информацию модератор будет проверять в течение нескольких дней или недель. Если контактные данные на вашем ресурсе будут соответствовать выбранному региону, ваш запрос получит одобрение.

Оригинальные тексты

Крайне полезный инструмент, который позволяет владельцам сайтов защитить свои авторские тексты и сохранить SEO-позиции в Яндексе. Если ваши тексты или описания товаров скопируют недобросовестные плагиатчики, вы можете оповестить поисковую систему о том, что все новые тексты принадлежат именно вам, а не кому-то еще. Просто скопируйте и вставьте текст в поле и нажмите на кнопку «Отправить». После этого смело публикуйте текст на своем сайте и будьте уверены, что Яндекс отдаст предпочтение именно ему, как первоисточнику, а не другим скопированным версиям.

Регистр имени сайта

Инструмент позволяет изменить некоторые прописные буквы на заглавные и наоборот в доменном имени. Это никак не сказывается на ранжировании и нужно лишь для визуального удобства пользователей. Например, не supersite, а SuperSite.

Перед тем, как менять регистр имени сайта, ознакомьтесь с требованиями Яндекса. Потом впишите доменное имя с нужным регистром, укажите причину изменения и кликните на соответствующую кнопку. Новое написание доменного имени начнет действовать после проверки модератором и планового апдейта поисковой базы.

Товары и цены

Эта функция предназначена для интернет-магазинам: она автоматически подставляет цены и регион доставки товара к сайту в поисковой выдач по соответствующему поисковому запросу.

Для подключения нужно будет заполнить сведения о магазине (контакты, региональность, доставка) и указать ссылку на YML-файл, опубликованный на вашем сайте. Этот файл содержит информацию о названии и описании товаров, их ценах, условиях доставки. На 1С-UMI он создается в 1 клик: просто нажмите кнопку «Создать» в разделе «Магазин ― Яндекс.Маркет» в панели управления сайтом.

Заполнив все поля, нажмите на кнопку «Включить магазин». За 5 рабочих дней модератор проверит заявку и вынесет решение. Если заявку одобрят, расширенные товарные описания начнут отображаться в поиске через полторы недели.

Быстрые ссылки

Что это такое? В поиске Яндекса вы могли видеть сайты, под которыми находятся дополнительные анкоры на их внутренние разделы. Это и есть быстрые ссылки. Быстрые ссылки могут быть в виде строк или описания:

Включить их вручную через панель вебмастера нельзя. Они создаются автоматически при соблюдении определенных условий.

Турбо-страницы

Источники

Что такое турбо-страницы, мы уже рассказывали, поэтому перейдем сразу к конкретным функциям. В первом подразделе «Источники» укажите ссылку на источник формата RSS-ленты или YML-файла. Если же у вас огромный портал, то проще будет загрузить данные через API, получив токен.

Настройки

Здесь вы настраиваете отображение турбо-страниц. Можно указать название сайта, загрузить логотип, создать меню, добавить CSS, счетчики, рекламные блоки и способ связи. В общем, это такой небольшой конструктор, который позволяет персонализировать турбо-страницу.

Отладка и диагностика

В «Отладке» вы можете отредактировать файлы RSS, YML и CSS, чтобы поменять содержимое или оформление турбо-страниц.

В «Диагностике» отображается текущее состояние турбо-страниц. Например, обнаружены ли на них ошибки.

Инструменты

Анализ robots.txt

Данный инструмент автоматически загружает файл robots.txt из корневой директории веб-ресурса и анализирует его на предмет ошибок, не забывая выделять строки, которые учитываются Яндексом. Если вы хотите проверить robots.txt вручную, кликните по иконке закачки напротив своего сайта и затем нажмите на кнопку «Проверить». В результатах вы увидите, найдены ошибки или нет.

Анализ файлов Sitemap

Этот инструмент анализирует карту сайта на наличие ошибок. Загрузить sitemap сюда вы можете 3 способами:

• Вставив текст.

• Закачав сам файл.

• Указав ссылку на карту на сайте. 

Чтобы изменить способ загрузки, просто переключите на нужный вверху раздела. Когда загрузите файл, нажмите на кнопку «Проверить».

Проверка ответа сервера

Здесь вы проверяете, доступен ли ваш или любой другой сайт, каково время его отклика, IP-адрес, кодировка и размер веб-страницы. Для старта проверки введите ссылку на ресурс, выберите робота и запустите процесс.

Результаты появятся через несколько секунд в блоке ниже. Если с вашим сайтом всё хорошо, в поле «Код статуса HTTP» будет значение «200 Ok».

Удаление страниц из поиска

Если какие-то разделы на вашем сайте перестали существовать или были закрыты от индексирования, но уже успели ранее проиндексироваться Яндексом, вы можете их удалить из поиска. Просто укажите ссылки на эти страницы и нажмите на кнопку «Удалить». В день можно указывать и удалять до 500 страниц.

Можно еще удалять целые каталоги или все страницы на сайте. Для этого потребуется откорректировать файл robots.txt, поставив запрет для нужных разделов, и добавить определенные указания в панели вебмастера.

Проверка мобильных страниц

Здесь вы можете проверить, адаптирован ли ваш сайт для мобильных устройств. Просто укажите ссылку на тот ресурс, который подключен к панели вебмастера, и нажмите на кнопку «Проверить».

XML-валидатор

Этот инструмент проверяет XML-документы, которые предназначаются для партнерских программ Яндекса. Вы можете проверить свои файлы на соответствие общепринятым или индивидуальным схемам.

Валидатор микроразметки

Сервис проверяет семантическую разметку на вашей площадке на правильность и соответствие нормам поисковой системы. Чтобы проверить микроразметку, укажите адрес документа или вставьте часть HTML-кода. Затем нажмите «Проверить».

На этом подробное руководство по сервису Яндекс.Вебмастер закончено. Мы рассмотрели весь функционал и инструменты, которые вам могут пригодиться при работе с сайтом.

Что делать, если на вашем сайте обнаружены проблемы

Яндекс.Вебмастер проверяет ваш сайт ежедневно. Все обнаруженные проблемы отображаются на странице. Вы можете подписаться на уведомления об ошибках.

Шаг 1. Исправьте обнаруженные ошибки

Выберите категорию обнаруженной проблемы и следуйте инструкциям:

Категория	Описание	Примечание
Fatal	Проверяется подключение к серверу, доступность сайта для индексации, безопасность и соответствие гайдлайнам Яндекса.	Проблемы в этой категории могут привести к исключению отдельных страниц или всего сайта из результатов поиска. Мы рекомендуем отслеживать эти ошибки и исправлять их как можно скорее.
Критично	Робот проверяет количество неработающих внутренних ссылок, время ответа сервера и наличие действующего сертификата SSL.
Возможные проблемы	Проверяет наличие файлов Sitemap и robots.txt, для страниц с Яндекс.Тег метрики, настройки отображения несуществующих файлов, количество повторяющихся страниц, наличие редиректов, назойливой рекламы и так далее.	Эти проблемы могут повлиять на качество и скорость индексации сайта.
Рекомендации	Эти предложения обычно направлены на повышение рейтинга сайта в результатах поиска.	Используйте их, чтобы улучшить представление сайта в результатах поиска.

Шаг 2. Дождитесь повторной проверки сайта.

Робот Яндекса узнает об обновлениях на сайте при следующем посещении. Для ускорения:

1. отправьте обновленные страницы на переиндексацию. Робот просканирует страницу в течение двух недель.
2. Убедитесь, что робот просканировал страницу — проверьте статус URL.

3. Проверьте, отображается ли на странице устраненная вами проблема. Если это так, нажмите «Подтвердить».

Если Яндекс.Вебмастер не обнаружит проблему повторно, сообщение об этом исчезнет.

Если вы уверены, что исправили ошибку, но сообщение об этом все еще отображается в Яндекс.Вебмастере, подождите немного. В этом случае сообщение об ошибке не влияет на индексацию вашего сайта.

Неустранимые ошибки — Webmaster. Справка

1. Главная страница возвращает ошибку
2. Не удалось подключиться к серверу из-за ошибки DNS
3. Индексирование сайта запрещено в файле robots.txt
4. Обнаружены проблемы или нарушения безопасности

1. Проверить наличие элемента noindex в HTML-коде страницы. Если найдете, удалите.

2. Зайдите в Яндекс.Вебмастер и посмотрите, какой код ответа страница вернула на запросы робота Яндекса в столбце Сейчас.Если код ответа отличается от 200 OK, проверьте актуальность проблемы с помощью проверки ответа сервера.

3. При проверке ответа сервера обратите внимание на раздел «Содержимое страницы». Если отображается сообщение «Отсутствует содержимое страницы», проверьте настройки сервера:

   • HTTP-заголовок. Например, если он содержит «Content-length: 0», робот не сможет проиндексировать страницу.

   • Размер содержимого страницы. Он должен быть больше 0 и соответствовать заголовку HTTP.

После внесения изменений подождите, пока робот снова просканирует сайт. Вы также можете отправить страницу на переиндексацию, и робот повторно ее просканирует в течение двух недель.

Если в результате проверки страница отвечает кодом 200 OK и проблем с доступностью контента нет, то предупреждение в Яндекс.Вебмастере исчезнет через несколько дней.

Один раз в день робот-индексатор обращается к DNS-серверам, чтобы определить IP-адрес сервера, на котором расположен сайт.Если на сайте неправильно настроены записи DNS, робот не получает IP-адрес сайта. В результате сайт не может быть проиндексирован и добавлен в результаты поиска.

Проверьте правильность ответа сервера роботу индексирования. Если сайт по-прежнему недоступен, обратитесь к своему хостинг-провайдеру, чтобы исправить записи DNS вашего домена. При появлении доступа к сайту информация в Яндекс.Вебмастере обновится в течение нескольких дней.

Проблема с доступом к сайту может быть кратковременной.Если при повторной проверке ответа сервера вы не обнаружите ошибок, дождитесь обновления информации в Яндекс.Вебмастере. Это должно произойти в течение нескольких дней.

Если доменное имя не было обновлено вовремя, сайт становится недоступным для индексации. Продлить регистрацию домена. После этого сообщение в Яндекс.Вебмастере исчезнет через несколько дней.

Робот-индексатор запрашивает файл robots.txt несколько раз в день и обновляет информацию о нем в своей базе данных.Если робот получает в ответ на запрос запрещающую директиву, в Яндекс.Вебмастере появляется предупреждение.

Проверьте содержимое файла robots.txt. Если запрещающая директива все еще присутствует, удалите ее из файла. Если вы не можете сделать это самостоятельно, обратитесь к своему хостинг-провайдеру или регистратору доменного имени. После удаления директивы данные в Яндекс.Вебмастере обновляются в течение нескольких дней.

Если доменное имя не было обновлено вовремя, файл robots.txt будет содержать запрещающие директивы для робота.Продлить регистрацию домена. После этого сообщение в Яндекс.Вебмастере исчезнет через несколько дней.

Если обнаружено нарушение правил поиска

См. Описание нарушения и рекомендации по его устранению.

Список возможных нарушений

Если обнаружена угроза безопасности

Перейдите и выполните следующие действия:

Когда вы решите проблему:

1. Убедитесь, что проблема устранена.Если служба повторно обнаружит угрозу во время проверки, вы не сможете сообщить об исправлениях в течение месяца. После этого этот срок увеличится максимум до трех месяцев.

2. В интерфейсе Яндекс.Вебмастера зайдите и нажмите Все исправлено. Это даст дополнительный сигнал алгоритмам Яндекса о необходимости перепроверки сайта. Если проверка прошла успешно, ограничения будут сняты со временем и информация о нарушениях больше не будет отображаться.

Опция исключенных страниц в Яндексе для веб-мастеров

Яндекс. Инструменты для веб-мастеров предлагают веб-мастерам прекрасную возможность анализировать страницы, не включенные в поисковую систему Яндекса. Этот инструмент помогает понять следующее:

• Не проиндексированные страницы с кодами ошибок HTTP
• Внутренние и внешние страницы, ссылающиеся на страницу ошибки
• Установить уровень важности для каждой ошибки с кодом

В этой статье объясняется, как использовать этот инструмент, шаг за шагом.

Параметр доступа к исключенным страницам

Чтобы использовать этот инструмент, вы должны добавить и подтвердить свой сайт в Яндексе для веб-мастеров.

Войдите в свою учетную запись и выберите сайт, который хотите проанализировать. Перейдите к опции «Исключенные страницы», доступной в разделе «Индексирование». Яндекс покажет страницы вашего сайта, которые не были проиндексированы ЯндексБотом по разным категориям.

Исключенные страницы в Яндексе для веб-мастеров

Исключенные страницы классифицируются по следующим трем категориям:

Страницы ошибок HTTP:

Все страницы, получившие ошибки HTTP во время сканирования, будут показаны здесь вместе с кодом ошибки.Например, страницы «Страница не найдена» будут отображаться с кодом ошибки 404.

заблокировано Robots.txt:

 /404.html?page=/wordpress/plugin/local-seo/&from=https://yoast.com/articles/wordpress-seo/