Проверка сайта на индексацию онлайн: Как быстро проверить индексацию сайта в Google и Яндекс

Как проверить индексацию сайта онлайн в Яндексе и Гугле

Продвижение сайтов – дело настолько тонкое и точное, что ошибка SEO-специалиста порой может привести к таким же критичным последствиям, как, скажем, неточное решение топ-менеджмента компании. К примеру, вы можете ежемесячно инвестировать в контент шестизначные суммы, публиковать лучшие статьи от экспертов «с именем», но все усилия по продвижению перечеркнёт единственный символ в robots.txt. Этим символом вы запретите индексирование, из-за чего ваш изумительного качества контент попросту никто не увидит.

Статья объяснит, почему индексация является критически важным моментом в SEO, посоветует ряд сервисов и инструментов и уточнит, как проверить индексацию сайта в «Яндексе» и Google.

Что мы имеем в виду, говоря об индексации

Индексация – процесс, когда робот поисковика заносит в свои базы данных информацию о веб-ресурсе. Пользователю в выдаче демонстрируются только проиндексированные роботом страницы. Пока страница не пройдёт индексирование, не начнёт ранжироваться.

Как происходит индексация? Рассмотрим по этапам:

1. Робот узнаёт о существовании вашего ресурса и заходит посмотреть, что там интересного.
2. Следующим этапом является планирование. Робот планирует время занесения контента с сайта в свой индекс.
3. Робот индексирует контент. Страницы попадают в базу данных.
4. Проиндексированные страницы начинают ранжироваться и показываться пользователям в выдаче.

Весь алгоритм условно можно поделить на 2 части: сканирование (этапы 1-2) и непосредственно индексация (этапы 3-4). Важно понимать разницу между сканированием и индексированием. Робот сканирует сайт целиком, а вот добавить в индекс может только часть страниц – например, потому, что сочтёт остальные недостаточно качественными.

На животрепещущий вопрос SEO-специалистов о том, сколько времени занимает индексирование, к сожалению, чёткого ответа нет. Время индексации мало зависит от того, насколько крупный сайт и сколько денег инвестировано в развитие. Больше – от того, как сильно ресурс приглянулся поисковой системе. Если будете публиковать качественные материалы и избегать проходных, со временем добьётесь, что странички будет «залетать» в индекс почти мгновенно. В отношениях с поисковиком важно доверие. Заслужите его – и робот начнёт пропускать контент в индекс, как охранник пропускает старого знакомого в ночной клуб.

Нужно ли проверять индексирование в поисковых системах

Проверка индексации сайта в Google и «Яндекс» позволяет SEO-специалисту сделать вывод, используется ли потенциал ресурса «на полную», а также определить, почему трафик ресурса просел. Проверка индексации сайта – важный этап SEO-аудита. Оптимизатор определяет:

• все ли страницы в индексе;
• если часть из них не зашла в индекс – почему так вышло.

Естественно, некоторые страницы SEO-шник закрывает от индексации собственноручно. Речь о страницах служебного пользования, пагинации, о дублях. В редких ситуациях скрепя сердце приходится закрывать от индексирования страницы с ценным контентом – например, по требованию Роскомнадзора. Однако, если вне индекса оказалось множество статей с ценным контентом, это очевидный признак того, что сайт «недополучает» трафика. Проверка индексации страниц сайта даёт возможность «вытащить» эту проблему наружу и принять меры по её устранению.

Второй повод проверить сайт на индексацию в поисковиках – проседание трафика. В пределах ресурса трафик по страницам распределяется неравномерно. Часто существует одна страница-«локомотив», которая приносит сайту 30-40% трафика. Если такая выпадет из индекса и окажется недоступной для пользователей, это приведёт к существенному снижению трафика в целом.

Возможно ли продвижение без индексирования

Возможно – если делаете акцент на контекстную рекламу. Проверкой контекстных объявлений и индексацией веб-сайтов занимаются два разных робота – и роботу, отвечающему за «контекст», всё равно, находится ли ресурс в индексе поисковика. Такой путь продвижения, как правило, выбирают владельцы «одностраничников», поскольку понимают, что не способны конкурировать за Топ выдачи с «гигантами», имеющими сотни тысяч оптимизированных страниц.

К слову, если потом надумаете продвигаться в органическом поиске, контекст вам сыграет добрую службу. С момента, когда люди начинают переходить на сайт по объявлениям в контекстной рекламе, запускается поведенческий фактор ранжирования. Значит, в индекс ресурс попадёт уже не «нулевым», а с каким-никаким трастом.

Определяем количество страниц в индексе

Есть много способов посмотреть индексацию сайта. О каждом – расскажем подробно.

Через «вебмастерские»

Для проверки индексации сайта в «Яндекс» прибегаем к услугам «Яндекс.Вебмастера». Нужно проследовать по пути «Индексирование» – «Страницы в поиске».

В этом разделе перейдите на вкладку «Все страницы». Вы увидите перечень страниц, присутствующих в индексе русского поисковика.

Перечень можно выгрузить в файлах форматов .xls и .csv, чтобы потом открыть в Excel.

Другой сервис «Проверить статус URL» необходим для постраничной проверки индексирования. Пользоваться им просто – вбиваешь URL-адрес в поисковую строку и нажимаешь «Проверить». На экране появляется лаконичный отчёт, как на примере ниже:

Проверка индексации сайта в «Гугле» производится в панели Google Search Console. Полный перечень страниц в индексе здесь представлен в разделе «Покрытие» (1), а выполнить анализ единственной странички можно в разделе «Проверка URL» (2).

Разумеется, метод годится только для анализа собственного веб-ресурса. Чужие придётся проверять иначе.

С использованием оператора «site»

Операторами называют команды, которые позволяют уточнить результат выдачи. В частности, с помощью оператора «site:» можно ограничить выдачу страницами лишь одного сайта. Так вы узнаете, какое количество страничек вашего веб-ресурса ПС успела проиндексировать.

Занесите в поисковую строку запрос в формате: site:web-dius.ru.

Правее колонки выдачи мы видим надпись «Нашлось 552 результата». Это значит, что в индексе ПС 552 страницы сайта.

Оператор «site» предназначен для массовой проверки индексации сайта. Анализировать конкретную страничку нужно при помощи оператора «url:».

Если страничку вы видите, значит, она успешно проиндексирована поисковиком.

Заметка. В Google оператор «url:» не работает. У забугорного поисковика схожую функцию выполняет оператор «inurl:». Он позволяет оставить в выдаче только те сайты, которые содержат определённое слово или набор символов в URL-адресе.

Благодаря функции расширенного поиска в «Яндексе» мы, используя операторы, можем определить, какие страницы были добавлены в индекс недавно – например, за последний месяц. Как это сделать? Кликаем на иконку расширенного поиска (1), выбираем в форме «За месяц» (2), выставляем регион, в котором продвигаемся (3). Потом жмём «Найти».

В результате узнаём, что за последний месяц на ресурсе опубликовали 14 статей, и получаем список этих материалов.

Задействуем плагины и дополнения браузеров

Плагины – это простенькие javascript-программы, которые устанавливаются в браузере в виде дополнений. С одной стороны, плагины удобны для быстрой проверки сайта на индексацию онлайн – не нужно всякий раз лезть в сервисы, достаточно нажать на иконку. С другой стороны, они «утяжеляют» браузер, и тот начинает потреблять больше ресурсов компьютера.

Для проверки индексации сайта онлайн можно воспользоваться такими дополнениями:

• RDS Bar. Даёт возможность бесплатной проверки индексации сайта онлайн в «Яндексе». По Google, увы, информации не предоставляет – пишет «parse error».
• SEO-анализ сайта от Be1. «Убойное» расширение, которое не только определяет число страниц в индексе, но и проверяет ресурс по ряду других критериев – например, замеряет его скорость на PageSpeed.
• SEO-Tools. Эта программа не проверяет индексацию сайта в «Яндексе» и «Гугле» самостоятельно – она по сути лишь подставляет команду оператора и показывает юзеру уточнённую выдачу. Вариант для самых ленивых.

При помощи платных и бесплатных онлайн-сервисов

Говоря откровенно, информация об индексации – не та, за которую стоит платить. Для её получения можно использовать один из множества бесплатных сервисов:

• PR-CY. Даёт возможность бесплатно проверить индексацию сайтов онлайн в «Яндекс» и Google. В платной версии позволяет посмотреть динамику индексирования.
• Инструмент Серпхант. Лучший онлайн-сервис для проверки индексации конкретных страниц. Можно проанализировать одной «пачкой» до 50 URL-адресов, а результаты проверки – выгрузить в форматах, которые читаются Экселем.
• Arsenkin.ru. Инструмент Александра Арсёнкина способен проверить индексирование 5000 (!) адресов сразу. Правда, воспользоваться этой программой удастся только после регистрации / авторизации.

Сервисы seogadget.ru, xseo.in и raskruty.ru сейчас рекомендуют скорее «по инерции» – невзирая на то, что они «скатились». Seogadget большую часть времени недоступен, а у двух оставшихся – дизайн из разряда «вырви глаз».

Платные сервисы рекомендуем использовать для проверки сайта на индексацию онлайн, если вы и так применяете их в работе. Программы-«мультитулы» позволяют соблюдать принцип «одного окна» и по минимуму переключаться между закладками – что удобно. К примеру, сервис SERanking проверяет позиции, обратные ссылки, качество используемой семантики – и индексирование между делом. Для «Линкбокс» проверка индексации сайта – тоже побочная задача, поскольку эта программа нужна главным образом для работы с бэклинками.

Заметка. Если вам нужна проверка индексации сайта по ключевым словам, а не по URL-адресам, используйте сервис Rush-Analytics. Других программ, способных справиться с этой нетривиальной задачей, пока нет.

Утилиты для десктопа

Есть ряд десктопных программ, которые позволяют проверить индексацию сайта в поисковых системах бесплатно и за деньги. В число бесплатных программ входят:

• Site-Auditor. Небольшая утилита от Лаборатории Ашманова.
• Xenu’s Links Sleuth. Инструмент, предназначенный прежде всего для поиска битых ссылок. Но и чтобы проверить индексацию сайта, тоже сгодится.

У платных программ функция проверки индексации является второстепенной. Речь идёт о:

• Screaming Frog SEO Spider. Культовая прога в сфере SEO, «паук», способный «спарсить» ресурс целиком и разложить его в виде таблицы EXCEL.
• Netpeak Spider. Главный конкурент «лягушки», недорогой парсер, позволяет выполнить глубокий SEO-анализ.
• SEMonitor. Пакет программ, в который помимо утилиты, способной проверить индексацию сайта в «Гугл» и «Яндекс», входит множество других – например, для чека позиций и анализа бэклинков. Инструменты толковые, но по интерфейсу выглядят, будто их не меняли уже пару десятилетий.

Индексация не происходит: причины

Нужно понимать, что быстрая индексация – это привилегия со стороны поисковиков. Увы, SEO-шники склонны «пожарить» по поводу индексации преждевременно – начинают искать ошибки, когда поисковый робот до сайта ещё не успел добраться. Дольше всего ПС индексирует молодые ресурсы. Поисковику нужно время, чтобы собрать информацию о том, какие материалы на ресурсе публикуются. Стоит быть готовым к отсутствию нового сайта в выдаче в течение минимум полугода.

А вот если страницы старого сайта не заходят в индекс – это уже нерядовая ситуация. Дело может быть в SEO-ошибке или вообще в фильтре ПС. Рассмотрим возможные причины, почему ресурс не индексируется:

• Страница или раздел закрыты в «роботсе». При корректировании robots нужно действовать с хирургической точностью. Если неверно использовать директиву, можно, ошибившись, запретить индексацию целого раздела сайта.
• Отсутствует сайтмап. Карта сайта (сайтмап) содержит ссылки на все страницы ресурса. Благодаря sitemap вы облегчаете поисковому роботу работу.
• Низкая скорость загрузки. Робот не может себе позволить ждать по несколько секунд, когда страница загрузится – у него и так полно работы. Поэтому во избежание проблем с индексированием позаботьтесь о том, чтобы ускорить загрузку, и не публикуйте огромные картинки.
• Контент редко обновляется. Робот зайдёт раз, зайдёт два, увидит, что ничего не меняется, и потом начнёт заходить всё реже. Чтобы этого избежать, заведите на сайте новостной раздел и делайте там хотя бы по одной публикации ежедневно. Такой контент стоит копейки.
• CMS настроена на запрет индексации. Например, в «админке» WordPress достаточно поставить всего одну галочку, чтобы запретить поисковикам индексировать ресурс.
• Сайт «забанен». Обычно в это не верят до последнего. Но если вы перебрали все варианты причин отсутствия индексаций, стоит предположить самое худшее. Напишите письмо Платону Щукину, попросите уточнить, не попал ли сайт под фильтр.

Страницы могут иметь слишком большой уровень вложенности –. Предельно допустимым уровнем вложенности считается 4-ый. Если странички запрятаны глубже, отсутствие их в индексе вполне ожидаемо. У робота может просто не хватить краулингового бюджета, чтобы до них добраться.

Что такое краулинговый бюджет и как он связан с индексацией сайта

Понять, что такое краулинговый бюджет, проще, если рассматривать его через призму бытовых примеров. Представим, вы записались к стоматологу в поликлинику. Он находит два больных зуба: один лечит, а второй за отведённые на пациента 45 минут не успевает. Будете ли вы возмущаться и требовать, чтобы всё вылечили за один визит? Вряд ли. Стоматолог – заложник обстоятельств, у него в коридоре уже собралась очередь.

«Краулинговый бюджет» стоматолога из примера – 45 минут. У поисковика краулинговый бюджет измеряется количеством не минут, а страниц. По сути это максимальное количество страниц, которое он может обойти за раз. Больше он себе позволить не может, поскольку сайтов, которые стоят в очереди и нетерпеливо ждут переобхода – тьма тьмущая.

Робот обходит сайт планомерно. Сначала проверяет главную, потом проходится по второму уровню вложенности – и так, пока не кончится краулинговый бюджет. Поскольку краулинговый бюджет поискового робота ограничен, он просто не доберётся до страниц, которые глубоко запрятаны. Поэтому в индексации 5-го и последующих уровней вложенности можно быть уверенным, только если сайт небольшой.

Как ускорить процесс индексации сайта

1. Первое правило, которое реально работает – сделать публикации в соцсетях со ссылками на сайт. Социальные сети – это тоже сайты, и по ссылкам с этих сайтов роботы переходят.
2. Второе – переработайте структуру сайта, сделайте её более «плоской», без больших уровней вложенности. Вместе с тем, конечно же, настройте эффективную перелинковку.
3. Третье – регулярно публикуйте контент. «Приручайте» поискового робота и приучайте его к тому, что статьи на вашем сайте – исключительного качества.

Выводы

Никакой «чудесной кнопки», которой пользуются «мастодонты» SEO для быстрой индексации, не существует. Рекомендации по увеличению скорости индексирования, изложенные выше, секретными никак не назовёшь. Неужели вы никогда не слышали, что если публиковать хорошие материалы, вас полюбят поисковики? Их любовь проявляется быстрой индексацией.

Проверять индексацию сайта онлайн или через десктопные программы нужно, но не стоит тратить на это много времени и уж тем более подключать платные сервисы. Вся информация об индексации и её динамике доступна бесплатно в панелях вебмастеров Google и «Яндекс».

Как проверить индексацию сайта в поиске – полное руководство

10–25% дохода интернет-магазины теряют из-за банальной ошибки робота. Вы боретесь за позиции в выдаче и вложились в каждую страницу — а поисковик их не проиндексировал. Рейтинг падает, но в этом никто не виноват. Люди просто не видят ваш сайт в выдаче.

Выделите 5–10 минут в неделю, чтобы проверить индексацию сайта. Вы узнаете, какие страницы отсутствуют в поиске, и почему. В этой статье мы расскажем, как это сделать бесплатно, поможем быстро исправить ошибки индексации и наглядно покажем процесс на примере сайта elit-web. ua.

Что из себя представляет проверка индексации сайта

Индексация сайта — то, ради чего затевают любое продвижение сайта в поисковых системах. Оптимизируя страницы, наполняя их качественным контентом и ключевыми фразами, мы помогаем роботу понять, о чем ваш сайт, и каким пользователям его нужно показывать.

У нас есть большая статья о том, что такое индексация сайта и как ее улучшить. Кстати, вот и она.

Когда проверять индексацию сайта

Поисковые роботы индексируют страницы медленно и частями. В зависимости от количества страниц и настроек, на проверку уйдет от 1 недели до 4 месяцев.

Проверяйте прогресс каждые 1–2 недели, если:

1. У вас новый сайт.
2. Реальное количество страниц не соответствует числу проиндексированных.
3. Есть существенная разница между числом страниц, которые проиндексировали в поисковиках.
4. Вы меняли или добавляли страницы/контент.

Если у вас есть надежная SEO-команда, вам больше не нужно будет этого делать — подрядчик все выполнит за вас: промониторит ситуацию, ускорит проверку, добьется повторной индексации ошибочных страниц.

Какие есть варианты проверки индексации

Существует огромное количество способов проверить индексацию сайтов — платно и бесплатно, для любителей и профессионалов, в виде отдельного инструмента или в комплексе набора SEO-функционала. Вот основные:

• операторы в браузере;
• панели вебмастеров;
• плагины и букмарклеты;
• платные и бесплатные онлайн-сервисы для проверки индексации;
• профессиональные программы для веб-мастеров.

Первые 2 способа — самые простые. Остальные требуют дополнительных навыков, но дают больше понимания об индексации и найденных ошибках.

Альтернативный способ — заказать услугу у специалистов. Они уже знают, что делать.

Проанализировать индексацию сайта

Адрес сайта

Пошаговая инструкция проверки индексации

Давайте проверим сайт elit-web.ua разными способами, чтобы увидеть минусы и плюсы каждой из проверок.

1. Проверка индексации в панели вебмастера

Google Search Console — базовый инструмент SEO для вебмастеров, маркетологов и владельцев сайта.

Чтобы узнать, есть ли страница в индексе, авторизуемся в аккаунте Google. Если вы еще этого не делали — пройдите регистрацию, для этого нужно ввести адрес ресурса и выполнить действия по инструкции. Чтобы получить информацию о вашем ресурсе через Google Search Console вам необходимо иметь доступ к его админ-панели. Подробнее, как это сделать, читайте здесь.

После верификации открываем «Покрытие» во вкладке «Обзор». Видим понятный график, как изменялось количество проиндексированных страниц за указанный интервал времени. Ниже есть список обнаруженных ошибок.

Сервис предлагает возможность проверить сайт на индексацию. После решения ошибок здесь же можно отправить страницу на повторную переиндексацию, кликнув по кнопке «Запросить индексирование». Этой же кнопкой можно отправить новые страницы на первое индексирование.

Важно: не нужно запрашивать индексацию несколько раз для одной и той же страницы — это не ускорит процесс.

Преимущества: бесплатно, наглядные графики.

Недостатки: необходим доступ к админ-панели проверяемого сайта, неточное отображение информации — сервис показывает отчеты, оперируя данными последнего обхода, ситуация на текущий период может несколько отличаться. После регистрации в аккаунте данные для отчета появляются не сразу.

2. Проверка индексации через операторы в поисковых запросах

Если нужно быстро и не прибегая к помощи сервисов узнать количество проиндексированных страниц, воспользуйтесь операторами — для этого вводим в поисковую строку браузера следующую конструкцию:

site:https://elit-web.ua

Этот способ больше подходит для одноразового использования, он не дает глубокого анализа и не предоставляет графики.

3. Использование онлайн-сервисов для проверки индексации

Sitechecker

Позволяет отследить степень видимости, изменение позиций по ключам, дает рекомендации по улучшению.

Плюсы: бюджетный, подходит для десктопных и мобильных устройств, присылает на почту ежедневные и еженедельные отчеты с динамикой изменений позиций, фильтрует ключи по условиям и сортирует их по амплитуде позиций, делает анализ выдачи по каждому ключевому слову.

Минусы: не предусмотрен анализ трафика.

Netpeak Checker

Подходит для веб-мастеров и специалистов SEO. Подходит для решения широкого спектра задач: глубокого SEO-аудита, сравнения нескольких URL, кастомного парсинга веб-сайтов, анализа стратегии раскрутки конкурентов. К плюсам стоит также отнести возможность возврата продукта в течение 14 дней после покупки и возможность интеграции с другими сервисами для аналитики.

Минусы: десктопный и требует установки.

Screamingfrog

Программа, которая будет полезна для выполнения технического аудита и мониторинга позиций сайта.

Плюсы: может сканировать, как весь сайт, так и заданные вручную отдельные страницы или разделы, отображает коды сервера для всех обнаруженных страниц, гибкие настройки, широкий набор опций для выгрузки информации в CSV, возможность отображения древовидной структуры веб-сайта.

Еще одно важное преимущество заключается в том, что программы можно в любой момент поставить на стоп, закрыть, открыть через время и продолжить дальше.

Минусы: не считает статистический вес веб-страниц, неудобная реализации выгрузки исходящих внешних ссылок, требовательность к возможностям ПК, запутанный интерфейс.

Ahrefs

Удобная программа для оптимизации и подготовки веб-сайта, отслеживания показателей продвижения.

Плюсы: широкий набор функций, простой интерфейс, удобность в работе, работает на облачных вычислениях, автоматическое сохранение параметров после сканирования, автообновление.

Минусы: относительно высокая стоимость использования.

SE Ranking

Эта программа включает в себя широкий набор инструментов для SEO и интернет-маркетинга, оснащен конструктором отчетов, есть опция анализа конкурентов, мониторинга обратных ссылок.

Плюсы: функциональность, возможность проверки отдельных параметров, есть бесплатное приложение для смартфонов на ОС Android и iOS, интуитивно понятный интерфейс.

Минусы: слабоватая поддержка пользователей, стоимость десктопной версии.

Почему не индексируется сайт?

Вот причины, по которым поисковые алгоритмы не могут проиндексировать веб-страницу:

1. Ошибки в файле robots.txt.

   При неправильном использовании закрывает от индексации весь ресурс или локальные страницы.

2. Отсутствие файла sitemap.xml.

   Наличие этого файла помогает поисковым алгоритмам быстро и правильно проиндексировать ресурс. В нем должны содержаться ссылки на все страницы сайта, которые подлежат индексации.

3. Новый сайт.

   Поисковые алгоритмы проверяют не сразу и не все страницы. Периодически стоит проводить проверку индексации — если количество проверенных URL постепенно увеличивается, все в порядке.

4. Приватные настройки.

   В админ-панели сайта может быть по умолчанию настроено скрытие от индекса.

5. Теги «noindex/nofollow».

   Такие теги, прописанные в коде, закрывают от индекса страницы.

6. Мусорные страницы.

   Если на сайте много страниц с «мусорным», неуникальным контентом, роботы будут тратить время на их индексацию, пока не дойдут до действительно полезных URL-ов.

Как исправить ошибки индексации

Чек-лист по исправлению страниц для переиндексации:

• настроить и оптимизировать файлы robots.txt, sitemap. xml;
• увеличить скорость загрузки сайта специальными сервисами;
• уникализировать контент, сделать его полезным для ЦА;
• удалить дублированные страницы;
• выполнить грамотную перелинковку.

Выводы и рекомендации наших экспертов

Наша цель — добиться, чтобы все полезные страницы сайта прошли индексацию. Так пользователи смогут увидеть контент в выдаче и ничего не упустить. Важно следить, чтобы не было ощутимой разницы между показателями разных поисковых систем — это, а также резкие сдвиги в положительную или отрицательную сторону, может говорить о проблеме.

Пока вы настраиваете сайт и исправляете ошибки, кто-то уже гуглит ваши товары/услуги. Сэкономить время и ускорить индексацию поможет опытная команда SEO-специалистов.

FAQ

Как бесплатно проверить индексацию сайта?

Проще всего — через поисковые операторы в выдаче и онлайн-сервисы Sitechecker, Ahrefs, SE Ranking. Эти способы не требуют доступа к админ-панели, авторизации и скачивания программ.

Как часто проверять индексацию сайта?

Для нового сайта и при выявлении проблемы (существенная разница между показателями в Google, падение позиций) — минимум 1 раз в 1–2 недели.

Что делать, если сайт не индексируется?

Если сайт новый — наберитесь терпения, индексация может занять до 4 месяцев.

Кто может решить проблему индексации сайта?

Опытная SEO-команда обнаружит и устранит ошибки индекса, примет меры по ускорению переиндексации страниц.

Как проверить, что ваш сайт хорошо индексируется в Google?

В настоящее время в мире насчитывается более 1,6 миллиарда веб-сайтов, и это число продолжает расти, так как ежедневно публикуется более 2 миллионов блогов. С этими числами присутствие на первой странице результатов Google — непростая цель . Но стоит ли сдаваться, когда вы размещаете свой сайт в Интернете? Точно нет! Действительно, первое, что нужно сделать, это убедиться, что ваш сайт появляется в результатах поиска. С технической точки зрения, это проверка того, что это было хорошо индексируется поисковыми системами

. Обычно этот шаг выполняется роботами автоматически, и вам часто не нужно ничего делать. Однако иногда возникают проблемы или ошибки, такие как индексация бесполезных или устаревших страниц, которые могут повлиять на вашу производительность. Итак, в дополнение к тому, что я покажу вам шаги для выполнения этой проверки , я дам вам несколько хороших практик, которым стоит следовать.

Индексация веб-сайта

Глоссарий

В этом видео

я покажу вам, как проверить, хорошо ли индексируются страницы вашего сайта в Google:

Что такое индексация?

Индексирование — это процесс, посредством которого программа или робот поисковой системы проходит через веб-сайт, сканирует его и индексирует его содержимое. Поэтому, когда мы говорим, что ваш сайт был проиндексирован, это означает, что роботы поисковой системы посетили его, скопировали его содержимое и сохранили его на серверах поисковой системы.

Обратите внимание, что термин индексация, который я здесь использую, относится к индексации Google с помощью робота Googlebot

И это потому, что это наиболее часто используемая поисковая система пользователями Интернета с долей 90,6 %. Тем не менее, имейте в виду, что принцип работы очень похож на принцип работы других поисковых систем, таких как Yahoo, Bing и многих других.

Функционирование индекса Google

Основная цель обхода или сканирования роботом Google состоит в том, чтобы понять характер, содержание и качество веб-сайта . Это позволяет связать эту страницу с одним или несколькими намерениями поиска.

Но что касается ранжирования страницы по запросам или поисковым намерениям, обратите внимание, что оно зависит от большого количества критериев, определяемых алгоритмами Google .

Помимо роботов поисковых систем, существует еще два типа индексирующих роботов. Вам не обязательно интересоваться последним, так как первый уже может в полной мере помочь вам улучшить вашу видимость. Это:

• Роботы веб-служб: они исследуют определенный тип страницы, чтобы извлечь определенные данные. Это, например, обратные ссылки для majesticseo.
• Роботы-взломщики: они проверяют дыры в безопасности сайтов, которые просматривают, и пытаются взломать их.

Размер индекса Google и краулинговый бюджет

Размер индекса Google

база данных для индексации . Это означает, что бренд проиндексировал так много веб-страниц, и хотя статистики за этот год нет, нетрудно догадаться, что эта цифра была значительно превышена.

Важно отметить, что Google индексирует только «индексируемые» страницы, а не всю сеть, тем более, что сеть слишком обширна. Более того, с такой впечатляющей статистикой фирма обязана управлять ежедневным бюджетом, посвященным исследованию новых страниц: краулинговый бюджет.

Бюджет сканирования веб-сайта

Бюджет сканирования – это число страниц, индексируемых в день для каждого сайта , и зависит от его важности. Очень полезно знать этот бюджет, чтобы позиционировать наиболее релевантные страницы вашего сайта.

Для этого необходимо использовать очень мощный инструмент, разработанный фирмой Google Search Console . Если вы не знаете, как настроить Search Console, вы можете ознакомиться с этой статьей, которая также знакомит вас с другим мощным инструментом Google Analytics .

После настройки учетной записи вам просто нужно щелкнуть вкладку «Сканирование», чтобы увидеть данные. Однако имейте в виду, что краулинговый бюджет постоянно меняется, но у вас все еще может быть среднее значение, которое будет полезно при анализе.

Кроме того, существует два типа сканирования, связанных с индексацией веб-сайта Google:

• Легкое сканирование выполняется ежедневно и учитывает только самые важные страницы, такие как домашняя страница. Таким образом, его проверка является поверхностной и поэтому признана облегченной версией;
• Глубокое сканирование выполняется примерно каждый месяц, и выделяет гораздо больший бюджет глубокое сканирование: выполняется примерно каждый месяц и выделяет гораздо больший бюджет, поэтому это тяжелая версия, поскольку она также с учетом новых страниц.

Помимо этих типов сканирования, важно знать, что у Google есть предпочтения, когда речь идет об индексации веб-страниц.

Индекс Mobile-First Google

Процесс индексации Google претерпел реальные изменения по сравнению с 2016 и 2017 годами. Действительно, фирма внедрила новый метод индексации под названием «Mobile-first index».

Этот метод рекомендует использовать мобильную версию страницы для страницы, чтобы индексировать и позиционировать ее. И как указывает сама компания, большинство интернет-пользователей заходят в Google через свои мобильные устройства.

Следовательно, адаптивные веб-сайты — это те, которые в настоящее время имеют хорошую индексацию и, следовательно, хорошие ссылки. Это означает, что у вас тоже должен быть адаптивный веб-сайт, который автоматически адаптируется к экранам мобильных устройств, если вы хотите улучшить индексацию и количество ссылок.

Зачем проверять индексацию страниц в Google?

Знание индексации страниц в Google позволяет выявить возможные проблемы , чтобы быстро найти адекватные решения.

Определите страницы, которые не должны появляться в результатах поиска

Иногда бывают страницы, которые не должны появляться в результатах поиска по нескольким причинам. К ним относятся страницы с личной информацией или совершенно бесполезные страницы , так как они не содержат никакой актуальной информации. В последнем случае мы различаем, например, страницы, полученные в результате импорта демонстрационной темы.

Идентифицировать неиспользуемые изменения

При перемещении, переименовании каталогов или изменении постоянных ссылок может случиться так, что индекс Google по-прежнему указывает на старое место назначения. И если вы не обнаружите такие ситуации быстро и не исправите их, вы рискуете потерять органический трафик, который могут генерировать эти страницы.

Определите источники ошибок 404

Иногда существуют страницы или медиафайлы, такие как видео, изображения…, которые остаются в индексе Google даже после того, как вы удалили их со своего веб-сайта. Эти страницы или медиа, скорее всего, будут генерировать ошибки 404, которые лучше быстро исправить.

Проверьте представление ваших страниц в результатах Google

Проверка индексации ваших страниц довольно интересна, так как вы увидите, что пользователи найдут при поиске информации о вашем сайте.

Прежде всего, вы можете оценить, как они отображаются в результатах, принимая во внимание заголовков и теги мета-описания . Кроме того, вы можете щелкнуть по каждому из них, чтобы убедиться, что вы попали на нужную страницу и что изменения, которые вы, возможно, недавно сделали, были учтены.

Лучшие практики для улучшения индексации

В результатах поиска 75% пользователей Интернета никогда не прокручивают до первой страницы по данным alioze. Очевидно, это означает, что веб-страницы, которые появляются на первой позиции, получают большую часть трафика.

Чтобы появиться в этом очень ограниченном списке, вы должны настроить свой сайт, чтобы облегчить его индексацию и улучшить SEO. Я предлагаю вам принять во внимание эти различные практики, которые, вероятно, помогут вам.

Хорошая структура контента

Этот фактор позволит вашим посетителям и поисковым роботам плавно и логично перемещаться по всему веб-сайту . Поэтому не забудьте создать свою структуру, не забывая выделять наиболее релевантные страницы, последние статьи… чтобы облегчить задачу роботов.

Безупречная внутренняя связь

Ваше содержимое должно быть доступно для индексации. В связи с этим страницы, ссылки на которые не отображаются непосредственно на вашей домашней странице, скорее всего, не будут быстро проиндексированы роботом Google.

Действительно, Google иногда может занять некоторое время, чтобы рассмотреть ваши различные модификации. Но, улучшив свою внутреннюю связь, вы сможете легко привести ее к ним, и я рекомендую в этом случае:

• Создать систему связанных статей или связанных продуктов;
• Чтобы создать страницу «Карта сайта», на которой перечислены все ваши материалы;
• Для создания модуля наиболее комментируемых сообщений или статей на главной странице и т. д.

Не забудьте также интегрировать ссылки на ваши старые статьи в новые статьи, особенно когда это уместно. Это позволит вам вернуть их к жизни особенно если они слишком глубоко зарыты на вашем сайте.

Создание файла карты сайта

Он собирает все URL-адреса вашего веб-сайта, и, отправляя его в Google, этот файл может значительно облегчить индексацию всех страниц вашего веб-сайта . Тем более, что он будет знать их все и сможет получить к ним доступ автоматически.

Обратите внимание, однако, что этот файл не заменяет хорошую структуру и хорошую внутреннюю связь. С другой стороны, хорошее сочетание трех элементов, вероятно, будет очень эффективным, особенно если у вас большое количество веб-страниц.

Избегайте дублирования внутреннего контента

На этом уровне речь идет об идентичном контенте на нескольких страницах вашего сайта. Действительно, дублирование контента оказывает негативное влияние на индексацию ваших разных разных страниц, даже если оно внутреннее.

На самом деле ваши посетители и Google сочтут ваше содержание избыточным и менее актуальным, что приведет к неэффективному индексированию. Кроме того, ваша внутренняя перелинковка будет довольно плохой, так как самая важная информация не выделена.

Избегайте неправильных форматов для вашего контента

Некоторые форматы не всегда читаются Google, и вы должны знать их, чтобы использовать те, которые поисковая система может легко обрабатывать. Это, например:

• Flash: практически нечитаемый для Google и которого я советую вам избегать;
• Javascript: который не всегда интерпретируется оптимальным образом;
• PDF: формат этого типа индексируется, но менее эффективен, чем реальная страница с текстовым содержимым;

Хорошие внешние ссылки

Даже если вы придерживаетесь предыдущей практики, я предлагаю вам добавить эту. Действительно, это создание ссылок на страницы вашего веб-сайта, чтобы воспользоваться:

• Лучшая индексация;
• Достоверность;
• Популярности;
• Трафик и, следовательно, клиенты. .

После наблюдения за этими методами улучшения вашей индексации Google часто необходимо убедиться, что различные страницы вашего веб-сайта правильно индексируются.

Чтобы четко показать вам шаги, которые необходимо выполнить, я буду использовать веб-сайт моего SEO-агентства, Twaino.com.

Обратите внимание, что шаги довольно просты и что вы можете выполнить эту проверку за несколько секунд или даже минут, если у вас несколько страниц.

Кроме того, моему сайту уже несколько недель, и роботы Google успели его просканировать и проиндексировать.

1) Показать все веб-страницы, проиндексированные в Google

Чтобы проверить индексацию, зайдите в поисковик Google и введите «сайт: + доменное имя».

Мой дает вам: «site:twaino.com».

Затем нажмите кнопку «Поиск», и на странице результатов вы увидите все проиндексированные страницы, связанные с вашим сайтом.

2) Перейдите к анализу различных ссылок

Первая ссылка, которую вы увидите в результатах поиска, — это ссылка из Google Search Console, мощного инструмента от Google, который позволяет вам получить более точную информацию об индексации. .

Тогда у вас есть все страницы, которые были проиндексированы Google, и если вы хотите пойти дальше, проверьте каждую из них.

Например, вы можете проверить заголовки и мета-теги описания и щелкнуть по каждому из них, чтобы убедиться, что вы попали на нужную страницу.

Также воспользуйтесь возможностью выявить устаревшие или бесполезные страницы, которые не имеют отношения к пользователям Интернета, но тем не менее индексируются и появляются в результатах поиска.

3) Примите меры к своим проиндексированным страницам

Если ни на одной из ваших страниц нет проблем, значит, все работает правильно. Но когда на одной из страниц возникает малейшая проблема, принимайте все возможные меры, и это, сразу, чтобы не потерять трафик, который скорее всего будет генерировать эта страница.

На моем уровне, например, у меня есть страницы, которые появляются в результатах Google и которые мне не нужны. Действительно, это страницы из демонстрационной темы, которые у меня была возможность импортировать. Среди них:

• Нью-Авада-Сео-Твайно;

• Карьера — Avada SEO

Их появление в результатах может вызвать путаницу, и чтобы они больше не отображались в SERPS, просто удалите их или деиндексируйте.

И все! Вы только что видели страницы вашего сайта, которые были проиндексированы Google.

Но когда вы не находите свои страницы, вы можете выполнить некоторые действия.

Может случиться так, что ваш сайт не проиндексирован роботами Google, потому что он новый. Вместо того, чтобы ждать, пока ваш веб-сайт будет проиндексирован, вы можете ускорить процесс, приняв один или оба из следующих вариантов:

• Иметь ссылку на сайт, который уже известен Google;
• Сообщите Google о своем существовании с помощью Google Search Console.

Ссылка на сайт, о котором Google уже знает

Роботы поисковых систем работают, переходя с одного сайта на другой или с одной страницы на другую благодаря ссылкам. Таким образом, вы можете использовать этот принцип в своих интересах , разместив одну или несколько ссылок, указывающих на ваш веб-сайт на сайтах, уже известных или проиндексированных Google.

Имейте в виду, что у вас больше шансов быть быстро проиндексированными, если рассматриваемые сайты важны и имеют хорошие ссылки.

Сообщите Google о своем существовании

Взять дело в свои руки иногда может быть полезнее, чем ждать, пока Google просканирует другие сайты, чтобы попасть на ваш. Все дело в том, чтобы отправить ваш сайт в поисковую систему с помощью одного из ее мощных инструментов Google Search Console .

Кроме того, чтобы гарантировать, что Google будет посещать страницы вашего веб-сайта, я рекомендую вам отправить также свою карту сайта . С помощью плагина Yoast SEO вы можете легко создать карту сайта.

После его создания вам просто нужно вставить адрес, полученный в результате операции, в поле, зарезервированное для этой цели в Search Console. Эта онлайн-форма также может позволить вам отправить URL-адрес в Google.

После того, как вы отправили свой сайт в Google через консоль поиска, вы можете вернуться на несколько дней назад, чтобы проверить, правильно ли он был проиндексирован на этот раз вам количество проиндексированных URL-адресов по отношению к тем, которые присутствуют в карте сайта.

Некоторые факторы, которые могут блокировать индексацию вашего веб-сайта

Даже если вы выполнили все необходимые настройки, может случиться так, что ваш веб-сайт все еще не проиндексирован . Действительно, есть некоторые настройки, которые могут помешать поисковым системам индексировать ваш сайт или некоторые из ваших страниц.

Настройки WordPress

Проверьте, запрещаете ли вы поисковым системам индексировать ваш сайт с помощью параметров WordPress. Для этого войдите в Личный кабинет и нажмите на раздел «Настройки» на левой боковой панели.

Затем выберите опцию «Читать» и проверьте, установлен ли флажок « Просить поисковые системы не индексировать этот сайт ». Если это так, снимите флажок, чтобы разрешить индексацию.

Веб-сайт на обслуживании

Некоторые плагины, такие как плагины «скоро появятся», предлагают опции, которые предотвращают опции, предотвращающие индексацию вашего веб-сайта поисковыми системами, когда он находится на обслуживании. И пока продолжается техническое обслуживание, индексация не может быть выполнена

Так что, если у вас есть такие плагины, не стесняйтесь отключить их или правильно настроить

Другие факторы, препятствующие индексации

Также возможно, что вы манипулировали некоторыми файлами, такими как:

• robots.txt блокирует доступ роботов;
• .htaccess блокирует доступ роботов.

Если эти файлы целы, у вашего сайта не должно быть проблем с индексацией. И вам просто нужно подождать еще несколько дней чтобы все страницы вашего сайта были корректно проиндексированы поисковыми системами

Заключение

При создании сайта на иметь гораздо большую видимость очень важно чтобы он отображался в первых результатах поисковых систем. Но все же он должен уметь эффективно присутствовать в результатах. Именно его индексация обеспечивается роботами поисковых систем в автоматическом режиме. Тем не менее, очень полезно проводить частые проверки , чтобы обнаружить возможные проблемы или убедиться, что проиндексированы только наиболее релевантные страницы вашего веб-сайта. Более того, если у вас есть стремление к чтобы быть в первых результатах вы не должны ничем пренебрегать

Появляется ли мой сайт в Google Research? Вот как это проверить. Сигнал к размышлению исходит из нового эпизода веб-сериала

Google Search for Beginners , который проясняет сомнение, нападающее на тех, кто еще не является экспертом: «Появляется ли мой сайт в результатах поиска Google?» Вот как проверить, правильно ли страницы сайта проиндексированы поисковой системой.

Как проверить, присутствует ли сайт в Google

Как узнать, действительно ли мой сайт доступен для поиска в Google? Этим вопросом он открывает пятый выпуск «Поиска для начинающих», серии коротких видеороликов, отредактированных веб-мастерами Google и посвященных тем, кто не обладает большими знаниями в мире Интернета (пока), и особенно тем, кто владеет или управляет . небольшой онлайн-проект . Для этого может случиться так, что эти люди, «владеющие веб-сайтами для онлайн-деятельности или простого хобби», на самом деле не знают, как проверяют свое присутствие в Интернете и «иногда им удается найти сайт среди результатов поиска Google, иногда нет».

Использование сайта: проверить, проиндексированы ли страницы

Это приводит к еще двум вопросам новичка: «Почему это происходит? И что я могу сделать, чтобы мой сайт появился в Research?». Существует быстрая и практичная система проверки того, знает ли Google сайт и правильно ли работает индексация страниц сайта, то есть с помощью команды *site: *.

Все, что нужно, это зайти на страницу Google и ввести в строке поиска site: , а затем адрес веб-сайта : эта команда указывает, что исследование ограничено только проиндексированными страницами этого конкретного сайта . Поэтому, если наш собственный сайт появляется там с несколькими страницами, это означает, что Google знает, что этот сайт существует и уже проиндексировал некоторые из его страниц.

Проверка способа отображения результатов

Также очень важно обратить внимание на то, как сайт отображается в Google Research : является ли описание точным и отражающим то, что на самом деле предлагает сайт? Есть ли аспекты, которые нужно улучшить? В последнем случае он должен работать, чтобы оптимизировать то, что пользователи видят при выполнении поиска по ключевым словам, по которым ранжируется сайт.

Что делать, если сайт не отображается в Google

Но что делать, если страницы сайта на самом деле не отображаются среди результатов поиска с сайт: ? В этом случае могут возникнуть некоторые проблемы со сканированием и индексацией , и тогда мы должны оперативно вмешаться для их решения. Первое средство — отправить карту сайта и URL-адреса сайта в консоль поиска Google, которая, как мы знаем, является инструментом для управления онлайн-присутствием в Google Research.

Также можно протестировать отдельные URL-адреса с помощью инструмента проверки URL-адресов, чтобы убедиться, что проверка прав собственности на сайт в Search Console (с помощью одного из 7 методов, которые мы описали несколько дней назад) прошла успешно.