Как проверить индексацию сайта в Google и что делать, если страниц нет в выдаче? – Webpromo
12.02.2022
Александра Чернивчан, редактор блога Webpromo
В начале оптимизации сайта важно проверить, какие страницы есть в индексе, а каких нет.
Количество проиндексированных страниц не отвечает фактическому? Давайте разберемся, почему и как это исправить.
Содержание:
Что такое индексация и зачем она нужна
Проверяем индексацию сайта в поисковой системе
Проверяем индексацию сайта с помощью Search Console
Подаем запрос на индексирование страницы в Google Search Console
Как подать на индексирование сразу много ссылок?
Отказ в индексировании: что делать?
Переиндексирование
Закрыть от индексирования
Выводы
Читайте также: Актуальные тренды SEO на 2022 год: 10 важных тенденций для улучшения поисковой оптимизации
Что такое индексация и зачем она нужна
Индексация сайта — это анализ содержимого страницы поисковой системой.
Индексирование страниц необходимо для включения их в результаты поиска.
Можно провести аналогию с картотекой, где хранится информация обо всех книгах в библиотеке. В нашем случае, картотека — это база данных «поисковой индекс», в которой поисковик ищет результаты по запросу пользователя.
Проверяем индексацию сайта в поисковой системе
Введите в Google поиске запрос «site:адрес сайта».
После чего поисковик покажет все проиндексированные страницы сайта. Сразу сравните количество результатов с реальным количеством страниц.
Если цифры совпадают, значит все материалы проиндексированы. Прекрасно!
Если цифры не совпадают, значит поисковые роботы выборочно проиндексировали страницы сайта или еще могут быть проблемы с самими страницами, из-за чего они не попадают в индекс.
Для проверки индексации конкретной страницы используется такой же алгоритм: ввести в поисковике запрос «site:адрес страницы».
Если ваша страница не отобразилась, значит Google не знает о ней. Этому есть несколько причин, о которых расскажем далее.
Читайте также: SEO букмарклеты: 14 скриптов, которые помогут ускорить оптимизацию сайта
Проверяем индексацию сайта с помощью Search Console
В чем преимущество Google Search Console?
- Помогает быстро найти ошибки и ускорить индексацию;
- Показывает статус каждой страницы.
Как проверить?
- заходим в Search Console;
- переходим в раздел «Проверка URL»;
- вписываем ссылку в поисковую строку;
- видим результат:
Подаем запрос на индексирование страницы в Google Search Console
Но что делать, если страницы нет в индексе?
Либо ждать пока поисковые роботы найдут страницу, либо подать запрос на индексирование – это ускорит процесс.
Нажмите на кнопку «Запросить индексирование».
Как подать на индексирование сразу много ссылок?
Чтоб просканировать сразу много URL:
- создайте sitemap и сделайте его доступным для Google;
- откройте Search Console;
- перейдите в раздел Sitemaps → Сканирование → файлы Sitemap;
- загрузите и отправьте файл.
Отказ в индексировании: что делать?
Почему не индексируется:
- новый сайт, который еще не отсканировался Google
Читайте также: Ошибки, которых следует избегать при создании сайта
- отсутствие sitemap — может быть выборочная индексация страниц сайта
Читайте также: Записки оптимизатора. Дело №2 «О карте сайта»
- ошибки на странице — проверяйте отчеты Google Search Console
- мало контента (текст и медиа-объекты)
Читайте также: Что такое SEO-тексты и как их правильно писать? Научитесь, чтобы оказаться в Топе Google
- ошибки в robots.txt — добавлена директива noindex или доступ к странице только по паролю
- неуникальный контент
Читайте также: Above-the-fold: какой контент хотят видеть люди, а какой — алгоритмы Google?
- дублирование страниц или повторение заголовка страницы
Читайте также: Как быстро найти дубли страниц на сайте? 10 простых способов
- низкая скорость загрузки
Читайте также: Топ-6 ошибок мобильной версии сайта, которые снижают его конверсию
Отказ в индексировании — это не конец света. Исправьте ошибки и подайте запрос на переиндексацию.
Переиндексирование
Исправили ошибки страницы или внесли изменения — нужна переиндексация.
Как подать запрос на переиндексацию страницы? Также как и запрос на индексирование:
- зайти в Google Search Console;
- вписать ссылку в разделе «Проверка URL»;
- нажать на «Запросить индексирование».
Закрыть от индексирования
Зачем закрывать страницу от индексирования?
- чтоб удалить страницу из выдачи Google;
- чтоб не дать новой странице сканироваться;
- и не нарушать оптимизацию, если на сайте технические работы.
Как это сделать?
- в настройках сервера: запросить доступ по паролю;
- добавить директиву noindex в мета-тег;
- изменить заголовок HTTP-ответа на noindex;
- добавить директиву Disallow в robots.txt.
Читайте также: 3 способа проверить, что сайт попал под фильтр поисковика
Выводы
Два самых простых и быстрых способа проверить индексацию сайта:
- Ввести в поисковой выдаче запрос «site:адрес сайта»;
- Проверить URL в Google Search Console.
Долго не индексируется страница? Подайте запрос на индексацию в Google Search Console.
Уже подавали? Тогда проверьте статус по страницам: исправьте ошибки и подайте запрос еще раз.
Затеяли технические работы на сайте? Закройте от индексирования, чтоб оптимизация страницы не была нарушена.
Если на вашем сайте регулярно появляются новые страницы, вы делитесь ими в соцсетях и добавляете новый контент — то поисковые роботы быстро найдут и отсканирут ваш сайт.
К примеру, информационному ресурсу, на котором постоянно публикуются новые объявления, подавать запрос на индексирование не обязательно. Если сайт активный, то Google достаточно быстро его найдет.
Но если ваша цель повысить органический трафик — то запрос на индексирование ускорит процесс. Это важно для коммерческих сайтов, если продавать нужно уже.
Также читайте другие статьи в блоге Webpromo:
- Похожие URL-адреса могут стать причиной исключения страниц из индекса Google;
- 7 рекомендаций по составлению UTM-меток. Виды, способы использования, полезные UTM-генераторы;
- Сайт упал! Что делать, чтобы поддерживать индексацию страниц в Google?
И подписывайтесь на наш Telegram-канал про маркетинг.
Как проверить индексацию сайта в поисковых системах
Как подготовиться к проверке индексации сайта Как проверить индексацию в Яндекс Вебмастере Как проверить индексацию в Google Search Console Как проверить индексацию без доступа к сайту Как проверить индексацию отдельных страниц Как контролировать процесс индексации
Читайте наc в Telegram
Разбираемся, что происходит в мире рассылок и digital-маркетинга.
Смотреть канал
Станьте email-рокером 🤘
Пройдите бесплатный курс и запустите свою первую рассылку
Подробнее
Индексация — добавление информации о сайте и его страницах в поисковые системы — один из первых шагов в SEO. Не всегда можно полностью довериться Яндексу и Google в этом вопросе — за процессом индексирования нужно следить, иначе можно упустить время и потерять ценный трафик из поиска.
Есть несколько способов отследить то, как индексируется сайт: свой или чужой. Проверять можно сразу все страницы или каждую по отдельности.
Владелец сайта может добавить его в инструменты для вебмастеров от Яндекса и Google. Там можно получить самую полную и достоверную информацию об индексировании, а также узнать об ошибках.
Если доступа к управлению сайтом нет, вы можете проверить индексацию вручную в поисковой выдаче или автоматически — с помощью специальных сервисов и программ.
Теперь давайте обо всем по порядку.
Как подготовиться к проверке индексации сайта
Чтобы оценить, как хорошо индексируется сайт, нужно узнать, сколько на нем страниц.
Для этого пригодится карта сайта — главный помощник поискового робота. В ней указаны все страницы, которые должны быть проиндексированы. Файл находится в корневой папке сайта и называется sitemap.xml (например, site.ru/sitemap.xml).
Если вы используете WordPress с установленным SEO-плагином (например, Yoast), то карта сайта, как правило, генерируется автоматически.
Также можно использовать бесплатную программу Xenu, которая сканирует все страницы сайта. Но чтобы в список не попадало все подряд, ее нужно предварительно настроить.
Как проверить индексацию в Яндекс Вебмастере
Общие сведения об индексации отображаются на главной странице панели — в краткой сводке по сайту в правом столбике.
Плюс Яндекс предлагает целый список отчетов и инструментов в разделе «Индексирование».
В «Статистике обхода» можно узнать, как робот Яндекса исследует сайт, и не столкнулся ли он с проблемами во время сканирования. Здесь два отчета: по последним событиям и по страницам. Если вас интересует, какие изменения произошли недавно, откройте первый отчет.
В следующем подразделе «Все страницы» перечислены все просканированные URL сайта, начиная с последних.
Напротив каждого URL указан код ответа сервера, который получил робот. В идеале это 200. Ответов с кодом 500 на правильно работающем сайте быть не должно. 404-е ошибки встречаются, когда страница была удалена. Если она переехала в другое место, нужно настроить переадресацию.
Страницы, которые находятся в индексе, можно посмотреть в разделе «Страницы в поиске». Во вкладке «Последние изменения» — самая актуальная информация об URL, участвующих в поисковой выдаче Яндекса.
Здесь же можно посмотреть исключенные из поиска страницы.
В подразделе «Все страницы» можно скачать таблицу с информацией об индексации страниц сайта, которые присутствуют в файле sitemap. Напротив каждого URL также будет показан код ответа сервера и статус. Таблица в виде отдельного файла — не самый удобный способ представления данных. Но если напротив страницы указано слово searchable, это означает, что она находится в поиске.
Еще одна полезная опция для проверки индексации — «Мониторинг важных страниц». Чтобы не искать нужные страницы в списке проиндексированных, составьте список (до 100 URL) и добавьте его в специальное поле.
После настройки уведомлений поисковая система будет оповещать вас об изменениях, связанными с выбранными страницами.
Если необходимо, чтобы Яндекс быстрее находил новые страницы и чаще мониторил сайт, не забудьте включить обход по счетчикам. Для этого, конечно же, к сайту должен быть привязан счетчик Метрики.
Как проверить индексацию в Google Search Console
Узнать подробную информацию об индексации в Google Search Console можно в разделе «Покрытие».
Общая информация об индексировании представлена на графике. Все страницы поделены на четыре категории:
- Без ошибок (нужно стремиться, чтобы важные страницы сайта были именно в этом списке).
- С ошибками.
- Без ошибок, но с предупреждениями (как правило, предупреждения можно игнорировать).
- Исключенные.
Если количество страниц сайта совпадает с количеством страниц в зеленой и желтой зоне, все хорошо. В желтую зону часто попадают страницы, которые проиндексированы, несмотря на запреты в robots.txt.
Под графиком можно получить подробную информацию о страницах — по какой причине Google отнес их к той или иной категории.
Как проверить индексацию без доступа к сайту
Если вы не являетесь владельцем сайта, — и не имеете доступа к инструментам Google и Яндекса для вебмастеров, — индексацию можно проверить прямо в поисковике и с помощью специальных сервисов. У таких способов есть свои преимущества и недостатки.
Поисковые операторы
Самый быстрый и простой способ узнать количество проиндексированных страниц — заглянуть в поисковую выдачу. Чтобы проверить, есть ли в поиске страницы с конкретного сайта, есть специальный оператор — site. Он работает как в Яндексе, так и в Google.
В инструментах поиска можно отфильтровать результаты: например, отобразить только недавно проиндексированные страницы.
В Яндексе все работает аналогично, только количество проиндексированных страниц отображается справа. Так как Google и Яндекс — поисковики для разных стран, каждый со своим алгоритмом, то количество проиндексированных страниц в разных поисковых системах может отличаться.
В Яндексе тоже есть фильтры, которые можно применить к результатам поиска. Посмотреть недавно добавленные страницы здесь также очень просто. Только вариантов фильтрации всего три: за сутки, за 2 недели и за месяц.
Перемещаясь по страницам поиска, вы сможете посмотреть, какие URL вашего сайта есть в поиске, начиная с самых важных.
Минус такого способа проверки не только в том, что он отнимает больше времени — данные выдачи могут не совпадать с реальностью. Особенно часто этим грешит Яндекс.
Например, при проверке моего сайта с помощью оператора site выяснилось, что в поиске всего 164 страницы. А в панели Яндекс Вебмастера (раздел «Страницы в поиске») отображаются все 330 страниц. Вебмастер дает более точную информацию, поэтому верить все же стоит ему, а не данным в выдаче.
SEO-сервисы и утилиты
Проверять по отдельности индексацию в каждом из поисковиков не всегда удобно. Иногда хочется получить информацию быстро, без погружения в подробности. Для этого существуют специальные онлайн-сервисы и программы, которые позволяют за несколько секунд проверить индексацию в обеих поисковых системах.
Существуют SEO-комбайны, предлагающие целый набор инструментов для поисковой оптимизации (например, «Топвизор», Netpeak и др.). Но эти сервисы и программы я рассматривать не буду, так как они обычно платные и предназначены для тех, кто вплотную занимается SEO.
Остановимся на бесплатных помощниках оптимизатора, которые способны проверять индексацию отдельных страниц и всего сайта.
Серпхант. Онлайн-сервис с возможностью бесплатной проверки индексации 50 страниц в Яндексе и Google.
Через какое-то время (в зависимости от количества страниц) сервис выдаст результат в виде таблицы. Данные можно скачать отдельным файлом.
SEO Magic. Это браузерное расширение для быстрой проверки основной информации о сайте, в том числе количества проиндексированных страниц. Перейдите на интересующий вас сайт, кликните на значок расширения, и через пару секунд появится краткий отчет.
Если вы делаете сразу много проверок, Яндекс может принять вас за робота, поэтому в результатах проверки появится undefined. Но если кликнуть по ссылке (все показатели кликабельны) — откроется выдача поисковика с уже введенным оператором site и данными о количестве проиндексированных страниц. Правда, сперва придется пройти проверку на ботов.
RDS Bar. Еще одно полезное расширение для SEO-специалистов. В разных браузерах работает по-разному. Лучше всего — в Firefox. В Chrome и Opera некоторые данные могут не отображаться, но их можно посмотреть, перейдя по ссылкам.
Данные об индексировании довольно подробные, но не всегда правдивые. Например, в данном примере расширение показывает, что страница не проиндексирована в Google. Но если нажать «Нет», откроется выдача, в которой эта страница присутствует. Расширение в целом удобное, но данные лучше перепроверять — для этого достаточно перейти по ссылкам.
И не забывайте, что данные в поиске тоже неточные (особенно в Яндексе). Если вы мониторите собственный сайт, лучше пользуйтесь отчетами Google Search Console и Яндекс Вебмастера.
Как проверить индексацию отдельных страниц
Иногда нужно узнать, проиндексирована ли конкретная страница в Google или Яндексе. Это тоже можно сделать прямо в поиске или в инструментах вебмастера.
Google Search Console. Строка ввода URL для проверки отображается в самом верху панели. Этим инструментом можно воспользоваться в любой момент — независимо от того, в каком отчете вы находитесь.
Если страница проиндексирована, вы получите ответ с зеленой галочкой. Чтобы отправить робота на страницу для сканирования (первичного или повторного), нажмите «Запросить сканирование».
Яндекс Вебмастер. Аналогичный инструмент называется «Проверить статус URL» и находится в том же разделе «Индексирование».
Также наличие страницы в индексе можно проверить в поисковой выдаче с помощью того же оператора site. Только теперь после двоеточия вместо домена нужно указать URL страницы (без пробелов).
Как контролировать процесс индексации
Это нужно, чтобы страницы быстро попадали в поиск и приносили трафик. Мало проверить индексацию, важно облегчить поисковым роботам их работу.
Вот краткий список рекомендаций:
Добавьте сайт в Яндекс Вебмастер и Google Search Console. Так вы будете получать информацию об индексировании, посещаемости и техническом состоянии сайта из первых рук и сразу узнавать об ошибках, которые поисковые роботы могут выявить на вашем ресурсе.
Составьте карту сайта в формате xml. Если вы пользуетесь WordPress, ее можно создать автоматически с помощью плагина и его базовых настроек. Также карту можно сгенерировать в специальных онлайн-сервисах. Лучше, чтобы она была динамической и отображала дату последнего изменения страниц и файлов сайта (Last-Modified). Также полезно добавить карту в панели вебмастера (оба поисковика предлагают такую возможность).
Создайте файл robots.txt. Он необходим для того, чтобы разрешать или запрещать обход определенных страниц сайта. Если у вас большой сайт с огромным количеством служебных страниц, их индексацию нужно запретить — так роботы Яндекса и Google не будут тратить краулинговый бюджет на ненужные страницы и быстрее проиндексируют то, что действительно важно.
Если важные страницы долго не индексируются, запросите их сканирование вручную. Это не всегда помогает, но не так сложно сделать запрос в Вебмастере или GSC, чтобы поисковый робот быстрее посетил новый URL.
Следите за актуальностью контента и регулярно обновляйте ресурс. Чем чаще на сайте публикуется что-то новое, тем активнее его исследуют поисковики. Если тематика сайта позволяет, заведите блог или придумайте другой способ публикации контента. Не забывайте запрашивать переобход измененных страниц у роботов Яндекса и Google.
Не оставляйте «страниц-сирот». На каждую страницу должна вести хотя бы одна ссылка, иначе поисковый робот никогда не найдет ее самостоятельно. В блоге я уже подробно разбирала, как сделать перелинковку на сайте.
Это самые базовые рекомендации, но их выполнение поможет избежать ошибок в индексировании и быстро «загнать» страницы в поиск.
Поделиться
СВЕЖИЕ СТАТЬИ
Другие материалы из этой рубрики
Не пропускайте новые статьи
Подписывайтесь на соцсети
Делимся новостями и свежими статьями, рассказываем о новинках сервиса
Статьи почтой
Раз в неделю присылаем подборку свежих статей и новостей из блога. Пытаемся шутить, но получается не всегда
Оставляя свой email, я принимаю Политику конфиденциальностиНаш юрист будет ругаться, если вы не примете 🙁
Как запустить email-маркетинг с нуля?
В бесплатном курсе «Rock-email» мы за 15 писем расскажем, как настроить email-маркетинг в компании. В конце каждого письма даем отбитые татуировки об email ⚡️
*Вместе с курсом вы будете получать рассылку блога Unisender
Оставляя свой email, я принимаю Политику конфиденциальностиНаш юрист будет ругаться, если вы не примете 🙁
Как проверить, проиндексирована ли ваша страница, и как исправить проблемы
Вы изо всех сил пытаетесь найти свои веб-страницы с помощью онлайн-поиска? В этом посте вы узнаете, как проверить, проиндексированы ли ваши страницы.
Если вы не ранжируете что-либо из того, что вы пытаетесь сделать, независимо от того, насколько оно специфично, это может быть проблемой индексации.
Каждая поисковая система извлекает свои результаты из индекса, и если веб-страница отсутствует в этом индексе, она, очевидно, не может появиться в результатах. Из-за этого проблема с индексацией может привести к тому, что весь ваш высококачественный контент и работа по оптимизации на странице будут потрачены впустую.
Если вы не уверены, правильно ли проиндексированы ваши веб-страницы, или вам нужен совет по решению проблемы с индексацией, эта статья для вас. Мы рассмотрим, как работает индексирование, каковы наиболее распространенные проблемы с индексированием и как вы можете внести необходимые изменения, чтобы убедиться, что у вас больше не будет проблем с индексированием.
Как работает индексация
Когда новые веб-сайты или страницы размещаются в Интернете, они не сообщают о себе поисковым системам — поисковые системы должны приложить усилия, чтобы найти их. Они делают это с помощью ботов поисковых систем (также называемых сканерами). Сканеры, как следует из названия, пробираются через веб-сайты, переходя по внутренним и внешним ссылкам с целью индексации и систематизации всего найденного контента.
Все данные, собранные по пути, сохраняются в индексе, готовые к использованию поисковой системой. Когда пользователь отправляет поисковый запрос, поисковая система выполняет следующие действия:
- Анализирует запрос, чтобы наилучшим образом судить о намерениях искателя.
- Отфильтровать индекс в соответствии с предполагаемым намерением.
- Выберите все страницы, которые считаете подходящими (учитывая большое количество факторов).
- Представить их пользователю в порядке значимости.
Поскольку страницы регулярно обновляются, их качество или релевантность определенным темам повышается или понижается, поисковые роботы должны регулярно возвращаться на проиндексированные сайты. Насколько регулярно сканируется сайт, будет зависеть от того, как часто он меняется, насколько авторитетен он считается и многих других показателей.
Почему некоторые страницы не должны быть проиндексированы
Поисковые индексы — это не просто базы данных всего, что найдено поисковыми роботами.
Есть три причины, по которым было бы плохой идеей указывать в поисковом индексе абсолютно все действующие ссылки: ) не содержат такого контента и не заслуживают включения. Например, веб-сайты с фильтрами продуктов часто могут автоматически генерировать длинные списки различных URL-адресов для отфильтрованных или отсортированных представлений, и многие из этих представлений никому не будут интересны. Кроме того, если несколько страниц имеют одинаковый контент, должна быть возвращена только одна из них: поисковики не получают выгоды от нескольких результатов с одинаковым содержанием.
В результате существуют различные факторы, которые могут привести к тому, что страница не будет проиндексирована поисковой системой. Сканер может не только решить, что страницу не стоит включать, но и владелец веб-сайта может указать, что страница не должна быть проиндексирована, и даже пометить определенные ссылки, чтобы сканеры не переходили по ним в первую очередь.
Проверьте свои обратные ссылки
Получите мгновенное представление о том, кто ссылается на ваш сайт
Как узнать, проиндексирована ли страница
Чтобы узнать, были ли ваши страницы проиндексированы Google, используйте инструмент Google Index Checker. Это отличный инструмент для точного определения того, какие из ваших страниц не проиндексированы и могут потребовать настройки или улучшения.
Распространенные причины, по которым страница не индексируется
Как уже отмечалось, существует множество причин, по которым страница не индексируется. Вот самые распространенные:
- Краулеры не могут найти. Если на вашем веб-сайте нет полной XML-карты сайта (списка всех страниц, которые необходимо проиндексировать) или внутренних ссылок на определенную страницу, или она скрыта глубоко внутри папок, сканер часто не сможет ее найти, и таким образом, он не сможет его индексировать.
- Для страницы установлено значение «noindex». Даже если у вас есть внутренняя ссылка на страницу или внешняя ссылка, указывающая на нее из другого домена, страница могла быть помечена как «без индекса», что привело к ее игнорированию поисковыми роботами.
- Заблокировано в robots. txt. Каждый веб-сервер предоставляет файл robot.txt, содержащий инструкции для поисковых роботов. Если файл robots.txt запрещает всем поисковым роботам индексировать сайт, это, очевидно, огромная проблема. Хотя это необычно, разработчик нередко пытается заблокировать определенные страницы, но случайно блокирует гораздо больше в процессе.
- Уровень качества недостаточно высок. Если в вашем домене есть малоценные ссылки и недостаточно контента (или вообще нет контента), поисковые системы могут решить не ранжировать некоторые или все ваши страницы, чтобы поддерживать высокий стандарт.
Существуют различные другие возможные причины того, что страницы не индексируются, но они могут быть технически сложными и зависеть от конкретной природы вашего сайта. В подавляющем большинстве случаев объяснение будет одним из перечисленных выше.
Последствия проблем с индексацией
Степень влияния проблем с индексацией на веб-сайт зависит от характера и масштаба проблем, а также от того, какие страницы они затрагивают. Если второстепенная страница на вашем сайте не проиндексирована, это не конец света, но если не проиндексирована высококачественная SEO-дружественная часть вечнозеленого контента, это значительная трата усилий.
А для сайтов в сфере электронной коммерции индексация имеет еще большее значение. Органический трафик на сегодняшний день является наиболее рентабельной формой трафика для страниц продуктов, потому что он ничего не стоит за появление в результатах поиска, в отличие от контекстной рекламы или рекламы в социальных сетях. Если половина продуктов компании не проиндексирована, возможности конверсии значительно уменьшаются.
Как узнать, когда страница будет проиндексирована
Владельцы веб-сайтов очень часто задают один конкретный вопрос: когда моя страница будет проиндексирована? К сожалению, нет никакого способа узнать окончательно. Даже если вы сделаете абсолютно все правильно, строго следуя инструкциям Google и других поисковых систем, это будет зависеть от факторов, не зависящих от вас.
Поскольку поисковые индексы охватывают миллионы и миллионы страниц со всего мира и должны постоянно обновлять сканирование для обеспечения актуальности информации, ваша страница может быть проиндексирована завтра, на следующей неделе или через пару месяцев.
Устойчивое развитие возможно только за счет операционной эффективности, и нет никакой эффективности или ценности в попытке проиндексировать абсолютно все в срочном порядке. Вот почему Google говорит о краулинговом бюджете, который определяет, как часто страница сканируется.
Как проверить свои веб-настройки для индексации
Чтобы проиндексированные страницы оставались должным образом проиндексированы, новые страницы добавлялись в этот список, а нежелательные страницы не включались, для любой компании с большим присутствием в Интернете важно выделить время и ресурсы для этой конкретной проблемы SEO.
Периодически (примерно раз в три месяца) вам следует проводить тщательную проверку следующих вещей:
- Информационная архитектура вашего веб-сайта. Все ли работает так, как должно с технической точки зрения? Справляется ли сервер с нагрузкой так, как должен?
- Ваша внутренняя структура ссылок. Достаточно ли у вас внутренних ссылок для поддержки регулярного сканирования? Вы можете быть довольно либеральны с внутренними ссылками, поскольку они обеспечивают полезный контекст. Используйте этот бесплатный инструмент поиска ссылок, чтобы проверить, отсутствуют ли у вас релевантные внутренние ссылки.
- Настройка вашей хлебной крошки. Правильно ли вложены страницы и отнесены ли они к правильным категориям? Поддержание логической внутренней структуры очень важно для того, чтобы показать поисковым системам, что ваши страницы заслуживают индексации.
Хотя для этого не требуется, чтобы вы стали экспертом в области ИТ, вам нужно будет либо разобраться во всех этих концепциях, либо проконсультироваться с кем-то, кто точно знает, как проверить эти вещи и внести необходимые изменения.
Где индексация соответствует вашей стратегии SEO
Когда компании думают о том, как SEO влияет на их маркетинговые стратегии, они склонны рассматривать технические соображения SEO как второстепенные. Другие аспекты SEO, такие как контент-маркетинг или работа в социальных сетях, более креативны и, следовательно, считаются более гламурными и интересными.
Проблема с этим ходом мыслей, конечно же, в том, что упускать из виду технические основы крайне глупо. Если ваш бюджет на длительную кампанию платной рекламы, работу в социальных сетях, производство контента и защиту бренда, но вы не понимаете, что вы создаете авторитет вокруг страницы, которая не может быть проиндексирована в Google, это будет равносильно бесполезным инвестициям — как только кампания закончится, ваш трафик снова исчезнет.
Использование индексов для исследования конкурентов
Если оставить в стороне ваше собственное индексирование, есть еще один аспект поисковых индексов, заслуживающий упоминания: исследование конкурентов. Глядя на то, какие страницы индексируются вашими конкурентами (а какие нет), вы можете получить представление о том, что они делают, и получить возможность реконструировать их стратегии.
Проверьте свои обратные ссылки
Получите мгновенное представление о том, кто ссылается на ваш сайт
Только подумайте о том, как много информации легко доступно вам бесплатно с помощью простого поиска в Google. Если вы потратите немного времени на изучение того, как другие компании в вашей отрасли обрабатывают индексирование, обратные ссылки и результаты поиска в целом, вы получите от этого много пользы.
Завершение проверки того, проиндексирована ли ваша страница
Создание высококонкурентного веб-сайта в Интернете в лучшие времена является сложной задачей, независимо от того, сколько у вас отличного контента или насколько хорошо вы взаимодействуете со своей аудиторией. Это требует времени и последовательности, и есть множество других отличных сайтов, которые заслуживают того, чтобы их оценили выше вас, если вы упустите свои стандарты.
Поскольку вы должны вкладывать так много времени и усилий в контент, информационно-просветительскую работу и разработку UX, крайне важно убедиться, что вас не останавливает фундаментальная техническая проблема, например, отсутствие индексации важных страниц.
Мы рассмотрели, что такое индексирование, почему оно так важно и как вы можете принять меры для выявления и устранения распространенных проблем с индексированием. Остальное зависит от тебя. Найдите время, чтобы тщательно проверить настройки, и запланируйте нечастые проверки, чтобы убедиться, что ваши усилия не будут подорваны техническими проблемами, которых можно избежать.
Кейли Тойра : контент-стратег
Наполовину финка, наполовину британка, маркетолог из Бристоля. Я люблю писать и исследовать такие темы, как рассказывание историй и маркетинг клиентского опыта. Я руковожу небольшой командой писателей в бутик-агентстве.
Как узнать, когда Google впервые проиндексировал веб-сайт
Автор Джой Окумоко
Если вы когда-либо проводили исследование и хотели знать, когда Google впервые проиндексировал веб-сайт, ответ не всегда очевиден. Вот как это узнать.
Google использует надежный процесс, с помощью которого он может автоматически находить, сканировать и индексировать определенные веб-страницы или целые веб-сайты, делая их доступными для поисковых систем. Но как узнать, когда сайт был впервые проиндексирован Google?
В этой статье мы кратко расскажем об индексации, а затем покажем, как определить, когда веб-сайт был впервые проиндексирован.
Что означает для Google индексация страницы
Считается, что страница проиндексирована Google, если поисковый робот Google обнаружил страницу, посетил ее, проанализировал ее содержимое и занес ее в свою базу данных веб-страниц.
Всякий раз, когда пользователь что-то ищет, Google просматривает свою базу данных проиндексированных страниц в поисках ответов, наиболее точно соответствующих запросу. После обнаружения Google выдает их в качестве результатов, ранжированных по релевантности.
Связано: все, что вам нужно знать о панелях знаний Google
Таким образом, только проиндексированные страницы могут отображаться в результатах поиска и в избранных фрагментах.
Как узнать дату, когда Google впервые проиндексировал страницу или сайт
По данным Google, индексация вашего нового сайта может занять от часа до нескольких недель. Другие утверждают, что это может занять до года, в зависимости от того, насколько легко сканировать ваш сайт и количество задействованных страниц.
Чтобы узнать дату первого индексирования сайта, необходимо убедиться, что он действительно был проиндексирован.
1. Как проверить, был ли сайт проиндексирован Google
Чтобы узнать, был ли сайт уже проиндексирован Google, просто выполните поиск сайта, набрав site:yourdomain.com.
Если он был проиндексирован Google, вы получите URL-адрес с точным соответствием в результатах поиска, как показано выше.
Если, с другой стороны, сайт не был проиндексирован, вы либо получите другие результаты с похожими URL-адресами и ключевыми словами, как показано выше, либо вообще ничего, как показано ниже.
После того, как вы определили, что сайт был проиндексирован Google, вы можете перейти к проверке даты его первой индексации.
Связано: Как получить результаты поиска Google по дате
2. Как проверить дату первого индексирования сайта Google
Информация о том, когда ваш сайт был впервые проиндексирован, может дать вам приблизительное представление о том, когда он стал популярным и как далеко вы продвинулись. Вы также можете использовать эту информацию и инструмент поиска WHOIS, чтобы проверить, действительно ли подозрительный онлайн-объект так стар, как он утверждает.
Вот как проверить дату первого индексирования сайта:
- Запустите поиск доменного имени в Google, используя функцию site: yourdomain.com.
- Нажмите кнопку с тремя точками справа от URL-адреса сайта.
- Прокрутите до раздела «Источник» в поле «Об этом результате», где вы можете просмотреть месяц и год, когда сайт был впервые проиндексирован.
- Сайты, впервые проиндексированные более десяти лет назад, просто помечаются как «… впервые проиндексированы Google более 10 лет назад».