Проверка индексации сайта в яндекс: Как быстро проверить индексацию сайта в Google и Яндекс

Как проверить индексацию конкретной страницы и всего сайта в Яндексе и Google?

Индексация — процесс добавления сведений о сайте роботом в базу данных, которая потом используется для поиска. Бот индексирует ссылки, изображения, видео, и другие элементы на сайте. Если сайт или отдельная страница не проиндексированы, то поисковая система просто не их увидит. Рассказываем как проверить индексацию.

Яндекс

Проверка индексации страницы

Необходимо в строку поиска Яндекс написать следующий запрос:

url:domain.ru/page/

domain.ru/page/ — адрес проверяемой страницы. Важно! Вводить необходимо адрес с www, если страницы на сайте открываются с www, и без www, если на сайте они без www. Если вы не уверены — проверьте оба варианта.

url: — оператор для проверки индексации страницы.

Если в результатах поиска страница найдена, значит она проиндексирована данной поисковой системой. Пример.

Если по запросу ничего не найдено, страница не проиндексирована

Проверка индексации всего сайта в Яндексе

Для проверки индексации всего сайта в Яндекс необходимо использовать следующий запрос:

url:domain.ru/*

domain.ru — доменное имя проверяемого сайта.

url: — оператор для проверки индексации страницы.

* — оператор «любой символ».

Важно! Вводить необходимо адрес с www, если страницы на сайте открываются с www и без www, если на сайте они без www. Если вы не уверены — проверьте оба варианта.

В результате получаем список проиндексированных страниц, а справа от результатов выдачи написано, сколько всего страниц данного сайта находится в поиске. Пример.

Иногда данный запрос не работает и вместо него можно использовать оператор site:domain.ru

Google

Проверка индексации страницы

Необходимо ввести в строку поиска Google запрос:

info:domain.ru/page

domain.ru/page — адрес проверяемой страницы.

info: — оператор для проверки индексации страницы.

Если страница проиндексирована, значит в результатах поиска будет ссылка на проверяемую страницу. Пример.

Проверка индексации всех страниц сайта в Google

Для проверки индексации страницы в поисковой системе Google необходимо ввести в строку поиска запрос:

site:domain.ru

domain.ru — доменное имя сайта.

site: — оператор проверки индексации всех страниц сайта.

В результатах поиска появится список страниц в поиске, а под поисковой строкой общее количество проиндексированных страниц. Пример.

Проверить индексацию сайта 🚀 – анализ индексации страниц Яндексом и Google

Сегодня любой крупный поисковик постоянно меняет алгоритмы ранжирования и предпочтения в сортировке сайтов. Одновременно изменяется время индексирования страниц, каждая из которых может стать весомым плюсом в поисковой выдаче или во внешней ссылочной массе. Иногда страницы после нового ранжирования «вылетают» из индексированной базы, а значит и из поиска целыми пачками. Соответственно оптимизаторы и владельцы сайтов обязаны постоянно проверять наличие конкретных страниц в индексе Яндекса и Google. Подобный анализ позволяет избегать досадных ситуаций, когда серьёзные надежды строятся в расчёте на раздел или статью, которая по каким-то причинам не попала в индексированный массив.

Очередной сервис от Серпхант предлагает простой и удобный инструмент, позволяющий быстро и бесплатно проверить индексацию страницы сайта в Яндексе и Google. Эта автоматическая программа выгодно отличается следующими преимуществами:

• максимально быстрая выдача результатов;
• возможность загрузки и до 100 адресов;
• гарантия достоверности предоставляемых сведений;
• отсутствие платы за использование.

Поэтому вам достаточно просто ввести до 100 адресов страниц сайта, чтобы уже через пару минут посмотреть, индексируются ли введенные разделы Яндексом и Google. Наш автоматизированный онлайн сервис индексации сайта не даёт сбоев и всегда работает как швейцарские часы!

Напоследок стоит отметить один ключевой момент. Профессиональным SEO-специалистам и владельцам сайтов стоит помнить о том, что каждый день неиндексированная страница постепенно утрачивает свою уникальность из-за массового пополнения информационного поля интернета новыми материалами. Своевременная индексация сайта является своеобразным подтверждением авторских прав на контент страницы, которая будет зарегистрирована в базе данных поисковой системы. В противном случае вы рискуете не только оригинальным содержимым, которое может быть попросту украдено. В этом случае можно потерять авторство в целом, которое может быть присвоено мошенниками, умеющими ускорять индексацию.

Предлагаемый сервис позволит вам быстро посмотреть, как обстоят дела у каждой страницы с индексом и принять соответствующие меры в случае отсутствия положительного результата.

Сервис проверки индексации сайта от Серпхант – бесплатно, быстро, достоверно и результативно!

Что такое индексация сайта, как ее проверить и как ускорить

Чтобы открыть онлайн-магазин, запустить информационный или развлекательный портал в сети необходим сайт – это, буквально, место или сегмент в виртуальном пространстве с уникальным адресом (домен), где размещается контент и файлы по проекту. Но чтобы ресурс можно было найти среди других, его необходимо «прописать» в специальной базе поисковых систем – индексе.

Что такое индексация сайта? Как её правильно выполнить и проверить? Можно ли ускорить этот процесс и полностью отказаться от него, на что влияет индекс? На все вопросы подробно отвечаем в этой статье.

Разбираемся в понятиях

Индексация страницы – это процесс сбора, проверки и внесения информации о контенте сайта в базу поисковых систем. Такая непростая и трудоемкая работа поручается специальным роботам, которые целиком обходят весь сайт и, следуя установленным алгоритмам ПС, собирают информацию со страниц. При индексации учитываются внешние и внутренние ссылки, графические элементы, текстовое наполнение и другое. Если ресурс проходит проверку, то он вносится в индекс ПС, то есть пользователи смогут его найти по поисковым запросам.

Вся информация в базе – это выжимка данных, собранных поисковыми роботами с сайтов в Интернете. Пользователю, обратившемуся к такой библиотеке через ПС, предлагается сначала каталог сайтов с релевантной запросу информацией. Поисковые системы ранжируют ресурсы по собственным алгоритмам, учитывая полезность, тематику и другие параметры. Ознакомившись с краткой информацией о ресурсе (заголовок + сниппет), пользователь кликает на позицию в выдаче и переходит на целевую страницу для дальнейшего изучения.

Попытки структурировать сайты в сети были приняты в конце 90-х годов прошлого века. В то время алгоритмы ПС только разрабатывались, поэтому индекс напоминал предметный указатель по ключевым словам, которые находили роботы на проверяемых страницах. Соответственно в ТОП выдачи часто проникали переоптимизированные и абсолютно бесполезные для пользователей сайты. За 20-30 лет развития алгоритмы отбора усложнились. Сегодня роботы смотрят не только на попадание контента в тематику, но и на его качество, полезность для людей, доступность сайта с разных устройств, скорость загрузки и многое другое.

Как индексируют Яндекс и Google

Для большинства пользователей Рунета, индексация в поисковых системах – это добавление сайта в базу Яндекса и/или Гугла. Обычно достаточно прописать ресурсы только в этих поисковиках, чтобы развивать свой проект. Провести индексацию, независимо от выбранной ПС, можно двумя способами:

1. Поисковые роботы самостоятельно находят и проверяют созданный сайт или его новые страницы. Многие эксперты считают такой вариант самым выгодным, ведь если ПС сами хотят внести ресурс в индекс, то он пользуется популярностью. Значит, приносит пользу. Как роботы определяют полезность страниц: наличие активных внешних ссылок, объемы трафика и вовлеченность посетителей. Если все условия выполняются, то индексация сайта проходит быстрее: от 24 часов до недели. В противном случае ПС могут и вовсе «забыть» о новом ресурсе. Работы у роботов хватает.
2. Пользователь принудительно отправляет сайт на индексацию с помощью заполнения формы на сервисе поисковой системы. Созданные страницы помещаются в очередь на «прописку» и ждут посещения роботов ПС. Обычно добавляют URL главной страницы, а боты сами обходят весь ресурс, ориентируясь по карте сайта, меню и внутренним ссылкам. Используются сервисы Google Webmaster Tools и Яндекс.Вебмастер соответственно. Этот вариант занимает больше времени, но не требует финансовых затрат.

Для сканирования сайтов существуют разные боты ПС. Например, проверку новых страниц перед внесением в индекс делает основной робот, который проверяет весь контент на ресурсе. Новую информацию на проиндексированных страницах проверяет быстрый робот в соответствии с графиком обновления. Также используются боты для сканирования новостной ленты, графического контента и другие.

Как проверить?

Алгоритмы индексации и соответственно скорость работы ботов Яндекса и Гугла отличаются. Считается, что Google проверяет страницы быстрее. Это связано с тем, что система сначала сканирует сайт полностью – полезные и неполезные страницы, но в выдачу пропускает только качественные ресурсы. Таким образом, попадание в индекс Гугла ещё не гарантирует место в выдаче.

Индексация сайта в Яндексе, что это такое и почему долго? Роботы ПС проверяют только полезные материалы, отсеивая мусорные страницы. Поэтому индексация затягивается. В любом случае сканирование контента на соответствие требованиям выполняют обе системы: Яндекс сразу, а Гугл после «прописки».

Проверить индексацию можно тремя способами:

• Использовать инструменты вебмастеров, которые предоставляются поисковыми системами бесплатно – это webmaster.yandex.ru или google.com/webmasters. В Гугле откройте Search Console и далее раздел «Индекс Google». Информация о статусе сайта находится в блоке «Статус индексирования». В Яндексе пройдите по следующей цепочке: «Индексирование сайта» — «Страницы в поиске». Естественно нужно сначала внести в форму URL сайта и подтвердить права владельца.
• Использовать специальные операторы, которые вводятся в поисковую строку. Для Яндекса и Гугла нужно прописать значение «site:» и после двоеточия добавить домен ресурса. Например: site:calltouch.ru. Таким способом можно узнать количество проиндексированных страниц. Если значения в Гугле и Яндексе сильно различаются, то вероятно сайт под фильтром.

  
  
  

• Воспользоваться браузерными плагинами или спецсервисами. Это небольшие дополнения к веб-обозревателю, которые автоматически проверяют наличие страниц в индексе. Популярное решение — RDS Bar.
  
  

Как ускорить?

От того, как быстро роботы ПС проверят новый контент напрямую зависит скорость появления страниц в поисковой выдаче. Соответственно на сайт быстрее придет аудитория и совершит целевые действия. Скорость индексации зависит от нескольких факторов:

• Авторитетность сайта в сети, полезность для пользователей;
• Отсутствие ошибок при индексации;
• Качество и частота обновления контента;
• Наличие внутренних и внешних ссылок;
• Вложенность страниц;
• Правильно заполненные файлы sitemap.xml и robots.txt;
• Корректно выставленные ограничения в роботсе.

Для ускорения индексации рекомендуется выполнить следующие действия:

1. Подобрать надежный и быстрый хостинг.
2. Поставить сайт на индексацию в ПС Яндекса и Гугла.
3. Корректно настроить robots.txt. В файле нужно запретить посещение технических, служебных страниц, просмотр другой информации, не представляющей пользы для посетителей.
4. Создать файл карты sitemap.xml и сохранить его в корне сайта. По нему роботы проверяют структуру страниц, а также следят за обновлением контента.
5. Проверить код главной и других страниц на наличие ошибок и дублей.
6. Проверить текстовое наполнение на количество ключевых слов.
7. Регулярно размещать на сайте новый полезный контент. Рекомендуется настроить внутреннюю перелинковку между статьями и страницами. Это простой и эффективный вариант повысить вовлеченность пользователей в проект и соответственно «подрасти» в выдаче.
8. Настроить навигацию, сделать доступ к нужной странице с главного меню не длиннее 3-х кликов. К юзабилити сайтов сегодня предъявляются повышенные требования, так как это напрямую влияет на поведенческие факторы посетителей. Если до нужной информации расстояние в 10-12 кликов, то 90% пользователей покинут такой сайт.
9. Разместить ссылки на ресурс в соцсетях, на тематических форумах, досках объявлений и других площадках генерации трафика.

Часто требуется уменьшить вес изображений, так как «тяжелая» графика замедляет загрузку страниц, плохо сказывается на индексировании и дальнейшем продвижении в поисковой выдаче.

Как закрыть страницы от роботов?

Выше мы узнали, что такое индексация страниц сайта, зачем она нужна, как ускорить этот процесс. Поговорим теперь, как спрятать от проверки информацию на страницах и зачем это делать.  Обычно запрет на сканирование ботами ПС устанавливают, чтобы скрыть от публичного просмотра технические и служебные страницы, конфиденциальную информацию, ресурсы в разработке, дубли и другое.

То есть, чтобы качественно продвигаться в поиске, нужно знать, какие данные показывать, а какие скрывать.

Поставить запрет на сканирование ботами можно несколькими способами:

1. Использовать файл robots.txt. В документе можно запретить индексацию отдельной страницы, так и всего сайта целиком. Этот файл как раз и устанавливает правила для роботов ПС. Для запрета используются два основных оператора: указание адресата (User-agent) и запрещающая директива (Disallow), которая ставит «шлагбаум» для бота. Например, если сайт ещё не готов к запуску, то в роботсе можно прописать следующий код: User-agent: * и на следующей строке Disallow: /. Так вы закроете весь ресурс для роботов ПС.
2. Прописать специальные теги в файле robots.txt. Обычно этот вариант используется для скрытия одной страницы от сканирования. Используются теги noindex и nofollow, которые запрещают ботам ПС проверять страницу или часть контента. Например, можно запретить работу конкретного бота следующим кодом: <meta name=»googlebot» content=»noindex, nofollow»/>.

На что влияет индексация?

Благодаря «прописке» в поисковых системах Яндекса и Гугла, сайты попадают в поле видимости пользователей и потенциальных клиентов. Сама по себе целевая страница в сети, онлайн-магазин или Landing Page не представляет ценности. Полезность её определяют посетители. Соответственно находясь в индексе и регулярно обновляя контент, ресурс растет в выдаче. Это увеличивает приток трафика и помогает развивать проект.

Роботы ПС оценивают не только качество контента, но и поведенческие факторы, посещаемость, вовлеченность. С помощью этих метрик определяется полезность сайта. Чем лучше поведенческие факторы аудитории, тем выше страницы в ранге. 

Первые 20 строк поисковой выдаче собирают 95% всего трафика по запросу. Поэтому быть в индексе на хорошем счету у ПС – это гарантия успешного продвижения и высоких конверсий.

Резюме

Мы рассмотрели, что такое индексация сайта в поисковых системах Яндекс и Гугла. Изучили основные моменты добавления, проверки и ускорения «прописки» в ПС. Узнали, как и зачем выставлять запреты на сканирование страниц ботами. У индексации простая задача, но с далеко идущими последствиями – внести информацию о сайте в базу поисковых систем.

Как проверить индексацию страниц сайта в Google и Яндекс

Главная • Блог • Как проверить, ускорить и закрыть индексацию страниц сайта в Google и Яндекс

Термин «индексация сайта» сегодня знаком каждому веб мастеру и практически каждому владельцу онлайн-бизнеса. Она влияет на позицию, занимаемую вашим ресурсом в поисковых системах, и, разумеется, когда она выше, пользователи, пребывающие в поисках нужной информации, товаров, услуг, окажутся в числе ваших клиентов с большей вероятностью, ведь увидят вас в числе первых.

Соответственно, неточности индексирования скажутся негативно на рейтинг в ТОП выдачи, или вовсе приведут к тому, что предложение компании окажется за пределами пользовательских запросов. Компания Idea Digital Agency составила краткий гайд для владельцев онлайн-бизнеса. Мы расскажем, как проверить индексацию сайта, и что делать, если он оказался вне поля зрения ботов.

Что такое индексация сайта?

Это процедура, проводящаяся алгоритмами с использованием принципов искусственного интеллекта, с целью определить релевантность данных, их важность для пользователей и актуальность. Проводится она автоматически, а робот в ходе проведения производит определенный порядок действий:

• Находит вас благодаря СЕО-продвижению или при помощи внешних ссылок;
• Переходит по линку и отправляет запрос на получение контента серверу;
• Изучает и оценивает важность содержимого, затем принимает решение об индексировании;
• Отправляет отчет.

В случае положительного решения рейтинг повышается. Если данные признаны неважными, повторной процедуры ждать не придётся до момента исправления недостатков, помешавших роботу выполнить работу.

Зачем нужна индексация сайтов в Google, спросите вы. Ответ прост: только отсканированное и получившее индекс от бота содержимое отображается в пользовательской выдаче на нужных вам позициях. Если по каким-либо причинам аналитика ботов прошла мимо или же URL попали под анализ частично, каким бы замечательным ни был контент, или насколько полезными не оказались товары, клиенты останутся в неведении и получат в выдаче своих запросов ссылки на магазины конкурентов.

Путать понятия сканирование и индекс неправильно. Бот проводит обе процедуры. Сканировать робот может достаточно быстро, а индексирование – более длительный процесс.

Как ускорить индексацию сайта, рассмотрим подробно далее, но главное в принципе работы ботов-пауков – сканирование HTML-кода. Поэтому важно не только подготовить релевантный контент для страницы, но и правильно прописать основные теги, включая заголовки разных уровней, метатеги Title и Description. Эту задачу лучше доверить профессиональным оптимизаторам, если важен 100% результат.

Как проверить индексацию сайта

Если вы не уверены, прошел ли URL сканирование, отмечаете низкую посещаемость, ищете причины невысокой конверсии, стоит запустить проверку URL в Гугл и Яндексе на правильность обработки и ее наличие. Доступны несколько способов, как это сделать, и любой способ имеет свои преимущества. Рассмотрим каждый подробнее.

Проверка в панели вебмастеров

Индексация сайта в Гугле и Яндексе возможна стандартным инструментом – Панелью Вебмастера. Для каждой популярной системы существует прописанный алгоритм действий. Мы рассмотрим его для двух основных, используемых в нашей стране.

• Проверка в Google проводится через Search Console. Выберите раздел «Обзор» в консоли, откройте графический отчёт «Покрытие». На графике вы сможете увидеть количество проиндексированных безошибочно объектов (зеленый график) и те, с которыми возникла ошибка (красный график). Увидеть подробный отчёт об основных файлах можно переходом в соседнюю вкладку с отчетом.

• Как проиндексировать сайт в Яндекс? Понадобится авторизоваться в сервисе Яндекс.Паспорт. Заходите непосредственно в сервис вебмастеров «Яндекс. Вебмастер», выбирайте параметр «Индексирование», далее – два пути: либо выбрать параметр «Страницы в поиске», либо его же в истории вебмастера. На полученном графике вы сможете отследить историю. График идёт по экспоненте без резких колебаний – это хороший признак: SEO продвижение сайта идёт правильно. Если график неровный, напоминающий кардиограмму, это явный признак ошибок в анализе: их обязательно нужно исправить.

В случае, когда проверка сайта Гуглом или Яндексом показывает нелицеприятные результаты, стоит удостовериться, что он не закрыт для их внимания и устранены базовые проблемы.

Материал по теме: Google Search Console: как добавить сайт и лайфхаки для SEO

Проверка через операторы в поисковых запросах

Индексация сайтов в Google отображается и в самом поисковике. Для изучения количества проиндексированных данных в целом можно использовать оператор site:. Алгоритм в этом случае проще простого: нужно добавить точный линк или доменное имя в Гугл, проставив перед адресом site:. После него без пробелов скопируйте полный линк. Посмотрите на выдачу.

Кстати, нелишним будет выполнить сравнение: запустите поиск в Яндекс и Гугл одновременно, если количество результатов выдачи будет существенно различаться, это признак того, что есть не выявленные ошибки, требующие исправления.

Чтобы получить более детальный анализ в Google можно зайти в раздел «Инструменты поиска»: так вы сможете увидеть, какое число линков было обработано с присвоением индекса за определенный период времени.

Параллельно рассмотрим, как проверить индексацию сайта операторами по каждому разделу.

• Стандартная схема – всё тот же site:. Вставьте после него полную ссылку и просмотрите результат. Отсутствие результата – верный признак того, что страница не индексируется.

• В этом случае можно задействовать специальные операторы. Для Гугл это – inurl:. Для Яндекса – url:. При обработке запроса с этими операторами положительный результат означает, что раздел всё же проиндексирован, отрицательный – его отсутствие в аналитике ПС.

С этой же целью можно выполнить такое простое действие, как посмотреть кэш Гугла. Для этого достаточно находясь на выбранной странице в поисковой строке перед URL прописать оператор cache и нажать энтер.

Проверка через плагины и букмарклеты

Узнать информацию можно и без непосредственного взаимодействия с поисковыми системами и их Консолями. Достаточно задействовать плагины или букмарклеты – небольшие приложения, которые устанавливаются непосредственно в браузер. Можно использовать такие плагины, как RDS bar или SEO Magic. Кроме них, существуют и другие микро-программы, с которыми массовая проверка индексации страниц будет минутным делом.

Анализ через сервисы для проверки индексации

Некоторые разработчики софта предлагают готовые решения, как узнать статус в ПС. Часть из них предлагается на платной основе и позволяет вытянуть сразу множество данных для анализа. Есть и более простые, shareware сервисы. В них может присутствовать ограничение по количеству линков, либо они могут иметь ограниченный функционал, но базовые данные они вполне могут вам предоставить. К таким сервисам относятся serphunt.ru и raskruty.ru. Для их применения достаточно перейти по адресу и следовать простым инструкциям.

Платные версии сервисов предлагают такие компании, как serpstat, Netpeak, Se Ranking (у последних сервис условно бесплатный, но только при условии, что вы уже подписаны на один из платных тарифов).

Как проверить индексацию конкретной страницы

Как и в случае с аналитикой в целом, проанализировать каждую страницу по отдельности можно через Search Console Гугла. Сделать это очень просто: скопируйте линк и вставьте в строку поиска Консоли. При положительном ответе появится соответствующее информационное окно.

Если ответ отрицательный, вы можете отправить ее повторно при помощи кнопки «Запросить индексирование».

Также определенные URL можно протестировать через поисковик с оператором site:, url/inurl. И, конечно, такая опция присутствует в платных сервисах или плагинах для анализа.

Почему не индексируется сайт, основные ошибки

Предупреждён – значит, вооружён, считаем мы. Поэтому важно знать и о главных причинах, по которым поисковые боты игнорируют вас и не индексируют целиком или отдельные разделы.

• Часто проблема банальна: онлайн-проект только создан, и поисковые пауки ещё не добрались до него. При статистике создания новых объектов в интернете, такая ситуация не редкость. Поэтому иногда не стоит паниковать, достаточно проявить терпение и регулярно просматривать, не появились ли ваши страницы в индексе.
• Отсутствие sitemap – не критичный, но не лучший вариант. Если вы не предоставили роботам готовый гайдлайн, они могут выборочно проиндексировать несколько рандомных страниц, а остальные упустить из виду или проигнорировать.
• Ошибки в страницах: отчеты Google Search Console игнорировать не стоит. Они показывают текущие ошибки страниц, которые, в свою очередь, могут привести к сбоям обработки поисковыми роботами.
• Недостаток контента – повод для отклонения. Контент – это не только текстовое наполнение, но и всевозможные медиа-объекты, расположенные на странице.

• Проблемы с robots.txt. Если для мета-тега случайно был присвоен атрибут noindex, поисковые пауки его не смогут найти. Аналогично с тегом X-Robots, который мог быть проставлен, как Noindex при тестировании или выставлен случайно. В общем, файл «роботов» стоит тщательно изучить на наличие лишних символов или атрибутов.
• Низкая уникальность контента – тоже провоцирует на отказ. Если даже вы выступаете первоисточником контента, но при этом ваши конкуренты «слизали» его и ускоренно проиндексировали свой ресурс, приоритет получат они, а не вы.
• Наличие дублей страниц для Search robots – тоже тревожный сигнал.

Также для отслеживания причин игнорирования ботами можно посмотреть статистику: возможно, причина в низкой скорости загрузки.

Инструкция по ускорению индексации сайта

Индекс поисковиками – насущный вопрос. И ускорить его стоит всеми возможными способами. А их существует не так уж и мало. Перечислим наиболее эффективные:

• Обязательно создайте sitemap – это путеводитель для роботов-поисковиков.
• Если карта уже есть, не забывайте ее регулярно обновлять, чтобы новые страницы и обновленный контент тоже оказывался проиндексированным.
• Следите за уникальностью контента. Удаляйте тот, который показывает низкую уникальность.
• Следите, не осталось ли дублей страниц после разработки.
• Сбои при переходе по линкам и ошибочные редиректы только запутывают “пауков”.
• Постоянный контроль robots.txt – это практически профилактика здоровья вашего бизнеса онлайн.
• Отладка страниц на предмет скорости поможет ускорить процесс. Поэтому займитесь этим тоже.
• Разумное распределение ссылок на ресурсах-донорах и внутри самого ресурса позволит алгоритмам попасть к вам быстро и точно. Для этого обновлённые разделы анонсируйте в социальных сетях, выбирайте подходящих доноров и логичную перелинковку на ресурсе.
• Регулярные обновления – это сигнал роботам, что вы живёте и развиваетесь. Запомните это.

Материал по теме: Как проверить и увеличить скорость загрузки сайта?

Как закрыть сайт от индексации?

Есть ситуации, когда необходимо выполнить и обратное действие – не дать индексировать вас. Удалить страницу из поиска Гугл и закрыть ее от внимания ботов можно при помощи внесения соответствующих команд в robots.txt.

Для этого используется команда Disallow.

С её помощью можно закрыть как все целиком, так и отдельные директории, картинки или медиа-контент.

Аналогично можно установить запрет и через кабинет веб-мастера. В различных CMS это может быть реализовано в разных позициях меню, но в целом вполне реализуемо.

И, конечно, можно запросить доступ по паролю на уровне настроек сервера.

Заключение

Загадочная процедура, о которой мы рассказали, не так уж страшна, как кажется на первый взгляд. Она полезна для всех ресурсов, за исключением еще не запущенных в работу или уже устаревших. И поэтому отследить отсутствие файлов, очень важно. Мы надеемся, что наша статья окажется для вас полезной, и ваш онлайн-проект будет точно индексироваться и отображаться на самых верхних позициях выдачи в поисковиках.

Проверка индексации сайта в Google и Яндекс

Ситуация не из приятных: сканирование сайта поисковыми роботами проходит достаточно быстро, но процесс добавления страниц в индекс не оправдывает ожиданий. Одни страницы сайта не попадают в базу поисковых систем, а другие удаляются. В результате ресурс ранжируется по проиндексированным данным. Если в индекс попали целевые страницы, вам повезло чуть больше. Так или иначе на позиции сайта в выдаче проблемы с индексацией влияют отрицательно. Особенным «приколом» 2021 года стало то, что функция принудительного переобхода страниц (когда обновляешь контент старых страниц) перестала корректно работать в Google.

Мы подготовили чек-лист, который поможет быстро оценить видимость страниц индексе и их количество.

Корректное управление индексацией позволяет оптимизировать расход краулингового бюджета: роботы индексируют только важные для продвижения страницы.

1. Панели веб-мастеров

В Google Search Console проверяем «Статус индексирования» в разделе «Индекс».  Проблемы с индексацией выглядят следующим образом:

Отметка «Проиндексировано всего» указывает число адресов, добавленных в индекс.

Просмотр удаленных страниц, прошедших индексацию успешно или с ошибкой доступен в отчете «Покрытие».  Также можете проверить определенную страницу на попадание в индекс.

Проверка в Яндекс.Вебмастере осуществляется через путь «Индексирование сайта» — «Страницы в поиске». Далее при выборе «История» получим динамику количества страниц в поиске.

2. Проверка вручную: поисковые операторы 

Операторы поисковых систем используются для уточнения результатов поиска. Оператор «site:» выводит список проиндексированных страниц. Для применения параметра в поисковую строку Google или Яндекс введите «site:[url сайта]». Для получения точных данных в Google необходимо перейти на последнюю страницу поиска. Различия в полученных цифрах — показатель наличия проблем на сайте или его попадания под фильтр поисковых систем.

Оператор Cache проверяет частоту посещения сайта поисковым ботом. Настройте дополнительные инструменты поиска, чтобы просмотреть данные об индексации за час, день, неделю, месяц, год или все время.

3. Автоматизированная проверка: плагины и букмарклеты 

Букмарклеты — скрипты, сохраняемые в закладках браузера. Принцип работы плагинов и букмарклетов одинаковый: открываете сайт для проверки и призываете на помощь закладку из браузера. В результате получаете необходимую информацию за один клик, ничего не прописывая и не настраивая.

Расширения: SEO-tools, RDS bar, SimilarWeb, MozBar.

Работа с плагином RDS bar

4. Специальные сервисы проверки

Специальные сервисы облегчают работу SEO-специалистов: позволяют не только проверить индексацию, но и выявить возможные проблемы. Среди таких сервисов: Netpeak Spider, SEO-reports, Rush Analytics. Кроме проиндексированных страниц дополнительно получаете код ответа, заголовки, метаописания, robots.txt и пр.

Возможные причины выпадения страниц из индекса и их решение:

1. Недавний запуск сайта.

Индексирование недавно появившегося сайта занимает много времени. Для ускорения процесса пройдите регистрацию в «Add url», разместите сайт в каталоге и добавьте ссылки с рейтинговых ресурсов, социальных сетей.

2. Отсутствие карты сайта (sitemap.xml).

Ее основная функция: сообщать поисковым системам об изменениях на ресурсе и задавать частоту проверки. Такие карты помогают сайту индексироваться быстрее с более эффективной скоростью обхода.

Чтобы проверить, есть ли страница в файле sitemap, используйте инструмент проверки URL в Search Console.

Как использовать Google Search Console маркетологу (длительность 8 минут)

3. Приватные настройки WordPress.

В настройках чтения уберите галочку с пункта «Видимость для поисковых систем».

4. Ошибка в метатегах в коде страниц<meta name = “robots” content = “noindex”, nofollow” />.

Чтобы найти все страницы с метатегом noindex на вашем сайте, выполните аудит сайта через Ahrefs: просмотрите предупреждения в отчете “Внутренние страницы”. Для борьбы с этой ошибкой необходимо избавиться от строки или заменить элементы на «index» и«follow». 

5. Ошибка в использовании директив в файле robots.txt. Закрытие доступа в robots.txt черезUser-agent: * Disallow: /

Подробнее о работе с индексным файлом читайте здесь.

6. Отсутствие уникального контента.
7. Дублирование страниц.

Заполните сайт качественным и собственным контентом, удалите мусорные страницы, чтобы избежать санкций от поисковиков.

Чтобы максимально повысить скорость индексации, обновляйте сайт не реже 3 раз в неделю. Например, размещайте новые публикации  и обновляйте старый контент. Google будет чаще сканировать ваш сайт, а обновленные старые публикации сохранят актуальность для новых посетителей.

Собирайте информацию о соотношении проиндексированных страниц, динамике их индексации, отслеживайте тренды. Необходимо регулярно отслеживать индексирование сайта, чтобы своевременно решать проблемы и предотвращать отрицательные последствия, вносить изменения в стратегию продвижения.

Павел Савицкий, SEO-специалист GUSAROV:
В большинстве случаев я пользуюсь таким сервисом, как Netpeak Spider. После сканирования сайта можно определить не просто страницы, которые не индексируются, но и выявить причины непопадания их в индекс поисковых систем. Этих причин может быть много: отсутствие или некорректно заполненные заголовки, мета-теги (заголовки в выдаче), закрытие от индексации в служебном файле robots.txt, некорректно настроенный редирект и т.д. Наличие многофункциональных возможностей Netpeak Spider позволяет выгрузить различные типы страниц (например, индексируемые и неиндексируемые) с техническими ошибками в Excel, что в дальнейшем приводит к ускорению работы по исправлению неиндексируемых URL.

12.05.2021

Индексация страниц и сайта в Яндексе и Google

Индекс поисковой системы — база данных, которая хранит информацию о веб-документах. Назначение этого «хранилища» очевидно — используя базу данных, поисковик может быстро и точно вычислять значения факторов ранжирования, численное значение релевантности URL по запросу пользователя и формировать результаты выдачи.

Для SEO-специалистов и владельцев сайтов это означает одно — какое количество страниц проиндексировано, такое количество документов и может быть найдено в результатах выдачи по целевым запросам и столько же URL может привлекать трафик из поисковиков.

Как быстро проверить индексацию в Яндексе и Google?

Способов и онлайн-сервисов массовой проверки индексации страниц достаточно много и у нас есть три инструмента, которые определяют количество документов в индексе по домену:

Просто укажите домен в любом из них. Инструмент поможет проверить сайт и обозначит количество проиндексированных страниц в базе данных Google и Яндекс, с учётом поддоменов или без них:

Если данные нескольких проверок индексации сайта разнятся, обратите внимание на историю индексации сайта в панелях Яндекс.Вебмастера и Google Search Console. Данные в них являются наиболее достоверными, так как результаты выдачи поисковых систем с использованием операторов с течением времени могут немного отличаться.

Поисковые операторы для проверки индексации

Узнать индексацию сайта можно, используя операторы поиска. Для Яндекса это операторы «site:», «host:» и «url:».

Для Google — «site:», «inurl:» и «info:».

В обеих поисковых системах указываются приблизительные результаты, но можно использовать дополнительные параметры, чтобы узнать, сколько страниц было проиндексировано, например, за неделю:

Для того, чтобы проверить индексацию определённой страницы сайта используйте оператор «url:» для Яндекса и «info:» для Google.

Вебмастер и Search Console

Если вы уже добавили свой сайт в панель Яндекс.Вебмастер и/или Google Search Console, то можете детально отслеживать статус сканирования и индексирования документов.

В Вебмастере переходим на вкладку «индексирование» — «страницы в поиске». Здесь расположилась статистика по добавленным и удалённым из поиска документам. Также можно посмотреть историю изменений для всего сайта за определённый интервал дат:

Проверить массовую индексацию сайта в Google можно с помощью Search Console. В новой версии консоли переходим на вкладку «статус» — «индексирование отправленных URL» и получаем картину изменений, ошибок, список исключенных страниц и график показов:

Возможный контроль индексации

Важно понимать, что сканирование или обход страницы сайта не означает её попадание в индекс. Иногда необходимо запретить индексирование страниц, которые не нужны в поиске, например: URL с техническими GET-параметрами, служебные или пользовательские документы (корзина, личный кабинет и прочие), документы с UTM-метками. Поэтому каждому сайту желательно иметь:

1. Sitemap.xml — файл, который помогает поисковым роботам сканировать сайт, с учётом заданных приоритетов.

2. Robots.txt — файл, задающий правила и параметры обхода для всех роботов поисковых систем или индивидуально для каждой:

   • С помощью команды Disallow можно запрещать индексирование отдельных URL или разделов сайта.

   • Crawl delay — задаёт минимальное время обращения робота к серверу для избегания нагрузок на сайт.

   • Clean param — позволяет указать неважные для индексации CGI-параметры в URL-адресах, то есть различные идентификаторы пользователей, сессий и так далее. Используется только в Яндексе.

Открытые страницы должны быть в поиске, только тогда можно думать о ранжировании. Не забывайте проверять сайт на индексацию, отслеживайте изменения и удачных позиций в выдаче!

---

Задайте вопрос или оставьте комментарий

Другие вопросы нашего FAQ

Как проверить индексацию страницы | Сервисы проверки индексации сайта.

Если вы занимаетесь продвижением сайта, то очень важно, чтобы все страницы вашего сайта были проиндексированы в поисковых системах (Яндекс, Google и т.п.).

• Во первых, если страницы нет в индексе, значит люди не смогут ее найти и вы зря потратили время (и возможно деньги) на ее создание, наполнение и оформление. Каждая страница в индексе — это источник посетителей.
• Во вторых, если страницы нет в индексе, это может свидетельствовать о технических проблемах на сайте, например дублирование контента, глюки сайта или хостинга.
• В третьих, эта страница может играть техническую роль, например, участвовать в схеме перелинковки (или содержать платные ссылки, за которые вы не получите деньги, если страницы нет в индексе).

Работая с клиентами, я не раз сталкивался с тем, что из-за проблем с индексацией были плохие позиции. Эта техническая проблема, которую я обычно исправляю в первый месяц сотрудничества, за счет чего уже со 2-го месяца бывает заметный рост посетителей и позиций.

Ниже я рассмотрю ручные и автоматизированные способы проверки индексации страниц в Яндекс и Google. Покажу, как проверить индексацию сайта в целом и каждой страницы в отдельности.

Если вы владелец сайта

Если вы владелец сайта, то вы можете точно посмотреть индексацию страниц через кабинеты вебмастера от поисковых систем.

https://webmaster.yandex.ru/ — Яндекс

https://www.google.com/webmasters/ — Google

Как владельцу вам должно быть важно, чтобы реальное количество страниц (категорий, статей, товаров) на сайте соответствовало страницам результатах поиска.

Яндекс Вебмастер

В вебмастере целый раздел так и называется «Индексирование»

В Яндекс.Вебмастере вы можете проверить как часто заходит к вам поисковый робот и что происходит со страницами вашего сайта.

Серьезные проблемы с индексацией: постоянно выпадают и добавляются сотни страниц.

Можно смотреть статистику по всем страницам или проверить любую отдельную страницу своего сайта:

Пример проверки отдельной страницы

Google Search Console (Google Вебмастер)

В Google точно также можно смотреть статистику по всем страницам сайта или проверить одну конкретную.

Пример проблем с индексацией. Серые столбики — исключенные страницы.Проверка отдельной страницы

Имея доступ к личному кабинету в поисковой системе можно узнать в какое конкретно время была проиндексирована страница или исключена из результатов поиска.

Если сайт чужой

Если сайт чужой, то можно посмотреть сколько страниц проиндексировано в поисковой системе с помощью специального запроса

Проверка индексации сайта в ЯндексеПроверка индексации в Google

Можно заметить, что у меня отличается число для Google и Яндекс. Это может свидетельствовать о проблемах, если вы не знаете настоящей причины. В данном случае причина в том, что я недавно добавил каталог услуг и Яндекс быстрей проиндексировал новые страницы.

Чтобы проверить отдельную страницу, достаточно скопировать ее адрес URL и вставить в строку поиска. Если в результатах будет нужная страница, значит она проиндексирована.

Проверяем индексацию страницы в ЯндексеПроверяем индексацию страницы в Google

С помощью сервисов

Сервисы — это менее точный метод, но его хорошо использовать, когда нужно проанализировать много сайтов.

Сервис Be1.ru

https://be1.ru/

Вот так показывает индексацию сервис Be1

Как видно, сервис показал, что у меня недавно было прибавление страниц в Яндексе (и это соответствует реальности), а Google запаздывает.

Сервис PR-CY

https://a.pr-cy.ru/

Пример отчета по индексации из сервиса PR-CY

Сервис Серпхант

https://serphunt.ru/indexing/

Сервис предоставляет мощный функционал для SEO специалистов, но в данном случае нас интересует инструмент проверка индексации. Проверяет Яндекс и Google

Пример проверки индексации в Серпханте

Arsenkin

https://arsenkin.ru/tools/indexation/

Cервис бесплатно проверяет индексацию в Яндексе, а для Гугл надо подключить базовый тариф.

Пример проверки индексации в Arsenkin

Promopult — платно, но дешево и много

https://promopult.ru/tools/indexing_analysis.html

Когда нужно проверить большее количество URL разом, то я использую сервис Promoputl. Проверка индексации в Яндекс и Google одной страницы стоит 2 копейки, отчет предоставляется в Excel

Проверка индексации от Promopult

Как узнать количество страниц на сайте

Хорошо, теперь вы знаете как проверить индексацию. А как понять соответствует ли оно реальности. В самом простом случае, надо знать сколько страниц на сайте и сколько из них разрешены к индексации.

Чтобы узнать эту информацию можно просканировать сайт программой SiteAnalyzer (https://site-analyzer.ru/)

Просканировал сайт и вижу, что HTML страниц 190

Если вы внимательно читали статью и смотрели скриншоты, то видите, что количество страниц на сайте не совпадает с информацией от поисковых систем и сервисов. Но число примерно похоже.

Дальше, используя программу SiteAnalyzer и перечисленные методы можно вычислить какие страницы не в индексе, а также страницы которые до сих пор в индексе, но нет на сайте.

Популярные проблемы с индексацией

Когда мы знаем, сколько страниц от фактического количества проиндексированы, может быть 3 ситуации:

1. Количество страниц в поисковиках и на сайте совпадает. Это идеальный вариант, значит с сайтом всё впорядке. Хотя все равно рекомендую проверить и сравнить.
2. Количество проиндексированных страниц меньше. Значит с сайтом проблемы (наиболее популярная проблема — малоинформативный или неуникальный контент)
3. Количество проиндексированных страниц больше. Скорей всего у вас проблема с дублированием страниц, т.е. одна страница может быть доступна по нескольким адресам. Это плохо для продвижения, т.к. статический вес страницы размывается и кроме-того получается много страниц с повторяющимся контентом.

Для дальнейшей диагностики сайта, нам понадобится узнать какие страницы точно проиндексированы, а какие не входят в индекс.

Заключение

Умение проверить индексацию страниц своего сайта позволит вам продуктивней работать с поисковыми системами, а так же вычислить существующие проблемы с сайтом.

Статистика сканирования — Вебмастер. Справка

Робот-индексатор Яндекса регулярно сканирует страницы сайта и загружает их в поисковую базу. Робот может не загрузить страницу, если она недоступна.

Яндекс.Вебмастер позволяет узнать, какие страницы вашего сайта сканирует робот. Вы можете просмотреть URL-адреса страниц, которые робот не смог загрузить из-за недоступности сервера хостинга или из-за ошибок в содержании страницы.

Информация о страницах доступна в Яндекс.Вебмастер на странице. Информация обновляется ежедневно в течение шести часов после посещения страницы роботом.

По умолчанию сервис предоставляет данные по сайту в целом. Чтобы просмотреть информацию об определенном разделе, выберите его из списка в поле URL сайта. Доступные разделы отражают структуру сайта, известную Яндексу (кроме разделов, добавленных вручную).

Если в списке нет страниц, которые должны быть включены в результаты поиска, воспользуйтесь инструментом «Переиндексировать страницы», чтобы сообщить о них Яндексу.

Вы можете скачать информацию о страницах в формате XLS или CSV с помощью фильтров.

Примечание. Данные доступны с 20 февраля 2017 года.

1. Динамика состояния страниц
2. Изменения страниц в поисковой базе
3. Список страниц, просканированных роботом
4. Фильтрация данных

Информация о странице представлена ​​в следующем виде:

• Новые и измененные — количество страниц, просканированных роботом в первый раз, и страниц, статус которых изменился после того, как они были просканированы роботом.

• Статистика сканирования — количество страниц, просканированных роботом, с кодом ответа сервера.

Изменения отображаются, если код ответа HTTP изменился, когда робот снова обратился к странице. Например, 200 OK превращается в 404 Not Found. Если изменилось только содержание страницы, в Яндекс.Вебмастере это не отобразится.

Чтобы просмотреть изменения, установите параметр «Последние изменения». Может отображаться до 50 000 изменений.

Яндекс.Вебмастер показывает следующую информацию о страницах:

• Дата последнего посещения страницы роботом (дата сканирования).

• Путь к странице из корневого каталога сайта.

• Код ответа сервера, полученный при сканировании.

На основе этой информации вы можете узнать, как часто робот просматривает страницы сайта. Вы также можете увидеть, какие страницы были только что добавлены в базу данных, а какие были повторно просканированы.

Страницы, добавленные в базу поиска

Если страница просматривается в первый раз, в столбце «Была» отображается статус «Н / д», а в столбце «Текущий» отображается ответ сервера (например, 200 OK).

После успешной загрузки страницы в базу данных поиска она может отображаться в результатах поиска после обновления базы данных поиска. Информация о нем отображается в разделе «Страницы в поиске».

Страницы, переиндексированные роботом

Если робот просканировал страницу раньше, статус страницы может измениться при повторном сканировании: в столбце Was отображается ответ сервера, полученный во время предыдущего посещения, в столбце Current отображается ответ сервера получено во время последнего сканирования.

Предположим, что страница, включенная в поиск, стала недоступна для робота. В этом случае он исключается из поиска. Через некоторое время вы можете найти его в списке исключенных страниц в разделе «Страницы в поиске».

Страница, исключенная из поиска, может оставаться в базе данных поиска, чтобы робот мог проверить ее доступность. Обычно робот запрашивает страницу до тех пор, пока на нее есть ссылки, и это не запрещено в файле robots.txt.

Чтобы просмотреть список страниц, установите для параметра значение Все страницы.Список может содержать до 50 000 страниц.

Вы можете просмотреть список страниц сайта, просканированных роботом, и следующую информацию о них:

• Дата последнего посещения страницы роботом (дата сканирования).

• Путь к странице из корневого каталога сайта.

• Код ответа сервера, полученный при последней загрузке страницы роботом.

Наконечник. Если в списке показаны страницы, которые уже удалены с сайта или не существуют, вероятно, робот находит ссылки на них при посещении других ресурсов.Чтобы запретить роботу доступ к ненужным страницам, запретите индексацию с помощью директивы Disallow в файле robots.txt.

Вы можете фильтровать информацию о страницах и изменениях в поисковой базе по всем параметрам (дате сканирования, URL страницы, коду ответа сервера) с помощью значка. Вот несколько примеров:

По ответу сервера

Вы можете создать список страниц, которые робот просканировал, но не смог загрузить из-за ответа сервера 404 Not Found.

Вы можете фильтровать только новые страницы, которые были недоступны для робота.Для этого установите переключатель в положение «Последние изменения».

Также вы можете получить полный список страниц, которые были недоступны для робота. Для этого установите переключатель в положение Все страницы.

По фрагменту URL

Вы можете создать список страниц с URL, содержащим определенный фрагмент. Для этого выберите из списка Содержит и введите фрагмент в поле.

По URL-адресу с использованием специальных символов

Вы можете использовать специальные символы для соответствия началу строки или подстроки и устанавливать более сложные условия с помощью регулярных выражений.Для этого выберите совпадения URL-адресов из списка и введите условие в поле. Вы можете добавить несколько условий, поместив каждое из них в новую строку.

Для условий доступны следующие правила:

Символы, используемые для фильтрации

Символ	Описание	Пример
*	Любое количество символов	Соответствует любому количеству символов	Показать данные для всех страниц, начинающихся с https: // example.com / тариф /, включая указанную страницу: / тариф / * Использование символа * Символ * может быть полезен при поиске URL-адресов, содержащих два или более определенных элемента. Например, вы можете найти новости или объявления за определенный год: / news / * / 2017/.
@	Отфильтрованные результаты содержат указанную строку (но не обязательно строго соответствуют ей)	Отображение информации для всех страниц с URL-адресами, содержащими указанную строку: @tariff
~	Условие — регулярное выражение	Отображение данных для страниц с URL-адресами, соответствующими регулярному выражению.Например, вы можете отфильтровать все страницы с адресом, содержащим фрагмент ~ таблица | диван | кровать , повторяющийся один или несколько раз.
!	Отрицательное условие	Исключить страницы с URL-адресами, начинающимися с https://example.com/tariff/: ! / Тарифа / *

Использование символов не чувствительно к регистру.

Символы @,!, ~ Можно использовать только в начале строки. Доступны следующие комбинации:

9012 страницы с URL-адресами, соответствующими регулярному выражению

Оператор	Пример
! @	Исключить страницы с URL-адресами, содержащими тариф: ! @Tariff

Индексирование страниц сайта: как быстро проверить в поисковых системах в Go

Просмотры: 2105 Соломоно

Если вы продвигаете сайт самостоятельно, будет интересно узнать, какие страницы проиндексированы поисковыми системами Google и Яндекс и проиндексированы ли они вообще.

Важно! Часто индексирование путают с обычным сканированием. Имейте в виду, что поисковая система может сканировать страницу сразу, но через некоторое время добавить ее в вашу базу данных (индексировать).

Если вы зарегистрировали свой сайт в веб-мастере, вы должны перейти в Search Console и выбрать вкладку «Индекс Google». На вкладке «Статус индексирования» вы увидите график, на котором вы можете определить количество проиндексированных страниц.

Как проверить индексацию страниц в Яндексе

В Яндекс.Вебмастеру необходимо выбрать вкладку «Индексирование сайта», а затем «Страницы в поиске».
Первый признак того, что все в порядке, — это когда количество проиндексированных страниц растет и кривая ползет вверх. Снижение кривой указывает на проблемы на сайте.

Как проверить индексацию сайта в поисковых системах через адресную строку

Есть несколько так называемых операторов, с помощью которых вы можете увидеть количество проиндексированных страниц. В адресной строке введите: site: адрес вашего сайта, например site: https: // solomono.нетто
Поэкспериментируйте с настройками, чтобы увидеть результаты по нескольким параметрам, например, по времени, для определенного языка или региона.

Индексация страниц сайта с помощью сервисов

Проверить изменения индексации страниц в Яндексе и Гугле можно с помощью специальных сервисов. Одна из таких услуг — PR-CY. Этот сервис показывает не только изменения в индексации страниц, но и много другой полезной информации, как с точки зрения SEO-оптимизации, так и по техническим настройкам сайта.

Индексирование сайта в поисковых системах с помощью плагинов

Индексирование страниц сайта также можно проверить с помощью плагинов и расширений браузера. Например, Mozilla Firefox имеет в своем арсенале такое расширение, как RDS Bar. Открыв свой сайт в браузере с установленным плагином, вы можете наглядно увидеть всю информацию по: индексации в Яндексе, индексации в Google, ТИЦ и других показателей.

Желаем набраться сил и терпения в продвижении своего интернет-магазина и все будет хорошо!

SEO Tutorial: Яндекс для веб-мастеров

Российская поисковая система Яндекс предлагает инструмент Яндекс.Webmaster, который похож на Google Search Console (ранее — Инструменты для веб-мастеров) и Bing для веб-мастеров. Если Россия является важной целевой страной для вашего бизнеса и вы оптимизируете свой сайт под Яндекс, вам следует использовать Яндекс.Вебмастер. Он дает вам контроль и предоставляет важную информацию об индексировании вашего сайта в Яндекс.

Подтверждение вашего веб-сайта

Прежде всего вам необходимо подтвердить свой сайт в Яндекс. Это включает в себя следующие шаги:

1. Создайте аккаунт: Для использования Яндекс.Вебмастеру, вам необходимо создать аккаунт на Яндексе. Если вы уже размещаете рекламу в Яндексе с Яндекс.Директом, вы можете использовать этот аккаунт.
2. Добавьте свой веб-сайт: В своем аккаунте нажмите «Добавить сайт», чтобы добавить свой веб-сайт. Вам нужно добавить каждый поддомен отдельно. Необходимо добавить веб-сайты, использующие протокол HTTPS, включая «https: //» (добавлять «http: //» не обязательно).
   
3. Подтвердите свой веб-сайт: Теперь вам необходимо подтвердить, что вы являетесь владельцем этого веб-сайта.Вы можете выбрать один из пяти различных методов подтверждения.

Соответствующие отчеты и характеристики

После добавления вашего сайта в Яндекс.Вебмастер вы можете использовать следующие отчеты и функции:

Общая информация

Когда вы нажимаете на свой веб-сайт в разделе «Мои сайты», вы найдете обзор статуса индексации, например, количество страниц вашего веб-сайта в индексе Яндекса и количество обратных ссылок.

Проверить URL

В меню «Проверить URL» вы можете получить доступ к информации о конкретных страницах вашего сайта.В этом отчете вы узнаете, проиндексирована ли страница в Яндексе, ее код статуса HTTP, дату последнего сканирования, а также количество обратных и внутренних ссылок.

Индексирование

Этот отчет содержит информацию об индексировании вашего сайта:

• Структура сайта: Здесь вы можете увидеть, как Яндекс воспринимает структуру вашего сайта. В этом отчете отображаются все подпапки, содержащие более десяти страниц, если они содержат не менее 1% всех страниц вашего веб-сайта.
• Страниц в поиске: Здесь вы найдете список всех страниц вашего сайта, которые включены в индекс Яндекс.
• Ссылки на сайт: В этом отчете вы увидите все обратные и внутренние ссылки вашего сайта.
• Исключенных страниц: Здесь вы найдете все страницы вашего сайта, исключенные из индекса Яндекса. Ниже приведены причины исключений: неработающие ссылки, исключения с файлом robots.txt или метатегом noindex, а также страницы с каноническим тегом.Кроме того, этот отчет содержит список всех неработающих ссылок.

Параметры индексирования

В этом меню находится инструмент анализа файла robots.txt и разделы для загрузки ваших файлов Sitemap (файлов Sitemap). В разделе «Главное зеркало» вы определяете свои предпочтения, должны ли URL-адреса индексироваться с www или без него.

Поисковые запросы

Этот отчет аналогичен отчету Search Analytics в Google Search Console и показывает поисковые запросы, по которым ваш сайт отображался в Яндекс.

География сайта

Здесь вы можете определить географическую ориентацию вашего веб-сайта. Вы можете определить только одну географическую цель. Вы также можете указать, что ваш веб-сайт не имеет определенной географической цели.

Появление в результатах поиска

В этом разделе вы найдете две особенности того, как ваш сайт будет отображаться в результатах поиска Яндекса:

• Ссылки на поисковую выдачу: В этом отчете показано, какие ссылки сайтов отображаются в поиске Яндекса вместе с вашим сайтом.
• Регистр букв URL: Здесь вы определяете, как вы хотите, чтобы ваш URL отображался в результатах поиска (прописные и строчные буквы).

Как видите, Яндекс предоставляет несколько важных отчетов и функций для контроля и отслеживания индексации вашего сайта. Однако Яндекс.Вебмастер менее универсален, чем инструменты для веб-мастеров от Google и Bing. Чтобы оптимизировать свой сайт для Яндекса, вам также следует использовать дополнительные инструменты SEO.

Можем ли мы помочь вам в оптимизации вашего сайта для SEO? Не стесняйтесь, пришлите мне электронное письмо.

Sitecore SEO | Google, Яндекс и Bing

Хотя Bing и Яндекс могут показаться незначительными по количеству, они входят в пятерку самых популярных поисковых систем на планете, а Яндекс занимает первое место в России. Они не только доминируют в мире поисковых систем, но и создали новый канал современного маркетинга — поисковую оптимизацию (SEO).

Google, Яндекс и Bing — крупнейшие поисковые системы в настоящее время. У Google колоссальный рейтинг 91.89% рынка, за которым следуют Bing с 2,79% и Яндекс с 0,54% .

С их постоянно развивающимися алгоритмическими изменениями и обновлениями, поисковая оптимизация становится более сложной, чем когда-либо. Упрощение SEO имеет решающее значение для успеха на этом канале. В этой статье рассказывается, что вам нужно сделать, чтобы добиться максимальной производительности Sitecore SEO от вашего сайта Sitecore.

Как попасть в индекс в Google, Яндекс и Bing

Первое и самое важное, что необходимо сделать перед оптимизацией, — это проиндексировать ваш сайт Sitecore поисковыми системами.Есть множество способов подойти к этому, но лучший из них — самый простой.

Подключение вашего сайта Sitecore к консоли поиска Google

Google Search Console — это набор инструментов и ресурсов, которые помогают владельцам веб-сайтов и специалистам по поисковой оптимизации отслеживать и обслуживать веб-сайты.

Некоторые из основных функций включают предоставление информации о внешнем виде поиска, производительности трафика, технических обновлениях, статусе сканирования и данных, обратных ссылках и ссылочных URL-адресах и многое другое.

1. Зарегистрируйтесь в Google Search Console аккаунт
2. Нажмите Добавьте свойство и в поле «Добавить URL-адрес сайта»
3. Выберите HTML-тег в качестве метода проверки
4. Скопируйте метатег и вставьте его в раздел вашего сайта
5. Как только это будет сделано, нажмите Подтвердить в окне консоли поиска Google

Источник: Google

Подключение вашего сайта Sitecore к Bing

После подключения вашего сайта к Google Search Console подключиться к Bing Webmaster довольно просто.Это можно сделать двумя способами. Первый — вручную, а второй — для проверки вашего сайта путем импорта аутентификации из Google Search Console.

1. Открыть учетную запись Bing для веб-мастеров
2. На главной панели инструментов нажмите кнопку в правом верхнем углу с надписью Пропустить проверку, импортировав свой сайт из консоли поиска Google

Источник: Bing

Подключение вашего сайта Sitecore к Яндекс.

Для бизнеса, у которого есть русскоязычный сайт, обязательно присутствие на Яндексе.Это потому, что Яндекс — поисковая система №1, которую выбирают люди в России.

1. Создать аккаунт на Яндексе
2. Перейдите на домашнюю страницу, найдите карточку веб-мастера и нажмите Добавить домен
3. Введите имя вашего домена и нажмите Добавить

Подтвердите, что вы являетесь владельцем сайта:

• HTML-файл : создайте HTML-файл с указанным уникальным именем и содержимым и поместите его в корневой каталог вашего сайта
• Мета-тег: Добавить специальный метатег в HTML-код на главной странице сайта (в элементе head)
• Если у вас уже есть основной домен, нажмите Сделать основным .После этого ваш новый домен станет основным доменом, а старый домен будет переведен в псевдоним домена
.

Узнайте о других способах подключения домена к Яндекс.

Источник: Яндекс

Подключение ваших XML-карт сайта к Google, Яндекс и Bing

После подключения и проверки вашего веб-сайта следующим шагом будет загрузка вашей XML-карты сайта во все инструменты для веб-мастеров (Яндекс, Bing и Google Search Console).

XML-карта сайта содержит список всех (включенных) страниц вашего веб-сайта.Хорошо структурированная иерархия / карта сайта в формате xml ведет поисковые системы ко всем вашим важным страницам.

Карту сайта обычно можно найти, добавив /sitemap.xml к URL-адресу вашего веб-сайта. Например: www.nameofyourwebsite.com/sitemap.xml. Если у вас нет карты сайта, попросите своего партнера по технологиям создать ее для вас.

Подключение XML-карты сайта Sitecore к Google Search Console

1. На панели инструментов Google Search Console перейдите к левой панели. В разделе Индекс щелкните Файлы Sitemap
2. Введите URL-адрес вашей карты сайта в поле Добавить новую карту сайта .URL-адрес обычно /sitemap.xml, но обязательно перед отправкой
3. После отправки, в зависимости от размера вашего сайта, в отчете ниже статус будет зеленым.

Подключение XML-карты сайта Sitecore к Bing

1. На панели инструментов Bing Webmasters перейдите к левой панели. В разделе Настроить личный сайт щелкните Файлы Sitemap
2. Нажмите новый Перейти к карте сайта ссылка
3. Нажмите Отправить карту сайта и отправьте URL-адрес, по которому находится ваша карта сайта

Подключение XML-карты сайта Sitecore к Яндексу

1. В панели управления Яндекс Вебмастера перейдите на левую панель.В разделе Индексирование щелкните Файлы Sitemap
2. Нажмите новый Перейти к карте сайта ссылка
3. Введите URL-адрес карты сайта в поле Добавить новую карту сайта
4. Нажмите Отправить

Когда веб-сайт проверен и карта сайта успешно отправлена, как вы оптимизируете свой сайт Sitecore для Google, Яндекс и Bing для улучшения SEO? Это может быть очень детализированным, но три наиболее важные и часто используемые категории оптимизации:

• Техническое SEO
• Внутреннее SEO (контент)
• Off-page SEO (профили с обратными ссылками)

Техническое SEO

Более 95% оптимизаций, сделанных для одной поисковой системы, обычно одинаковы для других поисковых систем.

Если вы правильно понимаете технические требования Google к SEO, вы в значительной степени правильно поняли и Bing, и Яндекс, хотя есть некоторые очень отличительные особенности, которые требуют большего внимания, чем другие.

Убедитесь, что ваш веб-сайт оптимизирован для мобильных устройств

Как следует из названия, оптимизированный для мобильных устройств контент предназначен для оптимизации ваших технических, дизайнерских и информационных основ для мобильных пользователей, а также для удобства использования мобильных устройств.

Ниже приведены 26 рекомендаций, которые помогут улучшить индексируемость вашего сайта Sitecore для мобильных устройств.

1. Используйте одни и те же метатеги robots на сайте для мобильных устройств и компьютеров.
2. Не ленитесь загружать основной контент при взаимодействии с пользователем
3. Разрешить Google сканировать все ресурсы
4. Убедитесь, что содержимое одинаково на настольных компьютерах и мобильных устройствах.
5. Используйте те же четкие и содержательные заголовки
6. Убедитесь, что на вашем мобильном устройстве и настольном компьютере используются одни и те же структурированные данные.
7. Используйте правильные URL-адреса в структурированных данных
8. Если вы используете Data Highlighter, обучите его на своем мобильном сайте
9. Поместите одинаковые метаданные в обе версии вашего сайта (метатеги, метаописания и т. Д.)
10. Обеспечивает высокое качество изображения
11. Использовать поддерживаемый формат для изображений
12. Не используйте URL-адреса, которые меняются каждый раз при загрузке страницы.
13. Убедитесь, что на мобильном сайте есть тот же замещающий текст для изображений, что и на сайте для настольных компьютеров.
14. Убедитесь, что качество содержимого мобильной страницы такое же хорошее, как и страницы для ПК.
15. Не используйте URL-адреса, которые меняются каждый раз при загрузке страницы для ваших видео
16. Использовать поддерживаемый формат для видео
17. Использовать те же структурированные видеоданные
18. Поместите видео в удобное для поиска место на странице при просмотре на мобильном устройстве
19. Убедитесь, что статус страницы ошибки одинаков как на настольном, так и на мобильном сайте.
20. Убедитесь, что в вашей мобильной версии нет URL-адресов фрагментов.Например, страницы, которые начинаются с #, эти страницы не будут проиндексированы
21. Убедитесь, что настольные версии, обслуживающие разный контент, имеют эквивалентные мобильные версии.
22. Проверьте обе версии вашего сайта в консоли поиска (только если у вашего сайта есть собственный URL)
23. Проверить hreflang ссылки на отдельные URL
24. Убедитесь, что ваш мобильный сайт имеет достаточную емкость для обработки повышенной скорости сканирования.
25. Убедитесь, что ваши директивы robots.txt работают так, как вы предполагаете, для обеих версий (если у вас есть сайт для мобильных устройств)
26. Используйте правильные атрибуты rel = canonical и rel = alternate для отдельных URL-адресов

Вы также можете использовать тест Google Mobile Friendly, чтобы узнать, насколько эффективен ваш сайт на мобильных устройствах.

Узнайте больше о передовых методах работы с мобильными устройствами.

Понимание основ JavaScript SEO

Все специалисты по SEO и маркетологи должны привыкнуть к некоторым техническим особенностям SEO с использованием JavaScript. JavaScript — важная часть набора инструментов веб-разработки, поскольку он предоставляет множество функций, которые превращают веб-разработку в мощную платформу приложений.

Создание веб-приложений на базе JavaScript, которые можно обнаружить с помощью поисковых систем, может помочь новым пользователям и повторно привлечь существующих пользователей в процессе поиска контента, предоставляемого вашим веб-сайтом.

Понимание того, как AMP выглядит в результатах поиска и работает

В отличие от JavaScript SEO, Accelerated Mobile Pages намного проще, но в равной степени является неотъемлемой частью технического контента и планов SEO.

AMP — это более простые страницы вашего текущего веб-сайта, которые могут быть обслужены пользователями намного быстрее. Это улучшает работу в Интернете для мобильных посетителей, особенно при медленном подключении к Интернету. Google Search и все другие поисковые системы индексируют AMP.

Повышение скорости страницы

Иногда поисковые системы могут быть довольно снисходительными, когда дело доходит до некоторых незначительных технических элементов, которые не совсем правильны, но скорость страницы не входит в их число.Самым важным ожиданием от поисковой системы, будь то Google, Bing или Яндекс, является то, что все они требуют, чтобы ваш веб-сайт и отдельные страницы имели хорошую скорость загрузки.

Все поисковые системы недавно сделали скорость страницы обязательным фактором ранжирования. Инструмент Google Page Speed ​​Tool — отличный способ узнать, насколько эффективно загружается страница вашего сайта Sitecore.

Содержимое HTTPS и смешанное содержимое

HTTPS стал фактором ранжирования в 2014 году для Google и в 2015/2016 для других поисковых систем.

Предполагается, что более 80% веб-сайтов во всех поисковых системах поддерживают протокол HTTPS. Вот почему важно проверять распространенные проблемы HTTPS в рамках ежемесячных аудитов, поскольку новые объекты и вновь созданный контент не всегда могут быть безопасными. Например, проблемы смешанного содержимого обычно возникают, когда защищенный контент (ресурсы и страницы HTTPS) смешивается с незащищенными страницами (ресурсы и страницы HTTP). Это ослабляет воспринимаемую безопасность.

Канонические проблемы и проблемы с hreflang

Канонический тег или rel = canonical сообщает поисковым системам, что конкретный URL-адрес является главной копией страницы.Другими словами, это предпочтительный URL для индексации.

Использование канонического тега предотвращает проблемы идентификации, с которыми сталкиваются сканеры, посещающие веб-страницу, и предотвращает индексацию дублированного контента. Он сообщает поисковым системам, какую версию URL вы хотите проиндексировать и таким образом отображать в поисковых системах.

Некоторые передовые практики:

• Канонические теги могут ссылаться на себя
• Убедитесь, что вы канонизируете свою домашнюю страницу.
• Проверьте динамические канонические теги (не пытайтесь написать скрипт для заполнения ваших канонических тегов, это может пойти не так и потенциально проиндексировать 100 неправильных страниц)
• Включите поле Canonical URL в редактор содержимого всех ваших страниц Sitecore

Если на вашем сайте Sitecore включено международное управление версиями, то применение атрибута hreflang оптимизирует ваше SEO.

Применение тега hreflang сообщает поисковым системам, какую версию контента показывать в зависимости от языка и региона посетителя. hreflang также предотвращает проблемы с дублированием контента. Имея идентификатор страны / языка в URL-адресе (например, страница www / yourdomain.com / en-gb / ) в сочетании с атрибутами hreflang для региональных / языковых вариантов, эта английская версия страницы будет отображаться в поисковой выдаче для пользователь в Великобритании.

Внутренние ссылки и «ссылочный сок»

Внутренние ссылки могут быть частью более сложной технической экосистемы, но также являются частью оптимизации контента.

Внутренние ссылки помогают поисковым системам лучше сканировать сайт. Думайте об этом как о строках, которые связывают все статьи и страницы друг с другом. Сканеры используют эти строки для поиска контента и его индексации. Чем больше строк связано со всеми частями сайта, тем лучше индексация. Это также называется «ссылочным весом».

Очень важно, чтобы вы включали релевантные ссылки на другие части веб-сайта на каждой странице или в каждой статье. Но постарайтесь не переусердствовать, поскольку контент должен хорошо (и естественно) читаться посетителям.

Статьи в блогах — лучшее место для подключения к другим частям вашего веб-сайта.

Чтобы лучше понять, как работают внутренние ссылки, просмотрите отчеты профилей ссылок в Google Search Console, Яндексе и Bing.

Увеличьте свой краулинговый бюджет

Бюджет сканирования — это количество страниц, которые поисковые системы просматривают за определенный период времени. Это не фактор ранжирования, но он помогает чаще приглашать роботов к вашему поиску.

Чтобы понять, как это работает, просмотрите разделы в своих веб-мастерах, в которых указано Статистика сканирования или Статус сканирования .

Если вы видите, что графики краулингового бюджета высоки, это означает, что ваш сайт нуждается в хорошей очистке с точки зрения SEO. Так что же такое хорошая чистка?

• Удалите дублирующийся контент, , чтобы не тратить краулинговый бюджет
• Ограничить индексацию страниц без значения SEO . Страницы со старым контентом, которые не работают должным образом или имеют больше проблем, которые посещают, или, что еще лучше, перенаправляют их
• Добавить параметры URL в Google Search Console .По умолчанию Google сканирует все страницы, представленные на веб-сайте, но иногда важно добавить ограничения на параметры URL, чтобы ограничить индексирование страниц, таких как страницы BackToResults или динамические страницы, обнаруженные с помощью расширенных фильтров на вашем сайте
  
• Исправить цепочки переадресации. Цепочка перенаправления — это цепочка перенаправлений, которая может быть собрана в течение периода перенаправления одних и тех же страниц на другие страницы, не зная, перенаправлялись ли они ранее. Избегайте этого, потому что поисковый робот постоянно индексирует те же самые страницы

SEO на странице

Оптимизация на странице — это практика оптимизации отдельных веб-страниц для повышения их рейтинга в поисковых системах и увеличения посещаемости.В отличие от технического SEO, оптимизация на странице в основном связана с контентом и связанным с ним HTML.

Ниже приведены некоторые методы, которые помогут вашему Sitecore на странице SEO:

Публикуйте высококачественный контент

Качество может иметь большое значение для многих маркетологов. Обычно это приводит к слишком большому количеству контента, слишком маленькому контенту, нерелевантному контенту или контенту, который поглощается ключевыми словами. Ниже приведены несколько советов по улучшению SEO на странице Sitecore:

• Исходное содержимое: Не копировать и не переписывать существующее содержимое и постарайтесь использовать на странице как можно больше исходных ресурсов
• Добавьте канонические теги : убедитесь, что у каждой статьи или сообщения есть канонический URL.
• Значение : публикация содержимого, предоставляющего значение
• Исследование : Напишите хорошо проработанный контент
• Деталь: Изготовление более длинных и подробных статей

Заголовки страниц и метаописания

Это основная форма SEO и фундаментальный фактор ранжирования.Вот несколько советов:

• Каждая страница должна иметь уникальный заголовок и соответствовать тому, что страница пытается сказать
  
• Добавьте ключевые слова в начало заголовков страниц
  
• Пишите короткие и описательные заголовки. Пользователи обычно нажимают на короткие точные заголовки
  
• Не всегда обязательно указывать название вашего домена
• Убедитесь, что в заголовке указано ограничение на количество символов в поисковой системе.

Мета-описание — это описание страницы в нескольких словах, которое часто можно увидеть прямо на странице результатов поисковой системы.Это возможность превратить холодного пользователя в читателя. Вот несколько способов оптимизации метаописаний:

• Найдите время, чтобы написать оригинальные метаописания и сохранить уникальность тегов
• Убедитесь, что вы также добавили в него целевые ключевые слова.
• Не превышайте ограничение по количеству слов в мета-описании, которое есть в поисковых системах.

Оптимизировать содержимое страницы

Оптимизация общего форматирования контента и самого контента является ключевым моментом, поскольку сканеры всех поисковых систем следуют текстовому формату HTML.Так что убедитесь:

• Все теги заголовков верны (h2, h3, h4 и т. Д.)
• Попробуйте включить ключевые слова в заголовки
• Используйте в тексте хорошо изученные ключевые слова с высокой посещаемостью.
• Используйте ключевые слова LSI (слова, которые имеют прямое или косвенное отношение к вашей теме)
• Сохраняйте изображения высокого качества
• Убедитесь, что изображения имеют замещающий текст и другие атрибуты, например «Название».
• Добавить разметку схемы или структурированные данные
• Добавьте Facebook Open Graph для лучшего обмена в социальных сетях
• Избегайте длинных абзацев.Сделайте статью удобочитаемой и разбейте на кусочки информацию

Оптимизировать URL

Это может быть самый простой из всех методов оптимизации на странице, но в большинстве статей это неверно из-за динамически генерируемых URL-адресов. По возможности избегайте этого и пишите простые, точные и релевантные структуры URL-адресов с соответствующими ключевыми словами.

Внутренняя ссылка

Как уже упоминалось, внутренние ссылки помогают поисковым системам лучше сканировать веб-сайт, поскольку они используют ссылки для перемещения по сайту.

Внешние ссылки

Наличие внешних ссылок из вашей статьи на другой надежный источник или публикацию повышает надежность статьи. Это положительный фактор SEO. Каждый раз, когда вы цитируете или используете контент с другого веб-сайта, упомяните источник и сделайте ссылку на статью.

SEO вне страницы

Off-page SEO — это оптимизация вашего собственного сайта. Он получает рейтинг SEO по сравнению с другими внешними веб-сайтами в виде обратных ссылок. Google недавно подтвердил, что обратные ссылки являются одним из трех наиболее важных факторов ранжирования.Обратные ссылки должны быть в верхней части списка для всех маркетологов.

Как получить обратные ссылки:

• Начать гостевой блог с авторитетными блогами и издателями
• Переверните обратные ссылки ваших конкурентов и внесите свой вклад в их источники обратных ссылок
• Упоминайте ключевых влиятельных лиц отрасли в своих сообщениях в блоге
• Публикуйте загружаемый контент и руководства со ссылками на ваш основной веб-сайт.
• Публикуйте статьи или контент в качестве приглашенных пользователей на сайтах пользователей и в социальных сетях
• Станьте лидером отрасли, публикуя контент других участников на своем сайте в обмен на публикацию вашего контента на их сайте

Оптимизация для Google похожа на оптимизацию для всех других поисковых систем, поскольку они являются наиболее сложной и доминирующей поисковой системой на рынке.Выполнение шагов, описанных в этой статье, улучшит SEO Sitecore для Google, Яндекс и Bing.

Наша команда по цифровому опыту помогла многим клиентам как начать работу с SEO на сайтах Sitecore, так и решить более сложные задачи SEO. Чтобы получить дополнительную информацию о том, как SEO-аудит может помочь вашему сайту, свяжитесь с нами.

Google Index Checker Online — Массовая проверка индексации страниц в Google, Bing, Yahoo или Яндексе

Об этом боте

Этот бот проверяет, проиндексирован ли набор URL-адресов Google, Bing, Yahoo и Яндекс.

Щелкните, чтобы просмотреть файл выходных данных демонстрации.

Бот, позволяющий быстро проверять индексацию сайта в нескольких поисковых системах: Google, Bing, Яндекс и Yahoo. Этот инструмент предоставляет специалистам по SEO, которые одновременно работают с несколькими веб-сайтами, удобный способ проверить, проиндексирован ли определенный веб-сайт в настоящее время, выделяя ресурсы, которые все еще требуют некоторой доработки с точки зрения SEO.

Видеоурок

Посмотрите, как я покажу инструмент в действии:

Как проверить индексацию в гугле?

Просто назначьте имя текущей задаче, введите все URL-адреса, которые вы хотите проверить, и выберите, хотите ли вы получать уведомления по электронной почте, Slack или Telegram.

Запустив бота и немного подождав, вы получите уведомление с результатами. Результаты содержат URL-адрес веб-сайта и таблицу, показывающую, проиндексирован ли веб-сайт в

.

• Google;
• Bing;
• Yahoo;
• Яндекс.

Бот вернет true, если документ найден при поиске, и false, если он неиндексирован.

Поиск и устранение неисправностей

При вводе данных и оценке результатов имейте в виду, что

https: // site.com

и

https://site.com/

— это два разных URL-адреса (обратите внимание на косую черту в конце), поэтому один из них может быть индексным, а другой — нет.

Экспорт данных

Просматривайте свои данные в Интернете или загрузите их в виде файла Excel, CSV или JSON.

Почему это полезно?

Google Indexation Checker позволяет специалистам по поисковой оптимизации быстро сканировать веб-сайты, над которыми они работают, выявляя те, которые не были проиндексированы определенными поисковыми системами.Это подчеркивает области, требующие оптимизации, что делает этого бота незаменимым для проведения SEO-аудита и поддержания ваших веб-сайтов в исправности и релевантности для SEO.

Вопросы? Предложения? Оставьте их в разделе комментариев ниже

Чтобы использовать этого бота, вам необходимо сначала зарегистрироваться или авторизоваться.

Как отправить URL-адрес или веб-сайт в поисковые системы

Если вы только что запустили новый веб-сайт на совершенно новом домене, вы не сразу увидите его рейтинг в Google.Пока Google и другие поисковые системы не узнают, что ваш сайт существует, вы даже не увидите его в индексе.

Для тех из вас, кто читает это руководство, потому что вы опубликовали новый веб-сайт и не можете понять, почему вы не можете его нигде найти, давайте быстро объясним, как работают поисковые системы.

Давайте обратимся к собственному руководству Google «Как работает поиск», чтобы помочь в этом …

Еще до начала поиска Google организует информацию о веб-страницах в нашем поисковом индексе. Индекс похож на библиотеку, за исключением того, что он содержит больше информации, чем во всех библиотеках мира вместе взятых.

Если вашего веб-сайта нет в индексе Google, его нельзя будет найти, когда пользователь выполнит поиск. Google необходимо знать, что ваш сайт существует, чтобы иметь возможность сканировать его и включать в свой индекс.

В этом руководстве вы узнаете, как разместить свой сайт в Google и других поисковых системах, а также узнаете другие способы его обнаружения.

Вот различные ресурсы, которые мы предлагаем в этом руководстве:

Хорошая новость заключается в том, что отправка вашего веб-сайта не является особым требованием для того, чтобы ваш веб-сайт появлялся в индексе Google, но для нового веб-сайта это часто самый быстрый способ.

Google просто необходимо знать, что ваш сайт существует. Оттуда он может сканировать сайт и индексировать его страницы.

Сканеры Google находят новые URL-адреса (и веб-сайты), переходя по ссылкам с других страниц и веб-сайтов. Пока на ваш сайт ссылаются откуда-то еще в Интернете, Google в конечном итоге найдет и проиндексирует ваш сайт, но вы можете ускорить это, отправив новый сайт вручную.

Когда дело доходит до нового URL-адреса (страницы или сообщения), который был опубликован на существующем веб-сайте, вам, конечно, не нужно проходить процесс его отправки вручную, но есть шаги, которые вы можете предпринять, чтобы ускорить просмотр страницы в индексе Google.

Вам не нужно вручную отправлять свой сайт или страницу в Google, если на них есть ссылки откуда-то еще в Интернете, но это может ускорить процесс поиска вашего контента поисковыми системами.

Нет установленного времени, которое требуется Google для индексации вашего веб-сайта или URL. Тем не менее, мы все можем быть уверены в том, что это намного быстрее, чем было раньше.

Исследование HubSpot показало, что без отправки нового URL-адреса в Google через карту сайта Google потребовалось в среднем 1375 минут для сканирования страницы (то есть 23 часа).Однако при отправке обновленной карты сайта в Google Search Console это сократилось до 14 минут.

Если вы оставите Google самостоятельно искать новый контент, это может привести к задержкам, когда ваша страница не будет проиндексирована, но если вы вручную проинформируете Google, это займет всего несколько минут.

С другой стороны, время, затрачиваемое на сканирование и индексирование совершенно нового домена, может значительно различаться в зависимости от того, существуют ли какие-либо внешние ссылки и как часто они сканируются.

По крайней мере, вам нужно убедиться, что вы отправили новый сайт в Google, и это для новой страницы может ускорить индексацию.

По общему мнению, да, вам следует отправить свой URL-адрес или новый веб-сайт в Google — хотя бы для того, чтобы быстрее увидеть его в индексе.

Это можно сделать разными способами, в зависимости от обстоятельств, и мы рассмотрим эти варианты ниже.

Прежде чем вы отправите свой URL в Google, имеет смысл выполнить быструю проверку, чтобы установить, проиндексирован ли он уже или нет.

Это можно сделать с помощью инструмента проверки URL консоли поиска Google .

(Если вы не настроили Google Search Console для своего сайта, вы можете узнать, как это сделать здесь.)

Используйте поле поиска «Проверить URL» в верхней части панели инструментов и введите URL, статус индекса которого вы хотите проверить.

После того, как данные были извлечены из индекса, вы либо увидите подтверждение того, что страница находится в Google:

, либо что страницы нет в Google:

. любые проблемы с покрытием с этим конкретным URL-адресом ниже.

Существует также быстрый и простой способ проверки без использования Search Console — используйте модификатор «site:» в поиске Google, например: site: example.com/url-of-the-page. Это покажет страницу и все дочерние элементы этой страницы. Я обсуждаю это более подробно в разделе «Как проверить, проиндексирован ли веб-сайт» этой статьи.

Проверка проблем с индексацией

с помощью SEMrush Site Audit

Когда дело доходит до отправки URL-адреса в Google, у вас есть несколько вариантов. Но во-первых, важно понимать, что не все из них фактически включают «отправку» вашего сайта в поисковую систему.

Вместо этого вам нужно думать об этих методах как об информировании Google о том, что ваша страница (или сайт) существует. Давайте рассмотрим эти варианты индексации вашего URL (мы рассмотрим отправку нового веб-сайта отдельно).

Есть большая вероятность, что вы только что использовали инструмент Inspect a URL, чтобы проверить, находится ли ваш URL в индексе Google. Возможно, самый быстрый способ включить ваш URL в индекс Google — это сделать это с помощью этого инструмента.

Независимо от того, есть ли URL-адрес в индексе Google, вы увидите ссылку «ЗАПРОС ИНДЕКСА» внизу поля.

Нажмите здесь, и ваша страница будет добавлена ​​в очередь для индексации.

Если возникнут проблемы, вы получите уведомление о них.

Вы сможете проверить статус индекса страницы, используя тот же инструмент, что мы показали ранее.

Раньше вы могли использовать инструмент Google « fetch as Google «, но он больше не поддерживается в новой версии Search Console.

Когда вы отправляете обновленную карту сайта в Search Console и включаете новые URL-адреса, вы информируете Google о внесении изменений и о том, что эти страницы следует сканировать.

Для справки, здесь мы говорим о карте сайта в формате XML, а не о карте сайта в формате HTML.

Если вы отправляете данные для существующего сайта и хотите, чтобы новые URL-адреса были проиндексированы как можно быстрее, вы, вероятно, уже отправляли карту сайта ранее.

Но как только вы добавите карту сайта, вы можете быть удивлены, обнаружив, что на самом деле вы не можете войти и «повторно отправить» в новую консоль поиска.

Как сказано в справке Google Search Console:

Google не проверяет карту сайта каждый раз при сканировании сайта; карта сайта проверяется только в первый раз, когда мы ее замечаем, а затем только тогда, когда вы отправляете нам эхо-запрос, чтобы сообщить нам, что она изменилась.Вы должны предупреждать Google о карте сайта только тогда, когда она новая или обновленная; не отправляйте и не проверяйте неизмененные карты сайта несколько раз.

— Справка Google Search Console

Хорошая новость заключается в том, что если вы используете такую ​​платформу, как WordPress, в сочетании с плагином SEO, ваша карта сайта будет автоматически обновляться и пинговать Google, когда вы публикуете новую страницу или сообщение.

Если вы не используете WordPress или другую CMS, где карта сайта автоматически проверяет связь с Google при обновлении, вы можете использовать функцию «ping», чтобы запросить это.

Отправьте HTTP-запрос GET следующим образом:

http://www.google.com/ping?sitemap=https://example.com/sitemap.xml

В качестве примечания, ваш XML ссылка на карту сайта должна быть указана в файле robots.txt вашего сайта.

Как мы упоминали ранее, Google на самом деле не нужно, чтобы вы отправляли URL-адрес для его индексации, его просто нужно проинформировать о его существовании. Сейчас самое время отметить, что один из основных способов поиска новых страниц Google — это ссылки.

Если вы добавите внутреннюю ссылку на другую страницу своего сайта, которая уже есть в индексе Google, это поможет обнаружить новый URL.

Конечно, вам следует добавлять ссылки только там, где это имеет смысл, на тематически релевантных страницах, но вы можете узнать больше о передовых методах создания внутренних ссылок в этом руководстве.

Подобно тому, как Google находит новый контент путем сканирования внутренних ссылок, то же самое касается входящих ссылок из внешних источников.

Конечно, получение ссылок со стороннего веб-сайта не так просто и не так быстро, как добавление внутренних ссылок, обновление карты сайта или проверка URL-адреса с помощью Search Console, но, учитывая, что ссылки являются основным фактором ранжирования, рекомендуется что вы обдумываете различные стратегии построения ссылок, которые вы могли бы использовать, чтобы заставить других людей ссылаться на вашу новую страницу.

Если вы впервые запускаете новый веб-сайт, вам, несомненно, будет интересно, как можно как можно быстрее включить его в индекс Google. Давайте посмотрим на ваши варианты.

Вы можете быстро проверить, проиндексирован ли веб-сайт Google, прямо в поисковой системе с помощью оператора поиска site :.

Выполните поиск: site: [Ваш домен]

например, site: yourdomain.com

Если ваш веб-сайт проиндексирован, вы увидите результаты, возвращаемые при использовании этого оператора поиска.

В качестве примера:

Заметили как количество возвращенных результатов, так и отображаемые проиндексированные URL? Если для домена не проиндексированы URL-адреса, вы увидите:

. Чаще всего вам нужно отправить свой веб-сайт в Google только при первом запуске сайта (поскольку Google не знает, что это существует) или когда вы перемещаете свой сайт на новый домен.

Если вы работаете с существующим сайтом, вам не нужно отправлять весь сайт, если он уже проиндексирован.

Однако есть случаи, когда это может потребоваться в результате ошибки; допустим, разработчик случайно добавил тег rel = «noindex» на сайт, и вы заметили, что сайт выпал из индекса.

Самый быстрый и эффективный способ представить веб-сайт в Google — это добавить карту сайта в формате XML в Google Search Console.

Вы можете сделать это, перейдя на вкладку Sitemap в Search Console.

Теперь вы увидите поле «Добавить новую карту сайта». Идите вперед и введите расширение карты сайта XML вашего сайта.

После того, как вы это сделаете, вы увидите список отправленных карт сайта и количество обнаруженных URL:

Важно помнить, что Google — не единственная поисковая система, и вы хотите отправить ее в другие популярные поисковые системы, такие как Bing, Yahoo, Yandex, Baido и DuckDuckGo.

Далее мы рассмотрим, как вы можете представить свой сайт или веб-сайт каждому из них.

Чтобы отправить свой сайт или URL-адрес в Bing, вам необходимо перейти в Bing Webmaster Tools.

Оказавшись там, вам сначала нужно добавить свой сайт, если вы еще этого не сделали. Хорошей новостью является то, что вы можете пропустить проверку и импортировать прямо из Google Search Console.

Чтобы отправить веб-сайт целиком, вы можете добавить карту сайта в формате XML, как вы это делали с Google.

Перейдите на вкладку карты сайта:

Затем вы увидите кнопку «Отправить карту сайта» в правом верхнем углу экрана, которая открывает всплывающее окно. Отсюда вы можете ввести URL-адрес своей карты сайта:

В отличие от Google, вы можете щелкнуть отправленную карту сайта и увидеть кнопку повторной отправки в правом верхнем углу страницы.

Если вы просто хотите отправить URL-адрес, вы можете сделать это с помощью инструмента отправки URL-адресов Bing, который вы найдете как часть меню слева.

Просто введите полный URL и нажмите «Отправить».

Если вы уже выполнили действия по отправке своего веб-сайта в Bing, значит, вы сделали все, что вам нужно сделать, чтобы отправить его в Yahoo. С 2010 года Bing поддерживает результаты поиска Yahoo, и способ отправки в поисковую систему — просто отправить в Bing.

Больше делать нечего.

Яндекс — ведущая поисковая система в России с долей рынка более 60%.

Не всем нужно отправлять свой сайт в Яндекс, но если вы обслуживаете клиентов в России, это имеет смысл.

Вот шаги, чтобы отправить свой URL или веб-сайт в Яндекс:

• Зайдите в Яндекс Инструменты для веб-мастеров.
• Если вы еще не добавили и не подтвердили свой сайт, вам необходимо сначала выполнить следующие действия.
• Чтобы отправить свой сайт, вы увидите ссылку «Файлы Sitemap» в меню слева. Щелкните здесь, и вы попадете на страницу, где вы можете добавить карту сайта так же, как и другие поисковые системы.

Если вы хотите проиндексировать новый URL, перейдите на вкладку «Переиндексировать страницы» в меню слева.

Здесь вы можете отправлять до 20 URL-адресов в день, которые имеют наивысший приоритет для индексации:

По состоянию на май 2020 года DuckDuckGo имеет ориентировочную долю рынка, равную 1.35% в США.

Это все еще намного меньше, чем у Bing — 6,5%, Yahoo — 3,6% и Google — 88%, но все большее число людей используют поисковую систему, ориентированную на конфиденциальность.

Хорошая новость в том, что вам не нужно отправлять свой URL-адрес или веб-сайт в DuckDuckGo. Поисковая система использует более 400 источников для своих результатов, включая результаты поиска Bing, а это означает, что если вы отправили их туда, вам не нужно больше ничего делать.

Мы уже рассмотрели, как индексировать ваш веб-сайт в Google и других поисковых системах, но важно быстро указать причины, по которым ваш веб-сайт может быть деиндексирован (вы были в поисковой системе, а теперь нет).

Но сначала вы должны понимать, что деиндексирование веб-сайтов случается редко. Вы, конечно же, не будете часто видеть это.

Когда это происходит, обычно причиной является одна из указанных ниже причин.

Возможно, наиболее частая причина, по которой сайты деиндексируются, заключается в том, что разработчик случайно оставил директиву noindex при обновлении кода.

Обычно это либо в форме метатега noindex, либо путем возврата заголовка noindex в HTTP-запросе.Вы можете узнать об этом подробнее здесь.

Если ваш сайт был деиндексирован из-за случайно добавленных директив noindex, вам необходимо удалить их и повторно отправить свой сайт.

Также известное как ручное наказание, иногда вы можете обнаружить, что ваш сайт был деиндексирован из-за того, что член группы по борьбе с веб-спамом принял решение удалить ваш сайт из результатов поиска в результате нарушения рекомендаций Google для веб-мастеров.

Вы можете узнать, повлияло ли на ваш сайт действие вручную в Google Search Console, и узнать больше о различных типах здесь.

Повторить; такое случается редко, и если сайт специально не нарушает рекомендации для веб-мастеров. Не о чем беспокоиться, если вы соблюдаете правила.

• Инструменты для веб-мастеров Bing: Бесплатная услуга, предоставляемая Bing, позволяющая веб-мастерам добавлять свои веб-сайты в поисковую систему и отслеживать их эффективность.
• Деиндексирован: Когда сайт, который ранее был в индексе поисковой системы, удаляется; либо случайно, либо после предпринятых действий.
• Google Search Console: Ранее известный как Google Webmaster Tools, этот бесплатный инструмент позволяет веб-мастерам видеть и управлять эффективностью своего сайта в поисковой системе.
• Индекс Google: Представьте, что индекс Google похож на индекс в библиотеке, но вместо книг в нем перечислены веб-страницы, доступные для поиска в Google.
• Входящие ссылки: Ссылки с других веб-сайтов на ваш собственный.
• Внутренние ссылки: Ссылки между двумя страницами на вашем собственном веб-сайте.
• Действие вручную: Действие (или наказание), которое кто-то в Google применяет к вашему веб-сайту, чтобы отрицательно повлиять на его производительность, когда считается, что сайт нарушает Руководство для веб-мастеров.
• Noindex: Добавлена ​​директива для запроса деиндексации сайта или веб-страницы.
• Re-Index Pages: Инструмент, доступный в Яндексе, для запроса приоритетной индексации страницы.
• Сайт: Оператор поиска: Простой способ вернуть список URL-адресов, доступных в Google для определенного домена.
• Инструмент проверки URL: Инструмент, доступный в Google Search Console, который можно использовать для проверки статуса индекса URL-адреса.
• Инструмент отправки URL: Инструмент Bing, позволяющий отправлять новые URL в индекс.
• XML-карта сайта: XML-карта сайта, отправляемая поисковой системе, сообщает ключевые страницы, которые должны быть проиндексированы.
• Яндекс. Инструменты для веб-мастеров: Альтернатива Google Search Console и Bing для веб-мастеров, но для российской поисковой системы Яндекс.

---

Отправка вашего сайта и страниц в Google и другие поисковые системы не должна быть сложной или занимать много времени, и если вы выполните несколько простых шагов, вы увидите, что ваши URL-адреса проиндексированы в кратчайшие сроки.

Проверка проблем индексации

с помощью SEMrush Site Audit

За пределами Google: вселенная поиска

Когда мы говорим о поиске, мы часто говорим о Google: на Google и свойства Google приходится львиная доля видимости при поиске. Есть причина, по которой мы говорим, что собираемся что-то «погуглить».Но Google — не единственная поисковая система, и, в зависимости от вашей аудитории, вы можете получить большую популярность, адаптируя свой SEO для остальной части поисковой вселенной.

Поисковые системы, поисковые системы повсюду

Несмотря на мировое господство Google, существуют районы, в которых другие поисковые системы имеют прочную — и постоянно растущую — точку опоры. Фактически, Википедия перечисляет около 20 или около того текущих общих поисковых систем, а также намного больше тематических поисковых систем..

Крупнейшими конкурентами Google являются Bing (и Yahoo!), Яндекс, Baidu и небольшая, но растущая DuckDuckGo:

Bing и Yahoo!

В 2009 году Bing и Yahoo! Подписали десятилетнее соглашение о совместном использовании поисковых технологий, что означает, что их ранжирование, индексы и использование поиска одинаковы и могут быть объединены в одну поисковую систему с двумя лицами. В оставшейся части статьи мы будем рассматривать их как единое целое.
Bing особенно интересен для SEO и маркетологов, но только потому, что ему принадлежит более трети доли рынка США, а также потому, что есть некоторые свидетельства того, что трафик Bing конвертируется лучше, чем трафик Google.

Оптимизация для Bing

Bing использует многие из тех же технологий и работает со многими из тех же сигналов ранжирования, что и Google. Однако есть отличия.

Некоторые сигналов ранжирования имеют большее значение в Bing, чем в Google:

• Возраст домена и расширение
• Социальные сигналы

Социальные сети играют важную роль в сегодняшних усилиях по высокому ранжированию в результатах поиска. Наиболее очевидная роль, которую он играет, — это влияние. Если вы являетесь влиятельным лицом в социальных сетях, ваши подписчики, как правило, широко делятся вашей информацией, что, в свою очередь, приводит к тому, что Bing видит эти положительные сигналы.Эти положительные сигналы могут повлиять на то, как ваш сайт будет занимать в долгосрочной перспективе органический рейтинг.

Внутреннее SEO для Bing также немного отличается от Google. Bing объясняет:

• Ожидается только один

  на странице.

• Внутренние ссылки используются для определения того, как контент связан.
• Ключевое слово / фразу, на которую вы нацеливаете, следует несколько раз использовать в содержании вместе с вариантами ключевого слова или фразы.
• Свежий контент, как в Google, — это преимущество.

Как и Google, Bing оценивает удобство для мобильных устройств . При определении удобства использования для мобильных устройств учитываются следующие особенности:

• Конфигурация окна просмотра
• Конфигурация масштабирования
• Ширина содержимого
• Читаемость текста
• Расстояние между ссылками и другим содержимым
• Важные ресурсы, заблокированные для Bingbot

Вы можете таргетинг на локальных поисков и с помощью геотаргетинга всего или части вашего сайта в Инструментах для веб-мастеров.Геотаргетинг в Bing явно указывается веб-мастером и может применяться к странице, каталогу, субдомену или ко всему домену.

Наконец, Bing также использует сущности для лучшего понимания контента и поддерживает множество сущностей с помощью разметки Schema.org :

Возможность сканирования для Bing

Как и Google, индекс Bing создается и обновляется в основном путем сканирования паутина. Это означает, что для правильного ранжирования в Bing веб-сайты должны быть доступны для сканирования.

Согласно документации Bing, следующие элементы облегчают сканирование:

Как и Google, вы также можете отправлять URL-адреса для индексации. Bing будет сканировать URL-адреса, которые он находит в картах сайта, но вы также можете массово отправлять URL-адреса через их инструмент индексирования и отправлять их непосредственно в индекс через их API.

Инструменты и технологии Bing

Инструменты

Технологии

Яндекс

Яндекс является российским эквивалентом Google.В дополнение к своей поисковой системе у него есть много других веб-ресурсов, аналогичных Google: электронная почта, фотографии, продукты … Яндекс может претендовать на более 50% доли поискового рынка в России, и он хорошо известен и используется во многих соседних странах. .

[Электронная книга] Техническое SEO для нетехнических мыслителей

Техническое SEO — одно из растущих направлений SEO сегодня. Он включает поиск решений для SEO, основанных на том, как и почему работают поисковые системы и веб-сайты. Эта электронная книга — все, чем вы всегда хотели поделиться со своими клиентами, друзьями и коллегами по маркетингу.

Рейтинг в Яндексе

Важно понимать, что Яндекс, как русскоязычная поисковая система, отдает приоритет географии России в локальном поиске и использует отдельные алгоритмы ранжирования для доменов .ru по сравнению с остальными доменами. Интернет.

По сравнению с Google процесс индексации Яндексом сильно отличается:

• Более медленный процесс индексации
• Страницы размером более 10 МБ не индексируются
• URL-адреса длиной более 1024 символов не индексируются
• Языковая фильтрация:
  • «Автоматическая» индексация для сайтов, содержащих страницы на русском, украинском и белорусском языках
  • Оценка содержания для сайтов на английском, немецком и французском языках
  • Другие языки не поддерживаются

Наконец, не все проиндексированные страницы могут отображаться в поиске.Фактически, коды статуса 3xx, 4xx и 5xx или перенаправления, нацеленные только на роботов, могут исключить страницу из результатов поиска, даже если она проиндексирована.

Чтобы узнать, какие из ваших страниц доступны, вы можете обратиться к разделу «Страницы в поиске» в инструментах для веб-мастеров.

Наиболее важными для Яндекса сигналами ранжирования являются следующие:

• Поведение пользователя: «поведение пользователя является ОГРОМНЫМ фактором ранжирования и играет гораздо большую роль, чем другие сигналы, такие как построение ссылок».
• Техническая оптимизация
• Полнота и уникальность контента (обратите внимание, что фильтр дублированного контента Яндекс более строгий, чем у Google.)
• Локализация (регион)
• Факторы коммерческого ранжирования, такие как подробная информация о компании, ценах, условиях обслуживания или отзывы
• Возраст домена и актуальность контента
• Использование ключевых слов, включая мета-теги ключевых слов и наличие ключевого слова в URL. Однако обновление алгоритма Палеха для длиннохвостых запросов также ввело нейронную сеть в анализ запросов Яндекса.

Если это начинает выглядеть так, как будто крупные, хорошо зарекомендовавшие себя сайты электронной коммерции получили преимущество, значит, вы не далеки от истины.

Сканируемость для Яндекса

Хотя веб-сайт необходимо сканировать, чтобы он был проиндексирован и ранжирован на Яндексе, ключевые слова играют более важную роль, чем внутренние ссылки. Следовательно, внутренняя структура сайта менее важна, чем для Google.

Веб-мастерам рекомендуется:

• Отправить карты сайта
• Использовать статический контент, так как сканер Яндекса не поддерживает Javascript

Бот Яндекса проверяет следующие элементы HTML:

• Мета-ключевые слова: используются для определения релевантности страницы
• Мета-описание: используется как описание во фрагментах (также можно использовать текст страницы)
• Мета-окно просмотра: указывает на совместимость с адаптивным дизайном
• Мета-тип содержимого: используется для определения типа и содержимого URL-адреса
• Мета-обновление: можно использовать для перенаправления страниц.Этот метатег будет перенаправлять посетителя через N секунд.
• Мета-роботы
• теги для определенного контента
• Link rel = nofollow
• Link rel = canonical. Это можно игнорировать, если канонический недоступен, если канонический находится в другом домене или субдомене или если предоставлено несколько канонических URL-адресов.

Оптимизация под Яндекс

Есть несколько аспектов, в которых Яндекс существенно отличается от Google.

Hreflang

Hreflang следует использовать для Яндекса в следующих случаях:

• Версии страницы «различаются только языком шаблона», хотя контент, такой как сообщения в блоге или комментарии на форуме, остается прежним.
• Страница версии на одном языке, но нацелены на разные страны или регионы.
• Страницы являются «полными и точными» переводами
• Страницы, которые перенаправляют автоматически по местоположению или языку, должны использовать hreflang по умолчанию x

Теги Hreflang работают только в или HTTP-ответ; карты сайта не поддерживаются.

Тематический индекс цитирования (TIC)

TIC Яндекса используется для непосредственного ранжирования сайтов; теперь он стал отражением качества, но не совсем коррелирует с рейтингом сайта. TIC — это оценка от 0 до 150 000, которая измеряет, насколько хорошо сайт ссылается на то, что повышает ценность для пользователя. Ценность определяется качественным содержанием и актуальностью тематики.

Геотаргетинг

Яндекс рекомендует веб-мастерам указывать регион, на который их веб-сайты нацелены, в инструментах для веб-мастеров.

Геозависимые и геонезависимые запросы обрабатываются по-разному, и результаты в результатах поиска не смешиваются. Это означает, что если ваш бизнес может получать прибыль от локального поиска, требуется геотаргетинг.

Для геотаргетинга страницы вам необходимо:

• Опубликовать название, адрес, почтовый индекс, номер телефона и код города вашей компании на своем веб-сайте.
• Публикуйте одинаковую информацию для всех региональных филиалов вашего бизнеса.
• Сделайте каждую страницу вашего сайта доступной для робота Яндекса независимо от IP-адреса робота.

Anti-linkspam

Яндекс вложил значительные средства в борьбу со ссылочным спамом, который они определяют как использование ссылок, созданных для воздействия на поисковые алгоритмы, которые могут быть куплены или проданы в попытке искусственно повысить авторитет сайта без улучшения качества сайт.

Алгоритм «Минусинск» обнаруживает ссылочный спам и может привести к серьезным штрафам.

Мобильный поиск

Мобильный поиск быстро растет в России.Критерии ранжирования Яндекса для мобильного поиска аналогичны критериям Google.

Однако важно разместить мобильную версию сайта на отдельном поддомене или отдельном домене:

Яндекс рассматривает основную версию и мобильную версию сайта как отдельные сайты и индексирует их отдельно друг от друга.
Чтобы помочь роботу правильно идентифицировать мобильную версию, укажите URL-адреса мобильных страниц на соответствующих страницах основного сайта. Например, вы можете использовать элемент.
[…] Если мобильная версия сайта находится в основном каталоге сайта, робот-индексатор Яндекса не сможет ее правильно проиндексировать. Рекомендуем создавать мобильную версию в отдельном домене или в поддомене основного сайта.

— Служба поддержки Яндекса

Инструменты и технологии Яндекса

Инструменты

Технологии

В Яндексе есть несколько операторов, которые можно использовать для создания более конкретных поисковых запросов:

• Проверьте, что индексируется для site с помощью оператора запроса url.В поисковой строке Яндекса введите url: оператор запроса, адрес сайта и *. Например: url: www.example.com *.
• Заголовок [ключевое слово] — поиск по заданному ключевому слову в теге заголовка, работает так же, как и оператор Google intitle :.
• Inurl = «keyword» — работает так же, как оператор Google inurl :.
• Mime = ”html / pdf / doc / ppt / xls / rtf / swf” — поиск файлов определенных типов, например: seo << mime = ”ppt” вернет результаты, которые являются файлами PowerPoint, связанными с SEO.

Baidu (百度)

Baidu — основная поисковая система Китая. Коммунистический режим Китая означает, что это подразумевает несколько важных моментов: во-первых, Google недоступен в Китае. Во-вторых, Baidu ограничен веб-сайтами на китайском языке. Наконец, действует государственная цензура.

Рейтинг в Baidu

Как и другие поисковые системы, индекс Baidu создается путем сканирования с помощью паука Baidu. Вместо простого перехода по ссылкам, URL-адреса, полученные с помощью инструмента отправки ссылок Baidu, имеют приоритет для сканирования.

Алгоритмы ранжирования Baidu не дискриминируют иностранные сайты. Однако они ранжируют только те сайты, которые могут соответствовать запросам на упрощенном китайском языке. Это означает, что содержание на китайском языке является обязательным.

Упрощенный сценарий и грамматика китайского языка могут быть препятствием для регионов, которые используют традиционный сценарий (Тайвань, Гонконг), а также регионов, которые используют другие китайские языки с упрощенным сценарием, хотя Baidu по-прежнему используется веб-сайтами и пользователями как в случаи.

Другие факторы ранжирования включают:

• Свежесть
• Плоская структура сайта (страницы, расположенные ближе к домашней странице, считаются более важными, а элементы, связанные с внутренними ссылками, такие как неработающие ссылки, перенаправления и текст привязки, могут иметь прямое влияние на рейтинг.Например, страницы-сироты часто не индексируются.)
• Мало поддоменов
• Нет Javascript (не поддерживается Baidu spider)
• Скорость страницы
• Качество контента
• Удобство для мобильных устройств
• Точное совпадение ключевых слов в заголовке

Наконец, как и в поисковой выдаче Google, продукты Baidu часто помещаются перед органическими результатами. Сюда входят объявления и страницы, принадлежащие Baidu.

Оптимизация для Baidu

Скорость страницы

Алгоритмы Baidu придают огромное значение скорости страницы до такой степени, что веб-сайты должны размещаться в Китае, чтобы быть конкурентоспособными.Хостинг в Китае чрезвычайно сложен для иностранных веб-сайтов (вам нужна лицензия поставщика интернет-контента, которая, в свою очередь, требует китайской бизнес-лицензии…), поэтому большинство зарубежных веб-сайтов должны полагаться на CDN.

Независимо от того, как вы размещаете свой веб-сайт, скорость загрузки страниц важна, и ограничения очевидны: первый экран страниц должен загружаться в течение 1,5 секунд.

Качество контента

До недавнего времени качество контента не имело особого значения; однако качество становится все более важным фактором.

Заголовки страниц чрезвычайно важны. Заголовки должны быть четкими, краткими (нерелевантные слова могут привести к штрафам) и содержать ключевые слова страницы (но за набивку налагаются штрафы).

Из-за местного, коммунистического контекста чрезвычайно важно проверять и подтверждать весь контент перед его публикацией.

Внутреннее SEO

Внутреннее SEO для Baidu рассматривает многие из тех же элементов, что и внутреннее SEO, для других поисковых систем, но уделяет приоритетное внимание другим аспектам.

Инструкции Baidu для веб-мастеров включают следующие правила на странице:

• Первый экран вашей страницы должен быть загружен в течение 1,5 секунд
• Контент должен использовать размер шрифта не менее 10pt
• Основной контент (основная часть (исключая панель навигации и любую рекламу) вашего веб-сайта должно занимать не менее 50% первого экрана.
• Для результатов мобильного поиска целевая страница должна быть адаптирована для мобильных устройств
• Правила для мобильных устройств и пользовательского интерфейса должны соблюдаться
• Сайт должен использовать HTTPS
• Страница должна включать следующие HTML-теги: