Как поисковые системы Яндекс и Google отслеживают местоположение пользователя
Пользователи всемирной паутины даже не задумываются о том, сколько раз в день они используют поисковые системы для решения различных задач и вопросов. Поисковые системы вошли в повседневную жизнь практически каждого человека и прочно поселились в ней. Известно, что один только Google обрабатывает около триллиона разнообразных пользовательских запросов в год.
Помимо всего прочего современные поисковые системы исследуют каждого своего пользователя и знают о его местоположении и передвижениях, методах передвижения практически все. Но зачем это им нужно?
- Зачем поисковым системам знать местоположение пользователей?
- Как Яндекс определяет местоположение пользователя?
- Как Google определяет местоположение пользователя?
- Как и зачем запрещать Яндексу отслеживать свое местоположение?
- Как и зачем запрещать Google отслеживать свое местоположение?
- Советы и выводы
Поисковые системы собирают данные о своих пользователях по самым разным причинам. Вот только некоторые из них:
- Продажа рекламы. Рекламодатели используют предоставленную поисковиками информацию, чтобы продать человеку именно тот товар, который он ищет;
- Анализ действий человека во всемирной паутине используется для улучшения сайтов. Это необходимо, чтобы размещать на сайтах действительно полезную и релевантную информацию;
- Чтобы предоставлять пользователям возможность быстрее находить нужные места для отдыха или по работе в городах, где они ни разу не бывали.
Google и Яндекс стремятся предоставить пользователям наиболее актуальную информацию и самые разнообразные сервисы. Поэтому информация о местоположениях человека, а также том, чем он пользуется и где бывает, помогает предоставлять ему оптимальные маршруты для автобусов или других транспортных средств, показывать сайты на нужном языке, указывать на находящиеся неподалеку кафе, развлекательные центры и т.д.
Внимание! По данным, которые хранятся на серверах поисковых систем нельзя установить личность пользователя, потому что они представлены в полностью обезличенном формате. Однако по запросу правоохранительных органов и с помощью определенных утилит, можно определить личность пользователя, который заходил на те или иные интернет-ресурсы.
В зависимости от тех сервисов, которые применяет конкретный пользователь, его устройства могут передавать в Яндекс ту или иную информацию. В основном Яндекс использует следующие методы определения местоположения:
- Определение по IP-адресу. В этом случае город, в котором находится устройство, которым пользуется человек, определяется по умолчанию;
- С помощью технологии LBS. Данная технология позволяет определить положение пользователя на местности более точно. Для этого используются точки доступа Wi-Fi. Включенный адаптер пользовательского устройства время от времени проверяет мощность вышек Wi-Fi. Если в районе, где находится человек, установлена одна из вышек, передающих информацию Яндексу, то местоположение будет определено с точностью до километра.
Кроме того технология LBS предполагает использование ячеек мобильной сети. Местоположение смартфона определяется по идентификатору ячейки сотовой сети, в радиусе которой находится мобильное устройство.
Google так же, как и Яндекс, для определения местоположения пользователя использует следующие методы:
- IP-адрес устройства, с которого человек заходит в интернет;
- Историю действий. Если система не может определить, где находится пользователь, а он ищет «недорогие рестораны во Владивостоке», то будет считаться, что данный пользователь находится именно во Владивостоке;
- Список сохраненных мест. Google-аккаунт сохраняет информацию о местах, которые пользователь посещает чаще всего. Чаще всего это означает, что именно в этом городе человек живет постоянно или находится длительное время;
- Геолокацию. На сегодняшний день для смартфонов, работающих на базе операционных систем Android и iOS доступна функция геолокации. Она позволяет считывать местоположение пользователя с помощью спутников GPS.
Но иногда пользователь не желает, чтобы поисковые системы знали о его местонахождении. Далее мы расскажем о том, как можно запретить отслеживание.
Чтобы поисковые системы не знали, где находится человек, если он чувствует себя некомфортно, когда за ним следят, можно отключить функцию отслеживания местонахождения. Иногда это нужно, чтобы отключить персонализацию рекламных объявлений, которые докучают своей назойливостью. Вот что нужно сделать:
- Войти в свой аккаунт в Яндексе.
- Выбрать вкладку «Местоположение».
- Снять галочку с пункта «Определять мой город автоматически».
- Если нужно удалить персонализированную рекламу, то открыть вкладку «Реклама».
- Убрать галочки со всех пунктов на этой странице.
Теперь останется только сохранить внесенные изменения и поисковая система Яндекс не сможет определять местонахождение пользователя.
Чтобы закрыть доступ к местонахождению пользователя в Google, нужно сделать следующее:
- Открыть аккаунт в браузере Google Chrome.
- Кликнуть по значку «Настройка и управление Google Chrome».
- Зайти в «Настройки» и выбрать вкладку «Конфиденциальность».
- Кликнуть по кнопке «Файлы Cookie…».
- Активировать опцию «Отправить запрет на отслеживание для исходящего трафика».
На Android-устройствах нужно будет отключить функцию «Геолокация», чтобы избавиться от слежки со стороны поисковых систем.
Подобные запреты можно установить в том случае, если пользователю не нравится большое количество персонализированной рекламы, или же он не хочет, чтобы кто-то знал, где именно он находится и чем занимается.
Несмотря на то, что будет отключена геолокация, поисковые системы смогут отслеживать пользователя по истории его действий в интернете. Поэтому полной анонимности во всемирной паутине нет, и не будет. Однако, такие компании как Яндекс и Google, уверяют, что не передают собранную информацию о своих пользователях в третьи руки.
Если человек хочет быть действительно анонимным, находясь во всемирной паутине, то лучше всего использовать VPN и заходить в сеть с IP-адреса из другой страны или пользоваться браузером Tor.
ЮВЮлия Ванюшкинаавтор
Как поисковые системы Яндекс и Google отслеживают местоположение пользователя
Пользователи всемирной паутины даже не задумываются о том, сколько раз в день они используют поисковые системы для решения различных задач и вопросов. Поисковые системы вошли в повседневную жизнь практически каждого человека и прочно поселились в ней. Известно, что один только Google обрабатывает около триллиона разнообразных пользовательских запросов в год.
Помимо всего прочего современные поисковые системы исследуют каждого своего пользователя и знают о его местоположении и передвижениях, методах передвижения практически все. Но зачем это им нужно?
- Зачем поисковым системам знать местоположение пользователей?
- Как Яндекс определяет местоположение пользователя?
- Как Google определяет местоположение пользователя?
- Как и зачем запрещать Яндексу отслеживать свое местоположение?
- Как и зачем запрещать Google отслеживать свое местоположение?
- Советы и выводы
Поисковые системы собирают данные о своих пользователях по самым разным причинам. Вот только некоторые из них:
- Продажа рекламы. Рекламодатели используют предоставленную поисковиками информацию, чтобы продать человеку именно тот товар, который он ищет;
- Анализ действий человека во всемирной паутине используется для улучшения сайтов. Это необходимо, чтобы размещать на сайтах действительно полезную и релевантную информацию;
- Чтобы предоставлять пользователям возможность быстрее находить нужные места для отдыха или по работе в городах, где они ни разу не бывали.
Google и Яндекс стремятся предоставить пользователям наиболее актуальную информацию и самые разнообразные сервисы. Поэтому информация о местоположениях человека, а также том, чем он пользуется и где бывает, помогает предоставлять ему оптимальные маршруты для автобусов или других транспортных средств, показывать сайты на нужном языке, указывать на находящиеся неподалеку кафе, развлекательные центры и т.д.
Внимание! По данным, которые хранятся на серверах поисковых систем нельзя установить личность пользователя, потому что они представлены в полностью обезличенном формате. Однако по запросу правоохранительных органов и с помощью определенных утилит, можно определить личность пользователя, который заходил на те или иные интернет-ресурсы.
В зависимости от тех сервисов, которые применяет конкретный пользователь, его устройства могут передавать в Яндекс ту или иную информацию. В основном Яндекс использует следующие методы определения местоположения:
- Определение по IP-адресу. В этом случае город, в котором находится устройство, которым пользуется человек, определяется по умолчанию;
- С помощью технологии LBS. Данная технология позволяет определить положение пользователя на местности более точно. Для этого используются точки доступа Wi-Fi. Включенный адаптер пользовательского устройства время от времени проверяет мощность вышек Wi-Fi. Если в районе, где находится человек, установлена одна из вышек, передающих информацию Яндексу, то местоположение будет определено с точностью до километра.
Кроме того технология LBS предполагает использование ячеек мобильной сети. Местоположение смартфона определяется по идентификатору ячейки сотовой сети, в радиусе которой находится мобильное устройство.
Google так же, как и Яндекс, для определения местоположения пользователя использует следующие методы:
- IP-адрес устройства, с которого человек заходит в интернет;
- Историю действий. Если система не может определить, где находится пользователь, а он ищет «недорогие рестораны во Владивостоке», то будет считаться, что данный пользователь находится именно во Владивостоке;
- Список сохраненных мест. Google-аккаунт сохраняет информацию о местах, которые пользователь посещает чаще всего. Чаще всего это означает, что именно в этом городе человек живет постоянно или находится длительное время;
- Геолокацию. На сегодняшний день для смартфонов, работающих на базе операционных систем Android и iOS доступна функция геолокации. Она позволяет считывать местоположение пользователя с помощью спутников GPS.
Но иногда пользователь не желает, чтобы поисковые системы знали о его местонахождении. Далее мы расскажем о том, как можно запретить отслеживание.
Чтобы поисковые системы не знали, где находится человек, если он чувствует себя некомфортно, когда за ним следят, можно отключить функцию отслеживания местонахождения. Иногда это нужно, чтобы отключить персонализацию рекламных объявлений, которые докучают своей назойливостью. Вот что нужно сделать:
- Войти в свой аккаунт в Яндексе.
- Выбрать вкладку «Местоположение».
- Снять галочку с пункта «Определять мой город автоматически».
- Если нужно удалить персонализированную рекламу, то открыть вкладку «Реклама».
- Убрать галочки со всех пунктов на этой странице.
Теперь останется только сохранить внесенные изменения и поисковая система Яндекс не сможет определять местонахождение пользователя.
Чтобы закрыть доступ к местонахождению пользователя в Google, нужно сделать следующее:
- Открыть аккаунт в браузере Google Chrome.
- Кликнуть по значку «Настройка и управление Google Chrome».
- Зайти в «Настройки» и выбрать вкладку «Конфиденциальность».
- Кликнуть по кнопке «Файлы Cookie…».
- Активировать опцию «Отправить запрет на отслеживание для исходящего трафика».
На Android-устройствах нужно будет отключить функцию «Геолокация», чтобы избавиться от слежки со стороны поисковых систем.
Подобные запреты можно установить в том случае, если пользователю не нравится большое количество персонализированной рекламы, или же он не хочет, чтобы кто-то знал, где именно он находится и чем занимается.
Несмотря на то, что будет отключена геолокация, поисковые системы смогут отслеживать пользователя по истории его действий в интернете. Поэтому полной анонимности во всемирной паутине нет, и не будет. Однако, такие компании как Яндекс и Google, уверяют, что не передают собранную информацию о своих пользователях в третьи руки.
Если человек хочет быть действительно анонимным, находясь во всемирной паутине, то лучше всего использовать VPN и заходить в сеть с IP-адреса из другой страны или пользоваться браузером Tor.
ЮВЮлия Ванюшкинаавтор
App Store: Яндекс Метро
Описание
Спланируйте поездку на метро в России, Беларуси, Украине и Узбекистане и узнайте, сколько времени займет ваша поездка, включая любые пересадки. Приложение показывает оптимальный маршрут, показывает, какой вагон метро будет наиболее удобным, показывает на карте выходы из станций и предупреждает о перекрытиях.
• Карта метро со всем, что вам нужно знать
На карте вы можете увидеть, какие станции закрыты на ремонт, и какие станции лучше всего подходят для проезда к вокзалам и аэропортам. Увеличьте карту, чтобы увидеть больше деталей, таких как различные типы развязок между станциями.
• Оптимальные маршруты и вагоны метро для удобных пересадок
Яндекс Метро показывает, сколько времени займет дорога, сколько пересадок и закрыты ли станции на ремонт. Он показывает, какой вагон метро выбрать, чтобы ускорить поездку и не тратить время на пересадку.
Информация о выходах из метро
• Информация о выходах из метро
Смотрите подробную информацию о каждой станции: сколько выходов и на какие улицы они ведут, время работы и предупреждения о любых закрытиях. Вызовите такси, которое заберет вас от выбранного вами выхода из метро прямо в приложении.
• Оплатите проезд в приложении
Воспользуйтесь приложением для пополнения карт московского общественного транспорта «Тройка» и «Стрелка».
• Специальные возможности
Приложение поддерживает VoiceOver, поэтому его могут использовать люди с нарушениями зрения.
• Более 20 схем
– Россия: Волгоград, Екатеринбург, Казань, Москва, Нижний Новгород, Новосибирск, Самара, Санкт-Петербург.
— Австрия: Вена.
— Азербайджан: Баку.
— Армения: Ереван.
— Беларусь: Минск.
— Венгрия: Будапешт.
— Греция: Афины.
— Грузия: Тбилиси.
— Италия: Милан, Рим.
— Казахстан: г. Алматы.
— Польша: Варшава.
— Португалия: Лиссабон.
— США: Сан-Франциско.
— Турция: Стамбул, Измир, Адана, Бурса, Анкара.
— Узбекистан: Ташкент.
— Украина: Днепр, Киев, Харьков.
— Швеция: Стокгольм.
— Финляндия: Хельсинки.
— Чехия: Прага.
Версия 3.7.5
Были внесены некоторые изменения, чтобы вам было удобнее. Наслаждаться!
Рейтинги и обзоры
6 оценок
Метробус
Он не может показать мне мое местоположение в сети
Дело в том, что в метро местоположение может определяться неточно, так как нет доступа к GPS под землей. Это нормальное поведение приложения. Добавлена функция определения местоположения, чтобы на поверхности можно было понять, какая станция метро находится ближе всего к вам.
Разработчик, Intertech Services AG, указал, что политика конфиденциальности приложения может включать обработку данных, как описано ниже. Для получения дополнительной информации см. политику конфиденциальности разработчика.
Данные, используемые для отслеживания вас
Следующие данные могут использоваться для отслеживания вас в приложениях и на веб-сайтах, принадлежащих другим компаниям:
- Расположение
- Идентификаторы
Данные, связанные с вами
Следующие данные могут быть собраны и связаны с вашей личностью:
- Расположение
- История поиска
- Идентификаторы
- Данные об использовании
- Диагностика
- Другие данные
Данные, не связанные с вами
Могут быть собраны следующие данные, но они не связаны с вашей личностью:
Методы обеспечения конфиденциальности могут различаться в зависимости, например, от используемых вами функций или вашего возраста.
Узнать большеИнформация
- Поставщик
- Интертек Сервисиз АГ
- Размер
- 124,1 МБ
- Категория
- Навигация
- Возрастной рейтинг
- 4+
- Авторское право
- © 2010–2022 ООО «Яндекс»
- Цена
- Бесплатно
- Сайт разработчика
- Тех. поддержка
- Политика конфиденциальности
Еще от этого разработчика
Вам также может понравиться
Яндекс Поиск — Вики | Golden
О компании
Технология поиска обеспечивает результаты локального поиска в более чем 1400 городах. В поиске Яндекса также реализован «параллельный» поиск, который представляет на одной странице результаты как основного веб-индекса, так и специализированных информационных ресурсов, включая новости, покупки, блоги, изображения и видео.
Поиск Яндекса реагирует на запросы в режиме реального времени, распознавая, когда запросу требуется самая свежая информация, например, последние новости или самая последняя запись в Твиттере по определенной теме. Он также содержит некоторые дополнительные функции: Wizard Answer, который предоставляет дополнительную информацию (например, спортивные результаты), проверку орфографии, автозаполнение, которое предлагает запросы по мере их ввода, антивирус, который обнаруживает вредоносные программы на веб-страницах и так далее.
В мае 2010 года Яндекс запустил Yandex.com, платформу для бета-тестирования и улучшения поиска на других языках.
Доступ к продукту поиска возможен с персональных компьютеров, мобильных телефонов, планшетов и других цифровых устройств. Помимо веб-поиска, Яндекс предоставляет широкий спектр специализированных поисковых сервисов.
В 2009 году Яндекс запустил MatrixNet — новый метод машинного обучения, значительно повышающий релевантность результатов поиска. Это позволяет поисковой системе Яндекса учитывать очень большое количество факторов при принятии решения о релевантности результатов поиска.
Еще одна технология, Spectrum, была запущена в 2010 году. Она позволяет выводить неявные запросы и возвращать соответствующие результаты поиска. Система автоматически анализирует поисковые запросы пользователей и идентифицирует такие объекты, как личные имена, фильмы или автомобили. Доли результатов поиска, отвечающих различным намерениям пользователей, основаны на спросе пользователей на эти результаты.
С первым выпуском 21 июля 2017 года веб-браузер Brave включает Яндекс в качестве одной из поисковых систем по умолчанию.
Функциональность
Базовая информация
Поисковая система состоит из трех основных компонентов:
- Агент — это поисковый робот. Обходит сеть, скачивает и анализирует документы. Если при анализе сайта обнаруживается новая ссылка, она попадает в список веб-адресов робота. Поисковые роботы бывают следующих видов: пауки – загружают сайты наподобие браузеров пользователя; Crawler — находите новые, еще неизвестные ссылки на основе анализа уже известных документов; индексаторы — анализируют обнаруженные веб-страницы и добавляют данные в индекс. Многие сдутые документы разбиваются на непересекающиеся части и очищаются от разметки.
- Index — это база данных, составленная роботами-индексаторами поисковых систем. Документы ищутся в индексе.
- Поисковик. Поисковый запрос от пользователя отправляется на наименее загруженный сервер после анализа загрузки поисковой системы. Для предоставления такой возможности серверы Яндекса кластеризуются. Затем запрос пользователя обрабатывается программой «Метапоиск». Метапоиск анализирует запрос в режиме реального времени: определяет географическое положение пользователя, проводит лингвистический анализ и т. д. Также программа определяет, относится ли запрос к категории самых популярных или недавно определенных. Выдача таких запросов в течение некоторого времени хранится в памяти (кеше) метапоиска, и в случае совпадения выводятся ранее сохраненные результаты. Если запрос редкий и совпадений в кеше нет, система перенаправляет его в программу Базовый поиск. Он анализирует системный индекс, который также разбит на разные серверы-дубликаты (это ускоряет процедуру). Затем полученная информация снова попадает в метапоиск, данные ранжируются и показываются пользователю в окончательном виде.
Индексирование
В основном Яндекс индексирует следующие типы файлов: html, pdf, rtf, doc, xls, ppt, docx, odt, odp, ods, odg, xlsx, pptx.
Поисковая система также способна индексировать текст внутри объектов Shockwave Flash (если текст не размещен на самом изображении), если эти элементы передаются как отдельная страница, имеющая MIME-тип application/x-shockwave-flash , и файлы с расширением . swf
В Яндексе есть 2 сканирующих робота — «основной» и «быстрый». Первый отвечает за весь Интернет, второй индексирует сайты с часто меняющейся и обновляющейся информацией (новостные сайты и информационные агентства). В 2010 году «быстрый» робот получил новую технологию под названием «Апельсин», разработанную совместно калифорнийским и московским подразделениями Яндекса.
С 2009 года Яндекс поддерживает технологию Sitemaps.
Журналы сервера
В логах сервера роботы Яндекса представлены следующим образом:
Mozilla/5.0 (совместимый; YandexBot/3.0) — основной индексирующий робот.
Mozilla/5.0 (совместимый; YandexBot/3.0; MirrorDetector) — робот, определяющий зеркала сайтов. Если сайтов с одинаковым контентом несколько, в результатах поиска будет показан только один.
Mozilla/5.0 (совместимый; YandexImages/3. 0) — индексатор Яндекс. Картинки.
Mozilla/5.0 (совместимый; ЯндексВидео/3.0) — индексатор Яндекс. Видео.
Mozilla/5.0 (совместимый; YandexMedia/3.0) — индексатор мультимедийных данных.
Mozilla/5.0 (совместимый; ЯндексБлоги/0.99; робот) — поисковый робот, индексирующий комментарии к публикациям.
Mozilla/5.0 (совместимый; YandexAddurl/2.0) — поисковый робот, который индексирует страницы через форму «Добавить URL».
Mozilla/5.0 (совместимый; ЯндексДирект/2.0; Дятел) — проверка Яндекс. Прямой.
Mozilla/5.0 (совместимо; ЯндексМетрика/2.0) — индексатор Яндекс. Метрики.
Mozilla/5.0 (совместимый; ЯндексКаталог/3.0; Дятел) — проверка Яндекс. Каталог.
Mozilla/5.0 (совместимый; ЯндексНовости/3.0) — индексатор Яндекс. Новости.
Mozilla/5.0 (совместимый; ЯндексАнтивирус/2.0) — антивирусный робот Яндекса.
Язык запроса
Для настройки используются следующие операторы:
«» — точная цитата
| — вводить между словами, если нужно найти одно из них
* — вводить между словами, если пропущено какое-то слово
сайт: — поиск на конкретном сайте
дата: — поиск документов по дате, например date: 2007
+ — ввод перед словом, которое должно быть в документе
Результаты поиска
Яндекс, автоматически, наряду с исходной «точной формой» запроса, ищет различные его вариации и формулировки.
Поиск Яндекса учитывает морфологию русского языка, поэтому вне зависимости от формы слова в поисковом запросе поиск будет производиться по всем словоформам. Если морфологический анализ нежелателен, перед словом можно поставить восклицательный знак (!) — поиск в этом случае покажет только конкретную форму слова. Кроме того, поисковый запрос практически не учитывает так называемые стоп-слова, то есть предлоги, знаки препинания, местоимения и т. д., в силу их широкого распространения
Как правило, сокращения автоматически раскрываются, орфография исправляется. Он также ищет синонимы (мобильный — сотовый). Расширение исходного пользовательского запроса зависит от контекста. Расширения не происходит при наборе узкоспециализированных терминов, наименований собственных имен компаний (например, ОАО «Бегемот» — ОАО «Бегемот»), добавления слова «цена», в точных кавычках (это запросы, выделенные машинописным цитаты).
Результаты поиска для каждого пользователя формируются индивидуально с учетом его местонахождения, языка запроса, интересов и предпочтений по результатам предыдущих и текущих поисковых сессий. Однако ключевым фактором ранжирования результатов поиска является их релевантность поисковому запросу. Релевантность определяется на основе формулы ранжирования, которая постоянно обновляется на основе алгоритмов машинного обучения.
Поиск осуществляется на русском, английском, французском, немецком, украинском, белорусском, татарском, казахском языках.
Результаты поиска можно сортировать по релевантности и дате (кнопки под результатами поиска).
Страница с результатами поиска состоит из 10 ссылок с короткими аннотациями – «фрагментами». В сниппеты входит текстовый комментарий, ссылка, адрес, популярные разделы сайта, страницы в социальных сетях и т. д. В качестве альтернативы сниппетам Яндекс в 2014 году представил новый интерфейс под названием «Острова».
Яндекс реализует механизм «параллельных поисков», когда вместе с веб-поиском выполняется поиск по сервисам Яндекса, таким как Каталог, Новости, Маркет, Энциклопедии, Картинки и т. д. В результате в ответ на запрос пользователя , система показывает не только текстовую информацию, но и ссылки на видеофайлы, картинки, словарные статьи и т.д.
Отличительной чертой поисковой системы также является технология «поиска по намерениям», что означает поиск решения проблемы. Элементами поиска намерений являются — диалоговые подсказки при неоднозначном запросе, автоматический перевод текста, информация о характеристиках запрашиваемого автомобиля и т. д. Например, при запросе «Борис Гребенщиков — Золотой город» система покажет форму для онлайн-запроса. слушая музыку с сервиса Яндекс Музыка, по запросу «ул. Королева 12» будет показан фрагмент карты с отмеченным на ней объектом.
Защита от спама и вирусов
В 2013 году Яндекс считался самой безопасной поисковой системой того времени и третьей по безопасности среди всех веб-ресурсов. К 2016 году Яндекс опустился на третье место, а первое место занял Google.
Проверка веб-страниц и предупреждение пользователей появились на Яндексе в 2009 году: с тех пор на странице результатов поиска рядом с опасным сайтом есть пометка «Этот сайт может угрожать безопасности вашего компьютера». Для обнаружения угроз используются сразу две технологии. Первый был куплен у американского антивируса Sophos и основан на сигнатурном подходе: это означает, что при доступе к веб-странице антивирусная система также обращается к базе данных уже известных вирусов и вредоносных программ. Такой подход быстр, но практически бессилен против новых вирусов, еще не попавших в базу. Поэтому Яндекс наряду с сигнатурой использует и собственный антивирусный комплекс, основанный на анализе поведенческого фактора. Программа Яндекса при доступе к сайту проверяет, не запрашивал ли последний дополнительные файлы у браузера, не перенаправлял ли его на посторонний ресурс и т.д. Таким образом, при получении информации о том, что сайт начинает выполнять те или иные действия (каскадные таблицы стилей, модули JavaScript запускаются и завершают работу программы) без разрешения пользователя, помещается в «черный список» и в базу сигнатур вирусов. Информация о заражении сайта появляется в результатах поиска, а через сервис Яндекс.Вебмастер владелец сайта получает уведомление. После первой проверки Яндекс делает вторую, и если информация о заражении подтвердится во второй раз, проверки будут проводиться чаще, пока угроза не будет устранена. Общее количество зараженных сайтов в базе данных Яндекса не превышает 1%.
Каждый день в 2013 году Яндекс проверяет 23 миллиона веб-страниц (при этом выявляя 4300 опасных сайтов) и показывает пользователям 8 миллионов предупреждений. Ежемесячно проверяется около миллиарда сайтов.
Позиция в поиске
Долгое время ключевым фактором ранжирования для Яндекса было количество сторонних ссылок на тот или иной сайт. Каждой странице в Интернете был присвоен уникальный индекс цитирования, аналогичный индексу авторов научных статей: чем больше ссылок, тем лучше. Аналогичный механизм реализован в Яндексе и в PageRank от Google. В целях предотвращения накрутки Яндекс использует многофакторный анализ, в котором количество сторонних ссылок влияет только на 70 из 800 факторов. Сегодня гораздо большую роль играет наполнение сайта и наличие или отсутствие там ключевых слов, легкость чтения текста, название домена, его история и наличие мультимедийного контента.
5 декабря 2013 г. Яндекс заявил о полном отказе от учета ссылочного фактора в дальнейшем.
Поисковые подсказки
Когда пользователь вводит запрос в строке поиска, поисковая система предлагает подсказки в виде раскрывающегося списка. Подсказки появляются еще до появления результатов поиска и позволяют уточнить запрос, исправить макет или опечатку или сразу перейти на искомый сайт. Для каждого пользователя формируются подсказки, в том числе по истории его поисковых запросов (сервис «Мои находки»). В 2012 году появились так называемые «Умные поисковые подсказки», которые моментально выдают информацию об основных константах (длина экватора, скорость света и так далее), пробках и имеют встроенный калькулятор. Кроме того, был интегрирован переводчик в «Подсказки» (запрос «любовь по-французски» моментально выдает амур, привязанность), расписание и результаты футбольных матчей, курсы валют, прогнозы погоды и прочее. Вы можете узнать точное время, спросив «сколько сейчас времени». В 2011 году Подсказки в поиске Яндекса стали полностью локальными для 83 регионов России.
Помимо собственно поиска, в поисковые системы Яндекса встроены Подсказки. Словари», «Яндекс. Маркет», «Яндекс. Карты» и другие сервисы Яндекса.
Функция подсказки является следствием развития технологии поиска по намерениям и впервые появилась на Яндекс.Баре в августе 2007 г., а в октябре 2008 г. была введена на главную страницу поисковой системы Доступный как в десктопной, так и в мобильной версии сайта, Яндекс показывает своим пользователям более миллиарда поисковых подсказок в сутки
Яндекс Достижения
По словам медиаэксперта Михаила Гуревича, Яндекс — это «национальное достояние», «стратегический продукт».
Этот факт признали и в Государственной Думе РФ, где в мае 2012 года появился законопроект, в котором Яндекс и ВКонтакте признаются стратегическими предприятиями национальными трансляторами информации. В 2009 году президент России Дмитрий Медведев инициировал покупку «золотой акции» Яндекса Сбербанком, чтобы не допустить попадания важной общероссийской компании в иностранные руки.
В 2012 году Яндекс обогнал Первый канал по дневной аудитории, что вывело Яндекс в лидеры отечественного медиарынка. В 2013 году Яндекс подтвердил этот статус, обогнав Первого по выручке.
В 2008 году Яндекс был девятой поисковой системой в мире, в 2009 году — седьмой, а в 2013 году — четвертой.
Одной из составляющих этой ситуации является наличие в России достаточного количества математически подкованных специалистов с научным чутьем.
К 2002 году слово «Яндекс» стало настолько нарицательным, что, когда компания Аркадия Воложа потребовала вернуть домен yandex.com, купленный третьими лицами, ответчик заявил, что слово «Яндекс» уже стало синонимом поиска и стало нарицательным. слово в России.
С конца 2012 года поисковая система Яндекс опережает Google по количеству пользователей браузера Google Chrome в России.
Хронология
В 2008 году Яндекс впервые начал открыто анонсировать изменения в алгоритме поиска и начал называть изменения названиями городов России. Название «города» каждого последующего алгоритма начинается с буквы, на которую заканчивалось название предыдущего.
Алгоритм ранжирования снова изменился.
С мая 2006 года в результатах поиска отображаются значки сайтов.
В начале декабря рядом с каждой ссылкой в результатах поиска появился пункт «Сохраненная копия», нажав на который, пользователь переходит на полную копию страницы в специальной архивной базе («кеш Яндекса»)
Летом был запущен так называемый «быстрый» поисковый робот, работающий параллельно с реальными страницами, предназначенными для индексации. База «быстрого робота» обновляется каждые 1,5–2 часа.
Алгоритм ранжирования улучшен для повышения точности поиска.
Расширены возможности поиска с помощью Яндекс. Словари» и «Яндекс. Lingvo». Поисковик научился понимать запросы типа «Что [что-то] по-испански» и автоматически их переводить.
Появилась возможность ограничивать результаты поиска по регионам.
Изменился алгоритм ранжирования.
Яндекс начал индексация документов в форматах .swf (Flash).xls и .ppt.
В конце года было опубликовано исследование «Некоторые аспекты полнотекстового поиска и ранжирования в Яндексе» (авторы Илья Сегалович, Михаил Маслов), которое выявило некоторые детали ранжирования в поисковике.
Запущено индексирование документов .rtf и .pdf. Результаты поиска стали выдаваться в том числе и в формате XML.
Количество ежедневных запросов к поисковой системе Яндекс превысило 2 миллиона
В 2001 году Яндекс обогнал по посещаемости другую российскую поисковую систему Рамблер и стал ведущей поисковой системой Рунета. Яндекс стал понимать запросы на естественном языке, заданные в вопросительной форме. Система научилась распознавать опечатки и предлагать их исправить. Дизайн изменился.
6 июня 2000 года была представлена вторая версия поисковой системы. Был введен механизм параллельного поиска, и наряду с выдачей предлагалась информация из крупных источников. Пользователи смогли ограничить результаты поиска выбранной темой. Появилась рубрика «Популярные находки» — слова, уточняющие поиск.
В декабре 2000 г. объем проиндексированной информации достиг 355,22 ГБ.
Название системы — Яндекс, — придумали совместно Аркадий Волож и Илья Сегалович.
Слово расшифровывается как еще один индексатор (или как «я («я» в русском языке) и индексатор)». По интерпретации Артемия Лебедева, название поисковика созвучно Яндексу, где ян означает мужское начало.
Поисковая система yandex.ru была анонсирована компанией CompTek 23 сентября 1997 года на выставке Softool, хотя некоторые разработки в области поиска (индексация Библии, поиск документов на CD-ROM, поиск по сайту) велись компанией компания еще раньше.