Текст книги "Яндекс для всех"

Автор книги: М. Абрамзон

сообщить о нарушении

Текущая страница: 6 (всего у книги 37 страниц) [доступный отрывок для чтения: 16 страниц]

1.5.1. Простой поиск

Начинающие пользователи обычно используют самый простой вариант поиска – поиск «в лоб», при котором в поисковой строке набирается исходное выражение или слово и запускается процесс. Как мы уже видели при разборе языка запросов, в этом случае поиск ведется по принципу вхождения в анализируемые документы как всего выражения, так и отдельных его частей. Попробуем и мы провести такой поиск.

В качестве примера попробуем найти архитектурный проект жилого дома. Поиск будем вести по всем разделам. Впишем поисковое выражение в поле формы запроса, не используя дополнительных параметров. Если вы привыкли работать с клавиатурой, то вместо того, чтобы щелкнуть в форме поиска указателем мыши на кнопке Найти, можно на клавиатуре нажать на клавишу . Несколько секунд (скорость в первую очередь зависит от скорости вашего соединения с Интернетом) – и откроется страница результатов. На этой странице есть тексты, поясняющие результаты поиска, и ссылки, дающие возможность сортировать найденное или уточнять запрос (рис. 1.7).

В случаях, когда поиск ведется по всем разделам, Яндекс будет искать не только документы и сайты, но и новости, товары, картинки, словарные статьи и иную информацию, соответствующую запросу. Если в «параллельных» базах что-то будет найдено, Яндекс покажет информацию среди результатов поиска. Вверху или внизу страницы будут результаты поиска по новостям, словарям, картам, афише, погоде, а в правой колонке – информация, полученная о товарах и картинках. В правой колонке также публикуются объявления службы Яндекс. Директ, в которых в качестве ключевых слов используются слова поискового запроса. Но если таких объявлений Яндекс не отыщет, вместо них будет присутствовать приглашение о размещении объявления по вашему запросу.

Добиться отсутствия результатов довольно сложно, разве что задавать в поиске заведомо несуществующие слова. Как правило, что-то в ответ на свой запрос вы получите. А вместе с результатом и дополнительную информацию.

Пролог

Прежде чем просматривать результат поиска, обратите внимание на строки, предваряющие его. Здесь размещена очень интересная и полезная информация. В первой строке – количество найденных страниц и сайтов, содержащих ключевые слова. Чем точнее поставлен вопрос, тем меньше будут эти значения, тем больше вероятность найти требуемое.

Пример

Результат поиска: страниц – 95 865, сайтов – не менее 1 885.

Следующая строка показывает статистику Индекса, а если точнее – сколько раз ключевые слова встречаются в проиндексированных документах. Чем чаще слово употребляется в текстах, тем больше будет это значение.

Пример

Статистика слов: архитектурный – 15 063 257, проект – 497 340 239, жилого – 59 541 623, дома – 787 144 580.

Обратите внимание, что если слова запроса были взяты в кавычки, например, при поиске цитаты, то в строке Статистика словвсе слова будут приведены с предшествующим знаком! определяющим обязательность включения слова в поиск.

И, наконец, в последней строке приводятся статистические данные по количеству запросов, в которых было использовано каждое из ваших ключевых слов.

Пример

Запросов за месяц: архитектурный – 33 779, проект – 273 903, жилого – 26 366, дома – 1 062 700.

А что бывает, когда вы ошиблись в написании слова? Мы уже говорили, что Яндекс использует при обработке запроса морфологический анализ. В результате он способен определить, что вы написали слово с ошибкой и предложить свой вариант. Например, если в нашем примере вместо слова проект мы напишем прокт, Яндекс предложит нам корректный вариант, снабдив его предположением, не опечатка ли это. Впрочем, не всегда следует пользоваться этими подсказками. В некоторых случаях некорректное написание слова было выполнено специально. К примеру, всем известно слово «агентство», но не все пишут его правильно. Очень часто это слово пишут так: агенство (по информации Яндекса, в его Индексе это слово с ошибкой встречается 7 783 366 раз, а количество запросов за месяц составило 152 952.) Если вести поиск по правильному написанию, то документы, где слово написано с ошибкой, в результаты поиска не попадут.

Есть и другие случаи, когда Яндекс воспринимает правильно написанное слово иначе, предлагая другой вариант. По всей видимости, критерием "правильно-неправильно" в данном случае служит частота употребления слова. Поэтому редко встречающиеся слова, похожие на часто употребительные, могут быть восприняты как написанные с ошибкой.

Но, конечно, далеко не всегда Яндекс может правильно определить, какое слово было задумано посетителем.

Пример

Посетитель написал слово колеки, вместо того, чтобы написать калеки. Яндекс, подумав, решил, что должно было быть написано слово колени. С точки зрения Яндекса предложенное им слово находится ближе к исходному, чем первоначально задуманное посетителем.

В том случае, если на ваш запрос ничего не было найдено, Яндекс предложит вам повторить поиск. К примеру, если поисковое выражение стояло в кавычках, будет предложено выполнить аналогичный поиск, но кавычки убрать.

Орфографическая проверка

Предположение о том, что слово в строке поиска набрано неверно, строится не на пустом месте. Определить корректность написания слов помогает орфографический словарь либо статистика написания слова, полученная в результате индексирования интернет-страниц. Однако в наши дни новые слова, названия компаний, фамилии людей появляются не по одному каждый день, и уследить за ними одному Яндексу было бы проблематично. Создать словарь, в который были бы занесены все слова русского языка, и, самое главное, поддерживать его в актуальном состоянии, не сможет ни одна команда, как бы подготовлена и обеспечена она ни была. Зачастую слова приходят из других языков, совершенно не соответствуют правилам русского языка, нечитаемые и непроизносимые. При появлении таких слов в запросах Яндекс ранее предлагал их исправить, предполагая, что человек допустил опечатку.

В 2005 году был запущен новый алгоритм, участвующий в разборе и анализе таких ситуаций. Его цель – создание словаря исправлений. Запросы пользователей собираются и анализируются, обрабатывается статистика. Если оказывается, что по какому-то слову есть много вариантов исправлений, то из кластера выбирается похожее слово из числа наиболее распространенных в Интернете. Таким образом, появляется база пар «плохих» и «хороших» слов – слов с ошибками и исправленных, и каждое слово в запросе пользователя теперь проверяется по такому «народному» словарю. Набранная статистика позволяет отбирать наиболее употребляемые варианты написания слов, за счет чего и происходит поддержка орфографического словаря.

Транслитерация

Слова могут быть написаны с ошибкой, которую вы можете не заметить. Например, если в слове встречаются символы русского и английского алфавита, близкие по начертанию. Например, в слове «передача» первая буква "а" была взята из английского алфавита. Яндекс «с удовольствием» принял запрос, заменил некорректную букву на русскую "а" и в результатах поиска представил документы, содержащие корректное написание слова «передача». Самое интересное все же в том, что в этом же списке результатов могут присутствовать и документы, в которых ключевое слово написано именно так, как в вашем запросе. Аналогичным образом конвертируются слова, содержащие хотя бы одну русскую букву.

Конвертируются следующие буквы (полужирным выделены английские): e– е – ё, a– а, В– В (только прописные), c– с, g– д (только строчные), k– к, n– п (только строчные), o– о, p– р, u– и (только строчные), x– х, y– у.

Иначе обстоит дело, если слово набрано на транслите. Яндекс правильно преобразует его в слово на русском языке, например, слово "peredacha" будет представлено как "передача". При этом поиск в документах ведется по исходному слову, а русский вариант предлагается в качестве возможного в преобразовании с транслита. Если предположение Яндекса верно, щелкнув на слове передача, вы откроете страницу с результатами поиска по этому ключевому слову.

Не конвертируются слова, в которых есть хотя бы одна цифра. Например, в слове "переgача1" буква "g" не будет заменена на букву "д". Не конвертируются и слова, состоящие из одной буквы, например, предлог "c". И цифра "0" буквой "О" не заменяется. Она подпадает под предыдущее условие, что слова с цифрой не подлежат транслитерации. Обратите внимание на то, что транслитерация идет только в одном направлении – с латинского (английского) на русский. Но не обратно. И напомню, что надо делать, чтобы избежать конвертирования слова, если вам требуется поиск с точным его написанием. Для этого достаточно в поле запроса записать ключевое слово с предшествующим ему восклицательным знаком, например, так:!переgача.

Все, о чем было сказано ранее, в Яндексе называется прологом. Тем, что еще не является собственно результатом. И лишь после пролога выводится та часть, которая нам нужна более всего – результаты поиска.

Результаты поиска

Сколько бы ни было найдено документов, информация по каждому из них формируется на основе единых правил и включает одни и те же информационные блоки. Это – заголовок документа, его описание, фрагмент и статус. В свою очередь каждый из этих блоков может состоять из нескольких элементов.

Заголовок документа

Каждый результат имеет свой порядковый номер. Он служит только для удобства ориентирования на странице и иной функциональности не несет.

А вот следующая информация в заголовке результата уже имеет ценность. Это – название документа, в котором были найдены слова, входящие в запрос. Для веб-страниц название берется из тега