Информационная система «Yandex поиск»

ВВЕДЕНИЕ 3
1 ОБРАБОТКА ЗАПРОСА И АРХИТЕКТУРА ОТВЕТА НА ВОПРОС 4
1.1 Архитектура ответа на вопрос 4
1.2 Определение языка 5
1.3 Морфология 6
1.4 Расширение запроса 7
1.5 Выделение объектов 7
1.6 Работа над ошибками 8
2 РЕЗУЛЬТАТЫ ПОИСКА 9
2.1 Формирование результатов поиска 9
2.2 Оформление результатов поиска 10
2.3 Дополнительная информация в сниппете 11
БИБЛИОГРАФИЧЕСКИЙ СПИСОК 13

Весь текст будет доступен после покупки

В наши дни наша жизнь настолько разнообразна и разносторонняя и мы не можем ее себе представить без интернета, при условии, даже если мы используем его на самом минимальном уровне (т.е. не уделяем время социальным сетям, не используем в работе и т.д.), наверняка каждый из нас задавался каким либо вопросом, на который можно получить ответ только после того, как пересмотришь ряд источников из той или иной области и проинспектируешь не один том энциклопедий. Но эта задача упрощается с появлением интернета, как проявлением научно-технического прогресса в нашей жизни. И одним из самых используемых ресурсов интернета являются поисковые системы, которые способствуют нахождению самой разнообразной информации, в соответствии с заданными запросами.
Темой моего реферата является информационная система "Яндекс" поиск, принадлежащая российской компании ООО "Яндекс", предоставляющая наравне с услугой поиска ряд других сервисов и услуг. В реферате рассматриваются принципы поисковой системы и процедура проведения поиска по запросам пользователей "Яндекса".

Весь текст будет доступен после покупки

1 ОБРАБОТКА ЗАПРОСА И АРХИТЕКТУРА ОТВЕТА НА ВОПРОС
1.1 Архитектура ответа на вопрос
Каждый день пользователи задают Яндексу десятки миллионов запросов, и поисковая система должна не только точно отвечать, но и быстро обрабатывать весь этот поток. Для этого Яндекс использует заранее подготовленные данные - индекс. Безусловно, поиск с помощью индекса ускоряет процесс ответа пользователю, как, например, предметный указатель в книге помогает быстрее найти нужное слово. Но размеры самого "предметного указателя" в поиске - огромны. Чтобы обрабатывать такие объемы данных и делать это быстро, Яндекс использует тысячи серверов. Сервера объединены в кластеры и даже в кластеры кластеров.
Все пользовательские запросы сначала попадают в компьютерную систему "метапоиск". Метапоиск обрабатывает каждый запрос в реальном времени - выясняет все необходимые данные про запрос (из какого региона он был задан, к какому классу относится и т.п.), проводит лингвистическую обработку. Затем метапоиск проверяет, формировались ли в последнее время результаты поиска для этого запроса. Результаты поиска по часто задаваемым запросам некоторое время хранятся в памяти метапоиска, а не формируются каждый раз заново. И если вновь пришедший запрос оказался популярным, метапоиск покажет пользователю заранее сохраненные результаты.
Если же ответа в памяти нет, то метапоиск передаёт запрос на сервера другой компьютерной системы - "базового поиска". На базовом поиске хранится слепок интернета, по которому ищет Яндекс, - поисковая база. Она разбита на части, которые хранятся на разных серверах - искать ответ одновременно по нескольким частям базы данных быстрее, чем по всей базе целиком. Кроме того, у каждого сервера есть несколько копий. Это позволяет распределять нагрузку и не терять данные - если один из серверов не сможет своевременно ответить, информация всё равно найдется на дублирующих серверах. Из тысяч серверов базового поиска метапоиск выбирает наименее загруженные - таким образом, чтобы вместе они содержали целую поисковую базу.
Каждый из серверов отдаёт список документов, в которых есть слова из запроса, обратно в метапоиск. Там они объединяются, ранжируются с помощью технологии Матрикснет и попадают на страницу результатов поиска.
Благодаря такой организации поиск Яндекса может отвечать пользователю за доли секунды.
1.2 Определение языка
Каждый раз, когда пользователь вводит запрос в поисковую строку Яндекса, поисковая система проводит лингвистический анализ этого запроса. Система определяет язык, на котором пишет пользователь и исправляет ошибки, проводит морфологический разбор каждого слова, находит синонимы и устойчивые сочетания и, в конечном счете, решает, документы с какими словами нужно искать. И всё - за доли секунды.
Анализ запроса начинается с определения языка. Например, слово "дружина" в русском языке означает "военная рать". Чтобы понять, что имеет в виду пользователь, нужно выяснить, на каком языке он общается с поисковой системой. Для этого Яндекс смотрит, какой алфавит использует человек, какие в запросе есть характерные слова и сочетания букв.
Так, по запросу [дружина князя игоря] Яндекс будет искать информацию о войске, а по запросу [дружина князя iгоря] - еще и о жене полководца, княгине Ольге.
Кроме того, при определении языка поисковая система обращает внимание на регион пользователя и язык интерфейса. Например, если человек задает вопрос из Казахстана и использует интерфейс на казахском языке, это будет дополнительным фактором, чтобы посчитать запрос казахским языком. Яндекс умеет работать с кириллическими запросами на русском, белорусском, казахском, татарском и башкирском языках.

Весь текст будет доступен после покупки

1 Информационная система «Yandex поиск»:
https://company.yandex.ru/technologies/search/
2 Информационная система «Yandex поиск»:
http://www.seoded.ru/istoriya/internet-history/istoriya-yandeksa.html
3 Информационная система «Yandex поиск»:
http://company.yandex.ru/technologies/crypta/
4 Информационная система «Yandex поиск»:
https://academy.yandex.ru/events/kit/

Весь текст будет доступен после покупки