Лекция 1 Введение в предмет. Что такое разработка новых продуктов и почему это так важно?

Поисковые системы
Цель поисковой системы - найти в коллекции документы, которые являются наиболее релевантными по отношению к произвольным информационным потребностям, сообщаемых системе при помощи однократных, инициированных пользователем запросов.
Группу документов, по которой осуществляется поиск, назовем коллекцией (collection). Ее также иногда называют корпусом (corpus) или массивом текстов (body of texts).
Информационная потребность (information need) — это тема, о которой пользователь хочет знать больше.
Запрос – это то, что пользователь вводит в компьютер, пытаясь выразить свою информационную потребность.
Документ называется релевантным (relevant), если, с точки зрения пользователя, он содержит ценную информацию, удовлетворяющую его информационную потребность.
При информационном поиске в Intrnet важны две составляющие— полнота (ничего не потеряно) и точность (не найдено ничего лишнего).
Точность (precision). Какая доля результатов является релевантной по отношению к информационной потребности?
Полнота (recall). Какая доля релевантных документов из коллекции возвращена поисковой системой?
Допустим в коллекции имеются N релевантных документов. Фактически в результате поиска получены M релевантных документов.
В этом случае полнота поиска равна отношению
По используемым поисковым технологиям поисковые системы можно разбить на 4 категории:
1. Тематические каталоги;
2. Специализированные каталоги (онлайновые справочники);
3. Поисковые машины (полнотекстовый поиск);
4. Средства метапоиска.
Тематические каталоги предусматривают обработку документов и отнесение их к одной из нескольких категорий, перечень которых заранее задан. Фактически это индексирование на основе классификации.
Индексирование проводится вручную с помощью специалистов, просматривающих популярные веб-узлы и составляющих краткое описание документов-резюме (ключевые слова, аннотация, реферат).