Сравнительный анализ дискрипторных и классификационных поисковых систем

ВВЕДЕНИЕ

Характерным явлением современности является использование новых информационных технологий во всех сферах человеческой жизни. Определяющим фактором в развитии общества становится информация. Все больше и больше углубляется в Интернет информационное пространство, в котором существует человек. Появление глобальной информационной компьютерной сети предоставило возможность быстро получать информацию из любой точки мира. Наиболее распространенными средствами информационных компьютерных технологий являются поисковые системы. Первые поисковые системы появились в Интернете более двадцати лет назад. В то время они только реализовали функцию поиска ссылок на вновь созданные страницы. На начальном этапе появления Интернета количество пользователей сети было ограничено, а количество информации относительно невелико. Сегодня поисковые системы стали многофункциональным сервисом со своими услугами. Они позволяют пользователям искать в Интернете широкий спектр информации, поэтому они пользуются огромным спросом.
Проблема поиска и сбора информации - одна из важных проблем поисковых систем. В двадцатом веке, с рождением возраста информационных технологий, проблема поиска информации приобрела новый облик. Теперь дело не в том, что информации недостаточно, и поэтому ее трудно найти, но тот факт, что сейчас в обществе есть избыток предложения, каждый день объем данных растет с геометрической прогрессией и, следовательно, нахождение ответа на интересующий вопрос может быть довольно сложной задачей.
Проблема поиска информации значительно усложняется при использовании виртуальных источников. Здесь используется технология онлайн-каталогов, после чего пользователь имеет право искать в каталогах двух или более библиотек одновременно. Это делает задачу еще более трудной для себя, но, с другой стороны, увеличивает вероятность решения.
Другими словами, сегодня невозможно представить жизнь без Интернета, с его помощью мы приобретаем различные товары, общаемся, работаем, проводим свободное время. Интернет имеет безграничные возможности, а роль надежных гидов в виртуальных лабиринтах играют поисковые системы. Что может быть проще, чем написать запрос в окне поиска, и огромное количество результатов для введенных слов или фраз будет найдено поисковой системой. Даже сравнительно недавно об этом невозможно было мечтать.
Таким образом, актуальность проблемы определяется противоречием между крупными информационными потоками, циркулирующими в современном мире, и невозможностью быстро и качественно найти его в Интернете.
Целью данной курсовой работы является сравнительный анализ дескрипторных и классификационных поисковых систем.
Для достижения поставленной цели необходимо решить следующие задачи:
- определить основные задачи, решаемые поисковыми системами
- изучить принципы работы классификационных и дескрипторных поисковых систем
- ознакомиться с критериями эффективности и оценки качества поисковых систем
- провести сравнительный анализ дескрипторных и классификационных поисковых систем.
Объектом исследования являются поисковые системы. Предметом исследования являются принципы работы дескрипторные и классификационные поисковые системы.
 

ГЛАВА 1. ОБЗОР ПОИСКОВЫХ СИСТЕМ СЕТИ ИНТЕРНЕТ

1.1. Основные задачи поисковых систем

Поисковая система представляет собой программно-аппаратный комплекс, который предназначен для выполнения функции поиска в Интернете и отвечает на запрос пользователя, который обычно указывается как любая текстовая фраза (точнее, поисковый запрос), выдача справочного списка источников информации, которые сортируются по релевантности.
Основной задачей каждой поисковой системы является предоставление людям именно такой информации, которая им нужна. Но приучить пользователей создавать «правильные» запросы к поисковым машинам, то есть строить фразы таким образом, чтобы они соответствовали принципам работы поисковых систем, практически невозможно.
Именно поэтому специалисты-разработчики поисковых систем делают такие принципы и алгоритмы своей работы, что позволит пользователям находить интересующую их информацию. Это означает, что система должна «думать» так же, как думает человек при поиске необходимого информацию в Интернете.
Основные характеристики поиска:
Полнота.
Полнота является одной из основных характеристик поиска, это отношение количества найденных по запросу информационных документов к их общему количеству в Интернете, связанным с этим запросом. Например, в сети есть 100 страниц фразы «как выбрать авто», и только 60 из общего числа были выбраны для одного и того же запроса, в этом случае полнота поиска будет 0,6. Понятно, что чем больше сам поиск, тем более вероятно, что пользователь найдет именно тот документ, который ему нужен, конечно, если он вообще существует.
Точность.
Еще одной основной функцией поисковой системы является точность. Он определяет степень, в которой пользователь ищет страницы, найденные в Интернете. Например, если ключевая фраза «как выбрать автомобиль» содержит сотни документов, половина из которых содержит эту фразу, а в других просто такие слова доступны (как правильно выбрать автомобильное радио и установить его в автомобиле) ), то точность поиска равна 50/100 = 0,5.
Чем точнее поиск, тем скорее пользователь найдет нужную ему информацию, тем менее разнообразный «мусор» будет найден среди результатов, тем меньше найденных документов не будет соответствовать значению запроса.
Актуальность.
Это важный компонент поиска, который характеризует время, прошедшее с момента публикации информации в Интернете, прежде чем вводить его в базу данных индекса поисковой системы.
Например, на следующий день после появления информации о выпуске нового iPad многие пользователи обратились к поиску с соответствующими типами запросов. В большинстве случаев информация об этой новости уже доступна в поиске, хотя с момента ее создания очень мало. Это связано с наличием большой поисковой системы «быстрая база», которая обновляется несколько раз в день.
Скорость поиска.
Такая функция, как скорость поиска, тесно связана с так называемым «сопротивлением нагрузкам». Каждую секунду, чтобы искать огромное количество людей, такая перегрузка требует значительного сокращения времени для обработки одного запроса. Здесь интересы как поисковой системы, так и пользователя полностью совпадают: посетитель хочет получить результаты как можно быстрее, и поисковая система должна быстро выполнить свой запрос, чтобы не замедлять обработку последующих Запросы.
Видимость.
Визуальное представление результатов является важным элементом удобства поиска. Для различных запросов поисковая система находит тысячи, а в некоторых случаях и миллионы разных документов. Из-за неопределенности компиляции ключевых фраз для поиска или его неточности даже самые первые результаты запроса не всегда содержат только необходимую информацию.
Это означает, что человеку часто приходится выполнять свой собственный поиск среди предоставленных результатов. Различные компоненты страниц доставки ПС помогают вам перемещаться в результатах поиска.
Основными компонентами поисковой системы являются поисковый робот, индексатор, поисковая система.
Как правило, системы работают поэтапно. Во-первых, искатель получает контент, тогда индексатор генерирует индекс, который доступен для поиска, и, наконец, поисковая система предоставляет функции для поиска индексированных данных. Чтобы обновить поисковую систему, этот цикл индексирования повторяется.
Поисковые системы работают, сохраняя информацию о многих веб-страницах, которые они получают с HTML-страниц. Обходчик - это программа, которая автоматически проходит через все найденные на странице ссылки и выделяет их. Обходчик, основываясь на ссылках или на основе заранее определенного списка адресов, ищет новые документы, еще не известные поисковой системе. Владелец сайта может исключать определенные страницы с помощью robots.txt, которые могут использоваться для предотвращения индексирования файлов, страниц или каталогов сайта.
Поисковая система анализирует содержимое каждой страницы для дальнейшей индексации. Слова можно извлечь из заголовков, текста