Информационные услуги

1.

www.eastview.com

2. ИСТ ВЬЮ ПАБЛИКЕЙШНС

Полнотекстовый поиск
Язык запросов
Примеры сложных запросов
Понятие релевантности
Обработка результатов поиска
publications
www.eastview.com

3. Полнотекстовый поиск

П.П. – особый вид поиска, при
котором поиск необходимых
документов производится по
всем текстам документов.
П.П. позволяет находить
документы, не имеющие
тематического или временного
соответствия, основываясь
только на словах,
присутствующих в документах.
publications
www.eastview.com

4. Полнотекстовый поиск

Поисковое выражение (запрос) –
это слово или группа слов,
связанных логическими
операторами,
удовлетворяющая грамматике
поискового языка запроса
publications
www.eastview.com

5. Подход к полнотекстовому поиску

Поисковое выражение =
Предмет поиска + Предметная область
Примеры:
Пушкин И (письма ИЛИ переписка)
пожар И редакция
ураган И Дубна
publications
www.eastview.com

6. Подход к полнотекстовому поиску

Предмет поиска:
Тема >> Событие >> Документ
Результаты поиска
Множество
документов
Искомые
документы
publications
www.eastview.com

7. ИСТ ВЬЮ ПАБЛИКЕЙШНС

Язык запросов
publications
www.eastview.com

8. Язык запросов

Язык запросов – свод
грамматических и логических правил
для формирования корректного
поискового выражения
Требования к языку запросов:
• Поддержка базовых типов запросов
• Использование негласных стандартов в
синтаксисе
• Поиск по всем словоформам (за
исключением фразового запроса)
• Нечувствительность к регистру
publications
www.eastview.com

9. Язык запросов

Базовые типы запросов:
логические запросы
фразовые запросы
регулярные выражения (шаблоны)
запрос на близость
запрос по полям
запрос на неточное совпадение
publications
www.eastview.com

10. Язык запросов

Понятие морфологии слова и поиск
по всем словоформам:
Слово белка (маленький пушистый зверек) имеет
следующую морфологическую группу: бе'лка, бе'лки,
бе'лки, бе'лок, бе'лке, бе'лкам, бе'лку бе'лок, бе'лкой,
бе'лкою, бе'лками, бе'лке, бе'лках
Слово белок (органическое соединение): бело'к, белки',
белка', белко'в, белку', белка'м, бело'к, белки',
белко'м, белка'ми, белке', белка'х
Например на словах белка, белку происходит их
пересечение. Поэтому запросу белка будет
соответствовать и слово белков !!!
publications
www.eastview.com

11. Язык запросов

Понятие морфологии слова и
поиск по всем словоформам:
Запросу белка будут удовлетворять документы
со словами: белкой, белкою, белки, белками,
белок, белком …
Запросу жил будут удовлетворять документы
со словами: жить, живет, жила, жилами, жилою …
Запросу ребенок будут удовлетворять
документы со словами: ребенка, ребенку, дети,
детьми, детей …
publications
www.eastview.com

12. Поисковый интерфейс

Виды поиска
• Форма простого поиска - предназначена
для ввода одиночного поискового
выражения
• Форма расширенного поиска позволяет формировать поисковые
выражения для полей: АВТОР,
НАЗВАНИЕ, ВСЯ СТАТЬЯ
publications
www.eastview.com

13. Поисковый механизм баз данных

14. Проведение простого поиска

15. Результат простого поиска. Статьи

16. Проведение расширенного поиска

Поля

17. Результат расширенного поиска.

18. Логические операторы

• Логический оператор И
Связывает слова запроса.
Результат поиска - только документы,
содержащие все слова запроса.
Пример запроса:
Путин(А) И Дума(В)
А
А
И
В
В
publications
www.eastview.com

19. Логические операторы

• Логический оператор ИЛИ
Связывает слова запроса.
Результат поиска – документы, содержащие
хотя бы одно из слов запроса.
Пример запроса:
Путин(А) ИЛИ Дума(В)
А
А
И
В
В
publications
www.eastview.com

20. Логические операторы

• Логический оператор НЕ
Связывает слова запроса.
Результат поиска – документы, содержащие
одно (А) но не другое (В) из слов запроса.
Пример запроса:
Путин(А) НЕ Дума(В)
А
А
И
В
В
publications
www.eastview.com

21. Логические запросы

• Логические запросы
Операторы: И, ИЛИ, НЕ
* Поиск по базе «Общественные и гуманитарные
издания»
Культура И Испанский
2180
Культура И (Испанский ИЛИ Испания)
5012
Культура НЕ Язык И (Испанский ИЛИ Испания) 1142
Проблема:
• Слова в тексте могут быть расположены
далеко друг от друга
publications
www.eastview.com

22. Культура И Испанский

23. Агрегация запросов

Комбинация логических запросов:
(дерево или осина) и
(промышленность или производство)
Будут найдены документы:
1) …в спичечном производстве осину очень
часто называют "спичечным" деревом…
2) …обработка древесины и производство
изделий из дерева…
3) …дерево-обрабатывающей
промышленности…
publications
www.eastview.com

24. Агрегация запросов

Приоритетность логических операторов:
слово1 и слово2 или слово3
=(равносильно) =
(слово1 и слово2) или слово3
Примеры:
• естествознание и культура или
культурология
• Спартак и восстание не война
• Палестина не Израиль не Арафат
publications
www.eastview.com

25. Специальные символы

• Оператор шаблона слов
-
*
сложные слова
редкие фамилии/имена
географические названия
если пользователь неуверен в правильности
написания ключевого слова
Например:
Испан* - все слова с корнем испан - Испания, испанка …
Мон*зация - монетаризация, монетизация …
Шевар*адзе - Шеварднадзе
publications
www.eastview.com

26. Специальные символы

• Оператор шаблона слов ?
- используется, когда неизвестно какой
символ стоит в конкретной позиции,
но точно известно что один
Например:
к?нк?ст?доры - конкистадоры
к?ли?а - калифа, калина, кулича …
publications
www.eastview.com

27. Специальные символы

• Фразовый запрос ", "
- используется, когда необходимо найти документы,
содержащие фразу именно в той форме, в какой она
указана в запросе
Например, сравним:
*Поиск по базе «Общественные и гуманитарные издания»
"Испанская культура"
испанская И культура
5
2180
Проблема:
При фразовом запросе не учитывается морфология
publications
www.eastview.com

28. Специальные символы

• Оператор близости слов
/<количество слов>
• Используется для ограничения количества
слов текста, которые могут быть между
ключевыми словами
Например:
Испанская /5 культура
средние /0 века
Путин /3 Дума
publications
www.eastview.com

29.

30. Специальные символы

• Запрос на неточное совпадение:
~ (тильда)
- Используется, когда мы сомневаемся в
правильном написании слова или
предполагаем, что в этом слове автором
могла быть допущена ошибка
Например:
Сальмунори ~ И корейский
• Сальмунори неправильно
• Правильно САМУЛЬНОРИ
publications
www.eastview.com

31.

32. ИСТ ВЬЮ ПАБЛИКЕЙШНС

Сложные запросы и
нестандартные
ситуации
publications
www.eastview.com

33. Примеры комплексных запросов

(Колмогоров НЕ Василий) И (матем* или
(выдающийся ИЛИ знаменитый ИЛИ
известный) /0 академик)
К?нк?ст?доры И испан* /0 колонии И (XVI
ИЛИ XV)
(Монетизация ИЛИ Монетаризация) И
(замена /1 льгот) ИЛИ (денежные /0
(выплаты ИЛИ компенсации))
publications
www.eastview.com

34. Результаты поиска

35. Нестандартные ситуации

(гайдар И аркадий) НЕ эконом*
франц* И "нога"
грач НЕ пти*
пивовар НЕ пиво НЕ пивной (нельзя НЕ пив*)
“ВКП(б)” ИЛИ (Всесоюзная /0
Коммунистическая /0 Партия /0
Большевиков)
• Сухово?Кобылин*
publications
www.eastview.com

36. Внимание

Подводные камни под операцией скопироватьвставить или copy-paste!!!
• Есть разные кавычки "
",‘
• Есть два разных символа
Символ
’, “ ”, «»
-, –
- равен логическому оператору НЕ
publications
www.eastview.com

37. ИСТ ВЬЮ ПАБЛИКЕЙШНС

Понятие релевантности
и работа с
результатами поиска
publications
www.eastview.com

38. Результаты поиска

Определение: совокупность документов,
удовлетворяющих запросу,
расположенных в порядке
соответствия запросу (релевантности)
называется результатами поиска
publications
www.eastview.com

39. Результаты поиска

(релевантность = балл = ранг = score ) –
есть величина соответствия запросу,
вычисляется математически,
основываясь на различных критериях
Критерии соответствия запросу:
Количество слов в документе
Близость слов (для логических операторов И, ИЛИ)
Значимость полей
Количество найденных слов (оператор ИЛИ)
publications
www.eastview.com

40. Сравнение результатов поиска

41. Результаты поиска

Возможности работы с
результатами поиска:
Поиск в найденном
Сортировка результатов
Просмотр списка результатов с цитатами
Перемещение в найденном документе по
цитатам
• Выбор группы документов для отдельного
просмотра/печати/сохранения
publications
www.eastview.com

42. Результат поиска. Сортировка.

43. Результат поиска. Цитаты.

44. Результат поиска. Текст.

45. Результат поиска. Перемещение по тексту

вниз
вверх

46. Текст статьи – PDF версия

47. Текст статьи – PDF версия

48. ИСТ ВЬЮ ПАБЛИКЕЙШНС

Базы данных
• Статистическая база данных –
статистические ежегодники, сборники,
аналитические отчеты, бюллетени
России и стран СНГ
publications
www.eastview.com

49.

ТЕКСТ
ГРАФИКИ
ТАБЛИЦЫ

50. Результат поиска. График.

51. Результат поиска. Таблица.