База данных публикаций сотрудников высших учебных заведений представляет собой уникальную коллекцию библиографических записей. Она успешно используется университетом с целью содействия развитию научных школ и стимулирования труда профессорско-преподавательского состава, сотрудников и аспирантов.
В результате анализа процесса работы пользователей базы данных публикаций было принято решение разработать интернет-версию раздела «Картотека публикаций». В данном разделе должны быть реализованы различные виды фильтров поиска и отчетов по разным типам публикаций. Такая версия работы раздела является востребованной для всех категорий читателей и наиболее эффективна при использовании.
Рис. 1. Архитектура библиотеки.
Информационный обмен между компонентами системы осуществляется посредством программно-информационной сетевой среды. Подсистемы взаимодействуют между собой посредством вызова функций (рис. 1).
Рис. 2. Взаимосвязь электронного каталога со смежными системами.
Электронный каталог взаимодействует со смежными подсистемами через Internet Information Server (IIS), используя платформу Framework.NET (рис. 2) [5].
Загрузка базы данных публикаций
Изначально база данных публикаций разрабатывалась под систему MS DOS. Данные в ней хранятся в формате *.dbf в виде набора из 13 таблиц.
В связи с форматом исходной базы данных, а также большим числом записей о публикациях (около 60000) было необходимо разработать наиболее эффективный способ преобразования данных.
В результате работы был сформирован алгоритм, осуществляющий соединение с базой данных и перенос информации из DBF-таблиц в соответствующие таблицы MS SQL. Были произведены внутренние преобразования базы данных MS SQL [1]. Часть данных была получена с помощью вызовов динамически формируемых SQL-запросов. Другая часть - с помощью программной обработки в памяти, с использованием компонента DataSet для получения итоговой таблицы «_Katalog» [2].
Таблица «_Katalog» хранит сведения об источнике, достаточные для выполнения информационного поиска. Она связана с таблицей «library» полем «reg_n». В таблице «library» хранятся библиографические карточки (рис. 3).
Для преобразования информации понадобилось большое количество промежуточных таблиц, из которых была сформирована результирующая таблица. Для формирования результирующей таблицы было необходимо осуществить несколько операций объединения. Все операции объединения организованны в виде SQL-запросов, что значительно ускоряет обработку данных.
В целом алгоритм загрузки базы данных публикаций выглядит следующим образом.
- 1. Загрузка файлов DBF на сервер.
- 1.1. Подмена бита кодировки.
- 2. Подключение к базе данных на DBF-файлах.
- 3. Перенос данных из DBF в MS SQL.
- 4. Преобразования над данными для получения результирующей таблицы «_Katalog».
- 4.1. Очистка вспомогательных таблиц «KATALOG_N» и «FAK_KAF».
- 4.2. Выборка упорядоченных по индексу публикаций из таблицы «KATALOG».
- 4.3. Выборка упорядоченных по индексу авторов из таблицы «FIO_SP».
- 4.4. Проход по всем публикациям (все записи выборки из таблицы «KATALOG»).
- 4.4.1. Формирование списка авторов, кафедр и факультетов.
- 4.4.1.1. Добавление первого автора из таблицы «KATALOG» и соответствующих автору аббревиатуры кафедры и факультета в списки из таблиц «FAK» и «KAFEDRA».
- 4.4.1.2. Проход по таблице соавторов «FIO_SP», предварительно занесённой в «DataSet» и дополнение списков аббревиатурами кафедр и факультетов из таблиц «FAK» и «KAFEDRA».
- 4.4.2. Формирование таблицы «KATALOG_N» из списков авторов.
- 4.4.3. Формирование таблицы «_FAK_KAF» из списков кафедр и факультетов.
- 4.5. Формирование таблицы «KATALOG_N2» (SQL-запросом), путём объединения таблиц «KATALOG» и сформированной таблицы «KATALOG_N».
- 4.6. Формирование результирующей таблицы «_KATALOG» (SQL-запросом), путём объединения таблиц «KATALOG_N2» и сформированной таблицы «_FAK_KAF».
Рис. 3. Структура БД публикаций.
В результате реализации данного алгоритма удалось в несколько раз сократить время генерации результирующей таблицы, а также снизить временные затраты сервера.
Алгоритм формирования библиографического списка
При выполнении поиска публикаций в базе данных необходимо сначала сформировать его библиографическое описание. Оно создается по ГОСТ 7.1 - 2003 и хранится в отдельной таблице. Такой ход необходим для увеличения производительности системы при поиске [1]. Если результатом поиска будет более 100 документов, и каждый из них требует библиографического описания, то при создании библиографических карточек «на лету» время, затрачиваемое на выполнение одного запроса, существенно возрастает.
Создание библиографического описания (БО) полнотекстового документа выполняется по следующему алгоритму [4].
- 1. Если текущий документ является монографией, учебником или учебным пособием, то
- 1.1. Если число авторов <=3, то
- 1.1.1. Если «ФИО авторов» != «», то
БО = «ФИО авторов» + «.»
- 1.1.2. Если «Название книги» != «», то
БО = БО + «Название книги» + «:»
- 1.1.3. Если «Сведения, поясняющие название (учебник, пособие, методические материалы)» != «», то
БО = БО + «Сведения, поясняющие название (учебник, пособие, методические материалы)» + «/»
- 1.2. Если число авторов >3, то
- 1.2.1. Если «Название книги» != «», то
БО = «Название книги» + «:»
- 1.2.2. Если «Сведения, поясняющие название (учебник, пособие, методические материалы)» != «», то
БО = БО + «Сведения, поясняющие название (учебник, пособие, методические материалы)» + «/»
- 1.2.3. Если «ФИО авторов» != «», то
БО = БО + «ФИО авторов» + «;»
- 1.3. Если «ФИО редактора, переводчика, название организации, ответственной за подготовку книги» != «», то
БО = БО + «ФИО редактора, переводчика, название организации, ответственной за подготовку книги» + «.»
- 1.4. Если «Повторность издания (2-е издание, переработанное и дополненное)» != «», то
БО = БО + «-» + «Повторность издания (2-е издание, переработанное и дополненное)»
- 1.5. Если «Место издания» != «», то
БО = БО + «-» + «Место издания» + «:»
- 1.6. Если «Название издательства» != «», то
БО = БО + «Название издательства» + «,»
- 1.7. Если «Год издания» != «», то
БО = БО + «Год издания» + «.»
- 1.8. Если «Общее количество страниц книги» != «», то
БО = БО + «-» + «Общее количество страниц книги» + «.»
- 2. Если текущий документ является статьей из российского или зарубежного журнала, то
- 2.1. Если число авторов <=3, то
- 2.1.1. Если «ФИО авторов» != «», то
БО = «ФИО авторов» + «.»
- 2.1.2. Если «Название статьи» != «», то
БО = БО + «Название статьи» + «//»
- 2.2. Если число авторов >3, то
- 2.2.1. Если «Название статьи» != «», то
БО = «Название статьи» + «/»
- 2.2.2. Если «ФИО авторов» != «», то
БО = БО + «ФИО авторов» + «//»
- 2.3. Если «Название журнала» != «», то
БО = БО + «Название журнала» + «.»
- 2.4. Если «Год издания» != «», то
БО = БО + «-» + «Год издания» + «.»
- 2.5. Если «Номер журнала, год или номер выпуска» != «», то
БО = БО + «-» + «Номер журнала, год или номер выпуска» + «.»
- 2.6. Если «Страницы, на которых опубликована статья» != «», то
БО = БО + «-» + «Страницы, на которых опубликована статья» + «.»
- 3. Если документ является статьей из сборника, тезисом доклада или известиями, то
- 3.1. Если число авторов <=3, то
- 3.1.1. Если «ФИО авторов» != «», то
БО = «ФИО авторов» + «.»
- 3.1.2. Если «Название статьи» != «», то
БО = БО + «Название статьи» + «//»
- 3.2. Если число авторов >3, то
- 3.2.1. Если «Название статьи» != «», то
БО = «Название статьи» + «/»
- 3.2.2. Если «ФИО авторов» != «», то
БО = БО + «ФИО авторов» + «//»
- 3.3. Если «Название сборника» != «», то
БО = БО + «Название сборника» + «.»
- 3.4. Если «Место издания» != «», то
БО = БО + «-» + «Место издания» + «,»
- 3.5. Если «Год издания» != «», то
БО = БО + «Год издания» + «.»
- 3.6. Если «Страницы, на которых опубликована статья» != «», то
БО = БО + «-» + «Страницы, на которых опубликована статья» + «.»
Алгоритм разбора строки запроса для поиска в базе данных публикаций
Для выполнения поиска в базе данных публикаций необходимо было разработать алгоритм разбора строки записи. Строка записи имеет вид: "name = Название документа <> author = Автор <> PlaceIzd = Место издания <> Year = Год издания <> Str = Количество страниц".
Для разбора строки была использована функция Split [3].
Функция Split("title", "LogOP", A)
Title - Поле, соответствующее определенной части запроса;
LogOP - логический оператор;
А - элемент массива.
Пока текущий символ строки «a» не равен "", делать
Если текущий символ строки «a» не равен ";", то
tmp=title(i)
Иначе
res = res & Title & " like '%" & tmp & "%'"
res = res & " " & LogOP & " "
Возвращаем преобразованную строку
Split = res
SQL-запрос формируется так.
- 1. Разбираем строку записи:
- 1.1. Создаем массив «a» из 5 элементов
- 1.2. Пока количество символов в строке запроса не равно 0, делать
- 1.2.1. Если текущее поле запроса == "name", то
- 1.2.1.1. a(1) = Название документа
- 1.2.1.2. a(1) = Split("BookValue.FieldValue", "AND", a(1))
- 1.2.2. Если текущее поле запроса == "author ", то
- 1.2.2.1. а(2) = Автор
- 1.2.2.2. a(2) = Split("BookValue.FieldValue", "AND", a(2))
- 1.2.3. Если текущее поле запроса == "PlaceIzd ", то
- 1.2.3.1. а(3) = Место издания
- 1.2.3.2. a(3) = Split("BookValue.FieldValue", "AND", a(3))
- 1.2.4. Если текущее поле запроса == " Year", то
- 1.2.4.1. а(4) = Год издания
- 1.2.4.2. a(4) = Split("BookValue.FieldValue", "AND", a(4))
- 1.2.5. Если текущее поле запроса == " Str", то
- 1.2.5.1. а(5) = Количество страниц
- 1.2.5.2. a(5) = Split("BookValue.FieldValue", "AND", a(5))
- 2. Составляем строку запроса:
- 2.1. Пока число элементов в массиве «а» не равно 5, делать
- 2.1.1. Если текущий элемент массива «а» не равен "", то
- 2.1.1.1. Если строка запроса не равна "", то
- 2.1.1.1.1. selSQL = selSQL & " OR "
- 2.1.1.1.2. Составляем строку запроса selSQL = selSQL & " ( " & a(i) & " ) "
Заключение
Практическая ценность работы заключается в предоставлении информационного поиска в базе данных публикаций посредством Интернета и в максимальном повышении эффективности этого поиска.
Рецензенты:
- Лукьянов В.С., д.т.н., профессор, зав. кафедрой «ЭВМ и системы», Волгоградский государственный технический университет, г. Волгоград.
- Камаев В.А., д.т.н., профессор, зав. кафедрой «САПР и ПК», Волгоградский государственный технический университет, г. Волгоград.
Библиографическая ссылка
Бахмад Э.А., Курочкина Е.В., Королева И.Ю. РЕАЛИЗАЦИЯ АЛГОРИТМА ОБРАБОТКИ ДАННЫХ ДЛЯ ПРЕДОСТАВЛЕНИЯ ЭФФЕКТИВНОГО ИНФОРМАЦИОННОГО ПОИСКА В БАЗЕ ДАННЫХ ПУБЛИКАЦИЙ // Современные проблемы науки и образования. – 2012. – № 2. ;URL: https://science-education.ru/ru/article/view?id=5874 (дата обращения: 20.04.2024).