2.2. Фактографические и документальные БД
Главное отличие фактографических и документальных БД состоит в структуре единицы хранения информации.
единицей хранения информации
С точки зрения структуры единицы хранения принято различать хорошо структурированные данные и слабо структурированные данные.
Хорошо структурированные данные
Слабоструктурированные данные
Фактографические БД
При построении концептуальной модели таких БД предметная область (ПрО) естественно декомпозируется на объекты и связи между ними. Каждое характеристическое свойство объекта имеет атомарное значение, которое не зависит от контекста использования.
Документальные БД
(слайд 4).
С точки зрения методов и алгоритмов поиска фактографические БД рассматривают как информационное обеспечение поиска данных, а документальные БД – как информационное обеспечение поиска информации.
(слайд 5)
При поиске данных обычно ищут полное совпадение запроса с элементом данных. При поиске данных результаты выводятся простой индукцией, например, если A и B , то C . Поиск информации намного ближе к методам дедукции: отношения описываются только степенью уверенности или неуверенности. В информационном поиске, как правило, стратегия поиска построена по принципу усечения первоначальных результатов поиска, что и приводит к логике «от общего к частному». Из этого следует детерминистское описание модели поиска данных и вероятностная модель информационного поиска.
релевантностью
При поиске данных все найденные данные, которые совпали с запросом, выдаются пользователю. При информационном поиске, возможна ситуация, что практически все документы БД в той или иной мере могут считаться релевантными запросу и уже поэтому документы будут упорядочены, например, по степени формальной релевантности, и будут выданы только несколько первых.
Язык запросов для поиска данных, как правило, искусственный, имеющий строгий синтаксис и ограниченный словарь, при поиске информации же предпочтительнее естественный язык, хотя и с некоторыми исключениями, а в настоящее время «естественный язык» сводится к списку ключевых слов. При поиске данных запрос обычно является полной спецификацией того, что нужно найти и в каком виде показать, при информационном поиске – неполной, кроме того, многие действия совершаются информационно-поисковой системой по умолчанию.
Область применения баз данных
... использования информации из баз данных и сложностью информационных процессов, существующих в пределах предметной области в конкретных условиях. Система управления базами данных - это программный механизм, предназначенный для записи, поиска, ... полноценной серверной системой управления базами данных. Целью реферата является изучение областей применения баз данных. 1. Актуальность темы Любая ...
2.3. БД оперативной и ретроспективной информации. Хранилища данных
С точки зрения основных особенностей ПрО и решаемых задач можно выделить два основных класса БД – оперативной и ретроспективной информации.
OLTP -приложений
Основные особенности
1. В единицу времени одновременно выполняется большое число транзакций (к системе может быть подклю чено несколько тысяч пользователей, работающих в одно и то же время).
2. Практически все запросы к базе данных, которые должны выполняться в реальном времени, состоят из команд вставки, обновления, удаления.
3. Запросы на выборку в основном предназначены для предос тавления пользователям возможности выбора из различных справочников, и большая часть этих запросов известна заранее еще на этапе проектирования.
Та ким образом, критическими для OLTP -приложений является скорость и на дежность выполнения коротких операций обновления данных.
OLAP -приложения
БД ретроспективной информации характеризуются следующими особенностями:
1. Добавление в БД новых данных происходит относительно редко крупными блоками.
2. Данные из БД обычно никогда не удаляются.
3. Запросы к данным являются нерегламентированными и, как правило, достаточно сложными. Очень часто новый запрос формулируется аналитиком для уточнения результата, полученного при выполнении предыдущего за проса.
4. Скорость выполнения запросов важна, но не критична.
Для OLAP -приложений характерно, что перед загрузкой данные проходят различные процедуры «очистки», свя занные с тем, что в одну базу могут поступать данные из многих ис точников, имеющих различные форматы представления для одних и тех же данных, данные могут быть некорректны, ошибочны и т.п..
Хранилища данных
О громное количество информации, накопленной в оператив ных базах данных, позволяет, например, поставить задачу применения систем под держки принятия решений . Однако с истемы оперативной обработки чаще всего проектируются без учета какой- либо поддержки подобных требований, поэтому преобразование обыч ных систем OLTP в системы поддержки принятия решений оказывается чрезвы чайно сложной задачей. Как правило, типичная организация имеет множество различных систем операционной обработки с перекрывающимися, а иногда и противоречивыми определениями, например с разными типами, выбранными для представления одних и тех же данных. Основной задачей явля ется преобразование накопленных архивов данных в источник новых знаний, причем таким образом, чтобы пользователю было предоставлено единое интегрированное и консолидированное представление о данных организации. Концепция хранилища данных была задумана как технология, способная удовлетворить требования систем поддержки принятия решений и базирующаяся на информа ции, поступающей из нескольких различных источников оперативных данных.
Базы данных и системы управления базами данных
... образуется информация, которую они потребляют и на основании которой в пределах собственной компетенции производят ввод и редактирование данных. С понятием базы данных тесно связано понятие системы управления базой данных. Это ... поля различных видов (поля ввода, поля вывода, вычисляемые поля), процедуры обработки различных типов (формы ввода, таблицы, отчеты, запросы). На основании созданных ...
Концепция хранилища данных
Хранилище данных —
(слайд 6)
Предметная ориентированность.
Интегрированность
Привязка ко времени
Неизменяемость
К онечной целью создания хранилища данных является интеграция корпоративных данных в едином репозитории, обращаясь к которому пользователи могут выполнять запросы, подготавливать отчеты и проводить анализ данных. Подводя итог, можно сказать, что техно логия хранилищ данных – это технология управления данными и их анализа.
Сравнение систем OLTP и хранилищ данных
(слайд 7)
Проблемы разработки и сопровождения хранилищ данных
(слайд 8)
Недооценка ресурсов, необходимых для загрузки данных
Скрытые проблемы источников данных
[Электронный ресурс]//URL: https://litfac.ru/referat/leksikograficheskie-bazyi-dannyih/
Отсутствие требуемых данных в имеющихся архивах
Повышение требований конечных пользователей
Унификация данных
Высокие требования к ресурсам
Владение данными
Сложное сопровождение
Долговременный характер проектов
Сложности интеграции
Локальные и распределенные БД
В общем случае режимы работы с БД можно классифицировать по следующим признакам:
— многозадачность — однопользовательский или многопользовательский;
— правило обслуживания запросов – последовательное или параллельное;
Следует отметить, что общая тенденция развития технологий обработки данных вполне соответствует этапам развития средств вычислительной техники и информационных технологий, и в первую очередь – сетевых. В этом смысле следует выделить два класса: системы распределенной обработки данных и системы распределенных баз данных.
Теория проектирования удаленных баз данных
... определенными услугами. Серверы могут осуществлять хранение данных, управление базами данных, доступ к всемирной сети Интернет, удаленную обработку заданий, печать заданий и ряд других ... с установленными на них программами удаленного доступа, и тщательно настраивают механизмы аутентификации и ограничения прав пользователей. Последний недостаток удаленного управления состоит в том, что скорость ...
Системы распределенной обработки данных в основном отражают структуру и свойства многопользовательских операционных систем с базой данных, размещенной на большом центральном компьютере (мэйнфрейме).
Еще до недавнего времени это был единственно возможный вариант вычислительной среды для реализации больших баз данных. Клиентские места в этом случае реализовались либо в виде терминалов или мини-ЭВМ, обеспечивающих в основном ввод-вывод данных и не имеющих собственных вычислительных ресурсов для функционально-ориентированной обработки получаемых данных.
(слайд 9)
Соотношение основных требований и свойств СУБД: система компромиссов (слайд 10)
В общем случае можно сказать, что основные задачи обработки данных, решаемые на основе концепций баз данных, сводятся к следующим вопросам:
1).
Каким образом сложные нелинейные структуры данных представить в виде линейных – наиболее соответствующих принципу последовательного представления (хранения) в машинной памяти.
2).
Каким образом организовать данные, чтобы была возможность эффективного внесения, удаления и редактирования данных.
3).
Как организовать данные, чтобы использование пространства памяти (плотность данных) было достаточно рациональным, а скорость доступа к записям данных высокой.
4).
Каким образом организовать данные, чтобы поиск был эффективным и позволял отыскивать записи по нескольким ключам.
(слайд 11)
1) Эффективность – простота;
2) Скорость выборки – стоимость (сложность) аппаратных средств;
3) Скорость выборки – сложность процедур доступа;
4) Плотность данных – время доступа и сложность процедур;
5) Независимость данных – производительность;
6) Гибкость средств поиска – избыточность данных или
7) Гибкость поиска – скорость поиска;
8) Сложность процедур доступа – простота обслуживания.
