Алгоритмическое обеспечение формирования структур данных в системах хранения

Содержание Введение 2 1. Хранилища данных 3 1.1 Определение хранилища данных 3 1.2 Типы хранилищ данных 6 1.3 Архитектура систем хранения информации 16 1.4 Подходы в организации работ по созданию хранилища данных 25 1.5 Обзор существующих решений ведущих компаний 27 2. Требования к формированию структур данных 31 3. ETL-процессы 37 Список литературы 46

Список литературы 1. Академия Microsoft: Проектирование хранилищ данных для приложений систем деловой осведомленности: Лекция 2: Хранилища данных [Электронный ресурс] // www.intuit.com: [сайт]. [2011]. URL: https://www.intuit.ru/studies/courses/599/455/lecture/10156 (дата обращения: 12.06.2020) 2. Inmon W. H. Building the Data Warehouse // Third Edition John Wiley & Sons, Inc.– 2002 – с. 159-193 3. Rainardi V. Building a Data Warehouse: With Examples in SQL Server // APRESS. – 2008 – с. 29-113 4. Туманов В.Е. Системы складирования данных. Архитектура, продукты и подходы к реализации. // Машиностроитель.- 2003. - №8.– с. 58-65 5. Kimbell R., Ross M. The Data Warehouse Toolkit: The Complete Guide to Dimensional Data Warehouses // J. Willey & Sons. Second Edition. – 2002 – с.1-28 6. Академия Microsoft: Проектирование хранилищ данных для приложений систем деловой осведомленности: Лекция 3: Архитектура хранилищ данных [Электронный ресурс] // www.intuit.com: [сайт]. [2011]. URL: https://www.intuit.ru/studies/courses/599/455/lecture/10158 (дата обращения 12.06.2020) 7. Академия Microsoft: Проектирование хранилищ данных для приложений систем деловой осведомленности: Лекция 4: Модель типового проекта создания хранилища данных [Электронный ресурс] // www.intuit.com: [сайт]. [2011]. URL: https://www.intuit.ru/studies/courses/599/455/lecture/10159 (дата обращения: 12.06.2020) 8. Архипенков С.Я., Голубев Д.В., Максименко О. Б. Хранилища данных: От концепции до внедрения // М: Диалог-МИФИ. – 2002. – с. 23-30 9. Туманов В.Е. Типовая модель бизнес-процесса разработки хранилища данных //Машиностроитель. –2005. –№ 10. – с. 27-31 10. Спирли Э. Корпоративные хранилища данных. Планирование, разработка, реализация. Том I. //М: Издательский дом «Вильямс». – 2001. – с. 128-311 11. Codd E. F. Extending the database relational model to capture moremeaning // ACM trans. of database systems. – 1979 --V. 3. -- № 4. – с. 397-434 12. Codd E. F. Relational Database: A Practical Foundation for Productivity //Comm. of ACM, 1982, V. 25, N. 1, – с. 109-117 13. Лоуенд Ш., Хилсон С., Хоббс Л. Oracle9iR2. Разработка и эксплуатация хранилищ баз данных. // М: КУДИЦ-ОБРАЗ. 2004. – с. 5 - 325

1. Хранилища данных 1.1 Концепция хранилища данных Концепция ХД была предложена в начале 90-х годов прошлого столетия как основа методологии организации данных в системах поддержки и принятия решений. Согласно определению Б. Инмона, хранилище данных есть предметно-ориентированная, интегрированная, неизменяемая и поддерживающая хронологию электронная коллекция данных для обеспечения процесса принятия решений[2]. Информация в ХД организована в соответствии с основными аспектами деятельности предприятия (заказчики, продажи, склад и т.п.), т.е. бизнес-процессами. Это является принципиальным отличием ХД от оперативной БД, где данные организованы в соответствии с операциями (выписка счетов, отгрузка товара и т.п.), т.е. бизнес-операциями. Предметная организация данных в ХД способствует как значительному упрощению анализа, так и повышению скорости выполнения аналитических запросов. Выражается она, в частности, в использовании иных, чем в операционных системах, схемах организации данных. Исходные данные извлекаются из операционных БД, проверяются, очищаются, приводятся к единому виду, в нужной степени агрегируются и загружаются в ХД. Такие интегрированные данные намного проще анализировать. Данные в хранилище всегда напрямую связаны с определенным периодом времени. Данные, выбранные из операционных БД, накапливаются в хранилище в виде исторических слоев, каждый из которых относится к конкретному периоду времени. Это позволяет анализировать тенденции в развитии бизнеса. Попав в определенный исторический слой ХД, данные уже никогда не будут изменены. Это также отличает ХД от операционных БД, в которой данные все время меняются и один и тот же запрос, выполненный дважды с интервалом в 10 минут, может дать разные результаты.