ОБ ОБЩЕЙ КОНЦЕПЦИИ УНИВЕРСАЛЬНОЙ СИСТЕМЫ ХРАНЕНИЯ И ОБРАБОТКИ ДАННЫХ ПРАКТИКО-ОРИЕНТИРОВАННОЙ НАПРАВЛЕННОСТИ

Развитие подходов и концепции к построению систем, связанных с накоплением данных в хранилище и последующим использованием алгоритмов Data Mining является особо перспективным в силу того, что белорусский сектор соответствующих ИТ-разработок находится еще на стадии формирования. В статье рассматривается общая концепции построения системы накопления и анализа данных практико-ориентированной направленности, основанная на технологии складирования данных. Основным аспектом в концепции проектирования универсальной системы на уровне хранения и работы с данными является подход с использованием расширяемого хранилища данных на основе универсальной платформы хранимых данных, который предоставляет доступ для хранения и последующего анализа данных различной структуры и различных предметных областей, имеющих точки (узлы) стыковки и расширенный функционал с возможность выбора структуры для хранения данных и последующей внутрисистемной интеграцией. Приводятся общая архитектура универсальной системы хранения и обработки данных указанной направленности, выделяются структурные составляющие. Основными компонентами архитектура универсальной системы для хранения и обработки данных практико-ориентированной направленности являются: оперативные источники данных; ETL-процесс; хранилище данных; подсистема анализа; пользователи. Важное место в структуре системы занимает аналитическая обработка данных, поиск информации, хранение документов, а также предоставление программного интерфейса для доступа к функциональности системы извне. Универсальная система на основе предлагаемой концепции позволит собирать достаточно обширные сведения по различным предметным областям, а также получать необходимые аналитические сводки, проводить обработку данных и применять соответствующие методы и алгоритмы Data Mining.

1. Devlin, B. A. An Architecture for a Business and Information System / B. A. Devlin, P. T. Murphy. – IBM Systems Journal, 1988. – Vol 17, No 1. – P. 60–80.

2. Inmon, W. H. Building the Data Warehouse / W. H. Inmon // Third Edition. – John Wiley & Sons, Inc. New York, 2002. – 428 p.

3. Kimbell, R. The Data Warehouse Toolkit: The Complete Guide to Dimensional Data Warehouses / R. Kimbell, M. Ross // Second Edition. – J. Willey & Sons, 2002. – 447 p.

4. «Примеры реализации хранилищ данных предприятия» [Электронный ресурс] / Интернет-технологии. – Режим доступа: http://www.internet-technologies.ru/articles/article_994.html. – Дата доступа: 26.12.2016.

5. Belyi, A. Global multi-layer network of human mobility // Alexander Belyi, Iva Bojic, Stanislav Sobolevsky, Izabela Sitko, Bartosz Hawelka, Lada Rudikova, Alexander Kurbatski, Carlo Ratti / International Journal of Geographical Information Science. – Mode of access: [http://www.tandfonline.com/doi/full/10.1080/13658816.2017.1301455]. – Date of access: [14.04.2017].

6. Белый, А. Б. Данные сервиса Flickr и структура сообществ стран // А. Б. Белый, Л. В. Рудикова, С. Л. Соболевский, А. Н. Курбацкий / Международный конгресс по информатике, информационные системы и технологии  International Congress on Computer Sciens : Information Systems and Technologies : материалы междунар. науч. конгресса, Республика Беларусь, Минск, 24 окт. – 27 нояб. 2016 г. : редкол.: С. В. Абламейко (отв. ред.) [и др.]. – Минск : БГУ, 2016. – С. 851–855.

7. Рудикова, Л. В. О разработке системы для поддержки лазерной экспрессной экспертизы. Монография / Л. В. Рудикова. – LAP LAMBERT Academic Publishing, 2014. – 134 с.

8. Рудикова, Л. В. Особенности архитектурной реализации системы визуализации и обработки результатов спектрального анализа // Л. В. Рудикова / Доклады БГУИР. – Мн.: БГУИР, 2015. – № 1 (87) – С. 47–53.

9. Рудикова, Л. В. О разработке универсальной системы обработки данных, связанных с лазерной экспрессной экспертизой // Л. В. Рудикова / Системный анализ и прикладная информатика. – Мн.: БНТУ, 2015. – № 2. – С. 58–64.

10. Рудикова, Л. В. Формирование экспертных заключений с использованием лазерного метода спектрального анализа и специализированного программного обеспечения / Л. В. Рудикова, Е. В. Жавнерко, Н. Н. Курьян, Д. В. Лазарь // Доклады Белорусского государственного университета информатики и радиоэлектроники. – Мн.: БГУИР, 2016. – № 2. – С. 56–62.

11. Рудикова, Л. В. О проектировании системы для поддержки экспертизы объектов художественной ценности // Л. В. Рудикова / Информационные системы и технологии: управление и безопасность: сб. ст. IV международной заочной научно-практической конференции / Поволжский гос. ун-т сервиса. – Тольятти: Изд-во ПВГУС, 2016. – С. 154–167.

12. Рудикова, Л. В. О концепции универсальной системы хранения и обработки данных произведений художественной ценности // Л. В. Рудикова / Фундаментальные проблемы естествознания и техники. Серия: Проблемы исследования Вселенной. – Т. 37. № 2. – Санкт-Петербург, 2016. – С. 209–227.

13. Барсегян, А. А. Методы и модели анализа данных: OLAP и Data Mining / А. А. Барсегян, М. С. Куприянов, В. В. Степаненко, И. И. Холод – СПб.: БХВ-Петербург, 2009. – 336 с.: ил.

14. Паклин, Н. Б. Бизнес-аналитика: от данных к знаниям / Н. Б. Паклин, В. И. Орешков – СПб.: Питер, 2009 год. – 624 с.

15. Wrembel, R. Data warehouses and OLAP: concepts, architectures, and solutions / R. Wrembel, C. Koncilia. – IRM Press, 2007. – P. 1–26.