sapiСистемный анализ и прикладная информатика«System analysis and applied information science»2309-49232414-0481Belarusian National Technical University10.21122/2309-4923-2017-2-12-19sapi-160Research ArticleСистемный анализSystem analysisОБ ОБЩЕЙ КОНЦЕПЦИИ УНИВЕРСАЛЬНОЙ СИСТЕМЫ ХРАНЕНИЯ И ОБРАБОТКИ ДАННЫХ ПРАКТИКО-ОРИЕНТИРОВАННОЙ НАПРАВЛЕННОСТИABOUT THE GENERAL CONCEPT OF THE UNIVERSAL STORAGE SYSTEM AND PRACTICE-ORIENTED DATA PROCESSINGРудиковаЛ. В.RudikovaL. V.

Заведующая кафедрой современных технологий программирования, кандидат физико-математических наук, доцент

Lada Rudikova is the Head of Modern Programming Technologies Department. Ph. D. degree in physical and math.

rudikowa@grsu.byГродненский государственный университет имени Янки КупалыБеларусьYanka Kupala State University of GrodnoBelarus201707082017021219Copyright © Рудикова Л.В., 20172017Рудикова Л.В.Rudikova L.V.Данная работа распространяется под лицензией Creative Commons Attribution 4.0.This work is licensed under a Creative Commons Attribution 4.0 License.https://sapi.bntu.by/jour/article/view/160

Развитие подходов и концепции к построению систем, связанных с накоплением данных в хранилище и последующим использованием алгоритмов Data Mining является особо перспективным в силу того, что белорусский сектор соответствующих ИТ-разработок находится еще на стадии формирования. В статье рассматривается общая концепции построения системы накопления и анализа данных практико-ориентированной направленности, основанная на технологии складирования данных. Основным аспектом в концепции проектирования универсальной системы на уровне хранения и работы с данными является подход с использованием расширяемого хранилища данных на основе универсальной платформы хранимых данных, который предоставляет доступ для хранения и последующего анализа данных различной структуры и различных предметных областей, имеющих точки (узлы) стыковки и расширенный функционал с возможность выбора структуры для хранения данных и последующей внутрисистемной интеграцией. Приводятся общая архитектура универсальной системы хранения и обработки данных указанной направленности, выделяются структурные составляющие. Основными компонентами архитектура универсальной системы для хранения и обработки данных практико-ориентированной направленности являются: оперативные источники данных; ETL-процесс; хранилище данных; подсистема анализа; пользователи. Важное место в структуре системы занимает аналитическая обработка данных, поиск информации, хранение документов, а также предоставление программного интерфейса для доступа к функциональности системы извне. Универсальная система на основе предлагаемой концепции позволит собирать достаточно обширные сведения по различным предметным областям, а также получать необходимые аналитические сводки, проводить обработку данных и применять соответствующие методы и алгоритмы Data Mining.

Approaches evolution and concept of data accumulation in warehouse and subsequent Data Mining use is perspective due to the fact that, Belarusian segment of the same IT-developments is organizing. The article describes the general concept for creation a system of storage and practice-oriented data analysis, based on the data warehousing technology. The main aspect in universal system design on storage layer and working with data is approach uses extended data warehouse, based on universal platform of stored data, which grants access to storage and subsequent data analysis different structure and subject domains have compound’s points (nodes) and extended functional with data structure choice option for data storage and subsequent intrasystem integration. Describe the universal system general architecture of storage and analysis practice-oriented data, structural elements. Main components of universal system for storage and processing practice-oriented data are: online data sources, ETL-process, data warehouse, subsystem of analysis, users. An important place in the system is analytical processing of data, information search, document’s storage and providing a software interface for accessing the functionality of the system from the outside. An universal system based on describing concept will allow collection information of different subject domains, get analytical summaries, do data processing and apply appropriate Data Mining methods and algorithms.

универсальная системаданные практико-ориентированной направленноститехнология складирования данныхобщая архитектураоперативные источники данныхETL-процессхранилище данныхподсистема анализаuniversal systempractice-oriented datawarehousing technologycommon architectureonline data sourceETL-processdata warehouseanalysis subsystemReferencesDevlin, B. A. An Architecture for a Business and Information System / B. A. Devlin, P. T. Murphy. – IBM Systems Journal, 1988. – Vol 17, No 1. – P. 60–80.Devlin, B. A. An Architecture for a Business and Information System / B. A. Devlin, P. T. Murphy. – IBM Systems Journal, 1988. – Vol 17, No 1. – P. 60–80.Inmon, W. H. Building the Data Warehouse / W. H. Inmon // Third Edition. – John Wiley & Sons, Inc. New York, 2002. – 428 p.Inmon, W. H. Building the Data Warehouse / W. H. Inmon // Third Edition. – John Wiley & Sons, Inc. New York, 2002. – 428 p.Kimbell, R. The Data Warehouse Toolkit: The Complete Guide to Dimensional Data Warehouses / R. Kimbell, M. Ross // Second Edition. – J. Willey & Sons, 2002. – 447 p.Kimbell, R. The Data Warehouse Toolkit: The Complete Guide to Dimensional Data Warehouses / R. Kimbell, M. Ross // Second Edition. – J. Willey & Sons, 2002. – 447 p.«Примеры реализации хранилищ данных предприятия» [Электронный ресурс] / Интернет-технологии. – Режим доступа: http://www.internet-technologies.ru/articles/article_994.html. – Дата доступа: 26.12.2016.»Implemented data warehouses of company examples» [Electronic source] / Internet-technologies. – Mode of access: http://www. internet-technologies.ru/articles/article_994. html. – Date of access: 26.12.2016.Belyi, A. Global multi-layer network of human mobility // Alexander Belyi, Iva Bojic, Stanislav Sobolevsky, Izabela Sitko, Bartosz Hawelka, Lada Rudikova, Alexander Kurbatski, Carlo Ratti / International Journal of Geographical Information Science. – Mode of access: [http://www.tandfonline.com/doi/full/10.1080/13658816.2017.1301455]. – Date of access: [14.04.2017].Belyi, A. Global multi-layer network of human mobility // Alexander Belyi, Iva Bojic, Stanislav Sobolevsky, Izabela Sitko, Bartosz Hawelka, Lada Rudikova, Alexander Kurbatski, Carlo Ratti / International Journal of Geographical Information Science – Mode of access: [http:// www. tandfonline.com/doi/full/10.1080/13658816.2017.1301455]. – Date of access: [14.04.2017].Белый, А. Б. Данные сервиса Flickr и структура сообществ стран // А. Б. Белый, Л. В. Рудикова, С. Л. Соболевский, А. Н. Курбацкий / Международный конгресс по информатике, информационные системы и технологии  International Congress on Computer Sciens : Information Systems and Technologies : материалы междунар. науч. конгресса, Республика Беларусь, Минск, 24 окт. – 27 нояб. 2016 г. : редкол.: С. В. Абламейко (отв. ред.) [и др.]. – Минск : БГУ, 2016. – С. 851–855.Belyi, A. B. Flickr service data and community structure of countries // A. B. Belyi, L. V. Rudikova, S. L. Sobolevsky, A. N. Kurbatski / International Congress on Computer Sciens : Information Systems and Technologies : materials of International scientific Congress, Republic of Belarus, Minsk, 24 October. – 27 Nov. 2016: rare: S. V. Ablameiko (editorial editors) [and others]. – Minsk: BSU, 2016. – P. 851–855.Рудикова, Л. В. О разработке системы для поддержки лазерной экспрессной экспертизы. Монография / Л. В. Рудикова. – LAP LAMBERT Academic Publishing, 2014. – 134 с.Rudikova, L. About laser express expertise system implementation. Monography / Lada Rudikova. – LAP LAMBERT Academic Publishing, 2014. – 134 p.Рудикова, Л. В. Особенности архитектурной реализации системы визуализации и обработки результатов спектрального анализа // Л. В. Рудикова / Доклады БГУИР. – Мн.: БГУИР, 2015. – № 1 (87) – С. 47–53.Rudikova, L. Architecture’s implementation features system of visualization and spectral analysis results processing // Lada Rudikova / Doklady BGUIR. – Minsk: BSUIR, 2015. – № 1 (87) – P. 47–53.Рудикова, Л. В. О разработке универсальной системы обработки данных, связанных с лазерной экспрессной экспертизой // Л. В. Рудикова / Системный анализ и прикладная информатика. – Мн.: БНТУ, 2015. – № 2. – С. 58–64.Rudikova, L. About universal system of laser express expertise data processing // Lada Rudikova / System analysis and applied information science. – Minsk: BNTU, 2015. – № 2. – P. 58–64.Рудикова, Л. В. Формирование экспертных заключений с использованием лазерного метода спектрального анализа и специализированного программного обеспечения / Л. В. Рудикова, Е. В. Жавнерко, Н. Н. Курьян, Д. В. Лазарь // Доклады Белорусского государственного университета информатики и радиоэлектроники. – Мн.: БГУИР, 2016. – № 2. – С. 56–62.Rudikova, L. V. Formation of expert conclusions using the laser method of spectral analysis and specialized software / L. V. Rudikova, E. V. Zhavnerko, N. N. Kuryan, D. V. Lazar // Reports of the Belarusian State University of Informatics and Radioelectronics. – Minsk: BSUIR, 2016. – № 2. – P. 56–62.Рудикова, Л. В. О проектировании системы для поддержки экспертизы объектов художественной ценности // Л. В. Рудикова / Информационные системы и технологии: управление и безопасность: сб. ст. IV международной заочной научно-практической конференции / Поволжский гос. ун-т сервиса. – Тольятти: Изд-во ПВГУС, 2016. – С. 154–167.Rudikova, L. V. On the design of the system for the support of the examination of artwork objects // L. V. Rudikova / Information Systems and Technologies: Management and Security: Sat. Art. IV international correspondence scientific-practical conference / Povolzhsky State University of Service. – Togliatti: Publishing house of VGUS, 2016. – P. 154–167.Рудикова, Л. В. О концепции универсальной системы хранения и обработки данных произведений художественной ценности // Л. В. Рудикова / Фундаментальные проблемы естествознания и техники. Серия: Проблемы исследования Вселенной. – Т. 37. № 2. – Санкт-Петербург, 2016. – С. 209–227.Rudikova, L. V. On the concept of an universal system for storing and processing artwork objects data // L. V. Rudikova / Fundamental Problems of Natural Science and Technology. Series: Problems of the study of the universe. – P. 37.Барсегян, А. А. Методы и модели анализа данных: OLAP и Data Mining / А. А. Барсегян, М. С. Куприянов, В. В. Степаненко, И. И. Холод – СПб.: БХВ-Петербург, 2009. – 336 с.: ил.№ 2. – St. Petersburg, 2016. – P. 209–227.Паклин, Н. Б. Бизнес-аналитика: от данных к знаниям / Н. Б. Паклин, В. И. Орешков – СПб.: Питер, 2009 год. – 624 с.Barseghyan, A. Methods and analysis data models: OLAP and Data Mining / A. Barseghyan, M. Kupriyanov, V. Stepanenko, I. Kholod – StP.: BHV-Petersburg, 2009. – 336 p.: il.Wrembel, R. Data warehouses and OLAP: concepts, architectures, and solutions / R. Wrembel, C. Koncilia. – IRM Press, 2007. – P. 1–26.Paklin, N. Businessanalytics: from data to knowledge / N. Paklin, V. Oreshkov. – StP.: Piter, 2009. – 624 p.Wrembel, R. Data warehouses and OLAP: concepts, architectures, and solutions / R. Wrembel, C. Koncilia. – IRM Press, 2007. – P. 1–26.Wrembel, R. Data warehouses and OLAP: concepts, architectures, and solutions / R. Wrembel, C. Koncilia. – IRM Press, 2007. – P. 1–26.

The authors declare that there are no conflicts of interest present.