当前位置>主页 > 期刊在线 > 信息技术 >

信息技术22年17期

一种基于源数据适配的大数据分析系统
李明,刘德文,杨成林
(苏州思萃工业互联网技术研究所有限公司,江苏 苏州 215163)

摘  要:在办公信息化软件项目实施、推广过程中,遇到多个业务信息系统数据孤立所导致的不便于统一查询、数据关联分析的问题。方案设计了一种基于源数据适配的大数据分析系统,可在不建立大数据仓库的情况下,降低软件开发的成本。系统通过数据分发和整合机制,能够有效解决多个业务系统数据关联、数据查询、信息孤岛的问题,将分散的业务系统进行整合,实现各业务系统数据全程可追溯及在各系统流转后的数据一致性,多个业务系统达到数据整合、统一展示、共享的目的。


关键词:源数据;信息孤岛;数据分发;数据统一;数据管理



DOI:10.19850/j.cnki.2096-4706.2022.17.004


中图分类号:TP273.+4                                     文献标识码:A                                   文章编号:2096-4706(2022)17-0017-04


A Big Data Analysis System Based on Source Data Adaptation

LI Ming, LIU Dewen, YANG Chenglin

(Suzhou Sicui Industrial Internet Technology Research Institute Co., Ltd., Suzhou 215163, China)

Abstract: During the implementation and promotion process of office information software projects, several problems of inconvenient unified query and data association analysis caused by data isolation in business information system is encountered. This scheme designs a big data analysis system based on source data adaptation, which could reduce the cost of software development without building a big data warehouse. The system could effectively solve several business system problems of data association, data query and information island. It integrates the scattered business systems, realizes the data traceability of each business system in the whole process and the data consistency after the circulation of each system. And several business systems achieve the purpose of data integration, unified display and sharing.

Keywords: source data; information island; data distribution; data unification; data management


参考文献:

[1] 黄恒君 . 政府统计生产体系中的大数据融入探讨——基于数据源与数据质量的分析 [J]. 统计研究,2019,36(7):3-12.

[2] 王书领,邵其专,滕伟业 . 基于大数据分析的电网多数据源实时在线诊断方法 [J]. 电子设计工程,2022,30(5):66-70.

[3] 赵星,李石君,余伟,等 . 大数据环境下 Web 数据源质量评估方法研究 [J]. 计算机工程,2017,43(2):48-56.

[4] 靳永超 . 大数据环境下的元数据存储管理算法的研究和实现 [D]. 成都:西华大学,2015.

[5] 谷利国,刘俊芳,陈存田,等 . 办公 OA 系统与档案系统数据对接分析与研究 [J]. 数字技术与应用,2021,39(9):103-105.

[6] 陈传琳,詹文 . 厦门市人大:打通信息孤岛 推动大数据开放共享 [J]. 人民政坛,2018(5):30-31+2.

[7] 杜小勇 . 消除信息孤岛,实现“数据福利” [J]. 国家治理,2020(30):20-23.


作者简介:李明(1984—),男,汉族,山东济南人,工程师,博士学位,研究方向:SDN、边缘计算、信息化;刘德文(1989—),男,汉族,江苏连云港人,工程师,硕士学位,研究方向:边缘计算、信息化、大数据、云计算、网络管理;杨成林(1987—),男,汉族,江苏盐城人,工程师,学士学位,研究方向:边缘计算、信息化、大数据、云计算。