基于数据仓库星形模式的广东省快速公路一张网资金结算情况分析系统
马根峰
(广东联合电子服务股份有限公司 广州 510300)
摘要 星形模式是基于关系数据库的数据仓库中的一个著名概念。因为星形连接模式的设计思想可以满足人们从不同观察角度(维)分析数据的需求,所以在基于关系数据库的数据仓库的设计中广泛地使用了星形模式。本文主要介绍《广东省快速公路一张网资金结算情况分析系统》中的数据仓库技术。
关键词 数据仓库;星形模式。维度
1 数据仓库的特点
数据仓库技术是用以更好地支持企业或组织的决策分析处理的,面向主题的,集成的,不可更新的、随时间不断变化的数据集合。它通过将数据依照不同的综合程度(即粒度)来组织,以满足不同分析的须要。
本文主要介绍一下《广东省快速公路一张网资金结算情况分析系统》中怎样使用数据仓库技术来实现"资金结算情况的分析"这个主题。
2 星形模式
星形模式是基于关系数据库的数据仓库中的一个著名概念,因为星形连接模式的设计思想可以满足人们从不同观察角度(维)分析数据的需求,加上数据仓库通经常使用来回答综合性的问题,所以在基于关系数据库的数据仓库的设计中广泛地使用了星形模式,如电信运营商中普遍进行的话务整体分析。
3 系统中的数据仓库设计
3.1 广东联合电子结算中心操作型环境 DB2 数据库server下的数据组织情况
在广东联合电子结算中心。 “异常流水”、“流水拆分”、“流水上传”有关的关系模式
l 粤通卡精确拆分结果明细表
tb_cardaccuratesplitresult (流水号,工班, 出口路段…, 收入路段)
l 现金精确拆分结果明细表
tb_cashaccuratesplitresult (流水号,工班, 出口路段…,收入路段)
l 流水非精确拆分记录表
tb_inaccuratesplitrecord (流水号,工班, 出口路段…, 收入路段)
l 拆分流水异常记录表
tb_outlistspliterrorgb(流水号,工班,出口路段, …,错误类型代码)
l 拆分流水异常记录历史表
tb_outlistspliterrorgb_his(流水号,工班,出口路段, …,错误类型代码)
l 流水异常记录表
tb_outlisterrorgb(流水号,工班,出口路段, …,错误类型代码)
l 流水异常记录历史表
tb_outlisterrorgb_his(流水号,工班,出口路段, …,错误类型代码)
l 出口流水表
tb_outlistgb (流水号,工班,出口路段, …,上传时间)
3.2 系统的中数据仓库设计
考虑到篇幅,各步骤经过简化例如以下:
l 概念模型设计
l 逻辑模型设计
l 数据仓库生成
3.2.1概念模型设计中的界定系统边界
在广东联合电子服务股份有限公司,管理者最迫切进行的分析目标主要有:
l 各快速公路路段公司不同工班的流水上传、流水拆分。
l 分析各个快速公路路段公司上传的异常流水(包括异常及拆分异常)、及其改动的情况;
要进行以上的分析,所需数据应包括:
l 分析各个快速公路路段公司在一段周期内的流水上传、拆分、异常总量、异常改动情况。
l 分析各个快速公路路段公司上传的异常流水(包括异常及拆分异常)、及上传的异常的流水(包括异常及拆分异常)流水的改动情况;
l 各个快速公路路段公司及他们的软件开发商
l 广东省快速公路全部的路段信息;
3.2.2 逻辑模型设计
因为细节级数据太大,数据仓库又建立在本人的PC机上 MS SQL SERVER server上,加之迫于分析任务提交时间的压力。故本数据仓库中不再涉及细节级数据表的设计、数据挖掘。
关系模式定义:
ok_xiugai (LISTNO, UPLOADTIME, OUTROADNO, SQUADDATE, ERRCODE, ERRMSG…)
no_xiugai (LISTNO, UPLOADTIME, OUTROADNO, SQUADDATE, ERRCODE, ERRMSG…)
upload_split(路段编码, 路段名称, 工班, 上传流水数量, 拆分流水数量…)
kaifa (roadno, kaifa_name)
tb_road(areano,roadno,roadname,…)
3.2.3 数据仓库数据生成
数据仓库中数据的生成包括操作型环境数据的挖掘和数据仓库中数据的生成这两部分的内容。在这一步里所要做的工作是接口编程。以实现将操作型环境下的数据装载进入数据仓库环境。
4 数据仓库的数据导出与展现
4.1 万能数据库查询分析器
万能数据库查询分析器,中文版本号《DB 查询分析器》、英文版本号《DBQuery Analyzer》。它具有强大的功能、友好的操作界面、良好的操作性、跨越各种数据库平台乃至于EXCEL和文本文件。
你可以通过它查询ODBC数据源(包括世面上全部的数据库、TXT/CSV文件、EXCEL文件)的数据。
你可以同一时候运行多条DML语句乃至存贮过程,结果会以你设定的表格、文本框、文件来返回。从数据库导出千万条数据时,效率与DBMS没有什么差别。
《万能数据库查询分析器》中文版本号《DB 查询分析器》在中关村在线下载量超过10万次,位居整个数据库类排行榜中第8位。所以在实际工作中,本人用《DB 查询分析器》作为client,实现将数据仓库中的数据展现与导出。
4.2 本系统中的两个分析目标的星形模式
4.3 数据例子示意
图6 数据展现1
图7 数据展现2
图8 点击“DB 查询分析器”的工具栏button。就可以导出数据1
图9 点击“DB 查询分析器”的工具栏button。就可以导出数据2
5 结束语
笔者在《广东省快速公路一张网资金结算情况分析系统》的研究与开发过程中。是数据仓库技术在实际工作中的重新运用。
參考文献:
[1] 马根峰 · 万能数据库查询分析器中的事务管理在Oracle中的应用· 上海:微型电脑应用2008.4
[2] 新产品&工具点评 特别推荐:“万能数据库查询分析器”公布 · 程序猿,2007.2
[3] 马根峰 · DB QueryAnalyzer中的事务管理在DB2中的应用· 北京:电脑编程技巧与维护2011.22
[4] 马根峰 · 《DB 查询分析器》批量运行DML语句并返回更具体的信息· 北京:电脑编程技巧与维护2011.24
[5] 王珊 · 数据仓库技术与联机分析处理 · 北京:科学出版社,1998.6
[6] MichaelCorey(美),MichaelAbbey(美) · SQL SERVER 7 Data Warehousing · 北京:希望电子出版社,2000.1
[7] 袁鹏飞 · SQLServer 7.0数据库系统管理与应用开发 · 北京:人民邮电出版社,1999.5