面向流程企业数据仓库的设计与应用

• 论文 •

面向流程企业数据仓库的设计与应用

闫伟，童祯恭，廖西亮

1.山东大学机械工程学院，山东济南 250061；2.同济大学 CIMS研究中心，上海 200092；3.华东交通大学土木建筑学院，江西南昌 330013

收稿日期:2005-03-10 修回日期:2005-12-05 出版日期:2006-06-15 发布日期:2006-06-25
基金资助:
国家863/CIMS主题资助项目(2002AA412410)。

Design & application of data warehouse oriented to process industry

YAN Wei，TONG Zhen-gong，LIAO Xi-liang

1.Sch. of Mechanical Eng., Shandong Univ., Jinan 250061, China; 2.CIMS Cent., Tongji Univ., Shanghai 20092, China; 3.Sch. of Civil Eng., East China Jiaotong Univ., Nanchang 330013, China

Received:2005-03-10 Revised:2005-12-05 Online:2006-06-15 Published:2006-06-25
Supported by:
Project supported by the National High-Tech.R&D Program for CIMS, China(No.2002AA412410).

摘要/Abstract

摘要： 建立了应用于某流程企业的数据仓库。首先分析了数据的不同来源，设计了基于此数据源的数据清洗工具，提出数据清洗时遇到的技术问题和解决方案，并着重分析了罩盖技术检查重复数据的过程。采用数据仓库-实体联系概念模型设计了生产费用、油气生产、干气和副产品库存为主题的数据仓库，并用商业智能插件实现了联机分析处理对数据仓库的查询。采用了基于主成分分析和拉格朗日公式的支持向量机方法建立了此公司各产品产量的分析预测模型，实现了用干气预测原料气和副产品的功能，获得了良好的经济效益。

关键词: 数据仓库, 数据清洗工具, 罩盖技术, 数据仓库-实体联系概念模型, 支持向量机方法

Abstract: A Data Warehouse (DW) was built in a process industry. Firstly, different sources of data were analyzed and the Extraction Transformation Loading (ETL) tool for DW was designed. Then, the technical problems and solutions encountered in the process of data cleaning were proposed. The Canopy methods to clean reduplicate data were studied in detail. DW with the subject of production cost, output of oil and gas, storage of gas and byproducts were designed by Data Warehouse-Entity Relationship (DWER) model and inquired with On-Line Analytical Processing (OLAP) by Business Intelligence (BI) beans. Finally, the model to predict outputs between products was built by Principal components analysis Lagrange Support Vector Machine (PLSVM) method. As a result, the output of raw gas and byproducts could be predicted by gas.

Key words: data warehouse, extraction transformation loading tool, canopy methods, data warehouse-entity relationship model, support vector machine method

中图分类号:

TP311

闫伟,，童祯恭，廖西亮. 面向流程企业数据仓库的设计与应用[J]. .

YAN Wei，，TONG Zhen-gong，LIAO Xi-liang. Design & application of data warehouse oriented to process industry[J]. .

[1]	刘彦均,封宇,武千惠,黄必清. 面向大型装备状态分析的分布式实时数据仓库构建技术[J]. 计算机集成制造系统, 2017, 23(第10): 2324-2333.
[2]	侯杰,胡乃联,李国清,田庆梅,傅钊. 基于商务智能的矿业集团运营决策系统解决方案[J]. 计算机集成制造系统, 2016, 22(第1期): 202-212.
[3]	邹先霞,,潘久辉+,贾维嘉,. 视图增量计算的延迟部分补偿算法[J]. , 2011, 17(05): 0-0.
[4]	邹先霞,,潘久辉+,贾维嘉,. 视图增量计算的延迟部分补偿算法[J]. , 2011, 17(05): 0-0.
[5]	张浩,,赵相东,陆剑峰. 面向大型钢铁集团的业务及决策信息系统解决方案[J]. , 2010, 16(11): 0-0.
[6]	赵相东，张浩,，陆剑峰. 面向大型钢铁集团的商务智能应用系统解决方案[J]. , 2010, 16(09): 0-0.
[7]	宋旭东,，胡墨谦，刘晓冰. 基于模型驱动体系架构的OLAP开发方法[J]. , 2010, 16(02): 0-0.
[8]	王斌, 谢庆生. 基于改进遗传算法的制造资源关联规则挖掘[J]. , 2007, 13(06): 0-0.
[9]	邓超，马晓彬，吴军，周献振. 基于粗糙集理论的质量屋顾客需求分析技术[J]. , 2007, 13(06): 0-0.
[10]	孙明，李庆忠. 多数据仓库环境下的主动数据更新算法[J]. , 2006, 12(05): 0-0.
[11]	王宁，王延章，于淼. 面向一般决策过程的数据仓库系统研究[J]. , 2006, 12(01): 0-0.
[12]	李军治，夏国平，史晓霞. 水电工程行业中数据仓库设计的关键技术[J]. , 2006, 12(01): 0-0.
[13]	罗书强，何玉林. 网络化制造模式下的质量管理决策支持系统[J]. , 2004, 10(2): 0-0.
[14]	阿不都·克里木，迟忠先，张春涛. 基于Multi-Agents的数据仓库的优化[J]. , 2003, 9(8): 0-0.
[15]	陈义，宋执环，李平. 基于Web的流程企业数据仓库体系研究[J]. , 2003, 9(6): 0-0.