基于侨务数据仓库的QWMDMP元数据管理平台的设计和建立
摘要
本文首先研究数据仓库以及元数据管理技术，然后根据侨务信息数据仓库和元数据管理的具体特点设计和实现了一个分布式、跨平台以及企业级的元数据管理平台模型。因此，从整体上看，本文可以划分为两大部分，即数据仓库、元数据管理的技术分析以及具体的应用——QWMDMP元数据管理平台的建立。
对数据仓库技术，我们主要是介绍了数据仓库的基本概念，数据仓库的组成部分以及数据仓库的数据组织。通过这些介绍，我们对数据仓库技术有一个清晰的了解。接下来，我们根据数据仓库的特点，着重介绍了元数据在数据仓库中的重要作用、元数据的类别和具体内容以及元数据管理的必要性和发展趋势。
然后根据数据仓库技术以及元数据管理技术，结合侨务数据仓库应用的具体特点，引入了J2EE技术模型，提出了一个基于J2EE模型的QWMDMP元数据管理平台。首先我们给出了系统的设计模型以及功能模块，然后指出了系统的主要特点：
(1) 客户端具有良好的扩展性；
(2) 系统具有跨平台性；
(3) XML是系统的数据规范和核心；
(4) 系统具有很好的通用性；
然后根据系统的设计模型，对系统进行了具体实现。本文根据的是J2EE的三层计算模型，对每一层的实现进行了具体的阐述，包括客户层的应用程序客户端和Web客户端的实现，中间层的EJB组件的实现，数据层元数据库的设计和建立。
QWMDMP企业级数据仓库的元数据管理平台的实现能更好的满足侨务数据仓库的各种要求，表明基于J2EE规范的三层式体系结构能更好的适应Web开发的需要。随着市场竞争的加剧以及互联网经济时代的来临和电子商务的发展，基于J2EE的数据仓库应用开发将能够越来越体现它的优势。同时，本系统的成功构建也为企业开发数据仓库技术提供一个良好的开端。
注：本课题是国家计委项目《侨务信息数据仓库决策与支持系统》的子项目
The paper firstly introduce the fundamental theory of data warehouse and the management of metadata. Then it presents a model of metadata management platform according the characteristic of qiaowu data warehouse and metadata management. In general,this paper can be divided into two parts: the research of data warehouse and metadata management, the particular application ?implementation of QWMDMP metadata management platform.
About data warehouse , this paper mainly introduced the conception, system architecture and data structure. According these knowledge, we have a clear understand of data warehouse. Following , we introduced the important effection of metadata in data warehouse, the classify of metadata and the development direction of metadata management and brings forwards the method of realizing enterprise metadata management.
At last , this paper presents the design and implemention of a J2EE-based QWMDMP metadata mangement platform according the characteristic of qiaowu data warehouse and metadata mangement. We firstly introduced the sytem structure and function module, then give the mainly characteristic of system as follow:
(1) Excellent expansibility in client tier.
(2) Platform- independent system
(3) Xml is the core of system and the standard of transfer data.
(4) Excellent universalness.
This paper analysis every layer of system structure based on J2EE three tier model.This included the application client and web client in client tier, the design of EJB in middle tier and the design of metadata database in data tier.
The implemention of QWMDMP metdata mangement platform is satisfied with the requirement of qiaowu data warehouse and presents some ideas to designing of the Data Warehouse.
对数据仓库技术，我们主要是介绍了数据仓库的基本概念，数据仓库的组成部分以及数据仓库的数据组织。通过这些介绍，我们对数据仓库技术有一个清晰的了解。接下来，我们根据数据仓库的特点，着重介绍了元数据在数据仓库中的重要作用、元数据的类别和具体内容以及元数据管理的必要性和发展趋势。
然后根据数据仓库技术以及元数据管理技术，结合侨务数据仓库应用的具体特点，引入了J2EE技术模型，提出了一个基于J2EE模型的QWMDMP元数据管理平台。首先我们给出了系统的设计模型以及功能模块，然后指出了系统的主要特点：
(1) 客户端具有良好的扩展性；
(2) 系统具有跨平台性；
(3) XML是系统的数据规范和核心；
(4) 系统具有很好的通用性；
然后根据系统的设计模型，对系统进行了具体实现。本文根据的是J2EE的三层计算模型，对每一层的实现进行了具体的阐述，包括客户层的应用程序客户端和Web客户端的实现，中间层的EJB组件的实现，数据层元数据库的设计和建立。
QWMDMP企业级数据仓库的元数据管理平台的实现能更好的满足侨务数据仓库的各种要求，表明基于J2EE规范的三层式体系结构能更好的适应Web开发的需要。随着市场竞争的加剧以及互联网经济时代的来临和电子商务的发展，基于J2EE的数据仓库应用开发将能够越来越体现它的优势。同时，本系统的成功构建也为企业开发数据仓库技术提供一个良好的开端。
注：本课题是国家计委项目《侨务信息数据仓库决策与支持系统》的子项目
The paper firstly introduce the fundamental theory of data warehouse and the management of metadata. Then it presents a model of metadata management platform according the characteristic of qiaowu data warehouse and metadata management. In general,this paper can be divided into two parts: the research of data warehouse and metadata management, the particular application ?implementation of QWMDMP metadata management platform.
About data warehouse , this paper mainly introduced the conception, system architecture and data structure. According these knowledge, we have a clear understand of data warehouse. Following , we introduced the important effection of metadata in data warehouse, the classify of metadata and the development direction of metadata management and brings forwards the method of realizing enterprise metadata management.
At last , this paper presents the design and implemention of a J2EE-based QWMDMP metadata mangement platform according the characteristic of qiaowu data warehouse and metadata mangement. We firstly introduced the sytem structure and function module, then give the mainly characteristic of system as follow:
(1) Excellent expansibility in client tier.
(2) Platform- independent system
(3) Xml is the core of system and the standard of transfer data.
(4) Excellent universalness.
This paper analysis every layer of system structure based on J2EE three tier model.This included the application client and web client in client tier, the design of EJB in middle tier and the design of metadata database in data tier.
The implemention of QWMDMP metdata mangement platform is satisfied with the requirement of qiaowu data warehouse and presents some ideas to designing of the Data Warehouse.
引文
[1][美]Cay S. Horstmannn 著，朱志王怀赵伟等译Java 2核心技术 卷Ⅱ：高级特性，机械工业出版社，2000
[2][美]Robert Orfali Dan Harkey Jeri Edwards 著，陈章源，张学东，于秀山等译 智能 CORBA 系统，电子工业出版社，2000
[3][美]Calvin Adustin, Monica Pawlan 著，前导工作室译，Java 2高级编程，机械工业出版社，2001
[4][美]Douglas Scherer, William Gaynor, Jr., Arlene Valentinsen, Xerxes Cursetjee著，京京工作室译，Oracle 8i 数据库开发技术与技巧，机械工业出版社，2000
[5][美]Efrem G. Mallach 著，李绍智，李绍勇等译，决策支持与数据仓库系统，电子工业出版社，2001
[6][美]Bruce Eckel 著，京京工作室译，Java 编程思想，机械工业出版社，1999
[7][美]Erich Gamma, Richard Helm, Ralph Johnson, John Vissides 著，李英军，马晓星，蔡敏，刘建中等译，设计模式，机械工业出版社，2001
[8][美]Tom Hammergren 著，曹增强，王备战，岳晓奎等译，数据仓库技术，中国水利水电出版社，1998
[9][美]布雷恩．赖特 著，赵昌明译，JSP 数据库编程指南，北京希望电子出版社，2001
[10][美]McCarty B. 使用Java进行 SQL 数据库设计，中国水利水电出版社，1998
[11]北方交通大学自动化系研究所著，Oracle 7 技术手册，科学出版社，1995
[12]宋辉，江峰著，Java 服务器程序设计，清华大学出版社，1998
[13][美]Elliotte Rusty Harold, XML 实用大全[M]．中国水利电力出版社，2000
[14]Sun Microsystems Java 2 Platform, Enterprise Editin Specification Version 1.2[EB], Available at http://java. sun. com/j2ee/docs. html, 1999;
[15]Sun Microsystems JavaSever Page Specification Version 1.1[EB],Available at Http://java. sun. com/products/jsp, 1999;
[16]Ed Roman and Rickard Oberg The Technical Benefits of EJB and J2EE Technologies over COM+ and Windows DNA December 1999
[17]Sun Microsystems, Inc Designing Enterprise Applications with the Java~(TM) 2 Platform, Enterprise Edition Copyright 2000.
[18]Tomas. Eddw, Mastering Enterprise JavaBeans and the Java 2 Platform, Enterprise Eition, 1999
[19]王珊等著，数据仓库技术与联机分析处理，科学出版社，1998
[20]曹蓟光 王申康，元数据管理策略的比较研究，计算机应用，2001，2月第21卷
[21]史金红 吴永明，数据仓库中元数据的管理，电子工程师，2000年第2期
[22]周鸿飞 陈启泉，基于 J2EE 规范的 HIKS 网上考试系统的设计与实现，计算机应用研究，2001第12期
[23]周鸿飞，Java Applet 与 Java Servlet 相结合的电子商场的构建，微型机与应用，2000第10期
[24]王广清 杨学良，数据仓库技术及其在电信计费领域应用的探讨，计算机工程与应用，1999第9期
[25]唐林燕，数据仓库查询与智能查询程序的实现，计算机工程与应用，2000第8期
[26]王涛 陈祥槐，基于Intranet 的税务信息系统数据仓库设计方法研究，计算机应用研究，2000第4期
[27]马宏鹏 赵新 李明 卢桂章，数据仓库原形系统设计，计算机工程与应用，2000年第11期
[28]冠群电脑(中国)有限公司白皮书，在数据仓库中使用元数据，2001年
[29]张玉芳 熊忠阳，数据仓库数据模型的设计，计算机应用，1999年9期
[30]姚宇蓉 何厚存，数据仓库中的信息存取技术的研究，计算机应用研究，1999年8期
[31]商琳 骆斌，一种基于数据仓库的数据挖掘系统的结构框架，计算机应用研究，2000年9期
[32][美]Danny Ayers 著，曾国平 冯伟 王占峰等译，Java 服务器高级编程，机械工业出版社，2001年
[33][美]Hichael Corey Michale Abbey 著，希望图书创作室译，SQL SERVER 7数据仓库，北京希望电子出版社，2000年
[34]Michael J. Corey, Michael Abbey 著，陈越 郭渊博 张红旗等译，Oracle 8 数据仓库分析、构建实用指南，机械工业出版社，2001年
互联网资源
1.www.sun.com
2.www.java.sun.com
3.www.javasoft.com
4.www.javaworld.com
5.http://www.megginson.com
6.http://www.jclark.com/xml/
7.http://www.jclark.com/xml/xp/index.html
8.http://xml.darmstadt.gmd.de/xql/index.html
[2][美]Robert Orfali Dan Harkey Jeri Edwards 著，陈章源，张学东，于秀山等译 智能 CORBA 系统，电子工业出版社，2000
[3][美]Calvin Adustin, Monica Pawlan 著，前导工作室译，Java 2高级编程，机械工业出版社，2001
[4][美]Douglas Scherer, William Gaynor, Jr., Arlene Valentinsen, Xerxes Cursetjee著，京京工作室译，Oracle 8i 数据库开发技术与技巧，机械工业出版社，2000
[5][美]Efrem G. Mallach 著，李绍智，李绍勇等译，决策支持与数据仓库系统，电子工业出版社，2001
[6][美]Bruce Eckel 著，京京工作室译，Java 编程思想，机械工业出版社，1999
[7][美]Erich Gamma, Richard Helm, Ralph Johnson, John Vissides 著，李英军，马晓星，蔡敏，刘建中等译，设计模式，机械工业出版社，2001
[8][美]Tom Hammergren 著，曹增强，王备战，岳晓奎等译，数据仓库技术，中国水利水电出版社，1998
[9][美]布雷恩．赖特 著，赵昌明译，JSP 数据库编程指南，北京希望电子出版社，2001
[10][美]McCarty B. 使用Java进行 SQL 数据库设计，中国水利水电出版社，1998
[11]北方交通大学自动化系研究所著，Oracle 7 技术手册，科学出版社，1995
[12]宋辉，江峰著，Java 服务器程序设计，清华大学出版社，1998
[13][美]Elliotte Rusty Harold, XML 实用大全[M]．中国水利电力出版社，2000
[14]Sun Microsystems Java 2 Platform, Enterprise Editin Specification Version 1.2[EB], Available at http://java. sun. com/j2ee/docs. html, 1999;
[15]Sun Microsystems JavaSever Page Specification Version 1.1[EB],Available at Http://java. sun. com/products/jsp, 1999;
[16]Ed Roman and Rickard Oberg The Technical Benefits of EJB and J2EE Technologies over COM+ and Windows DNA December 1999
[17]Sun Microsystems, Inc Designing Enterprise Applications with the Java~(TM) 2 Platform, Enterprise Edition Copyright 2000.
[18]Tomas. Eddw, Mastering Enterprise JavaBeans and the Java 2 Platform, Enterprise Eition, 1999
[19]王珊等著，数据仓库技术与联机分析处理，科学出版社，1998
[20]曹蓟光 王申康，元数据管理策略的比较研究，计算机应用，2001，2月第21卷
[21]史金红 吴永明，数据仓库中元数据的管理，电子工程师，2000年第2期
[22]周鸿飞 陈启泉，基于 J2EE 规范的 HIKS 网上考试系统的设计与实现，计算机应用研究，2001第12期
[23]周鸿飞，Java Applet 与 Java Servlet 相结合的电子商场的构建，微型机与应用，2000第10期
[24]王广清 杨学良，数据仓库技术及其在电信计费领域应用的探讨，计算机工程与应用，1999第9期
[25]唐林燕，数据仓库查询与智能查询程序的实现，计算机工程与应用，2000第8期
[26]王涛 陈祥槐，基于Intranet 的税务信息系统数据仓库设计方法研究，计算机应用研究，2000第4期
[27]马宏鹏 赵新 李明 卢桂章，数据仓库原形系统设计，计算机工程与应用，2000年第11期
[28]冠群电脑(中国)有限公司白皮书，在数据仓库中使用元数据，2001年
[29]张玉芳 熊忠阳，数据仓库数据模型的设计，计算机应用，1999年9期
[30]姚宇蓉 何厚存，数据仓库中的信息存取技术的研究，计算机应用研究，1999年8期
[31]商琳 骆斌，一种基于数据仓库的数据挖掘系统的结构框架，计算机应用研究，2000年9期
[32][美]Danny Ayers 著，曾国平 冯伟 王占峰等译，Java 服务器高级编程，机械工业出版社，2001年
[33][美]Hichael Corey Michale Abbey 著，希望图书创作室译，SQL SERVER 7数据仓库，北京希望电子出版社，2000年
[34]Michael J. Corey, Michael Abbey 著，陈越 郭渊博 张红旗等译，Oracle 8 数据仓库分析、构建实用指南，机械工业出版社，2001年
互联网资源
1.www.sun.com
2.www.java.sun.com
3.www.javasoft.com
4.www.javaworld.com
5.http://www.megginson.com
6.http://www.jclark.com/xml/
7.http://www.jclark.com/xml/xp/index.html
8.http://xml.darmstadt.gmd.de/xql/index.html