数据仓库在江西省公安厅综合信息分析系统中的应用
|
摘要
我国公安机关担负着打击犯罪、维护治安、管理服务社会等多方面的任务,公安信息化涉及面广、业务复杂、数据量巨大,特别是随着“金盾工程”的全面实施,公安工作信息化建设得到了飞速的发展,由此而产生了大量的公安业务数据。采用数据仓库技术,建设一个综合的、历史的、面向决策支持的公安业务综合信息分析系统,满足数据查询、分析和数据挖掘的需求,已成为公安业务信息化的一个重要环节。
本文首先从决策支持和数据仓库的概念入手,分别介绍了决策支持和数据仓库的概念、数据仓库ETL过程、联机分析处理相关概念和方法、数据挖掘技术以及现有数据仓库解决方案,重点研究了基于数据仓库技术的公安综合信息分析系统的设计与实现方法。本系统选取CCIC全国犯罪信息数据库中的“在逃人员历史库”等五个业务数据库作为研究对象,采用IBM的整套商业智能解决方案(数据仓库采用DB2 UDB DATAWAREHOUSE STANDARD EDITION,olap数据库采用DB2OLAP SERVER STANDARD EDITION,前端展现工具采用Hyperion)。在设计实现部分,本文重点阐述了数据仓库系统的安装配置过程、数据抽取、转换和装载的实现过程、多维模型建立过程、前端分析工具的使用过程。在本文的最后还列举了应用此系统得到的一些相关分析结果以及系统后期的发展方向。
本文为充分利用现有公安信息资源,深入挖掘目前已建成的应用数据库的信息,获得深层次的、有价值的增值信息探索出一条可行之路。本文的研究成果对今后公安系统的数据仓库建设和数据挖掘技术的应用具有一定的指导意义。
The Chinese police departments shoulder the tasks of combating criminal ofences, maintaining social order, administrating and providing services to the society. The police informatization covers wide areas,complicated operations and huge quantities of data. It has become a key link in the informatization of the police work to apply the technology of data warehouse and set up an analyzing system of comprehensive information of police work that may satisfy the requirements in data inquiry, analysis and data mining.
This paper starts from the concepts of decision-making support and data warehouse, and introduces respectively the concepts of decision-making support and data warehouse, the ETL process of the data warehouse, the related concepts and methods of on-line analyzing process, data mining technology and the scheme of resolving the existing databases. In its demand analysis;this paper introduces the scope of the research topic,the technical methods the system has adopted, the means of research and the concrete themes for analysis. In the realization of the design, this paper expands mainly on the process of installation and configuration of the data warehouse system, the process of realizing data extraction, conversion and loading, the process of building a multi-dimensional model and the process of using front-end analytical tools. Listed at the end of this paper are some related analytical results obtained by applying this system and the direction of development of this system at a later stage.
The thesis has found an in-depth, practical way to valuable-added information exploration by means of having made full use of present information resources and explored the founded information of application data. The research results will, to some extent, be instructive to the future batebice establishment of the police system and the application of data- advancement techonology.
本文首先从决策支持和数据仓库的概念入手,分别介绍了决策支持和数据仓库的概念、数据仓库ETL过程、联机分析处理相关概念和方法、数据挖掘技术以及现有数据仓库解决方案,重点研究了基于数据仓库技术的公安综合信息分析系统的设计与实现方法。本系统选取CCIC全国犯罪信息数据库中的“在逃人员历史库”等五个业务数据库作为研究对象,采用IBM的整套商业智能解决方案(数据仓库采用DB2 UDB DATAWAREHOUSE STANDARD EDITION,olap数据库采用DB2OLAP SERVER STANDARD EDITION,前端展现工具采用Hyperion)。在设计实现部分,本文重点阐述了数据仓库系统的安装配置过程、数据抽取、转换和装载的实现过程、多维模型建立过程、前端分析工具的使用过程。在本文的最后还列举了应用此系统得到的一些相关分析结果以及系统后期的发展方向。
本文为充分利用现有公安信息资源,深入挖掘目前已建成的应用数据库的信息,获得深层次的、有价值的增值信息探索出一条可行之路。本文的研究成果对今后公安系统的数据仓库建设和数据挖掘技术的应用具有一定的指导意义。
The Chinese police departments shoulder the tasks of combating criminal ofences, maintaining social order, administrating and providing services to the society. The police informatization covers wide areas,complicated operations and huge quantities of data. It has become a key link in the informatization of the police work to apply the technology of data warehouse and set up an analyzing system of comprehensive information of police work that may satisfy the requirements in data inquiry, analysis and data mining.
This paper starts from the concepts of decision-making support and data warehouse, and introduces respectively the concepts of decision-making support and data warehouse, the ETL process of the data warehouse, the related concepts and methods of on-line analyzing process, data mining technology and the scheme of resolving the existing databases. In its demand analysis;this paper introduces the scope of the research topic,the technical methods the system has adopted, the means of research and the concrete themes for analysis. In the realization of the design, this paper expands mainly on the process of installation and configuration of the data warehouse system, the process of realizing data extraction, conversion and loading, the process of building a multi-dimensional model and the process of using front-end analytical tools. Listed at the end of this paper are some related analytical results obtained by applying this system and the direction of development of this system at a later stage.
The thesis has found an in-depth, practical way to valuable-added information exploration by means of having made full use of present information resources and explored the founded information of application data. The research results will, to some extent, be instructive to the future batebice establishment of the police system and the application of data- advancement techonology.
引文
[1]邵勇.《SQL Server 7.0数据仓库框架》[M].武汉:武汉大学出版社,2004
[2]Ralph Kimball MargyRosc.《The Data Warehouse Toolkit(Second Edition)》.England:John Wiley&Sons,2001
[3]张蒲生.《数据仓库技术指南》[M].北京:人民邮电出版社,2005
[4]Eric Sperley[美].《企业数据仓库规划建立与实现》[M].北京:人民邮电出版社,2008
[5]William A.Giovi[美].《面向对象数据仓库设计》.北京:机械工业出版社,2006
[6]陈文伟,黄金才.《数据仓库与数据挖掘》[M].北京:电子工业出版社,2006
[7]Claudia Imhoff,N icholasG alemmo,JonathanG.Geiger[美].《数据仓库设计》[M].北京:机械工业出版社,2003
[8]陈京民.《数据仓库原理、设计与应用》[M].北京:中国水利水电出版社,2006
[9]康博创作室.《SOL SERVER 2000数据仓库设计和使用指南》[M].北京:清华大学出版社,2004
[10]沈兆阳.《SQL SERVER 2000 OLAP解决方案一 数据仓库与ANALYSIS SERVICES》[M].北京:清华大学出版社,2005
[11]彭木根.《数据仓库技术与实现》[M].北京:电子工业出版社,2008
[12]Sid Adelman:Larissa Terpeluk Moss.薛宇王,剑锋译.《数据仓库项目管理》[M].北京:清华大学出版社,2005
[13]Ralph Kimball,Margy Ross[美].谭明金译.《数据仓库工具箱:维度建模的完全指南(第二版)》[M].北京:电子工业出版社,2007
[14]霍国庆.《企业战略信息管理》[M].北京:科学出版社,2003
[15]张瑞君.《管理信息化理论与实践探索》[M].北京:中国人民大学出版社,2004
[16]詹姆斯·马丁.《战略数据规划方法学》[M].北京:清华大学出版社,2004
[17]高复先.《信息资源规划》[M].北京:清华大学出版社,2005
[18]夏忠华.《信息工作与企业竞争力》[M].北京:企业管理出版社,1997
[19]周鸿锋.《信息资源开发利用策略》[M].北京:中国发展出版社,2000
[20]徐晓飞.《CIMS计算机集成制造系统知识新解》[M].北京:兵器工业出版社,2006
[21]姚家奕.《多维数据分析原理与应用》[M].北京:清华大学出版社,2004
[22]张云涛,龚玲.《数据挖掘原理与技术》[M].北京:电子工业出版社,2004
[23]Sid Adelman.《疑难数据仓库专家解决方案》[M].北京:电子工业出版社,2004
[24]RichardJ.Roiger,MichaelW.《数据挖掘教程》[M].北京:清华大学出版社,2006
[25]锡德·阿德尔曼.《数据仓库项目管理》[M].北京:清华大学出版社,2006
[26]林杰斌,刘明德,陈湘.《数据挖掘与OLAP理论与实务》[M].北京:清华大学出版社,2007
[2]Ralph Kimball MargyRosc.《The Data Warehouse Toolkit(Second Edition)》.England:John Wiley&Sons,2001
[3]张蒲生.《数据仓库技术指南》[M].北京:人民邮电出版社,2005
[4]Eric Sperley[美].《企业数据仓库规划建立与实现》[M].北京:人民邮电出版社,2008
[5]William A.Giovi[美].《面向对象数据仓库设计》.北京:机械工业出版社,2006
[6]陈文伟,黄金才.《数据仓库与数据挖掘》[M].北京:电子工业出版社,2006
[7]Claudia Imhoff,N icholasG alemmo,JonathanG.Geiger[美].《数据仓库设计》[M].北京:机械工业出版社,2003
[8]陈京民.《数据仓库原理、设计与应用》[M].北京:中国水利水电出版社,2006
[9]康博创作室.《SOL SERVER 2000数据仓库设计和使用指南》[M].北京:清华大学出版社,2004
[10]沈兆阳.《SQL SERVER 2000 OLAP解决方案一 数据仓库与ANALYSIS SERVICES》[M].北京:清华大学出版社,2005
[11]彭木根.《数据仓库技术与实现》[M].北京:电子工业出版社,2008
[12]Sid Adelman:Larissa Terpeluk Moss.薛宇王,剑锋译.《数据仓库项目管理》[M].北京:清华大学出版社,2005
[13]Ralph Kimball,Margy Ross[美].谭明金译.《数据仓库工具箱:维度建模的完全指南(第二版)》[M].北京:电子工业出版社,2007
[14]霍国庆.《企业战略信息管理》[M].北京:科学出版社,2003
[15]张瑞君.《管理信息化理论与实践探索》[M].北京:中国人民大学出版社,2004
[16]詹姆斯·马丁.《战略数据规划方法学》[M].北京:清华大学出版社,2004
[17]高复先.《信息资源规划》[M].北京:清华大学出版社,2005
[18]夏忠华.《信息工作与企业竞争力》[M].北京:企业管理出版社,1997
[19]周鸿锋.《信息资源开发利用策略》[M].北京:中国发展出版社,2000
[20]徐晓飞.《CIMS计算机集成制造系统知识新解》[M].北京:兵器工业出版社,2006
[21]姚家奕.《多维数据分析原理与应用》[M].北京:清华大学出版社,2004
[22]张云涛,龚玲.《数据挖掘原理与技术》[M].北京:电子工业出版社,2004
[23]Sid Adelman.《疑难数据仓库专家解决方案》[M].北京:电子工业出版社,2004
[24]RichardJ.Roiger,MichaelW.《数据挖掘教程》[M].北京:清华大学出版社,2006
[25]锡德·阿德尔曼.《数据仓库项目管理》[M].北京:清华大学出版社,2006
[26]林杰斌,刘明德,陈湘.《数据挖掘与OLAP理论与实务》[M].北京:清华大学出版社,2007