数据仓库系统PPT课件

-
12
目前存在问题
迄今为止，人们对数据仓库系统做的更多的是某个具体技术论述，相对很 少有对整个系统结构进行论述，对企业集团的数据仓库系统的论述更未见 报道。
针对企业集团数据仓库系统，我们认为目前存在下述问题急需解决：
（1）如何设计面向企业集团的数据仓库系统体系结构？
（2）如何实施企业集团ETL？
（3）如何开发企业集团数据仓库？
-
6
研究的背景及意义
然而，一个独立的数据仓库是没有实际意义的，必须将 联机分析处理（On-Line Analysis Processing，OLAP）、 数据挖掘（Data Mining, DM）、决策支持等技术结合起 来，才具有强大的生命力，而数据仓库系统正好就是这 些相关技术的组合。
本课题针对企业集团研究数据仓库系统的若干关键技术， 其意义在于：给出一个完整的企业集团数据仓库系统体 系结构，并且针对每一组成部分提出高效、可用的实现 技术和开发方法，从而使得数据仓库的理论得到发展， 并且为企业集团在数据海洋中迅速发现、集成有用的信 息（知识）提供支持。
LOGO
企业集团数据仓库系统关键技术
宋旭东 软件学院
-
1
主要内容
1. 绪论
2. 数据仓库系统基本概念
3. 企业集团ETL技术
4. 企业集团数据仓库技术
5. 企业集团联机分析处理技术
6. 企业集团数据挖掘技术
7. 企业集团决策支持技术
8. 总结
-
2
1 绪论
➢课题的研究背景和意义 ➢课题的国内外现状 ➢目前存在的问题 ➢本文研究的主要工作
随着企业集团信息化进程的不断深入，企业面临问题： ➢数据的过度冗余而导致“数据过剩”现象. ➢缺乏基于海量数据的知识发现，导致“信息贫乏”现象。
-
5
研究的背景及意义
如何从浩瀚的数据海洋中迅速、准确无误地提取企业集 团经营管理所需的有价值的信息，挖掘出隐含在内的大 量规律，是决策者的当务之急！
解决问题的关键是：要建立一个全局化的、综合的信息 集成平台，将这种行之有效的机制称为数据仓库（Data Warehouse，DW）。
-
7
课题的国内外研究现状
1993年Inmon首次提出了数据仓库概念 ：“是一个面向 主题的、集成的、随时间变化的、非易失性的数据集合， 用以支持管理层的决策过程” 。 目前，众多专家学者对数据仓库面临的主要问题做了广 泛而又深入地讨论，主要包括：
➢数据仓库体系结构
➢数据仓库建模与设计
➢数据仓库操作问题
（4）如何设计并实现企业集团联机分析处理？
（5）如何实施企业集团数据挖掘？
（6）如何完成企业集团决策支持服务？
-
13
2 数据仓库系统基本概念
➢数据仓库系统定义 ➢统一视图模型基本概念 ➢数据仓库系统体系结构 ➢数据仓库系统相关技术概述
-
14
数据仓库系统定义
数据仓库系统定义（用下面的一个组合公式表示）：
SAS公司推出的Enterprise Miner、微软公司推出的SQL Sever、 SPSS 公 司 的 Clementine 、 Sybase 公 司 的 Warehouse Workbench、ORACLE公司的Oracle Warehouse Builder等。
-
11
课题的国内外研究现状
பைடு நூலகம்
国内对数据仓库及其相关技术的研究稍晚，但进展较快。
期刊：《IEEE 知识与数据工程汇刊》（TKDE），《ACM数据库
系统汇刊》（TODS），《ACM杂志》（JACM），《信息系
统》，《VLDB杂志》，《数据与知识工程》，《智能信息系
统国际杂志》（JIIIS），《知识与信息系统》（KAIS）和《决
策支持系统》等 。
-
9
课题的国内外研究现状
国内对数据仓库及其相关技术的研究稍晚，但进展较快。国 内的中科院、清华大学、北京大学 、中国人民大学、北方 交通大学 、国防科技大学、东南大学 、浙江大学 、复旦 大学 、吉林大学 、东北大学 、哈尔滨工业大学 、四川大 学、华中科技大学、上海交通大学 、大连理工大学 、南京 航空航天大学、重庆大学、南京理工大学、山东大学 。
-
3
研究的背景及意义
在知识经济时代，企业更多关注如何提高自身的竞争力？
➢ 从现代管理技术的角度，集团化运营已成为企业提升 自身竞争力的必然趋势，许多同行业企业进行了资产 重组，组建了企业集团。
➢ 从信息技术的角度，人们开始把企业信息化作为改善 企业管理业务活动，建立现代企业制度的重要手段。
-
4
研究的背景及意义
DWS = ETL + DW + OLAP + DM + DS
➢新应用与新环境下的数据仓库构建
-
8
课题的国内外研究现状
会议：“ ACM数据仓库和联机分析国际会议” 、 “数据仓库与 知识发现国际会议” 、 “ACM-SIGMOD数据管理国际会议” （ SIGMOD ） ， “ 超 大 型 数 据 库 国 际 会 议 ” （ VLDB ） ， “ ACM SIGACT-SIGMOD-SIGART 数 据 库 原 理 研 讨 会 ” （PODS），“数据工程国际会议”（ICDE），“扩展数据库 技 术 国 际 会 议 ” （ EDBT ） ， “ 数 据 库 理 论 国 际 会 议 ” （ICDT），“信息与知识管理国际会议”（CIKM），“数据 库与专家系统应用国际会议”（DEXA），和“数据库系统高 级应用国际研讨会”（DASFAA）。
➢中国科学院史忠植教授等人提出MSMiner平台 。
➢复旦大学的朱扬勇教授建立了国内著名的“数据挖掘讨论 组”网站（） 。
➢四川大学的唐常杰教授，华中科技大学的冯玉才教授中国 人民大学的王珊教授、孟小峰教授和杜小勇教授，复旦大 学的施伯乐教授，国防科技大学的陈文伟教授，哈尔滨工 业大学李建中教授和刘大昕教授，东北大学的于戈教授在 数据挖掘和数据仓库方面都做了许多有益的尝试。
-
10
课题的国内外研究现状
数据仓库界最知名的R.Kimbal博士提出了数据仓库业务维度生命 周期开发方法和数据仓库的总线结构。
加拿大Simon Fraser 大学智能数据库系统研究实验室开发的多任 务知识发现系统－DBMiner 。
IBM 公司Almaden 研究中心开发的多任务KDD 系统QUEST 。