数据仓库元数据管理.pdf

Dw lay
O PAM.Fom
数据仓年元教据管理
余友波
数据仓库之路原创资料
http://www.dwwav.com
Dwwa
1.1.1第一章元数据概论
企业的计算机系统每年会产生很多数据,很多企业面临着这样的困境,难以有
效的管理大量的、繁杂的、不一致的数据,并方便地访问、利用这些数据进行辅助
决策。
建立数据仓库提供一个方法,把数据转化为有用的、可信赖的信息,支持商业
决策。建立数据仓库一个重要的工作是元数据管理。元数据( Metadata)就是数据
的数据,用于建立、管理、维护和使用数据仓库。。元数据管理是企业级数据仓库
中的关键组件,贯穿于建立数据仓库的整个过程。
元数据使得用户可以掌握数据的历史情况,如数据从哪里来?流通时间有多长?更新频率是多大?数据元
素的含义是什么?对它已经进行了哪些计算、转换和筛选等等。在需求不确定情况下,在瞬间万变的商业环境
下,元数据可以更好的支持需求的变化,降低项目风险。
通常把元数据分为技术元数据( Technical Metadata)和业务元数据( Business Metadata)。技术元数据是描
述关于数据仓库技术细节的数据,这些元数据应用于丌发、管理和维护数据仓库;业务元数据从商业和业务的
角度描述数据仓応的数据,提供了良好的语义层定义,业务元数据使业务人员能够更好的理解数据仓応分析出
来的数据
元数据贯彻于建立数据仓库的整个过程,不?是ETL过程需要元数据的支持
数据挖挪
数据展示
业务系统
数据仓
?即席查询
外部数据
报表
元数据管理
图1元数据的应用
在使用元数据的同时,随着数据仓库市场的发展,业界出现许多数据仓库管理
和分析的工具,各种工具使用不同的元数据标准来表示和处理,不同系统之间的迁
移、数据交换变得困难。于是,我们希望用一种单一的元数据标准,使得各种组织
的元数据具有单一的元模型( Metamodel),因此,需要建立一种标准使得不同的
数据仓库和商业智能系统之间可以相互交换元数据。
http://www.dwway.com
Dwwa
1.1.2第二章元数据标准
1.2.1
元数据标准CWM
OMG于2001年颁布元数据标准CWM1.0( ommon Warehouse Metamodel
Version1.0)。CWM定义一个描述数据源、数据目的、转換、分析的元数据框架
以及定义建立和管理数据仓库的过程和操作,提供使用信息的继承。
目前宣布支持CWM的厂商包括:IBM、 Oracle、 Hyperion、 Dimension ED、
Genesis IONA、HP、NCR和 Unisys等。
CWM基于3个工业标准
UML- Unified Modeling Language,OMG建模标准;
>MOF- Meta Object Facility,OMG建立元模型和模型库的标准,提供在异
构环境下的数据交换的接口;
XMI- XML Metadata Interchange,OMG元数据交换标准。
JML在CWM中得到充分的应用,担任3个不同的角色
),UML用来做为与MOF对应的meta- metamodel。UML相当于 MOF Model,
UML Notation/和OCL( Object Constraint Language),被用来做为建模语言、图形符号
约束语言,定义和描述CWM
2),UML用来创建元模型。UML,特别是 Object Model包描述的子集,用来
从其它元模型继承等级和关联以建立CWM。
3),UML做为面向对象元模型( object- oriented metamodel)。UML被用来描
述面向对象的数据。
CWM元模型包括大量的子元模型(sulb- Metamodel),这些子元模型描述了建
立数据仓库和商业智能的各个主要部分的通用数据仓库元数据。
主要包括:
1)、数据资源:包括各个元模型,描述了面向对象数据、关系数据库、记录
多维和XML等数据。
http://www.dwway.com
Dwwa
2)、数据分析:包括描述数据转换、OLAP、数据挖掘、信息展现、商业术
语等的元模型。
3)、数据仓库管理:这包括数据仓库过程以及数据仓库操作结果的元模型。
The CWM Metamodel
Warehouse Process
Warehouse Operation
Transtormation
OLAP Min
Information
日 Sina
Analysis
nino Visualization Nomenclature
Resource
Object Model Relational Record
Multid imensional
日 USINESS
Softwane
Four abon
Infomation
Data Types Expression! and
Indexes
Mapping
Deployment
ob? ject Model
图2CWM元模型架构图
CWM元模型设计的目的是最大化的重用对象模型 Object Model(UML的子
集),尽可能的共享通用的模型构建。最典型的是,CWM重用/依赖对象模型来描
述面向对象的数据资源;另外,其它类型的数据资源的主要 Metamodel元素,在对
象模型中都有相同的模型元素与之相对应
1.1.2.2
使用CWM
1、CWM的目标使用者
CWM标准包括了技术元数据和业务元数据的定义,涉及数据仓库生命周期的
所有阶段,所以不只是实施工程师和实施顾问使用CWM,最终用户也会受益于
CWM