数据治理平台系统简介_图文
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
控制度与流程规范文档、信息项定义等。
数据质量度量化—全方位管理数据平台的数据质量,实现可定义的数据质量检核
数据服务电子化--为数据平台提供面向业务用户的服务沟通渠道。
和维度分析,以及问题跟踪。
4
数据服务
分析类应 用系统
提供平台 沟通渠道
数据提供
数据集市 管理会计 数据流 风险 管理平台 数据质量 Schemas ODS
14
15
16
17
18
19
1. 系统目标与定位 2. 技术实现架构 3. 数据标准管理子系统 4. 元数据管理子系统 5. 数据质量管理子系统 6. 数据服务子系统
7. 统一认证与用户管理模块
20
功能定义 技术元数据 源系统数据结构定义 主数据ER模型 数据与映射关系定义 数据影响与血缘分析 数据变化对比分析 业务元数据 代码定义 报表表头定义 报表指标定义 报表指标勾稽关系分析 定义数据平台公共代码及其与源系统代码的关系。 定义数据平台业务报表的构成元素与结构。 定义数据平台业务报表中指标的计算规则。
7. 统一认证与用户管理模块
11
客户层
表现层
业务层
Import Export
集成层
资源层
Database Operation Engine Objects Relation Analysis Engine ORM Hibernate 外部数据 <<Config.xml>> XML 文本 EXCEL 应用系统 Management & Control Security Task/Trans Log Driver & Adapter
完成情况
导入源系统数据字典,并以系统-表-字段的层级关系展现 已完成 各级数据关系。 导入主数据ERwin模型,解析生成模型各层级关系。 已完成 定义数据平台各部分,以及源系统间的数据关联映射关系。已完成 依赖所定义的数据平台各部分,以及源系统间的数据映射 已完成 关系,图形化展现数据变化影响和数据问题溯源。 针对元数据不同版本进行差异部分识别与比较。 已完成 已完成 已完成 已完成
13
功能定义 数据标准文档管理 数据标准文档制订 数据标准文档发布 数据标准文档版本管理 数据标准信息项管理 标准代码定义 主数据定义 数据标准查询与反馈 数据标准文档查询与反馈 数据标准信息项查询 应用代码标准符合性检查 新应用开发者将本应用代码与标准代码进行匹配,提交 系统检查 维护数据标准公共代码。 维护主数据标准 维护数据标准相关文档类信息 对数据标准相关文档进行发布管理 对数据标准相关文档的历史版本信息提供查看功能。
核心业务 系统 信贷业务 系统
数据抽取
数据质量 管理
„系统
管理行内 数据标准
管理平台元数据, 进行数据影响、 血缘分析
数据标准
5
元数据管理
查询数据标准,以开发符合数据标 准的应用 提交标准代码比对文档 应用开发者 维护数据标准 制订、发布标准 应用系统代码标准比对 查询数据标准规范, 反馈建议
Web Browser
HTML/AJAX /HTTP
ExtJS
Interface
Lists
Serialize JDBC
ODS DataMart
UA
12Βιβλιοθήκη 1. 系统目标与定位 2. 技术实现架构 3. 数据标准管理子系统 4. 元数据管理子系统 5. 数据质量管理子系统 6. 数据服务子系统
7. 统一认证与用户管理模块
国家开发银行 数据治理平台系统简介
1. 系统目标与定位 2. 技术实现架构 3. 数据标准管理子系统 4. 元数据管理子系统 5. 数据质量管理子系统 6. 数据服务子系统
7. 统一认证与用户管理模块
2
数据平台一期已构建完成并投入使用,所面临的问题:
数据标准缺乏结构化管理 源数据变化造成数据平台数据混乱 对数据平台数据问题如何快速定位原因? 如何有效监控和改善数据平台数据质量? 。。。
业务部门
数据服务
数据服务单管 理员
9
登录认证 AD(目录) 系统 单点登录与 角色管理 统一认证 与用户管 理模块
数据服务子 系统 执行检核
提供检核系 统元数据 提供库表结 构元数据
数据平台
用户与机构 信息同步
统一用户 管理系统 数据标准 子系统
元数据子 系统
提供标准相 关元数据
10
1. 系统目标与定位 2. 技术实现架构 3. 数据标准管理子系统 4. 元数据管理子系统 5. 数据质量管理子系统 6. 数据服务子系统
22
23
24
25
26
27
元数据采集适配器是一种驱动和解析器,用来接收、解析各种不用类型数据源的数据, 将有效的元数据存入模型,并建立关系。 在本期项目中,元数据管理系统的接口提供以下几种适配器:库表结构适配器、 PowerCenter适配器、E/R Win适配器、数据平台血脉分析适配器、指标适配器、代码适 配器、表头适配器等。
定义数据平台业务报表中指标间的依赖关系,并进行影响 已完成 与血缘分析。
21
功能定义
系统管理
完成情况
元数据手动采集 手工上传元数据定义文件 已完成 提供针对不同目标应用的适配器,实现定时的自 已完成,但需数据平 元数据自动采集 动采集 台提供采集支持,接 口方式尚需确定。 版本管理 提供元数据定版、批量定版、版本回溯的功能 已完成 访问控制管理 提供针对元数据细节操作的访问控制 已完成
建设一个完整的数据治理平台,作为数据平台的管控系统,从制度、标准、监 控、流程几个方面提升开行的数据信息管理能力,解决目前所面临的数据标准 问题、数据质量问题、元数据管理问题和数据服务问题。
3
围绕国开行数据平台建设,提供针对数据生命周期的管控机制,体现为以下几个 出发点:
数据标准规范化--规范化管理构成数据平台的业务和技术基础设施,包括数据管 数据关系脉络化--实现对数据间流转、依赖关系的影响和血缘分析。
数据标准子系 统 数据标准管 理员
提出数据标准需求 申请 业务部门
6
数据服务
数据平台
数据抽取
元数据管 理员
数据服务
7
业务部门
了解本机构特定系 统数据质量 提出业务数据质量 检核需求
数据质量 检核
数据质量管 理员
8
数据平台服务申请
应用开发者
提供数据平台服务 数据平台服务申请 与数据平台有效沟通