数据平台系统项目-技术方案

数据平台系统项目-技术方案

数据平台项目

目录

第1章方案总述 (1)

1.1 前言 (1)

1.2 项目背景 (1)

1.3 项目目标 (2)

1.4 项目建设原则 (2)

第2章系统建设规划 (3)

2.1 项目建设目标的理解 (3)

2.1.1 项目建设范围 (3)

2.1.2 项目建设内容 (3)

2.2 分行数据平台的建设目标 (4)

2.2.1 分行数据平台一期建设目标 (5)

2.2.2 分行数据平台二期建设目标 (5)

第3章整体设计方案 (5)

3.1 系统设计方法论 (5)

3.1.1 方法论 (5)

3.1.2 设计原则 (6)

3.2 数据平台技术体系 (11)

3.2.1 数据平台逻辑架构 (11)

3.2.2 数据采集设计 (14)

3.3 数据平台数据体系 (19)

3.3.1 数据架构设计 (19)

3.3.2 数据模型设计 (21)

3.3.3 灵活查询功能架构 (29)

3.3.4 数据备份与恢复 (29)

3.4 数据平台应用体系 (32)

3.4.1 统一报表平台 (32)

3.4.2 数据图表化展示 (82)

3.5 数据平台设计关键点 (90)

3.5.1 数据平台性能保障 (90)

3.5.2 时间窗口 (98)

3.5.3 备份策略 (99)

3.5.4 数据模型的历史数据存储 (99)

3.5.5 源系统变更影响分析 (101)

第4章软件及推荐硬件设备配置方案 (102)

4.1 系统软件方案 (102)

4.1.1 统一报表平台 (103)

第1章方案总述

1.1前言

我们衷心感谢贵行给予我们这样一个很好的机会，可以为贵行的数据平台建设提供技术解决方案和项目实施方案的建议书，并通过我们的方案建议书为及其应用系统的建设提供帮助。

我们期盼与贵行共同努力，以我们在兄弟分行和其他银行实施同类项目的经验以及我们使您的愿景变成现实的能力，为贵行IT建设增添一个新的里程碑，也为我们与贵行的真诚合作启动一个良好的开端。

该项目除了可以用宇信易诚所具有的经验和技术为贵行提供帮助外，我们认为这也是一个与贵行建立长期战略合作关系的宝贵机会。我们为这个目标所做出的努力正反映了这一点，我们愿意建立一个灵活的商务策略，和服务质量有竞争力的专家团队来满足贵行的需要。

1.2项目背景

随着贵行业务的快速发展，信息系统不断增多，业务数据量的规模也在急速膨胀。分行数据整合平台作为贵行的数据整合中心，需紧密衔接

总行ODS、数据仓库及分行特色系统、并且需考虑到贵行未来将要建设的系统的接入问题。根据贵行业务的拓展和条线管理的需要，各业务部门对决策信息依赖程度不断提高，经常会有一些高灵活性、多变性、高及时性的信息需求。贵行目前需要能够满足业务需求快速响应的统一数

据平台，仅依靠传统的数据加工模式对源数据进行抽取加工操作，由于业务口径的不一致性、数据质量低下、以及缺乏良好的数据统计分析手段等问题导致分行范围的决策分析成为难题，不能充分发挥业务积累的相关数据的作用数据的及

时性和准确性难以保证，给管理和营销增加了难度。

本次数据报表平台项目承担了分行主要业务数据的集中和整合及报表应用展示的功能。通过数据平台的建设，将为零售、公司、同业、绩效、人力资源、运营等业务提供统一准确的数据支持，是贵行业务精细化管理能力的重要基础类系统。数据平台从中远期角度来看，将成为贵行管理层/经营层洞察经营全貌、优化经营管控水平、推进战略决策效能、支撑综合运营分析的数据分析平台。通过数据的集中化、标准化管理，

实现分行数据的信息共享，构建实现企业数据平台及相关的管理决策分析应用。

1.3项目目标

贵行数据平台建设项目是搭建一个对接总行ODS、数据仓库、衔接分行特色业务的数据平台。从底层的数据平台、DW到上层的BI（商业智能）展现，数据平台在各交易系统之间、交易系统和报表分析系统之间实现数据交换，通过数据的加工、整合实现报表统计和分析。建立基础数据模型、ETL 平台、ETL 管理调度平台、确保数据采集完整、保证ETL数据质量、形成统一的数据展现。具体目标为：

1、构建统一的、层次合理的、灵活的企业级数据模型，整合各业务系统数据，形成分行统一的数据视图，建设成为贵行系统应用的基础数据平台。

2、建设统一数据应用平台，在实现基础数据平台的基础上实现统一报表平台，为贵行业务分析和经验决策提供全面的支持。

1.4项目建设原则

本次项目建设遵循的技术原则如下：

数据平台的正确建立和合理利用将直接影响到贵行的未来信息化发展，贵行数据平台建设应参考以下架构原则，指导和规范未来的数据平台信息化建设和管理，在项目方案中应该能够体现以下原则：

1. 数据集中原则：

将总行ODS、数据仓库数据、分行特色数据和应用统一进行管理和运维，保证资源的高度利用以及通过相关的技术保证数据和应用的绝对安全和稳定。

2. 数据标准分行统一原则：

依据总行的数据字典，减少数据定义的二义性。未来分行特色应用系统的数据结构是分行数据结构模型的子集。对分行级数据实行单点维护，确保分行级数据的可靠性和一致性。

3. 数据管理分行统一原则：

统一的存储管理，统一规划使用存储资源，提高存储资源使用效率。统一的性能管理，根据实际业务需求，合理分配资源，确保对数据的访问性能能够满足业务的需要。统一标准的安全管理，提高数据访问控制能力，降低关键业务数据的安全隐患。