中国银联海量数据分析平台
合集下载
相关主题
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
XData成功案例列表
目录
1. 中国银联海量数据分析平台 (1)
1.1. 项目介绍 (1)
1.2. 解决方案 (1)
1.3. 客户收益 (1)
1.中国银联海量数据分析平台
1.1.项目介绍
为了创新业务的需求,更好地服务银行业,中国银联积极探索新的技术,进军大数据领域。作为首期应用示范,需要用hadoop构建字段合规性分析系统,商户推荐系统,数据规模是30TB,数据导入性能每小时80GB,全年数据30TB 左右,每条记录模式是刷卡交易信息,每条大小200~500字节不等。
1.2.解决方案
公司给上海银联提供的整个方案采用14台高性能A620服务器构建Hadoop 海量数据分析平台,交换环境千兆以太网,整个集群平均导入速度为10W/s,随机单条记录查询时间少于3s。完全达到首期平台建设要求。
1.3.客户收益
✓高可靠性:系统全年7×24小时无间断服务。
✓高可用性:服务器故障情况下,系统仍能稳定工作,并保证数据完整性和可用性。
✓灵活扩展:通过增加存储设备,容量可以平滑的扩展,性能可以同比提高。当性能(并发访问、IO带宽)不足时,简单通过扩展硬件即可同比
地扩展系统的总体性能。
✓高性能:提供每秒数十万的记录导入速度,百亿级规模记录随机点查询秒级返回。
✓低成本:在大规模部署时,该系统有总体价格优势。
✓易开发:系统对外呈现单一入口,并提供类JDBC和SQL访问接口,便
于业务的开发及移植。
✓易管理:提供图形化管理界面,方便用户对系统进行管理和监控。