FusionInsight LibrA企业级数据仓库白皮书
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
PB 级企业数据仓库
FusionInsight LibrA 是采用Shared-nothing 架 构的MPP 系统,它是由众多拥有独立且互不共享 CPU 、内存、存储等系统资源的逻辑节点组成。在这 样的系统架构中,业务数据被分散存储在多个物理节 点上,数据分析任务被推送到数据所在位置就近执行, 通
过控制模块的协调,并行地完成大规模的数据处理 工作,实现对数据处理的快速响应。
产品特性
简单易用
● 应用快速迁移/上线,兼容标准ANSI SQL ,提供
快速数据迁移工具。
● 简化运维,提供可视化集群部署、运维管理工具。 ● 快速升级:版本升级性能提升至2小时完成,且和
数据库元数据和用户数据的数量无关。
弹性扩展
● Shared-nothing 架构,具备超强的Scale-out 横
向扩展能力。
● 1024物理节点,扩展线性比为1。 ● 基于通用X86架构,扩容成本低。
无缝对接Hadoop
● 对应用透明,完全支持SQL2003标准访问Hadoop 原生数据。
● 高性能交互查询:支持向量引擎访问HDFS 存储层,
支持高效率查询ORC 文件,Smart Scan 技术减少网络数据交换。
● 与华为大数据生态(Hadoop )体系无缝连接。
极致性能,高效交互SQL 分析
●
列存向量化引擎,利用向量化+SIMD 提供极致分析
性能。
● 并行 Bulk Load 加载技术,旁路协调节点,数据节
点直连,充分利用各节点的计算能力及网络带宽。 ● 大规模集群通讯技术,集群网络通信分层解耦,实
现数据中心内大规模节点的高通量无阻塞通信。 ● 弹性集群:通过NodeGroup 技术支持一套集群划
分为多个逻辑子集群,不同Node Group 之间计算资源可以弹性共享,满足子集群业务峰值时的计算需求。
电信级高可靠
● 无单节点故障:全组件HA ,无单点故障。数据节点 HA + Handoff 技术,协调节点多活,GTM 全局事务节点HA 。
● 扩容业务不中断:基于Node Group 技术的在线
扩容,扩容过程中支持数据增、删、改、查,及 DDL 操作(Drop/Truncate/Alter table) 。
安全
● SSL 安全连接,RFC5802口令登录认证,三权分立
的用户权限管理模式,日志、文件敏感信息mask 处理、完善的日志与审计等功能,全方位安全保证机制,为数据安全保驾护航。
● 通过了华为网络安全实验室ICSL 认证,该认证是遵
从英国当局颁布的网络安全标准设立的。
技术规格
2