CPFS文件系统
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
联科CPFS文件系统Cluster Technology Ltd.
2013
文件系统定义什么是文件系统?
文件系统是操作系统用于明确磁盘或分区上的文件的方法和数据结构;
即在磁盘上组织文件的方法。
2
网络文件系统(NFS)
Lustre对象存储文件系统就是由客户端(client)、存储服务器(OSS,Object Storage Server)和元数据服务器(MDS, Meta Data Server)三个主要部分组成。Lustre的客户端运行Lustre文件系统,它和OSS进行文件数据I/O的交互,和 MDS进行命名空间操作的交互。为了提高Lustre文件系统的性能,通常Client、OSS和MDS是分离,当然这些子系统也可以运行在同一个系统中。
联科CPFS产品描述•联科CPFS是一个基于内存的高性能储存系统,它可以把多个服务器上的部分内存分别虚拟成块存储设备,并通过并行文件系统聚合成存储系统,提供数据的高效存取。
联科CPFS拓扑图
联科CTFS - Lustre
1、极高的IO性能(带宽和 IOPS)
2、把多个服务器上的内存聚合成统一名字空间的单一存储系统。支持全
内存IO操作,支持内存数据与硬盘同步和回写
3、高可用
–支持 RAID 1, RAID 5, RAID 6
–支持元数据服务器HA
–支持多个IO服务器,支持IO服务器HA
4、在线扩展:支持在线添加存储节点和内存服务器,聚合IO带宽和
IOPS线性增加
5、元数据和文件数据分别独立处理
6、提供 POSIX 文件系统接口,可以通过Lustre客户端访问数据
7、对硬件没有特殊要求,支持多种硬件
8、支持全无盘架构,最大化硬件生命周期
9、同时支持 Infiniband 与以太网客户端
10、安装配置简单
1、 在服务器为主流X86配置和QDR Inbiniband全交换网络配置的前提
下,一个IO节点最大的IO带宽不小于3GB/s,一个RAID5组提供的IOPS不小于200,000/s;
2、 随着数据IO服务器数量和提供内存的服务器数量的增加,聚合IO带
宽和IOPS线性增加。
联科CPFS产品优势
优势:
1、与同类产品相比,IO节点数量相同的情况下,提供更大的聚合IO带宽。
2、IOPS指标非常优越,可以提供百万甚至上千万级的IOPS。
3、不必增加专用的存储设备,利用集群节点部分内存提供高性能存储
能力。
4、虚拟磁盘技术可以与其他文件系统结合
5、自主研发的文件系统支持常用存储设备
6、支持多MDS,Metadata分布式存储
联科CPFS目标客户目标行业和应用客户
1、气象、遥感、测绘、航天、公安、传媒、教育、企业、
科研机构等等
2、应用程序IO操作频繁,数据访问量大,对IO存取速度要
求高的客户。
3、基于数据库的应用一般不是并行文件系统的用户。
联科CPFS应用案例
1、中国国家气象局 (50 nodes; 2 MDS, 6 OSS)
2、中国卫星气象中心 (86 nodes; 2 MDs, 4 OSS; 1 MDS, 1OSS)
3、北京化工大学 (32 nodes; 1MDS, 4 OSS)
4、中国西南核物理与化学研究所 (11 nodes; 1MDS, 10 OSS)
5、香港环保署 (32 nodes; 1 MDS, 1 OSS)
6、香港天文台机场项目 (50 nodes; 2 MDS, 4 OSS)
7、香港中文大学 (40 nodes; 1 MDS, 2 OSS)
8、香港科技大学 (9 nodes; 1 MDS, 4 OSS)