存储培训-段3(NS集群式文件存储系统介绍)

合集下载
  1. 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
  2. 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
  3. 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。

被授权访问所有的存储文件,多种应用可以按需使 用整个存储空间直至整个存储空间耗尽将存储空间 的利用效率发挥到最大。 高聚合带宽:可以提供高达几十GB的聚合带宽, 并在容量扩展的同时性能也线性增长。 硬件容错功能:NS本地集群存储系统将多项不同 软硬件故障都视为正常的事件,提供了一套智能的 故障恢复流程,系统自动的处理网络中断、磁盘损 坏、系统宕机、人为误操作、电源中断等等故障, 不但在保护好了数据完整性,业务也可无间断的运 行。
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
NS集群式文件存储系统优势
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
北京阳光伟业科技发展有限公司 免费咨询电话:400-7060-198
新建系统
要求存储系统环境为千兆环境
存储服务器模式
存储服务器数量需要大于2 元数据服务器数量建议为2 根据容量要求来确认是否整合服务器
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
NS集群式文件存储系统特点
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
用户
应用层
存储层
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
单一命名空间,数据共享:任一台应用服务器都可
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
实施注意问题
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
实施注意问题 目录规划,多个应用需要为每个应用建立子目录, 每个应用只挂载相应的目录。如果只建立一个大的目录 ,把资源、协同等文件都放在同一文件夹内,管理起来 会比较麻烦(可能多个程序使用同一名字的文件)。 建议使用企业级磁盘 根据与学校老师交流了解到,目前教委指定采购的都 是桌面级硬盘,不具备7X24小时工作能力。企业级硬盘 具有7*24小时不间断作业能力,与桌面级硬盘相比,企 业级硬盘最重要的不同之处在于可靠性,长时间运作, 以及很高的MTBF(Mean Time Before Failure,平均 故障时间)。速度是差不多的。
北京阳光伟业科技发展有限公司 免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
优秀的小文件处理性能:NS本地集群存储系统面
向大量WEB2.0应用中海量小文件存储做了多项优 化,提供高效支持管理存放上百亿的文件数量,并 支持存放千万级数量文件的大目录快速检索。 大文件处理性能:NS本地集群存储系统同时也提 供对大文件的高效支持,并充分的利用其所有存储 设备的IO带宽,提供极高的聚合带宽。 POSIX兼容:为了让用户业务能够无缝的转移到 NS本地集群存储系统之上而提供了标准的文件系 统接口,应用程序可以使用完全标准的各项系统调 用进行数据读写,无需重新编译,并且用户可以随 机修改文件的任何内容。
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
数据删除保护
一般的文件系统可写即可删除,大多没有做到删除 的限制。但有些特定的应用要求,删除权限与写的权限 分开(例如广电需要领导审查决定,分工明确),目前 loongstore实现了删除控制工作,可以设置某个IP的服 务器不能删除数据。
北京阳光伟业科技发展有限公司 免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
成本控制:工业标准的通用服务器硬件作为构建单


元,并且动态添加容量的功能也使得用户可以灵活 的投资硬件设备。 在线扩容:多存储容量耗尽需要扩展时,NS集群 式文件文件系统不会造成前端应用的中断,它采用 的是在线扩展模式,其扩展力度可以为一块或多块 硬盘也可以是1台或多台存储节点。 支持异构平台:windows、linux 支持苹果操作系统 与NS全局存储系统配合的更好,全局系统可以理 解为2层带外模式存储系统
NS 集群式文件存储系统V 1.0
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
混合模式
要求存储系统环境为千兆环境
存储服务器+IO服务器(包括盘阵)模式
该模式需要注意存储服务器是否新加,便
于数据迁移 注意盘阵数据的迁移
北京阳光伟业科技发展有限公司
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
存储容量使用调度
多存储服务器,尤其是扩充存储服务器后,可以会 使得各存储服务器的容量不一,为了有效使用各存储服 务器的空间,loongstore存储会根据策略优先使用存储 空间较大的存储服务器。
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
多网段支持
loongstore支持多网段,多网段可以起到冗余。 loongstore可以为多网段的应用服务器提供支持, 这样各应用服务器之间便可以做到一定程度上的隔离( 互联网、内网),目前龙存公司内部环境便是4交换机4 网段支持。 ×开始要规划好IP,最好不用多IP×。
北京阳光伟业科技发展有限公司 免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
对于现有盘阵的改造 1、尽量不选用ISCSI盘阵,loongstore是工作于以太网 的,如果使用ISCSI且都接在同一交换机上则会对性 能和稳定性产生影响。 2、另外,针对现有多采用桌面硬盘,使用盘阵要做 raid5或6或做单盘使用。(根据 磁盘数量和盘阵型号 等因素来定) 新购磁盘注意固件版本,便于维护(盘阵领域突出)
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
缺陷 IP与服务器绑定,更改IP会出现问题。升级、改造会比 较麻烦。 没有quota(磁盘限额-针对用户),像EDA这样的应用 仿真错误会将存储占用达到TB级别,如果访问正确最多 百兆级别,因此对用户设置quota更利于管理员的管理 。 无图形化的管理界面,正在测试ing。 无快照,替代传统中高端存储存在问题。 单客户端访问性能:千兆网比光纤速度低(广电高清多 轨制作),广电用户已经习惯光纤。万兆成本太高。 不支持unix
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储பைடு நூலகம்统V 1.0
IP不能更改(重点强调)
目前的loongstore各服务器的IP是绑定的(不包括 应用服务器),其各种调度策略角度分配是根据IP制定 的,在使用中不能对IP进行更改,切记。如果更改 IPloongstore将不能对相应对象进行调度,文件系统将 出现问题。 如果需要更改IP,得将存储数据备份、存储系统配 置信息清除、更改IP、重新部署存储、恢复备份文件。
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
客户端版本 1、windows有通用的版本,但是根据不同需要可以使 用不同的定制版本。ACL功能需要域支持 2、linux版本,注意要使用通用开源内核的系统,例如 centos、redhat。像vmware的系统因为不能编译内 核,所以无法支持。 查看linux版本请将uname -a的结果全部反馈。
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
多数据副本
loongstore可以设置多个数据副本,多数据服务副 本可以将数据分散到多个存储服务器。以两个数据副本 为例,在数据写入的时候会将数据写成2份放到不同的 存储服务器(以IP为标志),这样就可以任意服务器损 坏不影响整个文件系统的正常工作。同时写成2份,也 可以同时从两个存储服务器读取数据(多服务器情况下 ),实现较高的数据带宽(广电)。 初始的目录建议设置2份数据副本,如果不再做设 置,其子目录将继承2数据副本,如果有特殊要求可以 对其子目录设置3-多个数据副本。
NS 集群式文件存储系统V 1.0
环境改造
要求存储系统环境为千兆环境
利用原有盘阵空间,只需采购IO服务器
需要注意数据的迁移问题 如果存储和服务器多的话可以逐步添加 注意存储硬盘已用时间:3年为一个期限 不建议加入ISCSI盘阵,如果有ISCSI盘阵
最好有单独的链路
北京阳光伟业科技发展有限公司 免费咨询电话:400-7060-198
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
"网络RAID"
最基本的两个数据副本可以看作是网络RAID1(存 储2组数据,任意一组损坏不影响正常服务)。目前 loongstore在做RAID5的模式,任意损坏(有且只有一 个)可以工作,所占用的存储设备也会大大减少,降低 硬件投资。 但是loongsotr宣传,RAID5的模式是为高性能环境 开发的,使用软件价格上要贵很多。(了解)
多元数据:
单台元数据服务器处理性能有限,像网站等以小文 件为主的应用,对元数据的访问要求较高,使用需要多 元数据服务器支撑。 多元数据,目前多应用2台。像BWFS是主备模式 ,实际上还是一台元数据服务器工作。而loongstore目 前多用的也是2台元数据服务器,2台是同时工作,有负 载均衡的作用。loongstore,目前是有应用4元数据服务 器的。 (以龙芯EDA为例,在使用BWFS过程中因为数据 量较大,发生过读取速度过慢)。
北京阳光伟业科技发展有限公司 免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
产品典型拓扑介绍
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
售前环境调查
北京阳光伟业科技发展有限公司
免费咨询电话:400-7060-198
NS 集群式文件存储系统V 1.0
服务器型号
服务器具体配置(网卡、磁盘控制器、CPU 64/32) 数据量大的话(高校)建议存储节点内存大于等于4G ,元数据内存大于等于8G 网络环境拓扑(决定存储的网络接入) 网络IP 是否有域 改造-盘阵类型 磁盘类型(桌面、企业),磁盘已服务时间 裸容量、可用容量 磁盘容量1000(磁盘厂家)和1024的计算 操作系统版本:linux uname -a
相关文档
最新文档