用HSM实现ECM的层次化存储解决方案

1. TSM 客户端迁移到层次化 存储空间中
TSM Client
两 个 层 面 的 空 间 管 理
回取数据
TSM Server
2. TSM 服务器 在层次化存储空间中迁移
DB
Faster Access Slower Access
Higher Cost Lower Cost
1. 2.
TSM Client HSM – 客户端存储空间管理 TSM Server HSM – 服务器端存储池空间管理
DS4800 一级存储
SVC+DS4700 SATA 二级存储
Tape Library 离线存储
磁带IO 磁盘IO
HSM(TSM for Space Management)功能原理
�HSM按策略自动或者在用户指令下将指定的文 件从在线的快速存储迁移到廉价、大容量的近线存 储 �小的Stub文件保留在在线存储中，宛如已被迁移 的原始文件，充分确保迁移对应用，对用户的透明 �被迁移的文件，在用户需要访问时，自动从近线 存储迁移到在线存储
CMOD概念
� 应用程序（Application）
– 应用程序描述发送到 OnDemand 的报告的物理特征。
� 应用程序组（Application Group）
– 应用程序组包含您在 OnDemand 中装入的数据的存储管理属性和索引字段。
� 文件夹（Folder）
– 文件夹是用户查询和检索存储于 OnDemand 的数据所用的方式。
CMOD配置参数
� ars.cfg
– ARS_NUM_LICENSE=3 – ARS_LANGUAGE=ENU – ARS_NUM_DBSRVR=4 – ARS_DB_ENGINE=DB2 – ARS_DB_IMPORT=0 – ARS_DB_PARTITION= – ARS_DB_LOGFILE_SIZE=1000 – ARS_DB_LOG_NUMBER=40
HSM(TSM for Space Management) for OD 优势所在
HSM的优势
�完全透明于应用和用户的 存储空间迁移 �精准定位迁移和回取的数 据对象，迁移粒度按需指定 �高效率的迁移机制 �具备接近线性扩展的迁移 性能特点 �高效的查询机制 �高鲁棒性机制确保数据完 整性 �Lan Free，将对网络影响 降低到最小
CMOD 概述
� Content Manager OnDemand 具有以下功能：
– 将应用程序创建的数据集成到一个联机的、电子信息归档和检索的系统中； – 提供对组织中所有报告的受控的、可靠的访问； – 在需要数据时检索所需的数据； – 向标准直观的客户机提供诸如缩略图、书签、注释和快捷方式等功能。
解决方案概述
� ECM
企业将客户数据放在CM或CMOD管理的一级存储上，便于查询
� 客户遇到的问题: – 这些非结构化的数据增长的速度太快了，都放在一级存储上太贵了，需要层次 化的存储和自动迁移的方案把数据按照一定的策略转移起来。需要的时候还能 自动调回来。 – 数据量大，备份/迁移窗口有限，怎样提高数据移动的速度。 – 希望使用不同厂家，不同型号的存储设备来构成统一的存储池，方便利用旧设 备。 � 该解决方案对客户的好处 – CMOD管理客户非结构化的内容数据。 – TSM HSM把不活动的数据从一级存储迁到二级存储，最后到三级存储。当有 人要访问这些迁走的文件，它会透明的回迁到一级存储。 – GPFS使得备份/迁移/回调操作都能够在SAN上完成，不通过局域网传递数据 – SVC简化客户的配置工作，从操作每块磁盘简化成从容量池中划分空间给主机 。而且SVC可管理业界所有主流磁盘系统，使得异构存储成为可能，方便利用 旧设备。
CMOD常用命令
� arssockd Instance � arssockd stop Instance � arsload -u User -p Password -g AppGroup -h Instance � arsmaint -uБайду номын сангаасUser -p Password -g AppGroup -I Instance -m � arsdoc get -u User -p Password -f Folder -h Instance -i � arsadmin � arsdb � ....
Object Srv HSM_agent GPFS_12
TSMsvr GPFS_2
FC disk TSM DB/ log
SAN
GPFS_11 GPFS_12
GPFS_2
TS3100
一级存储
二级存储
二级存储的扩展 及离线备份
HSM(TSM for Space Management) for OD 应用架构
演示环境介绍
Obj_Svr1 TSM client Lib_Svr TSM_Svr Obj_Svr2 TSM client AIX 5.3.8 sp5
DS4700 VDisk
DS4100 VDisk
SVC SVC
GPFS_11 GPFS_12 querytemp
GPFS_2
SVC+DS4100 SATA 近线存储 *250GB 14 14*
�最小以文件为粒度的存储虚拟化 �实现应用压力和存储能力的和谐匹配 �提高资产利用率，降低资产总拥有成 本 �快速，透明的数据按需恢复
HSM(TSM for Space Management) for OD 应用架构
LAN
应 用 架 构 示 意 图
Object Srv HSM_agent GPFS_11
� 存储集（Storage Set）
– 存储集是存储节点的命名集合，这些存储节点支持有相似存储管理特征的应用 程序组。
CMOD配置过程
� Content Manager OnDemand 实例是一个逻辑服务器环境，它 由数据库、库服务器以及一个或多个对象服务器组成。
– ARS.INI文件必须为每个实例包含一节，每节标识该实例使用的 ARS.CFG 文件 、ARS.DBFS 文件和 ARS.CACHE 文件。 – 必须为每个实例创建 ARS.CFG 文件的唯一副本。 – 应为每个实例维护独立的表空间文件系统和高速缓存存储文件系统（如 ARS.DBFS 文件和 ARS.CACHE 文件）。
用HSM实现ECM的层次化存储解决方案
IBM ATS & SW Techline
目录
� 解决方案介绍 - 适用场景
- 对客户的好处
� 演示环境介绍
- CMOD - TSM HSM - GPFS - 存储
� 演示内容
- 用CMOD arsload来加载客户的非结构化内容数据 - 一线存储容量不够，用 TSM HSM进行数据迁移到二线存储 - 二线存储远程灾备 - 二线存储空间满，迁移到磁带库
带库扩展二级存储的优势 �近乎无限的二级存储 扩展能力 �灵活的存储池间迁移 能力，进一步提高层次 化管理的效率 �二级存储间的迁移也 完全透明于应用和用户 �具备接近线性扩展的 迁移性能特点（决定于 磁带驱动器的数量） �价格低廉
带库用于离线备份的优势 �与HSM的机制紧密集 成，备份动作简洁，高 效 �按需进行应用数据与 存储介质之间的集中分 配 �灵活的数据过期和空 间回收管理 �灵活的介质追踪和管 理功能
� Content Manager OnDemand 具有的一些优点：
– 无需指定确切的报告即可容易地定位数据； – 无需处理整个报告即可检索所需的报告页； – 从报告中查看所选择的数据。
CMOD系统概述
� Content Manager OnDemand 系统由以下几部分组成：
– 在运行TCP/IP通信协议的网络上通信的客户机程序； – 维护索引数据和服务器控制信息的数据库管理器； – 维护各种类型存储设备上的文档的存储管理器。