P2P系统中数据复制算法研究
合集下载
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
中 图 分 类 号 ：Ｐ９ Ｔ ３３ 文 献标 识码 ： Ａ
Ｒｅ ｅ ｒ ｈ ｏ ｔ ｐ ｉ ａ ｉ ｎ Ａｌ ｏ ｉｈ ｎ Ｐ２ Ｓ ｓｅ ｓ ｓ ａ ｃ ｆＤａ ａ Ｒｅ ｌ ｔｏ ｇ ｒｔ ｍ ｉ Ｐ ｙ ｔ ｍ ｃ
Ｚ Ａ ＧＸａ－ ｉ ， Ｎ ｉｉ，Ｈ ＵＪ ｇ Ｈ Ｎ ｉ ｍｎ ＷＡ ＧＹ—ｅＺ Ｏ ｉ ｏ ｇ ｊ ｎ
（ ｏｅｅｏ ｏ ｐｔ ，Ｎ ｔｎｌＵ ｉ． ｆＤｆ ｓ ｅｈｏｏｙ ｈｎｓａ４０７ ，Ｃ ｉａ Ｃ ｌｇ ｆ ｍ ｕｅ ａｉ ａ ｎ ｏ ｅ ｎｅＴｃｎ ｌ ，Ｃ ａｇｈ １０ ３ ｈｎ ） ｌ Ｃ ｒ ｏ ｖ ｅ ｇ
Ａ ｓ ａｔＡｃｍ ａ ｔｅａａ ｓ ｆｅ ａ ｏ ｌ ｒｈ ｓｉ Ｐ Ｐ ｓ ｔ ｓａｄａｎｖｌｅｌａｏ ｌ ｒ ｍ ） ａｅ ｎＬ Ｐ ｂｔ ｃ： ｏ ｐｒ ｉ ｌ ｉｏ ＃ｃｔｎａ ｏｉｍ ２ ｓ ｍ ｎ ｏｅ ｒ ｉ ｔｎａ ｏｔ ＤＴ ｂｓｄｏ Ｄ Ｃ ｒ ａｖ ｎ ｙ ｓ ｒ ｉ ｇ ｔ ｎ ｙｅ ｐ ｃｉ ｇｉ ｈ ｅ
ｔ ｒ ｖ ｅ ａ ａｌ ｉ ｔ ｎ ｄ ｂｏ ｋ ｒ ｍｒｄ ｗ ｅ ｅ ｎ ｍｂ ｒ ｏ ｖ ｉ ｂ ｅ ｂｏ ｋ Ｓｓ ｌ ｏ ｉ ｏ ｅ ｔ ｖ ｉ ｂ ｌｙ，ａ ｌ ｓ ａｅ ｍｓ ｅ ｈ ｎ ｔ ｕ ｅ ｆａ ａｌ ｌ ｃ ｓｉ ｍａｌ如 ｔｉ ｍｐ ｈ ａ ｉ ｃ ｈ ａ ｌ ｈｓ ｓ ｏ ａ ｅ ａｇ ｒ ｈ Ｃ ｉｎ ｌ ａ ｄ ｎ ａ ｃ ｅ ｄ ｔ ｖ ｉ ｉｔ ，ｅ ｅ ｅ ｅ ｎ ｄ ｅｉ ｉｔ ｗ． ｈ ｗ ｔ ｔｔ ｏ ｔｍ ａ ｓ ｉ ｅ ｙ ｅ ｈ ｎ ｅ ｔ ａａ ａ ａｌ ｌ ｙ ｖ ｎ ｗｈ ｎ ｔ ｏ ｅｒ ａ ｌ ｉ ｌ ｈ ｈ ｌ ｉ ｎ ｇｔ ｎ ｈ ｂ ａ ｉ ｈ ｌｂ ｉ ｓ ｏ ｙ Ｋｅ ｒ ｓ ｐ ｅ － － ｅ ｒ ｄ ｔ ｖ ｌ ｉｔ ； ｔ ｅ ｌ ａ ｏ ｙ ｗｏ ｄ ： ｅ ｒｔ ｐ ｅ ； ａａａ ａ ａ ｌｙ ｄ ａ ｒｐｉ ｔ ｎ ｏ ｉ ｂｉ ａ ｃｉ ｔ ｍ．Ｓｍｕａ ｏ ｅ ｕｔ ｈ ｉ ｌｔ ｎ ｒ ｓ ｌ ｉ ｓ
１ ｅａｕｅ数据编码 ｒｓｒ
ｏａ ｒ数 据 编码利 用数 学 的方 法 把 ｍ 块 数据 变换 成 凡块 同样 大小 的数据 ， ｒ ｕｅ ｓ 编码 后 的 凡块数 据 中的 任意 ｍ 块数 据都 可还 原 成原来 的 ｍ块 数据 。因此一 个 （ 凡 的 Ｍ Ｓ编码 可 以容忍 凡一ｍ 个 节点 的失 ｍ， ） Ｄ 效 。数据 编码 包括 数据 分割 、 编码 、 码 和还 原数 据等 步骤 。 解
ｃｄｓｗｒ ｐｅ ｎｅ ． ｙａ ｉ ｒ ｌｎｐａｅ ｅｔ ａ ｐ ｐｓｄ Ｗｉ ｉ ｍ ｔ ｄ ｂ ｃｓ ｒ ｓ ｒ ｒ ｅｅｓｒ ｎ ｃｅｓ ｏｅ ｏｅ ｅｅ ｒ ｅｔ Ｄ ｎｍｃ ｅ ｉ ｌ ｍ ｎ ＷＳ ｒ ｏｅ ． ｔ ｔ ｓ ｅ ｏ ， ｌ ｋ ｅ ｔ ｅ ｉ ｐｅ ｃｓ ｄｓ ｃｓ ｎｄｓ ｓ ｄ ｐａ ｃ ｏ ｈ ｈ ｈ ｏ ａ ｏ ｄ ｎ ｄ ｏ ａ ｕ
维普资讯
第２ ９卷第 ３ 期
国 防 科 技 大 学 学 报 ＪＵ Ｎ ＬＯ ＡＩＮ ＬＵ ＩＥ Ｓ ＹＯ ＥＥ Ｓ Ｃ Ｎ Ｌ Ｇ Ｏ Ｒ Ａ ＦＮＴＯ Ａ ＮＶ ＲＩ ＦＤ ＦＮＥＴ Ｈ ＯＯ Ｙ Ｔ Ｅ
Ｖ １２ ｏ３２ｏ ｏ．９Ｎ ． ０７
文章 编 号 ：０ １ ４６ ２０ ）３ ０ １ ４ １０ —２８ （０７ ０ —０６ —０
Ｐ Ｐ系统 中数 据ຫໍສະໝຸດ 复 制算 法研 究 ２王意 洁， 小明 ， 张 周 婧
（ 国防科技大学 计算 机学 院 ， 湖南 长沙 ４０７） １ ３ ０
摘 要： 比较分析 了 Ｐ Ｐ系统中各种数据复制算法 ， ２ 并提出了一种基 于 Ｌ Ｐ Ｄ Ｃ编码 的数据 复制算法 Ｄ ｒ， ｙｅ
Ｄ ａ 用 ＩＡ加 密算 法把数 据分 割成 的 ７块 ， 码 成 １ ｈｓ ３ Ｄ ｈ 编 ４块数 据 ， 同时采 用 局 部 和全 局 两 个 维 护策 略 ， 局部 的维 护策 略保 证 编码数 据块不 小 于 １ ， 局 的维 护策 略保证 数据 块数 目不大 量超过 １ 块 。 ４全 ４ 在相 同的存储 开销 情况 下 ， 用 ｏ ｓｌ 利 ｒｕ ａ ￣编码 可 以 比传统 的复 制算 法获 得更 高 的数 据可 用 性 。但 是
在 Ｏ ｅ ｓ ｒ 和 Ｄ ａ 中， ｃ ｎｔｅ ａ ｏ ｈｓ ｈ 编码块的位置信息都保存在一个节点上 ， 数据块的访 问都需先从该节点上获 取位 置信 息 ， 这种 放置算 法容 易产 生瓶 颈 问题 ， 同时 当数 据丢失 时没 有考虑 数据 的重建 。本 文提 出 了一 个基于 Ｌ Ｐ （ ｗｄｎ ｔ ｐｒ ． ｅｋ 编码的数据复制算法 Ｄｒ， Ｄ ｃ １ ． ｓ ａｔ ｃ ｃ） ｏ ｅｉ ｙ ｉ ｈ ｙ ｙ 采用动态的数据块放置算法 ， ｅ 数据 的位 置信息可以通过直接计算得到， 不需要节点保存数据位置信息。
数据块 采用动态分配算法存储 到节点中 ， 在节点邻居 中保存 数据块 的副本 以提高 数据 块的有效 性 ， 数据块 的 数量过小时重建数据块。实验表明 ， 即使节点 的可靠性非 常低 ， 该算法也能够获得很高的数据可用性 。 关键词 ：ｅｒｏｐｅ； ｐｅ－ －ｅｒ数据可用性 ； ｔ 数据复制
支持 数据 的 可用性 、 持久 性和完 整性 已成 为 Ｐ Ｐ存储 系统 的一个 关键 问题 ，２ ２ Ｐ Ｐ系统 主要采 用 数 据 复制 技术 来解 决这 些 问题 。 目前 ＰＰ系统 中的数 据 复 制策 略 有 全复 制 、 块 复制 和基 于 ｏ ｓｒ…编码 ２ 分 ｒ ｔｏ ａｌ
的复制三 种 。 在 Ｏ ｅｎｔｅ 每个 数 据 被 分 割 成 １ ， 后 利 用 ｏａ ｌ 这 １ 数 据 编 码 成 ３ ｃａｓ ｒ［中 ｏ ２ ６块 然 ｒｓ￣把 ｕ ６块 ２块 数 据 。
Ｒｅ ｅ ｒ ｈ ｏ ｔ ｐ ｉ ａ ｉ ｎ Ａｌ ｏ ｉｈ ｎ Ｐ２ Ｓ ｓｅ ｓ ｓ ａ ｃ ｆＤａ ａ Ｒｅ ｌ ｔｏ ｇ ｒｔ ｍ ｉ Ｐ ｙ ｔ ｍ ｃ
Ｚ Ａ ＧＸａ－ ｉ ， Ｎ ｉｉ，Ｈ ＵＪ ｇ Ｈ Ｎ ｉ ｍｎ ＷＡ ＧＹ—ｅＺ Ｏ ｉ ｏ ｇ ｊ ｎ
（ ｏｅｅｏ ｏ ｐｔ ，Ｎ ｔｎｌＵ ｉ． ｆＤｆ ｓ ｅｈｏｏｙ ｈｎｓａ４０７ ，Ｃ ｉａ Ｃ ｌｇ ｆ ｍ ｕｅ ａｉ ａ ｎ ｏ ｅ ｎｅＴｃｎ ｌ ，Ｃ ａｇｈ １０ ３ ｈｎ ） ｌ Ｃ ｒ ｏ ｖ ｅ ｇ
Ａ ｓ ａｔＡｃｍ ａ ｔｅａａ ｓ ｆｅ ａ ｏ ｌ ｒｈ ｓｉ Ｐ Ｐ ｓ ｔ ｓａｄａｎｖｌｅｌａｏ ｌ ｒ ｍ ） ａｅ ｎＬ Ｐ ｂｔ ｃ： ｏ ｐｒ ｉ ｌ ｉｏ ＃ｃｔｎａ ｏｉｍ ２ ｓ ｍ ｎ ｏｅ ｒ ｉ ｔｎａ ｏｔ ＤＴ ｂｓｄｏ Ｄ Ｃ ｒ ａｖ ｎ ｙ ｓ ｒ ｉ ｇ ｔ ｎ ｙｅ ｐ ｃｉ ｇｉ ｈ ｅ
ｔ ｒ ｖ ｅ ａ ａｌ ｉ ｔ ｎ ｄ ｂｏ ｋ ｒ ｍｒｄ ｗ ｅ ｅ ｎ ｍｂ ｒ ｏ ｖ ｉ ｂ ｅ ｂｏ ｋ Ｓｓ ｌ ｏ ｉ ｏ ｅ ｔ ｖ ｉ ｂ ｌｙ，ａ ｌ ｓ ａｅ ｍｓ ｅ ｈ ｎ ｔ ｕ ｅ ｆａ ａｌ ｌ ｃ ｓｉ ｍａｌ如 ｔｉ ｍｐ ｈ ａ ｉ ｃ ｈ ａ ｌ ｈｓ ｓ ｏ ａ ｅ ａｇ ｒ ｈ Ｃ ｉｎ ｌ ａ ｄ ｎ ａ ｃ ｅ ｄ ｔ ｖ ｉ ｉｔ ，ｅ ｅ ｅ ｅ ｎ ｄ ｅｉ ｉｔ ｗ． ｈ ｗ ｔ ｔｔ ｏ ｔｍ ａ ｓ ｉ ｅ ｙ ｅ ｈ ｎ ｅ ｔ ａａ ａ ａｌ ｌ ｙ ｖ ｎ ｗｈ ｎ ｔ ｏ ｅｒ ａ ｌ ｉ ｌ ｈ ｈ ｌ ｉ ｎ ｇｔ ｎ ｈ ｂ ａ ｉ ｈ ｌｂ ｉ ｓ ｏ ｙ Ｋｅ ｒ ｓ ｐ ｅ － － ｅ ｒ ｄ ｔ ｖ ｌ ｉｔ ； ｔ ｅ ｌ ａ ｏ ｙ ｗｏ ｄ ： ｅ ｒｔ ｐ ｅ ； ａａａ ａ ａ ｌｙ ｄ ａ ｒｐｉ ｔ ｎ ｏ ｉ ｂｉ ａ ｃｉ ｔ ｍ．Ｓｍｕａ ｏ ｅ ｕｔ ｈ ｉ ｌｔ ｎ ｒ ｓ ｌ ｉ ｓ
１ ｅａｕｅ数据编码 ｒｓｒ
ｏａ ｒ数 据 编码利 用数 学 的方 法 把 ｍ 块 数据 变换 成 凡块 同样 大小 的数据 ， ｒ ｕｅ ｓ 编码 后 的 凡块数 据 中的 任意 ｍ 块数 据都 可还 原 成原来 的 ｍ块 数据 。因此一 个 （ 凡 的 Ｍ Ｓ编码 可 以容忍 凡一ｍ 个 节点 的失 ｍ， ） Ｄ 效 。数据 编码 包括 数据 分割 、 编码 、 码 和还 原数 据等 步骤 。 解
ｃｄｓｗｒ ｐｅ ｎｅ ． ｙａ ｉ ｒ ｌｎｐａｅ ｅｔ ａ ｐ ｐｓｄ Ｗｉ ｉ ｍ ｔ ｄ ｂ ｃｓ ｒ ｓ ｒ ｒ ｅｅｓｒ ｎ ｃｅｓ ｏｅ ｏｅ ｅｅ ｒ ｅｔ Ｄ ｎｍｃ ｅ ｉ ｌ ｍ ｎ ＷＳ ｒ ｏｅ ． ｔ ｔ ｓ ｅ ｏ ， ｌ ｋ ｅ ｔ ｅ ｉ ｐｅ ｃｓ ｄｓ ｃｓ ｎｄｓ ｓ ｄ ｐａ ｃ ｏ ｈ ｈ ｈ ｏ ａ ｏ ｄ ｎ ｄ ｏ ａ ｕ
维普资讯
第２ ９卷第 ３ 期
国 防 科 技 大 学 学 报 ＪＵ Ｎ ＬＯ ＡＩＮ ＬＵ ＩＥ Ｓ ＹＯ ＥＥ Ｓ Ｃ Ｎ Ｌ Ｇ Ｏ Ｒ Ａ ＦＮＴＯ Ａ ＮＶ ＲＩ ＦＤ ＦＮＥＴ Ｈ ＯＯ Ｙ Ｔ Ｅ
Ｖ １２ ｏ３２ｏ ｏ．９Ｎ ． ０７
文章 编 号 ：０ １ ４６ ２０ ）３ ０ １ ４ １０ —２８ （０７ ０ —０６ —０
Ｐ Ｐ系统 中数 据ຫໍສະໝຸດ 复 制算 法研 究 ２王意 洁， 小明 ， 张 周 婧
（ 国防科技大学 计算 机学 院 ， 湖南 长沙 ４０７） １ ３ ０
摘 要： 比较分析 了 Ｐ Ｐ系统中各种数据复制算法 ， ２ 并提出了一种基 于 Ｌ Ｐ Ｄ Ｃ编码 的数据 复制算法 Ｄ ｒ， ｙｅ
Ｄ ａ 用 ＩＡ加 密算 法把数 据分 割成 的 ７块 ， 码 成 １ ｈｓ ３ Ｄ ｈ 编 ４块数 据 ， 同时采 用 局 部 和全 局 两 个 维 护策 略 ， 局部 的维 护策 略保 证 编码数 据块不 小 于 １ ， 局 的维 护策 略保证 数据 块数 目不大 量超过 １ 块 。 ４全 ４ 在相 同的存储 开销 情况 下 ， 用 ｏ ｓｌ 利 ｒｕ ａ ￣编码 可 以 比传统 的复 制算 法获 得更 高 的数 据可 用 性 。但 是
在 Ｏ ｅ ｓ ｒ 和 Ｄ ａ 中， ｃ ｎｔｅ ａ ｏ ｈｓ ｈ 编码块的位置信息都保存在一个节点上 ， 数据块的访 问都需先从该节点上获 取位 置信 息 ， 这种 放置算 法容 易产 生瓶 颈 问题 ， 同时 当数 据丢失 时没 有考虑 数据 的重建 。本 文提 出 了一 个基于 Ｌ Ｐ （ ｗｄｎ ｔ ｐｒ ． ｅｋ 编码的数据复制算法 Ｄｒ， Ｄ ｃ １ ． ｓ ａｔ ｃ ｃ） ｏ ｅｉ ｙ ｉ ｈ ｙ ｙ 采用动态的数据块放置算法 ， ｅ 数据 的位 置信息可以通过直接计算得到， 不需要节点保存数据位置信息。
数据块 采用动态分配算法存储 到节点中 ， 在节点邻居 中保存 数据块 的副本 以提高 数据 块的有效 性 ， 数据块 的 数量过小时重建数据块。实验表明 ， 即使节点 的可靠性非 常低 ， 该算法也能够获得很高的数据可用性 。 关键词 ：ｅｒｏｐｅ； ｐｅ－ －ｅｒ数据可用性 ； ｔ 数据复制
支持 数据 的 可用性 、 持久 性和完 整性 已成 为 Ｐ Ｐ存储 系统 的一个 关键 问题 ，２ ２ Ｐ Ｐ系统 主要采 用 数 据 复制 技术 来解 决这 些 问题 。 目前 ＰＰ系统 中的数 据 复 制策 略 有 全复 制 、 块 复制 和基 于 ｏ ｓｒ…编码 ２ 分 ｒ ｔｏ ａｌ
的复制三 种 。 在 Ｏ ｅｎｔｅ 每个 数 据 被 分 割 成 １ ， 后 利 用 ｏａ ｌ 这 １ 数 据 编 码 成 ３ ｃａｓ ｒ［中 ｏ ２ ６块 然 ｒｓ￣把 ｕ ６块 ２块 数 据 。