一种多维并行报文分类算法
合集下载
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
ｃ ｍ ｐ ｅ ｓｎ ｅ ｅ ｔ ｄ ｒ ｌ ｓ ｏ ａ ｈ ｄ ｍａ ｎ ａ ｄ ｒ ｏ ｇ ｎｉｅ ｅ ｆｒ ｌ ｓ ｒ ａ ｙ ｒ ｄ ｃ ｎ ｅ ｌ ｎ ｔ ｆｂ ｔｓ ｒ ｇ ｗｈ ｃ ｎ ｂ ｔｍ ａ ，ｔ ｕ ｅ ｕ ｉ ｇ ｏ ｒ ｓ ｉ ｇ ｒ ｐ ａ ｅ ｕ ｅ ｎ ｅ ｃ ｏ ｉ ， ｎ ｅ ｒ ａ ｚ ｄ ｓ ｔｏ ｅ ，ｇ ｅ ｔ ｕ ｉ ｇ ｔ ｅ ｇ ｈ ｏ ｉ ｔ ｎ ｉ ｈ ｉ ｉ ｕ ｌ ｅ ｈ ｉ ｐ ｈ ｓｒｄ ｃｎ ｍｅ ｒ ｐ ｃ ｃ ｕ ａ ｃ ．Ｅｘ ｅ ｉ ｅ ｔ ｌ ｒ ｓ ｌ ｐ ｏ ｅ ｈａ ｈ ｍｏ ｙ ｓ ａ ｅ ｏ ｃ ｐ ｎ ｙ ｐ ｒｍ ｎ ａ ｅ ｕ ｔ ｒ ｖ ｓ ｔ ｔ ｔ ｅ ＣＢＰ ａ ｇ ｒ ｔ ｍ ｎ ｔ ｅ ｆｒ ｗａ ｌｅ ｖ ｒ ｎ ｎ ａ ｉ ｇ ３ ％ ｍｅ ｒ ｔ ａ ｅ ＢＶ ｌ ｏ ｉｈ ｉ ｅ ｌ ｎ ｉｏ ｍｅ ｔ ｓ ｖ ｎ ５ ｈ ｉ ｍｏ ｙ ｈｎ ｔ ｈ ａ ｇ ｒｔ ｍ， ａ ｉ ｇ ａ ｏｕ ０ ｔ ａ ｉ ａ ａ ｌ ｌ ｌ ｏ ｉ ｌ ｏ ｈ ｓ ｖ ｎ ｂ ｔ ％ ｈ ｎ ｔ ｂ ｔ ｒ ｌ ｇ ｒｔ ｉ ６ ｈｅ ｐ ｅａ ｈｍ， ｎｄ ｔ ｅａ ｇ ｒｔ ｍ ａ ｏ ｅ ｆ ｒ ｎ ｅ ｕ ｄ ｒａ ｃ ｓ ｏ ｔｏ ｉ ｔ ｎｖ ｒ ｍ ｅ ｔ ａ ｌｏ ｉ ｈ ｈ ｈ ｓａｇｏ ｄ ｐ ｒｏ ｍａ ｃ ｎ ｅ ｃ ｅ ｓｃ ｎ ｒ ｌ ｓ ｅ ｉ ｌ ｏｎ ｎ ．
Ｍ ｕ ｔ— ｉ ｅ ｓｏ ａ ｒ ｌ ｌ ｃ ｅ ａ ｓｆｃ ｔｏ ｇ ｒ ｔ ｍ ｌｉｄ ｍ ｎ ｉ ｎ ｌ Ｐａ ａ ｌ ｅ Ｐａ ｋ ｔＣｌ ｓ ｉ ａ ｉ ｎ Ａｌ ｏ ｉｈ ｉ
Ｗ ＡＮＧ ｂ ｇ ｔ ｎ Ｉ ｎ － ｇ ｏ
（ ｏｌ ｅｏ ｆｒ ｔ ｎＳ ｉ ｃ ｎ ｅｈ ｏｏ ｙＮａｊ ｇＵｎｖｒｉ ｆ ｅｏ ａｔ ｓａｄＡ ｔ ｎ ｕｉｓＮａｊｎ １ ０ ６ Ｃ ｉａ Ｃ ｌ ｇ ｆｎｏｍａ ｏ ｃｅ ｅａｄＴ ｃｎ ｌｇ， ｎｉ ｉｅｓ ｙ Ａ ｒｎｕｉ ｎ ｓ ｏ ａ ｔ ， ｎｉｇ２ ０ １， ｈｎ ） ｅ Ｉ ｉ ｎ ｎ ｔｏ ｃ ｒ ｃ ［ ｓｒｃ］ ｉｐｒｌ ｌＢｔ ｅｔｒ Ｖ） ｎ ｇｅ ａ ｄＢ ｔ ｅｔｒ Ｖ） ｌｏｉ ｍｓ ｒ ｅ ｓｒｐｅｅ ｔｔ ｅｏ ｅ ａａｌｌ ａｋ ｔ ｌｓｉｃｔ ｎ Ａｂｔａ ｔ Ｂｔ ａａｌ ， ｉＶ ｃｏ（ ｅ Ｂ ａｄＡｇ ｒｇｔ ｉＶ ｃｏ（ ｅ ＡＢ ａ ｒｈ ｅｔ ｔｅｒｓｎａｉ ｆｈ ｒｌ ｃｅ ａｓ ａ ｏ ｇ ｔ ａ ｈ ｍｏ ｖ ｔ ｐ ｅｐ ｃ ｉ ｆ ｉ
定义 １规则块）在规则集第 ｊ１ ） （ （≤ ≤５维上 ， 将值相 同的 规则 归并成一个规则块 ，规则块中记 录规 则的起点和终点、 规则块覆盖的规则范围信息 。 定义 ２压缩率）假设有 Ⅳ条规则 的规则集 ，经分块归并 （ 后，在第 ．１ ） ， ≤ ≤５维上形成 Ｂ 个规则块 ，定义 Ｐ＝ ／ （ ， ｊＢ Ｎ， Ｐ（＜ ） Ｐ ≤１ ０ 称为该维 的压缩率 ，Ｐ越小 ，压缩率越高 。
ｍｅ ｒ ｓｇ ， ｏ ｕｔｂｅ ｆｒｌ ｇ ｕｅ ｅｓ ｏ ｐ ｌ ａｉｎ ． ｏ ａ ｄ ｅ ｓｔｉ ｉ ｕ ， ｏ ｒ ｓｅ ｉ Ｐ ｒ ｌ ｌ ＢＰ ｌ ｏ ｔ ｍ ｉ ｐ ｏ ｏ ｅ ，ｂ ｍｏｙ ｕ ａ ｅ ｎ ｔｓ ｉ ｌ ｏ ａ ｅ ｒ ｌｓｓ ｔ ｆａ ｐｉ ｔ ｓ Ｔ ｄ ｒ ｓ ｈ ｓ ｓ ｅ Ｃ ｍｐ ｅ ｓｄ Ｂ ｔ ａａｌ （ ａ ｒ ｃ ｏ ｓ ｅ Ｃ ）ａｇ ｒ ｈ ｓ ｒｐ ｓｄ ｙ ｉ
１ 概述
报文分类是服务质量（ ｕｌｙｏ ｅｖｃ ， ｏ ） Ｑ ａ ｔ ｆ ｒｉ Ｑ Ｓ、网络入侵 ｉ Ｓ ｅ
（） Ｖ和 Ａ Ｖ算法并没有对 Ｔ ｉ树进行路径压缩处理 ， ２Ｂ Ｂ ｒ ｅ 导致树的深度等于前缀 的长度 ， 对于 Ｉｖ ， Ｐ ４ 查找一个 Ｉ Ｐ地址 ， 在最坏情况下需要访存 ３ ２次 ，Ｉｖ Ｐ ６则需要 １８次。 ２
规则集读入 内存 ， 记录各维 的值 ， 并用 ｉ 号标记规则 的顺序 。 ｄ
个位 串，当且仅当第 ｉ 个规 则块 的值 覆盖 此区间值 时，称
该 区间属于该规则块 ， 并将 位串对应 的位置为 １ 否则置为 ０ ， 。 步骤 ４对于源 Ｉ Ｐ地址 ， 目的 Ｉ Ｐ地址这两 维，按照 同
为压缩规则集提供了可能。本文 的主 旨是减少预处理 阶段 的
内存 占用。 算法分为预处理和查找 ２个 阶段 ：
作者简介 ： 王桐桐（９４ ， ， 士研究生 ， １８ －） 男 硕 主研方 向： 并行 算法 ，
高性能路 由器
（） Ｖ与 Ａ Ｖ算法不能直接支持范 围匹配 ， １Ｂ Ｂ 不能应用到 五 维的报文分 类环境 下 ，位 并行 算法 虽然能支持五 维情况 ， 但又会 占用大量 内存空 问。
提出一种压缩位并行算法 ， 通过报文分类压缩每个域上 的重复规则并重新组织规则集 ， 而缩短位 图中位 串的长度 ， 从 减少 内存 空间的 占用。 实验结果证 明，该压缩位并行算法在不影响运行速度的前提下 ，明显减少了空间 占用。 关健 词 ：位并行 ；位向量 ；聚合位向量 ；压缩位并行 ；多维分类 ；位串
第３ ７卷 第 １ 期 ８
、 ＿７ 幻ｌ３
・
计
算
机
工
程
２ １ 年 ９月 ０１
Ｓ ｐ ｅ ｅ ２ ｅ ｔ ｍｂ ｒ ０１ １
ＮＯ．８ １
Ｃｏ ｐ ｔ ｒＥｎ ｉ ｅ ｒｎ ｍ ｕ ｅ ｇｎ ｅｉｇ
网络 与通 信 ・
一
文章编号： ｏｏ ４８ ０１８一ｌ２一 １０－ ２（ ｌｌ一ｌ ＿ ｌ ２ ） ｌ ３
３１ Ｃ Ｐ算法介绍 ． Ｂ 通过分析来 自 １ １个互联网服务提供商（ ｔｒｅ Ｓ ｒｉｅ Ｏ １ ｅｎ ｔ ｅｖｃ ｎ Ｐｏ ｉｅ Ｓ ） ７ ３个分类规则集得出 ：规则集 中的协议类 ｒｖｄｒ Ｐ 的 ９ ，Ｉ
型、源端 口号 、目的端 口号这 ３个字段存在很多重复的情况 ， 尤其是协议字段类型 ，从十几种到几 十种 不等 ，对于 上万条 规则的规 则集来说 ，这种重复率甚至达到了 ９ ％以上 ，这就 ５
的结果。位并行报文分类算法 就是基于这种 思想 ，该算法
可 以在 多维上并行进行规则 的查找 ，具有很快的执行速度 ； 但是 它只适 用于小型规则集的匹配查找， 随着规则集 的增大 ， 算法 的内存消耗将急剧增加 。位向量（ ｉ Ｖ ｃ ｒ Ｂ 算法与 Ｂ ｔ ｅｔ ， Ｖ） ｏ
位并行 算法的基本思想相 同，最大 的改进在于 引入了 Ｔｉ 树 ｒ ｅ
集重新排序后 的规则顺序为 Ｒ 至 ９每 个规 则块可确 定其覆 ， 盖 的规则范 围；重排结束 后，根据规则集 中记录 的每个规 则
所属于 的块信息 ，确定每个规则块覆盖 的规则范 围，在规 则 块数据结构 中记录。
的包头信息 ，根据包头 中各 维的值 ，并行地在 各维度上进行 查找 ，在规则 区间集 中找到合适 的区问 ，读取 其位 串信息 ， 从而可 以得到报文在每 维上匹配的规则集合 ，最后将每 一位
定义 ３无用 区间）假设规则集第 维覆盖 的整个规则区 （ 间记为 Ｒ，存在一个规则的覆盖区间 Ｒ ，凤 属于 Ｒ，但不属 于其他任何规 则块覆盖 的区间，则称该 区问为无用 区间，其 余 区间称为有用 区间。
２ 并行算法
随着 网络服务种类 的增加 ，多维报文分类的应用越来越
广泛 ，但许多算法只支持针对源和 目的 Ｉ Ｐ地址 的二 维分类 。 对于 多维分类 问题 ，简单 的解决办法是将其分解成若干个子 问题 ，然 后将各子 问题 的结果进行 “ 与”操作 ，得出原问题
的匹配 的规则集合取交集 ，优先级最高 的即为 匹配 的规则 。
步骤 ３对于 协议 类型、 目的端 口、源端 １这 三维 ，将 ３ 第 ｆ１ ≤３维 的所有规则块的起点和终点值投影到数轴上 ， （≤Ｊ ） 将数轴分割成若干个互不相交 的小 区间，为每一个 区间分 配
一
３２ Ｃ Ｐ算法 的预处理阶段 ． Ｂ Ｃ Ｐ算法 的预处理 阶段主要分为 ４个步骤 。 Ｂ 步骤 １删除规则集 中的重复规则得到规则集 Ｆｌ ｒ ｉｅ，将 ｔ
文献标识 码：Ａ ．Βιβλιοθήκη 中 图分类号： Ｐ９ Ｔ３３
种 多维 并行 报 文 分 类算 法
王桐桐
（ 南京航空航天大学信息科学与技术学院 ，南京 ２ ０ １） １０ ６
摘
耍 ：位并行、位向量和聚合位向量算法通过对多个域进行并行处理加快分类速度 ，但三者内存 占用太大 ，不适用于 大规则集。为此 ，
收稿 日期 ：２ １— —６ ０１ ３１ ０
Ｅｍ ｉ ｔ １４ １ ６ ． ｍ － ａｌ ｔ ８ １＠１３ ｏ ：ｗ ９ ｃ
第 ３卷 ７
第 １ 期 ８
王桐桐 ：一种多维并行报文分 类算法
ｌ３ １
（） １预处理阶段。主 要负责对原始 的规 则集进行 处理 ，为 查找阶段提供必要 的数据结构 。 （） ２查找阶段 。当报文到达时，首先从报文 中提取 出相应
［ ｙｗ ｒｓ ｂｔ ａａｅ； ｔ ｅｔｒＢ ； ｇｅａｅ ｔ ｅｔｒＡ ）Ｃｏ ｒｓｅ ｉＰ ｒｌ ｌ Ｂ ）ｍｕｔｄｍｅｓｏａ ｌｓｉｃｔ ｎ ｂｔｔ ｎ Ｋｅ ｏ ｄ ］ ｉｐ ｒｌ ｌＢｉＶ ｃ （ Ｙ）Ａｇ ｒｇ ｔ ＢｉＶ ｃ （ ＢＶ ； ｍｐｅｓｄＢｔ ａａｌ （ Ｐ ； ｌ—ｉ ｎｉｎｌ ａｓ ａｏ ； ｉｓｉｇ ｌ ｏ ｄ ｏ ｅＣ ｉ ｃ ｆ ｉ ｉ ｒ Ｄ０Ｉ １．９ ９ ．ｓ．０ ０３ ２ ． １．８０ ７ ： ０３ ６ ０ｉ ｎ１０ —４ ８ ０ １１ ． ｓ ２ ３
结构 ，使算法更加直观 。聚合 位向量（ ｇｅａｅ ｉ Ｖ ｃ ｒ Ａｇｒｇｔｄ Ｂｔ ｅ ｔ ， ｏ Ａ Ｖ 算法 在 Ｂ Ｂ） Ｖ算法 的基础上引入聚集 的思想，减少访存
位 串的次数 。Ｂ Ｖ和 ＡＢ Ｖ算法很好地利用 了位 串存储 和并 行处理的优点 ，但 两者都存在以下不足 ：
业界 的关注 。本文 实现 了一个 压缩位 并行 （ ｏ ｒｓｅ ｉ Ｃ ｍｐｅｓｄ Ｂ ｔ Ｐ ｒｌ ｌ Ｃ Ｐ 算法 ，去除 了算法数据结构对 规则集大小 的线 ａａｌ ， Ｂ ） ｅ 性依赖关系 ，减少了最终数据 结构 的内存 占用 。
３ Ｃ Ｐ算法 Ｂ
首先给出 ３ 定义 。 个
ａ ｇ ｒ ｈ Ｔｈ ｌ ｏ ｔ ｍ ｓａ ｃ ｌ ｒ ｔ ｅ ｃ ａ ｓｆｃ ｔ ｐ ｅ ａ ａ ｌ ｌ ｒ ｃ ｓ ｉ ｇ ｍｕ ｔ ｅ ｄ ｍａ ｎ ， ｕ ｅ ａ ｓ ｈ ａ ａ ｓｒ ｔ ｒ ｓ ｄ ｔ ｏ ｍｕ ｈ ｌ ｏ ｔ ｍ． ｅ ａ ｇ ｒ ｈ ｃ ｅ ｅ ａｅ ｔ ｌ ｓ ｉ ａｉ ｓ ｅ ｄ ｂｙ ｐ ｒ ｌ ｏ ｅ ｓｎ ｌｉ ｏ ｉ ｓ ｂ ｔｂ ｃ ｕ ｅ ｔ ｅ ｄ ｔ ｔ ｉ ｉ ｈ ｉ ｏｎ ｅｐ ｐｌ ｕｃ ｕ ｅ ｕ ｅ ｏ ｃ
检测、流量记账、负载均衡 、区分服务 、防火墙等服务 的基 础”，其算法优劣直接影响到服务 的质量 。比较典型 的报文 Ｊ 分 类算 法 有基于 Ｔｉ 树 的算法 、递 归流 Ｒ Ｃ ｒ ｅ Ｆ 算 法 、 ＴＡ ４ Ｃ Ｍ［算法等 。随着 网络处理器（ ｔｏｋ Ｐｏｅｓｒ ＮＰ １ Ｎｅ ｒ ｒｃｓ ， ） ｗ ｏ 的广泛应用 ，基于并行思想的网络报文 分类 算法越来越受到
Ｍ ｕ ｔ— ｉ ｅ ｓｏ ａ ｒ ｌ ｌ ｃ ｅ ａ ｓｆｃ ｔｏ ｇ ｒ ｔ ｍ ｌｉｄ ｍ ｎ ｉ ｎ ｌ Ｐａ ａ ｌ ｅ Ｐａ ｋ ｔＣｌ ｓ ｉ ａ ｉ ｎ Ａｌ ｏ ｉｈ ｉ
Ｗ ＡＮＧ ｂ ｇ ｔ ｎ Ｉ ｎ － ｇ ｏ
（ ｏｌ ｅｏ ｆｒ ｔ ｎＳ ｉ ｃ ｎ ｅｈ ｏｏ ｙＮａｊ ｇＵｎｖｒｉ ｆ ｅｏ ａｔ ｓａｄＡ ｔ ｎ ｕｉｓＮａｊｎ １ ０ ６ Ｃ ｉａ Ｃ ｌ ｇ ｆｎｏｍａ ｏ ｃｅ ｅａｄＴ ｃｎ ｌｇ， ｎｉ ｉｅｓ ｙ Ａ ｒｎｕｉ ｎ ｓ ｏ ａ ｔ ， ｎｉｇ２ ０ １， ｈｎ ） ｅ Ｉ ｉ ｎ ｎ ｔｏ ｃ ｒ ｃ ［ ｓｒｃ］ ｉｐｒｌ ｌＢｔ ｅｔｒ Ｖ） ｎ ｇｅ ａ ｄＢ ｔ ｅｔｒ Ｖ） ｌｏｉ ｍｓ ｒ ｅ ｓｒｐｅｅ ｔｔ ｅｏ ｅ ａａｌｌ ａｋ ｔ ｌｓｉｃｔ ｎ Ａｂｔａ ｔ Ｂｔ ａａｌ ， ｉＶ ｃｏ（ ｅ Ｂ ａｄＡｇ ｒｇｔ ｉＶ ｃｏ（ ｅ ＡＢ ａ ｒｈ ｅｔ ｔｅｒｓｎａｉ ｆｈ ｒｌ ｃｅ ａｓ ａ ｏ ｇ ｔ ａ ｈ ｍｏ ｖ ｔ ｐ ｅｐ ｃ ｉ ｆ ｉ
定义 １规则块）在规则集第 ｊ１ ） （ （≤ ≤５维上 ， 将值相 同的 规则 归并成一个规则块 ，规则块中记 录规 则的起点和终点、 规则块覆盖的规则范围信息 。 定义 ２压缩率）假设有 Ⅳ条规则 的规则集 ，经分块归并 （ 后，在第 ．１ ） ， ≤ ≤５维上形成 Ｂ 个规则块 ，定义 Ｐ＝ ／ （ ， ｊＢ Ｎ， Ｐ（＜ ） Ｐ ≤１ ０ 称为该维 的压缩率 ，Ｐ越小 ，压缩率越高 。
ｍｅ ｒ ｓｇ ， ｏ ｕｔｂｅ ｆｒｌ ｇ ｕｅ ｅｓ ｏ ｐ ｌ ａｉｎ ． ｏ ａ ｄ ｅ ｓｔｉ ｉ ｕ ， ｏ ｒ ｓｅ ｉ Ｐ ｒ ｌ ｌ ＢＰ ｌ ｏ ｔ ｍ ｉ ｐ ｏ ｏ ｅ ，ｂ ｍｏｙ ｕ ａ ｅ ｎ ｔｓ ｉ ｌ ｏ ａ ｅ ｒ ｌｓｓ ｔ ｆａ ｐｉ ｔ ｓ Ｔ ｄ ｒ ｓ ｈ ｓ ｓ ｅ Ｃ ｍｐ ｅ ｓｄ Ｂ ｔ ａａｌ （ ａ ｒ ｃ ｏ ｓ ｅ Ｃ ）ａｇ ｒ ｈ ｓ ｒｐ ｓｄ ｙ ｉ
１ 概述
报文分类是服务质量（ ｕｌｙｏ ｅｖｃ ， ｏ ） Ｑ ａ ｔ ｆ ｒｉ Ｑ Ｓ、网络入侵 ｉ Ｓ ｅ
（） Ｖ和 Ａ Ｖ算法并没有对 Ｔ ｉ树进行路径压缩处理 ， ２Ｂ Ｂ ｒ ｅ 导致树的深度等于前缀 的长度 ， 对于 Ｉｖ ， Ｐ ４ 查找一个 Ｉ Ｐ地址 ， 在最坏情况下需要访存 ３ ２次 ，Ｉｖ Ｐ ６则需要 １８次。 ２
规则集读入 内存 ， 记录各维 的值 ， 并用 ｉ 号标记规则 的顺序 。 ｄ
个位 串，当且仅当第 ｉ 个规 则块 的值 覆盖 此区间值 时，称
该 区间属于该规则块 ， 并将 位串对应 的位置为 １ 否则置为 ０ ， 。 步骤 ４对于源 Ｉ Ｐ地址 ， 目的 Ｉ Ｐ地址这两 维，按照 同
为压缩规则集提供了可能。本文 的主 旨是减少预处理 阶段 的
内存 占用。 算法分为预处理和查找 ２个 阶段 ：
作者简介 ： 王桐桐（９４ ， ， 士研究生 ， １８ －） 男 硕 主研方 向： 并行 算法 ，
高性能路 由器
（） Ｖ与 Ａ Ｖ算法不能直接支持范 围匹配 ， １Ｂ Ｂ 不能应用到 五 维的报文分 类环境 下 ，位 并行 算法 虽然能支持五 维情况 ， 但又会 占用大量 内存空 问。
提出一种压缩位并行算法 ， 通过报文分类压缩每个域上 的重复规则并重新组织规则集 ， 而缩短位 图中位 串的长度 ， 从 减少 内存 空间的 占用。 实验结果证 明，该压缩位并行算法在不影响运行速度的前提下 ，明显减少了空间 占用。 关健 词 ：位并行 ；位向量 ；聚合位向量 ；压缩位并行 ；多维分类 ；位串
第３ ７卷 第 １ 期 ８
、 ＿７ 幻ｌ３
・
计
算
机
工
程
２ １ 年 ９月 ０１
Ｓ ｐ ｅ ｅ ２ ｅ ｔ ｍｂ ｒ ０１ １
ＮＯ．８ １
Ｃｏ ｐ ｔ ｒＥｎ ｉ ｅ ｒｎ ｍ ｕ ｅ ｇｎ ｅｉｇ
网络 与通 信 ・
一
文章编号： ｏｏ ４８ ０１８一ｌ２一 １０－ ２（ ｌｌ一ｌ ＿ ｌ ２ ） ｌ ３
３１ Ｃ Ｐ算法介绍 ． Ｂ 通过分析来 自 １ １个互联网服务提供商（ ｔｒｅ Ｓ ｒｉｅ Ｏ １ ｅｎ ｔ ｅｖｃ ｎ Ｐｏ ｉｅ Ｓ ） ７ ３个分类规则集得出 ：规则集 中的协议类 ｒｖｄｒ Ｐ 的 ９ ，Ｉ
型、源端 口号 、目的端 口号这 ３个字段存在很多重复的情况 ， 尤其是协议字段类型 ，从十几种到几 十种 不等 ，对于 上万条 规则的规 则集来说 ，这种重复率甚至达到了 ９ ％以上 ，这就 ５
的结果。位并行报文分类算法 就是基于这种 思想 ，该算法
可 以在 多维上并行进行规则 的查找 ，具有很快的执行速度 ； 但是 它只适 用于小型规则集的匹配查找， 随着规则集 的增大 ， 算法 的内存消耗将急剧增加 。位向量（ ｉ Ｖ ｃ ｒ Ｂ 算法与 Ｂ ｔ ｅｔ ， Ｖ） ｏ
位并行 算法的基本思想相 同，最大 的改进在于 引入了 Ｔｉ 树 ｒ ｅ
集重新排序后 的规则顺序为 Ｒ 至 ９每 个规 则块可确 定其覆 ， 盖 的规则范 围；重排结束 后，根据规则集 中记录 的每个规 则
所属于 的块信息 ，确定每个规则块覆盖 的规则范 围，在规 则 块数据结构 中记录。
的包头信息 ，根据包头 中各 维的值 ，并行地在 各维度上进行 查找 ，在规则 区间集 中找到合适 的区问 ，读取 其位 串信息 ， 从而可 以得到报文在每 维上匹配的规则集合 ，最后将每 一位
定义 ３无用 区间）假设规则集第 维覆盖 的整个规则区 （ 间记为 Ｒ，存在一个规则的覆盖区间 Ｒ ，凤 属于 Ｒ，但不属 于其他任何规 则块覆盖 的区间，则称该 区问为无用 区间，其 余 区间称为有用 区间。
２ 并行算法
随着 网络服务种类 的增加 ，多维报文分类的应用越来越
广泛 ，但许多算法只支持针对源和 目的 Ｉ Ｐ地址 的二 维分类 。 对于 多维分类 问题 ，简单 的解决办法是将其分解成若干个子 问题 ，然 后将各子 问题 的结果进行 “ 与”操作 ，得出原问题
的匹配 的规则集合取交集 ，优先级最高 的即为 匹配 的规则 。
步骤 ３对于 协议 类型、 目的端 口、源端 １这 三维 ，将 ３ 第 ｆ１ ≤３维 的所有规则块的起点和终点值投影到数轴上 ， （≤Ｊ ） 将数轴分割成若干个互不相交 的小 区间，为每一个 区间分 配
一
３２ Ｃ Ｐ算法 的预处理阶段 ． Ｂ Ｃ Ｐ算法 的预处理 阶段主要分为 ４个步骤 。 Ｂ 步骤 １删除规则集 中的重复规则得到规则集 Ｆｌ ｒ ｉｅ，将 ｔ
文献标识 码：Ａ ．Βιβλιοθήκη 中 图分类号： Ｐ９ Ｔ３３
种 多维 并行 报 文 分 类算 法
王桐桐
（ 南京航空航天大学信息科学与技术学院 ，南京 ２ ０ １） １０ ６
摘
耍 ：位并行、位向量和聚合位向量算法通过对多个域进行并行处理加快分类速度 ，但三者内存 占用太大 ，不适用于 大规则集。为此 ，
收稿 日期 ：２ １— —６ ０１ ３１ ０
Ｅｍ ｉ ｔ １４ １ ６ ． ｍ － ａｌ ｔ ８ １＠１３ ｏ ：ｗ ９ ｃ
第 ３卷 ７
第 １ 期 ８
王桐桐 ：一种多维并行报文分 类算法
ｌ３ １
（） １预处理阶段。主 要负责对原始 的规 则集进行 处理 ，为 查找阶段提供必要 的数据结构 。 （） ２查找阶段 。当报文到达时，首先从报文 中提取 出相应
［ ｙｗ ｒｓ ｂｔ ａａｅ； ｔ ｅｔｒＢ ； ｇｅａｅ ｔ ｅｔｒＡ ）Ｃｏ ｒｓｅ ｉＰ ｒｌ ｌ Ｂ ）ｍｕｔｄｍｅｓｏａ ｌｓｉｃｔ ｎ ｂｔｔ ｎ Ｋｅ ｏ ｄ ］ ｉｐ ｒｌ ｌＢｉＶ ｃ （ Ｙ）Ａｇ ｒｇ ｔ ＢｉＶ ｃ （ ＢＶ ； ｍｐｅｓｄＢｔ ａａｌ （ Ｐ ； ｌ—ｉ ｎｉｎｌ ａｓ ａｏ ； ｉｓｉｇ ｌ ｏ ｄ ｏ ｅＣ ｉ ｃ ｆ ｉ ｉ ｒ Ｄ０Ｉ １．９ ９ ．ｓ．０ ０３ ２ ． １．８０ ７ ： ０３ ６ ０ｉ ｎ１０ —４ ８ ０ １１ ． ｓ ２ ３
结构 ，使算法更加直观 。聚合 位向量（ ｇｅａｅ ｉ Ｖ ｃ ｒ Ａｇｒｇｔｄ Ｂｔ ｅ ｔ ， ｏ Ａ Ｖ 算法 在 Ｂ Ｂ） Ｖ算法 的基础上引入聚集 的思想，减少访存
位 串的次数 。Ｂ Ｖ和 ＡＢ Ｖ算法很好地利用 了位 串存储 和并 行处理的优点 ，但 两者都存在以下不足 ：
业界 的关注 。本文 实现 了一个 压缩位 并行 （ ｏ ｒｓｅ ｉ Ｃ ｍｐｅｓｄ Ｂ ｔ Ｐ ｒｌ ｌ Ｃ Ｐ 算法 ，去除 了算法数据结构对 规则集大小 的线 ａａｌ ， Ｂ ） ｅ 性依赖关系 ，减少了最终数据 结构 的内存 占用 。
３ Ｃ Ｐ算法 Ｂ
首先给出 ３ 定义 。 个
ａ ｇ ｒ ｈ Ｔｈ ｌ ｏ ｔ ｍ ｓａ ｃ ｌ ｒ ｔ ｅ ｃ ａ ｓｆｃ ｔ ｐ ｅ ａ ａ ｌ ｌ ｒ ｃ ｓ ｉ ｇ ｍｕ ｔ ｅ ｄ ｍａ ｎ ， ｕ ｅ ａ ｓ ｈ ａ ａ ｓｒ ｔ ｒ ｓ ｄ ｔ ｏ ｍｕ ｈ ｌ ｏ ｔ ｍ． ｅ ａ ｇ ｒ ｈ ｃ ｅ ｅ ａｅ ｔ ｌ ｓ ｉ ａｉ ｓ ｅ ｄ ｂｙ ｐ ｒ ｌ ｏ ｅ ｓｎ ｌｉ ｏ ｉ ｓ ｂ ｔｂ ｃ ｕ ｅ ｔ ｅ ｄ ｔ ｔ ｉ ｉ ｈ ｉ ｏｎ ｅｐ ｐｌ ｕｃ ｕ ｅ ｕ ｅ ｏ ｃ
检测、流量记账、负载均衡 、区分服务 、防火墙等服务 的基 础”，其算法优劣直接影响到服务 的质量 。比较典型 的报文 Ｊ 分 类算 法 有基于 Ｔｉ 树 的算法 、递 归流 Ｒ Ｃ ｒ ｅ Ｆ 算 法 、 ＴＡ ４ Ｃ Ｍ［算法等 。随着 网络处理器（ ｔｏｋ Ｐｏｅｓｒ ＮＰ １ Ｎｅ ｒ ｒｃｓ ， ） ｗ ｏ 的广泛应用 ，基于并行思想的网络报文 分类 算法越来越受到