基于Lucene的高校图书垂直搜索引擎的研究与实现
Lucene框架下构建高校校园网搜索引擎
Lucene框架下构建高校校园网搜索引擎摘要：分析阐述了高校校园网搜索引擎的发展现状、lucene框架的优势，以及高校构建校园网结合lucene构建搜索引擎的设计与实现。
关键词：lucene；搜索引擎；高校；校园网中图分类号：tp393 文献标识码：a 文章编号：1009-3044（2013）11-2582-021 高校校园网构建搜索引擎的可行性分析高等学校是信息流通量巨大的机构之一。
如今，基本上所有的高校都完成了行政部门、教学部门、实验室、宿舍等网络节点的信息联网，实现了资源传输与共享、工作效率的提高。
同时，随着高校规模的不断扩大，越来越多的院系建立了网站，还有各种形式的web 应用平台的出现，校园网中的站点、页面数量也有了突飞猛进的增长，这就造成原先只要根据站点导航就可以很容易发掘的信息变得难以寻觅，因此从客观需求上来说，在校园网中需要有一个平台来提供快速便捷的搜索服务，它就是搜索引擎。
在技术层面上，高校中构建搜索引擎的可行性主要体现在：1）因特网上的站点结构复杂，链接出入度都很大，且具有很大的不确定性，页面抓取需要花费相当多的时间，而校园网中的站点层次明确，页面链接较少，大多呈现扁平状，站点层次通常不超过三层，因而抓取页面的十分迅速。
2）校园网中的站点之间的链接相对于互联网来说要少，这样在web结构挖掘过程中，所需要计算的链接信息量也少，能够很大程度上加快服务器的响应速度。
3）构建校园网搜索引擎所需要的硬件软件要求不高，有利于控制构建成本，也便于项目实施。
4）从理论上来说，校园网搜索引擎的构建可以参考应用在因特网上的搜索引擎模型和相关算法，可对其进行适当改进、简化后加以应用。
由以上讨论可知，在校园网中应用搜索引擎技术是符合客观实际的，是可行的。
2 校园网搜索引擎的发展现状2008年5月29日，谷歌公司宣布正式启动“谷歌gsa（google search appliance）搜索服务器大学捐赠合作计划”，清华大学、中国科学技术大学、浙江大学、上海交通大学、同济大学和华东师范大学等国内知名高校是首批国内受捐高校，从此，谷歌公司在中国拉开了搜索服务器捐赠的序幕。
基于Lucene.Net校园网搜索引擎的设计与实现
关键 词 ： 引 擎 ； 虫 ； 搜索 爬 索引
中图分 类号 ： Ｐ ９ ． Ｔ ３ １３ 文献 标识 码 ： Ａ 文章 编号 ：６ ３ ６ ９ （０６ １ —０７ —０ １７ — ２Ｘ ２０ ）１ ０３ ３
Ｄｅ ｉｎ ｎｄ Ｉ ｐｌｍ ｅ ａ ｉｎ ｆＳ ｈ ｏ ｅ ｒ ｈ Ｅｎ ｉ ｓ ｄ ｏ ｃ ｎｅ Ｎｅ ｓｇ ａ ｍ ｅ ｎｔ ｔｏ ｏ ｃ ｏ ｌＳ ａ ｃ ｇ ｎｅＢａ ｅ ｎ Ｌｕ ｅ ． ｔ
ｖ ｎ ａ ｅｉ ｏ ｉ ｅｒｈ． ａ ｔ ｎｄ ｍａｎ ｓａｃ ｇ Ｋｅ ｏ ｄ ｓａ ｃ ｎ ｉｅ Ｗ ｅ ｐｄ ｒ ｉｄ ｘ ｙ ｗ ｒ ｓ：ｅ ｒｈ ｅ ｎ ； ｂｓ ｉｅ ；ｎ ｅ ｇ
０ 引 言
搜 索 引擎在 当今 的 网络 资 源应 用 中扮 演 着 重 要 的 角 色 ， Ｂ ｉ 和 Ｇ ｏｌ的 业 绩 强 势 增 长 中 也 可 以看 到 这 从 ａｕ ｄ ｏｇ ｅ
们所 说 的 网络 蜘 蛛 （ ｂＳ ｉ ｒ或 者 叫 网 络 机器 人 。通 Ｗｅ ｐ ｅ） ｄ
点。有了搜索引擎 ， 网络资源得 以集中地管理 和分类 ， 从
而使人们 不用 直接 去 网络 上盲 无 目的地 寻 找 自己需要 的 东西 。搜索方 法 和结 果 较 以前 也 便 利 、 捷 并 且 更 加 有 快 效 。但 是 随着 技术 的发 展 ， 发现 现在 的搜 索引擎 并 不 人们 能满 足 自己的特 定要求 ， 大众 的搜 索引擎 也很 难实现 一个 域范 围内全 面 快 速 的搜 索 。 比如 说 ， 在一 个 大学 之 内搜 索 ，ａ ｕ Ｇ ｏｌ就 不可 能提 供 校 园 网所 有 网页 这 一 特 Ｂ ｉ 和 ｏｇ ｄ ｅ 定范 围的搜 索功 能 ， 并做 到快 速地更 新 。 文 中提 出了一 种基 于 Ｌ ｃｎ ． ｅ 的校 园 网搜索 引 擎 ｕｅｅＮ ｔ
基于lucene的校园网搜索引擎
（ 信息处理模块。 ｕｅｅ 二） Ｌ ｃｎ 开源检索框架 制。通 常， 由词项 （ 字） 关键 和出现情况两部分 简介 ［Ｌ． ２０－ １２】ｈ ｔ：／ｗ．ｈｄ— ０】 ［０８１－４． ｔｐ／ｗｗ ｃｅｏ 是基于文件索引机制的， 只能对文本文件进行 组成。对于索引中的每个词项（ 关键字）都跟 ｎ ．０ ／ ｅｈ １ ｃｎ ． ｔ １ ， ｇ ｃ ｍ ｔｃ ／ｕ ｅ ｅ ｈ ｍ ． 索引。信息处理模块主要包含 ３ 个步骤： 读取 随一个列表 （ 位置表）用 来跟踪记录单 词在所 【】薛宇星．基于ｔ ｒｔｉ 和 Ｌｃｎ 的Ｗ ｂ ， ２ ｉ ｉｒｘ ｕｅｅ ｅ ｅ 页面内容、 页面内容解析和构建索引。结构图 有文档 中出现过 的位置。
分工不同， 人们所关注的信息产业范围也不尽
个好的网页爬虫应该具有很好的灵活 址为 ｈｔ：ｗ ｗｊ ｏ． ／ ｔ ／ ｗ ．ｓ ｔｎ，这是一套 由 ｉ ａ ｐ／ ｅ ｆｃ ａ 写 息， ｖ 搜索引擎起着至关重要的作用。当代社会
性和健壮性， 并且易于管理员操作管理。灵活 成的分析软件。
性 旨在爬 虫能够 尽可 能多的适用 于 各种不 同
个焦 点。
二、 搜索引擎
搜索引擎是一个为用户提供信息检索功 能的网络工具 搜索引擎是随着互联网络信息 的快速增长， 开始逐步发展起来的技术。在互
联网发展 的最初阶段 ，网站 的数量相对较少 ，
爵…
ｔ ３
．
！
． ．．
．．．
信息查找比较容易。 但随着互联网技术爆炸性 的发展， 网络上面的信息越来越多， 并且以各 种各样的形态存在， 这时用户便很难找到所需 要的信息， 一些为满足大众信息检索需求的专 业搜索网站就应运而出了。如今，ｏｇ 的巨 Ｇ ｏｌ ｅ
基于Lucene全文检索引擎的研究与实现
接 ｏ ｔｉ（ 来 ｓ Ｍａ 中是否 存在 这 巨大 反 响 ， 序 员不 仅 使 用 它 构 建 具 体 的 ＨＴＭ Ｌ解 析 器 输 出 的 是 文 本 内 容 ， 着 用ｃｎａｎ） 判断Ｈａｈ ｐ 程 全 文 检 索 应 用 ， 且 将 之 集 成 到 各 种 系 统 Ｌ ｃ ｎ 的分 词 器从 文 本 内 容 中 提 取 出素 引 而 ｕｅ ｅ 个 字 的 映射 ， 果 存 在 就 取得 长 度 等 于字 如
石 头一贾府 ” 行 分 析 ， 进 先分 析 器 解 析 字符 串
２全文检索引擎Ｌｃｎ ｕ ｅ ｅ
２ １ ｕｅｅ ． Ｌｃｎ简介
Ｌ ｃｎ 是ａ ａ ｈ 软件基金 ￣ｊｋ ｒａ 目 ｕ ｅｅ ｐ ｃ ｅ ａ ａｔ 项 组 的 一 个 子项 目 ， 一 个 开 放 源 代 码 的 全 是
检 索 索 引库 的 Ｔ ｅ ｐ中找 到 对 应 如 ｅ Ｍａ
首 先 ， 入 查 询 条 件 ， 如 用 户 希 望 查 的 映 射 则对 应 的 键 值 加 ｌ 输 出 的时 候 在 输 比 ，
的 基 础 上 ， 且 针 对Ｌ ｃ ｎ 中文 分 词 的 弱 询 到 含 有 词 “ 宝 玉 ？ “ 头 但 不 含 “ 并 ｕ ｅｅ 贾 和 石 贾 词 后 面 加 上 分 割 符 号 ‘ ， 后 继 续 重 复 ＼’ 然 势 扩 展 设 计 了 一 个 相 对 完 善 的 中 文 分 词 府 ” 记 录 ， 么 输 入 条 件 为 “ 宝 玉 ＋石 前 面 的 步 骤 ， 到 文 件 结 束 ， 出 ； 果 的 那 贾 直 退 如 器 ， 实 现 了一 个 基 于 Ｌ ｃ ｎ 全文 检 索 技 头 一贾 府 ” 查 询 条 件 传 入 搜 索 器 （ｕ ｅ ｅ 并 ｕｅｅ ｌ １ｃｎ ． 读者 了解 和 使用 Ｌ ｃ ｎ 全 文 检索 引擎 提 供 ｕｅ ｅ
基于Lucene的数码产品垂直搜索引擎的设计与实现的开题报告
基于Lucene的数码产品垂直搜索引擎的设计与实现的开题报告一、选题背景随着数码产品的不断发展和普及，人们购买和使用数码产品的需求也越来越高。
但是，随着数码产品种类的增加和信息量的增长，现有的搜索引擎已经不能满足人们的需求。
因此，基于Lucene建立一个数码产品垂直搜索引擎是非常必要和有意义的。
二、选题意义数码产品垂直搜索引擎的建立对于用户是非常有帮助的。
通过使用该搜索引擎，用户可以快速找到自己需要的商品，缩短查找时间，提高搜索效率。
同时，搜索引擎可以根据用户的搜索行为和历史记录，向用户推荐符合其需求的产品，增加用户的消费体验。
对于企业来说，垂直搜索引擎可以提高企业的竞争力。
通过收集用户的搜索数据和行为，企业可以了解用户的需求和偏好，根据用户的反馈来优化和完善产品，提高产品的质量，增加企业的竞争力。
三、选题内容本文将基于Lucene建立一个数码产品垂直搜索引擎。
具体内容包括：1. 研究Lucene搜索引擎的原理和应用，了解其优点和不足。
2. 构建搜索引擎的数据采集系统，收集数码产品信息，构建数据库。
3. 使用Lucene建立搜索引擎的索引系统，对数据库中的数据进行索引。
4. 针对用户的搜索需求，设计和实现搜索算法和推荐系统。
5. 测试和优化搜索引擎。
四、选题方法本文将采用以下方法：1. 研究相关文献，了解Lucene搜索引擎的原理和优点。
2. 建立数码产品数据采集系统，采集数码产品的相关信息，构建数据库。
3. 使用Lucene建立索引系统，对数据库中的数据进行索引。
4. 设计和实现搜索算法和推荐系统，根据用户的搜索行为和历史记录向用户推荐符合其需求的产品。
5. 测试和优化搜索引擎，提高搜索引擎的性能和用户体验。
五、预期效果本文的预期效果如下：1. 基于Lucene建立数码产品垂直搜索引擎，实现对数码产品的快速检索和推荐。
2. 提高用户的购物体验，增加用户的满意度和忠诚度。
3. 增加企业的竞争力，提高产品质量和市场占有率。
基于Lucene的高校图书垂直搜索引擎的研究与实现
基于Lucene的高校图书垂直搜索引擎的研究与实现付强【期刊名称】《太原师范学院学报（自然科学版）》【年(卷),期】2011(010)004【摘要】The vertical search engine is a subdivision and extension of search engine,which is appointed specially at one particular field and helps the consumers search for the large data rapidly and accurately.To describd how to implement the application of vertical search engine to shanxi University library books so as to serve the reader to easily search the books information.%垂直搜索引擎是针对某一个特定领域的专业搜索引擎,是搜索引擎的细分和延伸.垂直搜索引擎可以帮助用户在海量数据中进行快速、专业、精准的检索.文章实现了基于Lucene技术的山西高校图书垂直搜索引擎,其可以为读者提供专业的图书信息检索服务.【总页数】4页(P104-107)【作者】付强【作者单位】山西金融职业学院,山西太原030008【正文语种】中文【中图分类】TP31【相关文献】1.基于Lucene的垂直搜索引擎研究与实现 [J], 周海松;刘建明;李龙2.基于Lucene的新闻垂直搜索引擎设计与实现 [J], 许翰林;王瑞;王佳丽;吴宸阳;李浩;陈阳3.基于Lucene与Heritrix的图书垂直搜索引擎的研究与实现 [J], 王琦;张戈;何婧4.基于Heritrix和Lucene的电力新闻垂直搜索引擎研究与实现 [J], 邹岳琳;王天军;5.基于Lucene的面向大数据主题的垂直搜索引擎研究 [J], 翟霞因版权原因，仅展示原文概要，查看原文内容请购买。
基于Lucene专业搜索引擎的研究应用
领域或 主题的信息 ， 由搜索器 、 索引器 、 检索 器和用 户 接 口等 四个部分组成 ，工作原理与通用搜索 引擎 的工
作 原 理基 本 相 同 ．所 不 同 的 是 专 业 搜 索 引擎 对 抓 取 的
收 稿 Ｅ 期 ：０ ０ ８ ２ ｌ ２ １ —０ —１ 修 稿 日期 ：０ ０ ０ —１ ２１—９ ２
作 者 简介 ： 雪 － （ ７ － ， ， 苏如 皋 人 ， 师 ， 士 ， 究 方 向 为 信 息 处理 与检 索 朱 ￣ １ ６） 江 ９ 女 讲 硕 研
０ 现 计算 ２１． 代 机 ００ ９ ０
＼
＼ ＼
实 践 与 经验
基于 Ｌ ｃ ｎ ｕ ｅ ｅ专业搜 索引擎 的研 究应 用
朱 雪莲
（ 疆 艺 术 学 院 基 础部 （ 政 部 ） 新 思 ，乌 鲁 木 齐 ８ ０４ ） ３０ ９
摘
要 ：搜 索 引 擎现 已 经成 为 搜 索互 联 网信 息 的重 要 工 具 。通 用 的搜 索 引 擎 虽然 功 能 强 大， 对 专 但
应 用
Ｌ ｃｎ 是 用 －ｖ 的 全 文 检 索 引 擎 工 具 包 ， 不 ｕｅ ｅ ｌ ａ写 ａ 并 是 一 个 完 整 的全 文 检 索 引 擎 ，而 是 一 个 全 文 检 索 引 擎
擎所建立 的数据 库是关于某一领域 或某一专 业 。图 １ 显示了专业搜索 引擎 的体系结构 。
擎在 搜 索结 果 等 方 面 进行 比 较
关 键 词 ： ｅ ：专 业搜 索 引 擎 ； ｕｅ ｅ ｗ ｂ Ｌ ｃｎ
０ 引
言
堂
基于Lucene的全文搜索引擎的设计与实现
图 １ Ｌ ｃｎ ｕ ｅ ｅ系 统 的 结 构 组 织 图
２ Ｌｕｅ ｅ的 系统 结 构 分析 ｃｎ
２ ２ ｏｇ ａａｈ ． ｃｎ ．ｉ ｅ 索 引 包 是 整 个 系 统 核 心 ， ． ｒ ．ｐ ｃ ｅ ［ ｅ ｅ ｎ ｘ ｕ ｄ 主 要提 供 库 的读 写 接 口 ， 过 该 包 可 以创 建 库 ． 加 删 除 记 录 及 通 添 读 取 记 录等 。 全文 检索 的根 本 就 为 每 个 切 出来 的词 建 立 索 引 ， 查 询 时 只需 要遍 历 索 引 ， 不 需 要 遍 历 整 个 正 文 ， 而 极 大 地 而 从 提 高 了检 索 效率 ， 引 创 建 的 质 量 直 接 关 系 整 个 系统 的 质 量 。 索 Ｌ ｃｎ 的索 引 树 是 非 常 优 质 高 效 的 ， 这 个 包 中 ， 要 有 Ｉ ． ｕｅ ｅ 在 主 ｎ
查 询结 果 。 图 １是 Ｌ ｃｎ ｕｅ ｅ系 统 的结 构 组 织 图 。 ２． 分析 器 Ａｎ ｌｚｒ 分 析 器 主 要 用 于 切 词 ， 段 文 档 输 入 １ ａｙ ｅ 一
以后 ， 过 Ａ ａ ｚｒ 输 出 时 只剩 下 有 用 的 部 分 ， 他部 分 被 剔 经 ｎ ｌ ｅ， ｙ 其 除 。 分析 器提 供 了抽 象 的接 口 ， 因此 语 言 分 析（ ｎ ｌ ） Ａ ａ ￣ｒ 是可 以 ｙ 定 制 的 。因 为 Ｌ ｃｎ 缺 省 提 供 了 ２个 比较 通 用 的 分 析 器 Ｓ ｕｅ ｅ ｉ ｍ． ｐ Ａ ａ ｓ 和 Ｓａ ｄｒ Ａ ａ ｓｒ 这 ２个 分 析 器 缺 省 都 不 支持 中 ｌ ｅ ｌｅ ｎ ｙ ｒ ｔｎ ａｄ ｎ ｌ ｅ， ｙ 文 ， 以 要加 入 对 中 文 语 言 的 切 分 规 则 ， 要 修 改 这 ２个 分 析 所 需
基于Lucene的搜索引擎设计与实现
整体上采用基于 Ｓｒ ｓ．框架 的模 型． ｔｔ ２ ｕ１ 视图－ 控制器设计模 式 ， 据采集模块利 用基于正则表达式的有限状态 自动机抓取数据 ，索 引模块应 数
用倒排索引方法 ，系统的分词算法使用基于字典的正向最大匹配中文分词法 。实验结果表明 ， 方案具有较高 的资源检索率 ，同时能够保 该
第 ３ 卷 第 ｌ 期 ７ ６
Ｖｏ ．７ １ ３
・
计
算
机
工
程
２ １ 年 ８月 ０１
Ａｕ ｕ ｔ ２ １ ｇ ｓ ０ １
Ｎｏ １ ．６
Ｃｏ ｕ ｅ Ｅｎ ｉ ｅ ｒｎ ｍｐ ｔｒ ｇ ｎ ｅ ｉ ｇ
软件技术与数据库 ・
文 编 ｔ ０ — ４ （ １ｌ ０ ９ ０ 章 号 ０ ３ ８ｏ ）— ０ ＿ ３ 文 标 码 Ａ ｌ ｏ ２２ １６ ３ ＿ 献 识 ・
ｅ ｓ ｒ ｈｅａ ｃ ｒｃ ｆｔｅｒｔｉｖ ｌｒｓ ｌｓ ｎ ｕ ｅｔ ｃ ｕａ ｙｏ ｈ ｅ ｒｅ ａ ｅ ｕｔ．
［ ｅ ｏ ｄ ｌＦｌＴ ａｓ ｒ ｒ ｏｏ Ｆ Ｐ ｓ ｃ ｇｎ； ｕ ｅｅ ｒ ｗ ｒ； ｄ ｌ ｉ ｏｔ ｌ ｒ Ｃ ； ｎ ｅ ｔ ｅ ｕｏ ａ ； ｖ ｒ ｄ ｘ Ｋ ｙ ｒ ｓ ｉ ｒ ｆ ｏ ｃ ｌ Ｔ ）ｅ ｈ ｎ ｉｅＬ ｃｎ ａ ｏｋ Ｍｏ ｅ Ｖｅ Ｃ ｎ ｏｌ （ ｗ ｅ ｎ ｅＰ ｔ （ ｒ ａ ｅ ｆ ｍｅ ｗ ｒ ｅ ＭＶ ） ｉ ｔ ａｔｍ ｔ ｉ ｅ ｅ ｉ ｅ ｉ ｆ ｔｓ ａ ａｎ ｔ ｎ ｄ Ｄ Ｉ １ ． ６ ／ｉ ｎ１０ －４ ８ ０ １ ６ １ Ｏ ： ０ ９ ９ ．ｓ ． ０３ ２ ． １． ． ３ ３ ｊｓ ０ ２ １０
基于Lucene的搜索引擎技术的研究与改进
ｔ ｄ ｙ２ ０ ／ １ １ ／ ｔｏ ｕ ｔ ｎ ｔ－ ｕ ｃ －１ｈｍｌ ０ ６ ｏ ａ ／ ０ ６ ０ ／ ０ ｉ ｒ ｄ ｃｉ － ｏ ｎ ｔ ｈ ． ｔ ， ０ ｎ ｏ ２
［】 刚 ， 伟 ， 哲 ． Ｊ Ｘ＋ ｕ ｅｅ构 建 搜 索 引 擎 【 ． 民 邮 ５李 宋 邱 Ａ Ａ Ｌ ｅｎ Ｍ】 人
ｗ ｔ ｈ ｎ ｏ ｍａ ｉｎ ｔ ｅ ｅ ｄ ｉ ｔ ｅ ｉｆ ｒ ｔ ｈ ｙ ｎ ｅ ． ｈ ｏ
Ｋ ｙ ｅ ｗｏｒｓ Ｌ ｃ ｎ ；Ｉ ｄ ｘ ｒ ａ ｋｎ ｅ ｈ ｏｏ ｙ ｄ ： ｕ ｅ ｅ ｎ ｅ ｅ ；Ｒ ｎ ｉｇＴ ｃ ｎ ｌｇ
现 代计 算 机
２ １ ．８ ０１ ０
管理索引等 ｕ ｅｅ Ｌ ｃｎ 采用 了两种索 引模式 ： 独立索 引和 复合索引模式 独立索引模式是指每个 Ｄ ｃｍｅｔ 立 ｏｕ ｎ 独 索引成一个文件 ． 种方式检索速度 比较快 ． 这 但是不适
合 大 量 文 件 的 处 理 复 合 索 引 模 式 是 把 多 个 Ｄ ｃｍ ｎ ｏｕ ｅ ｔ 索 引 成 一 个 文 件 这 种 方 式 检 索 速 度 没 有 独 立 模 式 的
用 ． ０ ９６ ２ ０ ．
［］ Ｊ 平 ． 索 引 擎 Ｐ ｇＲ ｎ ９ｇ ｌ ｘ 搜 ａｅ ａ ｋ算 法 研 究 ． 算 机 应 用 于 软 计
件 ．０ ８９ ２０ ．
基于Lucene的全文检索引擎研究与应用
Ａｂ ｔａ ｔＲａ ｉ ｃ ｕ ｌｔ ｎｏ ｒ ｅ ｅ ｔｒ ｉｅ ｆｅｔｖｌ ｎ ｅ ｉｇ ｉｆｒ ａｉｎ ｒｓ ｕｃ ｓｉ ｏ ｐ ｌｅｈｇ ｓｒ ｃ ： ｐｄ ａｃ ｍｕａｉ ｆｌ ｇ ｎｅｐｒ ｓｅｆｃｉｅｙ ｉｄ ｘｎ ｎｏｍ ｔ ｅｏ ｒｅ ｓｔ ｍｖｄ ｉｈ— ｑ ａｉ ｓａ ｃ ｅｖｃｓ ｏ ａ ｓ ｏ ｕｌｙ ｅｒｈ ｓｒ ｉｅ ． ｔ
部分使 用ｌ 引。
是以各种计算机数据诸 如文字 、 声音 、 图像等为处理对
象， 提供按照数据资料 的内容 而不 是外在 特征来 实现 的信息检索手段［ 。在 索引 中创建一个包含一系列用 川 户搜索条件 的查询 ， 它能 帮助人们进 行大 量文档 资料
Ｌ ｃｎ 作为一个全文检索 引擎 ， ｕｅｅ 其具 有如 下突 出 的优点 ：
中图分 类号 ： Ｉ ９ 、 Ｔ） １３ ３ 文献 标识码 ： Ａ 文章 编号 ：６ ３ ６ ９ （ ０ ７ ０ ～０ ８ —０ １７ — ２ Ｘ ２ ０ ） ５ １４ ３
Ｒｅｅ ｒ ｈ ａ ｄ Ａｐｐｌｃ ｔｏ ｆＦｕ ｌＴｅ ｔＳ ａ ｃ ｓａ ｃ ｎ ｉａ ｉ ｎ ｏ ｌ ｘ ｅ ｒ ｈ ＥｎｇｎｅＢａ ｅ ｎ Ｌｕ ｅ ｅ ｉ ｓｄ ｏ ｃ ｎ
ｔｏ ｘ ｍｐ ｅ ｉｎ ｅ ａ ｌｓ
Ｋｅ ｒ ｓ ｕｌ ｅ ｔｓａ ｃ ｉｄ ｘｎ ａ ｐｉｄ ｒｓａ ｃ ／ ｅｎ ｙｗｏ ｄ ：ｆ ｌ—ｔｘ ｅ ｒｈ；ｎ ｅ ｉｇ； ｐ ｌ ｅｅ ｒｈ Ｌｕ ｅ ｅ ｅ
０ 引 言
随着计算机技术 及 网络 技术 的迅速发 展 ， 电子 文
１ 基 于 Ｊｖ ａａ的 全 文 检 索 引 擎＿Ｊｋ ｒ ａ ａｔ ａ
Ｌｕ ｅ ｅ ｃｎ
档数 目急剧膨胀 ， 在这海Biblioteka 的信息 里面快 速、 面、 全 准
信息检索论文基于lucene的实验大学论文
基于Lucene的实验报告信息检索系统介绍信息检索系统是借助信息检索技术，如全文检索等手段帮助用户检索特定信息的工具。
它可以正确地表示，存储和组织信息，同时还提供信息的访问。
在这里，信息的概念是非常广泛的，它可以是一篇文章，一个文本，一个网页，一封电子邮件，一张照片，甚至是一个收集的虚拟信息。
检索的整个过程包括：文本数据库的构建、索引和检索。
信息检索的过程:1 建立一个文本库一个信息检索系统需要准备之前，搜索功能的开发。
首先，必须建立一个文本数据库。
该文本数据库用于存储用户可以检索的所有信息。
在此基础上，确定了检索系统中的文本模型。
文本模型是一种被系统识别的信息格式，具有冗余性低等特点。
当然，在系统的运行过程中，文本数据库的信息可能会不断变化。
2建立索引当您拥有文本模型时，您应该创建一个基于数据库中的文本的索引.。
索引可以大大提高信息检索的速度。
建立索引的方法有多种，这取决于信息检索系统的大小。
大规模的信息检索系统（如百度，谷歌，如搜索引擎）被用来创建一个倒排索引。
3搜索索引文本后，可以开始搜索它。
搜索请求通常由用户提交，请求进行分析，检索结果返回索引中。
Lucene随着系统信息的越来越多，怎么样从这些信息海洋中捞起自己想要的那一根针就变得非常重要了，全文检索是通常用于解决此类问题的方案，而Lucene则为实现全文检索的工具，任何应用都可通过嵌入它来实现全文检索。
Lucene是一个开源全文检索工具包，它是apache软件基金会jakarta项目组的一个子项目，是一个开放源代码的全文检索引擎工具包，即它不是一个完整的全文检索引擎，而是一个全文检索引擎的架构，提供了完整的查询引擎和索引引擎，部分文本分析引擎（英文与德文两种西方语言）。
Lucene的目的是为软件开发人员提供一个简单易用的工具包，以方便的在目标系统中实现全文检索的功能，或者是以此为基础建立起完整的全文检索引擎。
Lucene工作方式lucene提供的服务实际包含两部分：一入一出。
基于Lucene2_0的书目搜索引擎设计
重庆图情研究2009年第1期(总第10卷第35期)基于Lucene2.0的书目搜索引擎设计蔡兵 胡敏(重庆图书馆,重庆,400037)摘 要 书目搜索引擎是一种类似于网络搜索引擎的目录检索系统,它使用开放源代码软件工具包L u cene2.0来实现。
文章首先讨论了当前主流目录检索系统的检索界面使用上的不方便之处,然后提出了书目搜索引擎的设计思路,接着详细地分析了书目搜索引擎的关键技术与实现方法。
图2。
参考文献4。
关键词 书目搜索引擎 检索界面 全文索引 全文检索中图分类号 G254.2 文献标识码 ABibliography Search Engine D esign of Lucene2.0Abstrac t B i bli ography search eng i ne is a search eng i ne w hich is si m il a r to the net w ork directory retr i eva l sys te m,w hich uses open source so ft ware too l kit to ach i eve L ucene2.0.F irst artic l e discussed the inconveniences o f u si ng t he curren tm ainstrea m search directory re trieval syste m,and then put forward t he tra i n o f thought o f b i bli ography search eng i ne dessi gn,t hen the autho r ana l yzed the key technology and realizati on m ethod b i bli ograph i c search eng i ne in deta iled.2Charts,4R e fs.K ey W ords B i bli og raphy search eng ine;Search i nterface;Index;InterfaceCLC Numb er G254.20 引言目前主流图书馆自动化管理系统的书目检索系统有两种,即OPAC系统和供图书馆内部使用的包含在图书馆自动化系统的各个模块中的目录搜索系统,从功能界面到内部技术体系似乎再无进展,于是千人一面。
基于Lucene的搜索引擎的研究与应用
Ｓ ｈ ａ ｎ ｇ ｈ ｉ ａ ２ ０ ０ ２ ３ ４ ， Ｃ ｈ ｉ ｎ ａ ）
Ａｂｓ ｔ ｒ ａ ｃ ｔ ： Ｔｈ ｅ ｐ ｒ ｅ ｃｉ ｓ ｉ ｏ ｎ ｏ ｆ Ｉ ｎ ｔ ｅ ｒ ｎ ｅ ｔ ｓ ｅ ａ ｒ ｃ ｈ ｉ ｎ ｇ ｉ ｓ ｉ ｍｐ ｏ ｒ ｔ ａ ｎ ｔ ｓ ｉ ｇ ｎ ｓ ｏ ｆ ｗｅ ｉ ｇ ｈｉ ｎ ｇ ｔ ｈ ｅ ｐ ｅ ｆｏ ｒ ｒ ｍａ ｎ ｃ ｅ ｏ ｆ ｓ ｅ ａ ｒ ｃ ｈ ｅ ｎ ｇ ｉ ｎ ｅ ． Ｉ ｎ ｏ ｒ ｄ ｅ ｒ ｔ ｏ ｒ ｅ ｓ ｏ ｌ ｖ ｅ ｈｅ ｔ ｉ ｎ —
第２ ３卷
第 ６期
计 算 机 技 术 与 发 展
ＣＯＭＰ Ｕ ｒ ＥＲ Ｉ １ Ｅ ＣＨＮＯＬ ＯＧＹ ＡＮＤ ＤＥＶＥＬ ＯＰＭＥ ＮＴ
Ｖｏ ｌ ＿ ２ ３ Ｎｏ ． ６
２ ０ １ ３年 ６月
Ｊ ｕ ｎ ｅ ２ ０ １ ３
基于 Ｌ ｕ ｃ ｅ ｎ ｅ的搜 索 引擎 的研 究 与应 用
ｍａ ｉｏ ｒ ｎ ｔ ｏ ｌ ｏ ｃ ａ ｌ ｍａ ｃ ｈｉ ｎｅ ． Ｔｈ ｅ ｓ ｅ ｒｃ ａ ｈ ｅ ｎ ｇ ｉ ｎ ｅ ａ ｌ ｓ ｏ ｕ ｓ ｅ ｓ ｈｅ ｔ ｏ ｐ ｅ ｎ ＡＰ Ｉ ｏ ｆ Ｌｕ ｃ ｅ ｎ ｅ ｔ Ｏ ｉ ｎ ｄ ｅ ｘ ａ ｎ ｄ ｓ ｅ ｒｃ ａ ｈ ｈｅ ｔ ｓ ｐ ｅ ｃ ｉ ａ ｌ ｉ ｎ ｆ ｏ ｒ ｍａ ｔ ｉ ｏ ｎ． Ｌｕ ｃ ｅ ｎ ｅ ｉ ｓ ａ ｈ ｉ ｇ ｈ
ｈ ｅ ｒ ｅ ｎ ｔ ｖ ｉ ｃ ｅ ａ ｂ ｏ ｕ ｔ ｈｅ ｔ ｇ ｅ ｎ ｅ ｒ ａ ｌ ｓ ｅ ｒｃ ａ ｈ ｅ ｎ ｇ ｉ ｎ ｅ ｓ ， ｐ ｒ ｅ ｓ ｅ ｎ ｔ ａ ｓ ｅ ａ ｒ ｃ ｈ ｅ ｎ ｇ ｉ ｎ ｅ ａ ｐ ｐ ｌ ｉ ｅ ｄ ｉ ｎ ｎ ｅ ｗｓ ｓ ｅ ｒｃ ａ ｈ， ｗｈ ｉ ｃ ｈ ｕ ｓ ｅ ｓ ｔ ｈ ｅ ｗｅ ｂ ｓ ｐ ｉ ｄ ｅ ｒ ｔ ｏ ｆ ｅ ｔ ｃ ｈ ｔ ｈ ｅ ｉ ｎ ｆ ｏ ｒ —
基于Lucene全文检索引擎的应用研究
擎 系 统 。 系 统 结 构 图 如 图 １所 示 。
从 图 １看 到 Ｌ ｃｎ ｕ ｅ ｅ系 统 是 由基 础 结 构 封 装 、 引 核 索 心 、 外 接 口三 大 部 分 组 成 。 其 中 索 引 核 心 部 分 是 系 统 对
的 重 点 。 Ｌ ｃｎ ｕ ｅ ｅ中共 有 ７个 子 包 ， 个 包 的 具 体 功 能 见 每 表 １ ，核 心 类 包 主 要 有 ：ｏｇ ｐ ｃ ｅ１ｃ ｎ ．ａ ａ ｓ ； ｒ． ｒ．ａ ａｈ ． ｅ ｅ ｎ ｌ ｉ ｏｇ ｕ ｙｓ
ａ ａ ｈ ．１ ｃ ｎ ．Ｉ ｄ ｘ ｏ ｇ ｐ ｃ ｅ． ｃ ｎ ．ｓ ａｃ ｐ ｃ ｅ ｕ ｅ ｅ ｎ ｅ ； ｒ ．ａ ａ ｈ １ ｅ ｅ ｅ ｒｈ。 ｕ
来 构 建 具 体 的 全 文 检 索 应 用 ，而 且 能 方 便 地 集 成 到 各
种 系 统 软 件 中 ，本 文 对 Ｌ ｃｎ ｕ ｅ ｅ进 行 深 入 的 研 究 和 分 析 ，
以 此 为 基 础 设 计 实 现 了 一 个 以 商 业 网 站 中 构 建 搜 索 引 擎 的实 例 。
１全 文 检 索 引 擎 Ｌ ｃ ｎ ｕｅｅ
１ １ Ｌ ｃ ｎ 概 述 ． ｕｅｅ
Ｌ ｃｎ ｕ ｅ ｅ是 用 Ｊｖ ａ ａ写 的 全 文 检 索 引 擎 工 具 包 ， 不 是 并
Ｉ ｈ ｓ ｈｇ ｃ ｅ ｓ ｐ ｅ ｔ ａ ｉｈ ａ ｃ ｓ ｓ ｅ ｄ，ｓ ｐ ｏ ｓ ｌ — ｓ ｒ ａ ｃ ｓｅ ａ ｄ ｃ ｎ ｂ ｓ ｄ ｉ ｒ ｓ －ｐ ａ ｏｍｗａ ｕ ｐ ｒ ｍｕ ｔ ｕ ｅ ｃ ｅ ｓ ｓ ｎ ａ ｅ ｕ ｅ ｎ ａ ｃ ｏ ｓ ｌ ｆ ｒ ｔ ｉ ｙ．Ｆ ｒｔ ， ｕ ｅ ｅ ａ ｄ ａ ｃ ｕ ｌ ｅ ｔ ｉ ｌ Ｌ ｃ ｎ ， ｎ ａ ｖ ｎ ｅ ｆ ｌ－ｔｘ ｓｙ ｒ ｔ ｅ ａ ｎ ｉ ｅ ｓ ｎ ｒ ｄ ｃ ｄ ｓ ｓｅ ｅｒ ｖ ｌ ｅ ｇ ｎ ｉ ｉ ｉｔｏ ｕ ｅ ，ｙ ｔｍ ｓ ｕ ｔ ｒ ， ｌ ｔｘ ｎ ｅ ｉ ｇ ａ ｅ ａ ａｙ ｅ ｎ ｅ ａｌＴ ｅ ｍｐ ｏ ｔ ｉ ｈ ａ ｐ ｉ ａｉｎ， ｅ ｎ ｔａｅ ｔ ｃｕ ｅ ｆ ｌ ｅ ｔ ｉ ｄ ｘ ｎ ｒ ｎ ｌｓ ｄ ｉ ｄ ｔ ｉ， ｈ ｎ ｅ ｌ ｙ ｉ ｎ ｔ ｅ ｐ ｌ ｔ ｒ ｕ ｃ ｏ ｄ ｍｏ ｓ ｔ ｒ ａ ｘ ｍｐ ｅ ｂ ｓ ｄ ｏ ｕ ｅ ｅ ｔｃ ｎ ｌ ｇ ． ｎ ｅ ａ ｌ ａ ｅ ｎ ｌ ｃ ｎ ｅ ｈ ｏ ｏ ｙ
基于Heritrix+Lucene的高校图书馆网站全文搜索引擎构建
具有基本功能的高校图书馆搜索引擎 ， 以期 为后 续 的研 究 打 下 基 础 。 关键词 ： 搜索引擎 ； 数字图书馆 ； Ｈ ｅ ｒ ｉ ｔ ｒ ｉ ｘ ； Ｌ ｕ ｃ ｅ ｎ ｅ ； Ｈ ｔ ｍｌ ｐ ａ ｒ ｓ ｅ ｒ 中图 分 类 号 ： Ｇ ２ ５ ４ ． ９ ２ 文献标识码 ： Ａ ｄ ｏ ｉ ： １ ０ ． ３ ９ ６ ９ ￣． ｉ ｓ ｓ ｎ ． １ ０ ０ ５ — ８ ０ ９ ５ ． ２ ０ １ ３ ． ０ ９ ． ０ ２ ９
Ｈｕ ａ Ｊ ｉ ｎ ｇ ｓ ｈ ｅ ｎ ｇ Ｌ ｉ Ｐ ｉ ｎ ｇ （ Ｎ ａ ｎ ｊ ｉ ｎ ｇ Ａ ｒ ｔ ｓ Ｉ ｎ ｓ ｔ ｉ ｔ ｕ ｔ ｅ Ｌ ｉ ｂ ｒ ａ ｒ ｙ ， Ｎ ａ ｎ ｊ ｉ ｎ ｇ Ｊ ｉ ａ ｎ ｇ ｓ ｕ ２ １ ０ ０ １ ３）
Ａｂ ｓ ｔ ｒ ａ ｃ ｔ ： Ｔ ｈ ｒ ｏ ｕ ｇ ｈ ｉ ｎ ｖ ｅ ｓ ｔ ｉ ｇ ａ ｔ ｉ ｏ ｎ ａ ｎ ｄ ａ ｎ ａ ｌ ｙ ｓ ｉ ｓ ｏ ｎ ｔ ｈ ｅ ｓ ｔ ａ ｔ ｕ ｓ ｑ ｕ ｏ ｏ ｆ ｄ ｅ ｖ ｅ ｌ ｏ ｐ ｍｅ ｎ ｔ ｏ ｆ ｕ ｎ ｉ ｖ ｅ ｒ ｓ ｉ ｔ ｙ ｌ ｉ ｂ ｒ ａ ｙ ｒ ｗ ｅ ｂ ｓ ｉ ｔ ｅ ， ｔ ｈ ｅ ｐ ａ ｐ ｅ ｒ ｉ ｆ ｎ ｄ ｓ ａ ｃ ｏ ｍ－ ｍＯ Ｂ ｉ ｓ ｓቤተ መጻሕፍቲ ባይዱｕ ｅ ｔ ｈ ａ ｔ ｓ ｅ ａ ｒ ｃ ｈ ｉ ｎ ｇ ａ ｎ ｄ ｕ ｓ ｉ ｎ ｇ ｉ ｎ ｆ ｏ ｒ ｍａ ｔ ｉ ｏ ｎ ｉ ｎ ｕ ｎ ｉ ｖ ｅ ｒ ｓ ｉ ｔ ｙ ｌ ｉ ｂ ｒ ａ ｙ ｒ ｗ ｅ ｂ ｓ ｉ ｔ ｅ ｉ ｓ ｎ ｏ ｔ ｅ ａ ｓ ｙ ， ａ ｎ ｄ ｐ ｏ ｉ ｎ ｔ ｓ ｏ ｕ ｔ ｔ ｈ ａ ｔ ｆ ｕ ｌ ｌ － ｔ ｅ ｘ ｔ ｓ ｅ ａ ｒ ｃ ｈ ｔ ｅ ｃ ｈ ｎ ｏ ｌ ｏ ｇ ｙ ｓ ｈ ｏ ｕ ｌ ｄ ｂ ｅ ｕ ｓ ｅ ｄ ｆ ｏ ｒ ｕ ｎ ｉ ｔ ｅ ｄ ｒ ｅ ｔ ｒ ｉ ｅ ｖ ａ ｌ ｏ ｆ ｉ ｎ ｆ ｏ ｍ ａ ｒ ｔ ｉ ｏ ｎ ｒ ｅ ｓ ｏ ｕ ｒ ｃ ｅ ｓ ｉ ｎ ｕ ｎ ｉ ｖ ｅ ｓｉ ｒ ｔ ｙ ｌ ｉ ｂ ｒ ａ ｒ ｙ ｗｅ ｂ ｓ ｉ ｔ ｅ ． Ｏｎ ｔ ｈ ｅ ｂ ａ ｓ ｉ ｓ ｏ ｆ ｏ ｐ ｅ ｎ － ｓ ｏ ｕ ｒ ｃ ｅ ｓ ｏ ｆ ｔ ｗａ ｒ ｅ Ｈｅ ｒ ｉ ｔ ｒ ｉ ｘ ，
基于Lucene的校园网搜索引擎的设计与实现
信 息 量也 迅速 增加 ， 仅 依 靠 人 工查 询 的方 式 在 校 仅 园 网查询 所需 要 的信 息 不 仅 效率 低 下 ， 而且 费 时 费 力． 在互联 网领域 ， 文本 信息 的检 索一 直是 大规模 信 息处 理 学 科 中 的一 个研 究 热 点Ｌ ， 是 网 络多 媒 体 １也 ］ 信息 处理 领域 的重 要 研 究 方 向． 着 对基 于全 文 的 随 文本 搜索 技术 的不 断探 索 ， 索 引 擎 技 术在 信 息 处 搜
在 系统 的索 引库 进行 信 息 检 索 ， 将 搜 索 结 果 返 回 并 给 用户 ， 同 的搜 索 引 擎 的具 体 模 块 可能 有 不 同 的 不
变 化 和扩展 ＿． ５ Ｊ
的搜 索 引擎像 谷歌 、 度 、 虎等 商业搜 索 引擎虽 然 百 雅
搜 索 功 能 强 大 ， 同 时 也 具 有 一 些 不 足 之 处 ， 公 平 但 如
到 文 件 库 中．
化 等 步骤 ． 文件 信 息过 滤 主要 是 将 各 种文 件 中无 价 值 的字符 串过 滤掉 ； 息 抽 取 主 要 是从 过 滤 后 的 文 信 件 信息 中提 取文 件 标 题 和其 他 感 兴 趣 的 信息 ； 建立 索 引库 就是 将所 提 取 到 的 信息 写 入 到 索 引 文 件 中 ， 索 引文 件是 一 种 由词 典 （ ｃｉ ａｙ 和 分块 倒 排 列 Ｄｉ ｏ ｒ ） ｔｎ 表 （ ｏ ｔ ｇｌ ｔ） 成［ ； 引优化 主要是 对 索 引文 Ｐ ｓｉ ｓｓ组 ｎ ｉ ７ 索 件进 行优 化 ， 以提 高 系统 的检索 速度 ． 由于 Ｌｒ ｎ 是 以 词 为 基 础 建 立 全 文 索 引 ， ￣ｅ ｅ ｃ 因 此， 在建 立索 引之 前必 须进 行 中文分 词 ， 系统 采用 本 中科 院 ｊ—ａ ａｙｉ－ １ ５ ３工 具 包 实 现该 功 能 ． ｅ ｎ ｌｓ ｓ ．． 全
基于Lucene的搜索引擎设计与实现
收稿日期 :2004 - 02 - 19 作者简介 :高 琰 (1973 —) ,女 ,江苏宜兴人 ,博士研究生 ,研究方向 为信息检索 。
接口等四个部分组成[1 ] 。 a. 搜索器的功能是在互联网中漫游 ,发现和搜集信
0 前 言 在过去几年里 , Internet 的资源迅速增长 ,使 Web 发
展成为包含多种信息资源 、站点遍布全球的海量信息服务 网络 。同时 ,也有越来越多的机构 、团体和个人在 Internet 用搜索引擎查询信息 。作为一个门户网站来说 ,提供给用 户搜索服务 ,是吸引用户访问网站的重要手段 。目前许多 网站建立搜索引但是对于一个有很 多子网站的企业门户网站来说 ,通用搜索引擎存在着很多 缺陷 ,满足不了这种搜索服务要求 ,如 : 尽管 Google 等搜 索引擎提供对指定站点内的查询 ,但是不能同时对多个站 点同时查询 ;通用搜索引擎不能及时更新索引 ,会导致搜 索结果不全和出现“坏链接”;调用通用搜索引擎的响应速 度慢 。因此研究一个由企业自主定制的搜索引擎 ,具有重 要的意义 。文中采用 Lucene 的开发工具包 ,实现了一个 全文搜索引擎 。
的搜索与索引策略及其相关参数都存在. xml 的配置文件 中 ,可由系统维护人员通过该接口进行修改 。
2) 文件内容分析器 :分析 HTML , PDF 等多种格式文
件 ,从中提取链接和文件各字段内容 。文件的字段由开发
人员定义 ,这里定义了 url ,content Type ( 内容类型) 、last2
Modified( 最后修改日期) 、contents ( 内容) 、title ( 标 题) 、
摘 要 :当今搜索引擎已经成为人们在网上搜索信息的重要工具 。通用的搜索引擎虽然功能强大 ,但对具有很多子网站的 企业门户网站进行搜索时响应速度慢 ,索引范围不全 。Lucene 是一个强大的全文索引引擎工具包 ,应用它可以快速地开发 一个搜索引擎 。文中描述了利用基于 Java 的全文检索工具包 Lucene 开发定制的中文搜索引擎方法 ,并且将该定制的搜索 引擎与 Google 的站内搜索进行试验比较 ,发现在对具有很多子网站的企业门户网站进行搜索时有优于 Goo gle 的性能 。 关键词 : Web ;搜索引擎 ;Lucene 中图分类号 : TP391 . 3 文献标识码 :A 文章编号 : 1005 - 3751 (2004) 10 - 0027 - 04
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
１ ０ ５
不被系统之 外 实 际 调 用 ． 因 ａ ｃ ｈ ｅ ． ｌ ｕ ｃ ｅ ｎ ｅ ． ｕ ｅ ｒ Ｐ ａ ｓ ｅ ｒ是作为 ｏ ｒ ． ａ ａ ｃ ｈ ｅ ． ｌ ｕ ｃ ｅ ｎ ｅ ． ｓ ｅ ａ ｒ ｃ ｈ 的语法解析器存在 ， ｐ ｑ ｙ ｇ ｐ ［ ］ 此， 这里没有当作对外接口看待 ， 而是将之独立出来 ４ ．
５］ 建立索引 ． 这样系统的关注点就完全可以放在搜索本身 ， 而不是数据库的异构问题上了 ［ 信息 ， ．
用来读写 ＸＭＬ 文件的 ． 具有性能优异 、 功能强大 ｏ ｍ ４ ． ｏ ｒ Ｄ ＯＭ ４ Ｊ是 ｄ ｊ ｇ 出品的一个开源 ＸＭＬ 解析包 ， ， 可以用 Ｄ 首先 初 始 化 ｄ 然后 和极端易用使用的特点 ， ＯＭ ４ Ｊ来读写这些 ＸＭＬ 信息 ． ｏ ｍ ４ ＡＸ Ｒ ｅ ａ ｄ ｅ ｒ ｊ中 的 Ｓ ， （ ） 通过 Ｓ 再用 Ｄ 方 法 得 到 ＸＭＬ ｅ ｔ Ｒ ｏ ｏ ｔ Ｅ ｌ ｅ ｍ ｅ ｎ ｔ ＡＸ Ｒ ｅ ａ ｄ ｅ ｒ来初 始 化 ｄ ｏ ｍ ４ ｏ ｃ ｕ ｍ ｅ ｎ ｔ ｏ ｃ ｕ ｍ ｅ ｎ ｔ中 的 ｇ ｊ中 的 Ｄ 中Ｒ 再通过 Ｒ 这 样 就 可 以 获 得 ＜ｂ ｏ ｏ ｔ 元素 ． ｏ ｏ ｔ 元素来遍历 所 有 子 元 素 ． ｏ ｏ ｋ ｓ ＞根元素下的各个子元素＜ 主要代码如下 ： ｂ ｏ ｏ ｋ＞ 了 ． （ ） ； Ｓ ＡＸ Ｒ ｅ ａ ｄ ｅ ｒ Ｓ ｒ ｅ ａ ｄ ｅ ｒ＝ ｎ ｅ ｗ Ｓ ＡＸ Ｒ ｅ ａ ｄ ｅ ｒ （ ） ； ｏ ｒ ． ｄ ｏ ｍ ４ ． Ｄ ｏ ｃ ｕ ｍ ｅ ｎ ｔ Ｓ ｄ ｏ ｃ＝ Ｓ ｒ ｅ ａ ｄ ｅ ｒ ． ｒ ｅ ａ ｄ ｔ ｈ ｉ ｓ ． ｘ ｍ ｌ Ｆ ｉ ｌ ｅ ｇ ｊ （ ） ； Ｅ ｌ ｅ ｍ ｅ ｎ ｔ Ｓ ｒ ｏ ｏ ｔ＝ Ｓ ｄ ｏ ｃ ． ｅ ｔ Ｒ ｏ ｏ ｔ Ｅ ｌ ｅ ｍ ｅ ｎ ｔ ｇ ； Ｅ ｌ ｅ ｍ ｅ ｎ ｔ Ｓ ｆ ｏ ｏ＝ ｎ ｕ ｌ ｌ
Ｖ ｏ ｌ ． １ ０ Ｎ ｏ ． ４ 第１ 太 原 师 范 学 院 学 报 （ 自然科学版 ） ０卷 第４期 ） Ｄ ｅ ｃ ．２ ０ １ １ ２ ０ １ １年１ ２月 Ｊ ＯＵＲ ＮＡ Ｌ Ｏ Ｆ ＴＡ Ｉ ＹＵＡＮ ＮＯ ＲＭＡ Ｌ ＵＮ Ｉ Ｖ Ｅ Ｒ Ｓ Ｉ Ｔ Ｙ（ Ｎ ａ ｔ ｕ ｒ ａ ｌ Ｓ ｃ ｉ ｅ ｎ ｃ ｅ Ｅ ｄ ｉ ｔ ｉ ｏ ｎ
３］ 供搜索功能的网站Байду номын сангаас［ ．
１． ２ Ｌ ｕ ｃ ｅ ｎ ｅ 概述 是用 Ｊ Ｌ ｕ ｃ ｅ ｎ ｅ是 Ａ ａ ｃ ｈ ｅ软件基金会 Ｊ ａ ｋ ａ ｒ ｔ ａ 项目组的一个子项目 ， ａ ｖ ａ 语言开发的一个完全开 放 源 码 ｐ 基本功能是将多来源得到的数据整合在一起 ， 建立索引文档 ， 然后供当前用户检索时 ， 把 的全文检索工具包 ， 检索的相关信息返回给用户 ． 索 引 核 心、 对外 接 口 三大部 分组 成． 作为一个优秀的 Ｌ ｕ ｃ ｅ ｎ ｅ由基础 结 构 封 装 、 全文检索引擎 ， 其系统结构具有强烈的面向对象特征 ． 首先是定义了一个与平台 无 关 的 索 引 文 件 格 式 ， 其次 通过抽象将系统的核心组成部分设计为抽象类 ， 具体的平台实现部分设计为抽象类的实现 ， 此外与具体平台 经过层层的面向对象式的处理 ， 最终达成 了 一 个 低 耦 合 高 效 率 ， 且容 相关的部分比如文件存储也封装为类 ， 易二次开发的检索引擎系统 ． 如 图 ２ 所 示， 各 个 模 块 完 成 特 定 的 功 能． 需要特别说明的是 ｏ Ｌ ｕ ｃ ｅ ｎ ｅ将所有源码分为 ７ 个模块 ， ｒ ． ａ － ｇ
它可以方便地对检索结果进行排序 ． ｏ ｒ ｔ 类是 Ｌ ｕ ｃ ｅ ｎ ｅ 自带的排序算法 ， Ｓ ｏ ｒ ｔ 类在 ｏ ｒ ． ａ ａ ｃ ｈ ｅ ． ｌ ｕ ｃ ｅ ｎ ｅ ． Ｓ ｇ ｐ ， ） 在只需要实例化一个 Ｓ 并使用 Ｓ 接 口 来 实 现． 构 ｓ ｅ ａ ｒ ｃ ｈ 包中 ， ｏ ｒ ｔ 对象 ， ｅ ａ ｒ ｃ ｈ ｅ ｒ提 供 的 ｓ ｅ ａ ｒ ｃ ｈ（ Ｑ ｕ ｅ ｒ Ｓ ｏ ｒ ｔ ｙ （ ， ） 建好 Ｓ 中， 返回出来的 Ｈ ｏ ｒ ｔ对象后把它传递到方法 Ｓ ｅ ａ ｒ ｃ ｈ ｅ ｒ ． ｓ ｅ ａ ｒ ｃ ｈ Ｑ ｕ ｅ ｒ Ｓ ｏ ｒ ｔ ｉ ｔ ｓ 就是以构建的 Ｓ ｏ ｒ ｔ排 ｙ 序好的结果 ． 这个常量表示当前的排序法则是按照文档的得分 Ｓ ｏ ｒ ｔ有一个静态的常量 Ｓ ｏ ｒ ｔ ． Ｒ Ｅ Ｌ Ｅ ＶＡＮ Ｃ Ｅ， 进行降序排列 ． 为每个文档建立一个内部的ｉ 有些时候 ， 需要按照文 Ｌ ｕ ｃ ｅ ｎ ｅ 在为每个 Ｄ ｏ ｃ ｕ ｍ ｅ ｎ ｔ建立索引的时候 ， ｄ号 ， 表明当前的排序是以内部 档的内部 ｉ ｄ 号来对其进行排序 ． Ｓ ｏ ｒ ｔ 提供了直接静态实例 Ｓ ｏ ｒ ｔ ． Ｉ Ｎ Ｄ Ｅ Ｘ Ｏ Ｒ Ｄ Ｅ Ｒ， 的文档ｉ 如果要按一个或多个 Ｆ 可以利用 Ｓ 在Ｓ ｄ号 ． ｉ ｅ ｌ ｄ 来 排 序， ｏ ｒ ｔ Ｆ ｉ ｅ ｌ ｄ ． ｏ ｒ ｔ类 的 内 部 由 多 个 重 载 的 ｓ ｅ ｔ － ， ， ， Ｓ ｏ ｒ ｔ方法 它们会按提交的 Ｓ ｔ ｒ ｉ ｎ ｉ ｅ ｌ ｄ 信息转成 Ｓ ｏ ｒ ｔ Ｆ ｉ ｅ ｌ ｄ 的对象 并存在内部的数组中 或是直接 ｇ 类型的 Ｆ 将提交的 Ｓ 在排序时使用 ． ｏ ｒ ｔ Ｆ ｉ ｅ ｌ ｄ 数组作为内部的数组 ，
＊
基于 Ｌ ｕ ｃ ｅ ｎ ｅ的高校图书垂直搜索引擎的研究与实现
付 强
（ ） 山西金融职业学院 ， 山西 太原 ０ ３ ０ ０ ０ ８ 摘要 〕 是搜索引擎的细分和延伸 ． 垂 〔 垂直搜索引擎是针对某一个特定领域的专业搜索引擎 ， 直搜索引擎可以帮助用户在海量数据中进行快速 、 专业 、 精准的检索 ． 文章实现了基于 Ｌ ｕ ｃ ｅ ｎ ｅ技术 其可以为读者提供专业的图书信息检索服务 ． 的山西高校图书垂直搜索引擎 ， 〔 ； 关键词 〕 垂直搜索引擎 ； 图书 ； 读者 ｕ ｃ ｅ ｎ ｅ Ｌ 〔 （ ） 文章编号 〕 中图分类号 〕 文献标识码 〕 １ ６ ７ ２ ２ ０ ２ ７ ２ ０ １ １ ０ ４ ０ １ ０ ４ ０ ４ Ｐ ３ １ － － － 〔 Ｔ 〔 Ａ
］ ２ 地产搜索引擎 、 车票搜索引擎等［ ．
垂直搜索引擎如图 １ 所示 ， 由抓取系统 、 索引系统及搜索系统组成 ． 抓 取 系 统， 也 就 是 蜘 蛛 程 序， 负责从 信息源抓取数据 ． 索引系统 ， 将抓来的信息建立类似书目的数据文件 ， 以便于 实 现 高 速 检 索 ． 搜 索 系 统， 是提
图 １ 垂直搜索引擎组成图
图 ２ ｌ ｕ ｃ ｅ ｎ ｅ核心模块图
２ 高校图书垂直搜索引擎的关键技术研究
作为一个专门服务于高校图书的搜 索 引 擎 系 统 ， 本文主要侧重于在使用 Ｌ ｕ ｃ ｅ ｎ ｅ 架设高校图书垂直搜 索引擎过程中 ， 经常遇到的如获取异构数据库中的图书信息和图书的排序算法等关键技术的研究和实践 ． ２． １ 获取异构数据库中的图书信息 各高校图书馆数据库的结构大都不统一 ． 为了统一获取数据库中的图书信息来搭建垂直搜索引擎 目前 ， 平台 ， 则必须解决图书库 的 数 据 异 构 问 题 ． 图 书 搜 索 中 最 主 要 的 一 些 图 书 信 息， 如 书 名、 作 者、 分 类、 Ｉ Ｓ Ｂ Ｎ 等． 如何从各高校图书馆获取异构数据库中的信息建立索引的统一方式成为主要的问题 ． 有这样一个解决方 案， 利用 ＸＭＬ 可以建立自定义的文档格式解决各高校的数据库异构问题 ， 让参与图书信息共享的高校提供 出图书信息 ， 以协商好的统一的 ＸＭＬ 格式来呈献出来 ， 然后就可以通过这些统一的文档格式很方便地读 取
１ 垂直搜索引擎与 Ｌ ｕ ｃ ｅ ｎ ｅ概述
１． １ 垂直搜索引擎 根据数据收录范围不同 ， 将搜索引擎 垂直搜索引擎 ， 是针对某一特定领域 、 某一特定人群或某一特定需求提供的有一定价值的信 于通用搜索引擎 ． ， 息和相关服务 ， 其特点就是“ 专、 精、 深” 且具有行业色彩 ． 它专注具体 、 深入的纵向服务 ， 致力于某一特定领域
许多高校的图书馆搜索是基于数据库检索的 ． 如何解决本校图书藏书 量 不 足 ， 共享山西省内高校 目前 ， “ 图书信息 ， 而且方便读者检索等诸多问题 ， 是本文研究与实现的目标 ． 设计一个统 一 的 搜 索 平 台 ： 山西高校 ）可针对某一个特定领域 ，对某种专门信息进行收集 垂直搜索引擎 （ 图书搜索引擎 ” ． Ｖ ｅ ｒ ｔ ｉ ｃ ａ ｌ Ｓ ｅ ａ ｒ ｃ ｈ Ｅ ｎ ｉ ｎ ｅ ｇ 和整合 ， 为特定用户提供快捷 、 专业 、 精准 、 深入的检索服务 ， 给人们带来更准确 、 更专业及更具目标性的查询 结果 ． 本文主要论述如何利用 Ｌ 实现山西高校图书垂直搜索引擎系统的构建 ， 为读者提供一个方 ｕ ｃ ｅ ｎ ｅ技术 ， 便、 快捷的图书检索平台 ．
１ ０ ６
太 原 师 范 学 院 学 报（ 自然科学版 ） ０卷 第 １
； ｏ ｒ ． ａ ａ ｃ ｈ ｅ ． ｌ ｕ ｃ ｅ ｎ ｅ ． ｄ ｏ ｃ ｕ ｍ ｅ ｎ ｔ ． Ｄ ｏ ｃ ｕ ｍ ｅ ｎ ｔ ｉ ｎ ｄ ｅ ｘ Ｄ ｏ ｃ ｇ ｐ ｉ ｎ ｔ ｂ ｏ ｏ ｋ Ｎ ｕ ｍ ｂ ｅ ｒ ｓ＝ ０； （ ＂ｂ ＂） ； （ ） ； ） ｆ ｏ ｒ（ Ｉ ｔ ｅ ｒ ａ ｔ ｏ ｒ ｌ ｅ ｍ ｅ ｎ ｔ ｒ ｏ ｏ ｔ ． ｅ ｌ ｅ ｍ ｅ ｎ ｔ Ｉ ｔ ｅ ｒ ａ ｔ ｏ ｒ ｏ ｏ ｋ ｉ ． ｈ ａ ｓ Ｎ ｅ ｘ ｔ ＜Ｅ ＞ ｉ＝ Ｓ ｛ （ ） ； Ｓ ｆ ｏ ｏ ＝ｉ ． ｎ ｅ ｘ ｔ （ ＂ 数据库ｉ ： ＂ ＋Ｓ （ ＂ｉ ＂） ） ； Ｓ ｓ ｔ ｅ ｍ． ｏ ｕ ｔ ． ｒ ｉ ｎ ｔ ｌ ｎ ｄ ｆ ｏ ｏ ． ｅ ｌ ｅ ｍ ｅ ｎ ｔ Ｔ ｅ ｘ ｔ ｄ ｙ ｐ ｝ ２． ２ 图书的排序算法 合 理 的 结 果 集 和 排 序 次 序． 搜索引擎的最终价值体现在良好的 反 应 速 度 、 Ｌ ｕ ｃ ｅ ｎ ｅ内 部 隐 含 了 检 索 的 排 序算法是基于向量空间模型 （ 的Ｔ Ｖ Ｓ Ｍ） Ｆ－ Ｉ Ｄ Ｆ 算法 ， Ｌ ｕ ｃ ｅ ｎ ｅ 默认是按照自己的相关 度 算 法 进 行 结 果 排 序 的． 主要流程是找到关键词匹配的文档集合 ， 然后给文档集合每个文档计算检索 相 似 度 ， 最后给文档集合进 行排序 ． 文档的得分是在用户进行检索时实时计算出来的 ． 如果在建立索引时就已经将每个文档的得分计算