信息检索与搜索引擎课程报告
网上搜索实训报告
本次网上搜索实训旨在提高我运用网络资源进行信息检索的能力，培养我快速、准确地获取所需信息的能力，并学会在信息爆炸的时代中筛选、评估和利用网络资源。
二、实训内容1. 实训平台选择在本次实训中，我选择了百度、谷歌、必应等多个国内外知名的搜索引擎进行信息检索。
同时，我还使用了维普、知网等学术搜索引擎，以及专业数据库如CNKI（中国知网）等，以满足不同类型的信息需求。
2. 实训步骤（1）明确检索需求：在开始检索前，首先要明确自己的信息需求，包括检索主题、关键词、信息类型等。
（2）选择合适的搜索引擎：根据检索需求，选择合适的搜索引擎，如针对学术性较强的信息，可选择维普、知网等。
（3）制定检索策略：根据关键词、信息类型等，制定合理的检索策略，如使用布尔运算符（AND、OR、NOT）进行组合检索。
（4）检索结果评估：对检索结果进行筛选和评估，排除无关信息，提取有价值的信息。
（5）信息整合与利用：将检索到的信息进行整合，形成自己的知识体系，并在实际工作中加以应用。
3. 实训过程（1）以“人工智能”为例，我首先在百度搜索引擎中输入关键词“人工智能”，得到大量相关结果。
接着，我使用布尔运算符（AND）将关键词“人工智能”与“发展现状”进行组合检索，进一步缩小搜索范围。
（2）在维普搜索引擎中，我通过高级检索功能，设置关键词“人工智能”，选择“发展现状”作为检索字段，获取了较为精准的学术性信息。
（3）在CNKI数据库中，我通过“高级检索”功能，设置关键词“人工智能”，选择“发展动态”作为检索字段，获取了最新的研究动态。
1. 信息检索能力提高：通过本次实训，我掌握了多种搜索引擎的使用方法，能够快速、准确地获取所需信息。
2. 信息筛选与评估能力提升：在实训过程中，我学会了如何筛选和评估检索结果，提高信息质量。
3. 知识体系构建：通过整合检索到的信息，我对“人工智能”这一主题有了更深入的了解，形成了自己的知识体系。
4. 实际应用能力增强：在实训过程中，我尝试将所学知识应用于实际工作中，提高了工作效率。
搜索引擎实训报告总结
一、实训背景与目的随着互联网的飞速发展，搜索引擎已成为人们获取信息、学习知识、解决问题的关键工具。
为了更好地理解搜索引擎的工作原理，掌握其关键技术，提高信息检索的效率，我们开展了为期一个月的搜索引擎实训。
本次实训旨在通过理论与实践相结合的方式，使学生深入了解搜索引擎的基本概念、工作原理、关键技术，以及搜索引擎在实际应用中的优化策略。
二、实训内容与过程1. 搜索引擎基本概念与工作原理在实训的第一阶段，我们重点学习了搜索引擎的基本概念和核心工作原理。
通过学习，我们了解到搜索引擎的主要功能是索引、检索和排序，其核心任务是构建索引库，以便用户能够快速、准确地找到所需信息。
2. 搜索引擎关键技术接下来，我们深入探讨了搜索引擎的关键技术，包括：- 倒排索引：倒排索引是搜索引擎的核心技术之一，它将文档内容与文档ID进行映射，使得检索操作更加高效。
- 分词技术：中文分词是中文搜索引擎的关键技术，它将中文文本切分成一个个有意义的词语，以便于后续的检索和排序。
- 检索算法：检索算法是搜索引擎的灵魂，常见的检索算法包括布尔检索、向量空间模型等。
- 排序算法：排序算法用于对检索结果进行排序，常见的排序算法包括TF-IDF、BM25等。
3. 搜索引擎优化策略在实训的后期，我们学习了搜索引擎优化（SEO）策略，包括：- 关键词优化：通过合理选择关键词，提高网站在搜索引擎中的排名。
- 内容优化：提高网站内容的质量，增加用户访问量。
- 链接优化：通过高质量的外部链接，提高网站在搜索引擎中的权重。
4. 实训项目实践在实训过程中，我们以一个实际项目为载体，进行了搜索引擎的构建和优化。
具体步骤如下：- 数据采集：从互联网上采集大量数据，作为搜索引擎的索引库。
- 数据预处理：对采集到的数据进行清洗、去重等处理，提高数据质量。
- 索引构建：根据数据内容构建倒排索引，以便于后续的检索操作。
- 检索功能实现：实现基本的检索功能，包括关键词检索、模糊检索等。
计算机信息检索实验报告(6个)
实验一网上中文搜索引擎及其使用一、实验心得在电脑已经成为生活必备品的现在，日常搜索是一件很平常的事情。
俗话说，天天百度知识丰富。
当然，我国国内主要的搜索引擎除了百度，还有谷歌、雅虎、搜狗、网易、新浪。
一般来说，百度和谷歌是最多人用的。
不同的搜索引擎，不同的搜索方法，得到搜索结果的速度和准确度也不一样。
所以我觉得学习计算机信息检索的主要目的就是更好地提高自己搜索的速度和准确度。
在这次实验当中，我们主要学习和掌握以下搜索技巧的运用。
「“”」的基本用法、「+」或「空格」的基本用法、「+」的基本用法、「-」的基本用法、「OR」的基本用法、「site」的基本用法、「inurl」的基本用法、「intitle」的基本用法、「filetype」的基本用法。
比起以前直接把整个问题打上去然后从网页中寻找满意的答案，灵活使用这些搜索技巧可以更快地找到准确率高的答案。
这些技巧在现实生活中具有高度的可操作性和便捷性。
二、实验结果（一）请使用Google或百度搜索引擎完成以下知识测验：（请将检索结果复制到题干之后，并把所有有关的网页都下载到你的作业文件夹中，以作为本作业评分的依据。
）1．谁根据小仲马的《茶花女》改编了同名歌剧（ B ）/b/7602599.htmlA．奥斯汀 B．威尔第 C．福楼拜2．"生存还是死亡，这是一个问题。
"出自莎士比亚的哪部作品？（ A ）/question/25934693.htmlA．《哈姆雷特》 B．《李尔王》 C．《麦克白》3．"侦探福尔摩斯"第一次出现是在下列哪部作品中: ( A )/question/1306083005651.htmlA.《血字的研究》B.《东方快车谋杀案》C.《尼罗河上的惨案》D.《难逃一生》4．李清照词中名句"寻寻觅觅,冷冷清清,凄凄惨惨戚戚"的词牌名是: ( D ) /wenda/thread?tid=7c29ad4f072df739&hl=cnA.醉花阴B.一剪梅C.如梦令D.声声慢（二）请在网上寻找如下列图片。
因特网上的信息检索——搜索引擎的使用
【课题】因特网上的信息检索——搜索引擎的使用【教材分析】本节课所使用的教材是广东教育出版社出版的信息技术（选修3）《网络技术应用》。
具体是第三章第二节中的内容，本节进一步学习使用网络中信息检索的方法，对搜索引擎检索作进一步的学习。
提高学生使用搜索引擎的技术。
【学情分析】搜索引擎对于高一年级的学生来说已不再陌生，学生当中很多任都已在平时的学习中使用过了，但是对于我校的实际情况，学生的计算机操作水平参差不齐，如何选择教学方法，开展组织教学，是我们这节课的一个难点。
【教学目标】一．知识目标：1．进一步了解搜索引擎的作用及使用方法。
2．掌握网上信息搜索技术。
3．学会使用收藏夹。
二．过程与方法目标：通过学习任务，进一步掌握搜索引擎的使用技巧三．情感态度价值观目标：培养学生探索能力、协作精神。
进一步增强学生利用计算机来使我们的生活更加美好的信心。
【教学重难点】重点：进一步了解搜索引擎的作用及使用方法难点：掌握网上信息搜索技术【教学方法】任务驱动、自主探究式学习、演示讲解等【教学环境】1．多媒体网络教室。
2．能够连入因特网。
【教学课时】1课时【教学设计思路】以查找有关玉龙湖、玉蟾山的相关知识为线索，让学生通过自主探索和协作来学习搜索引擎的使用；结合学生的兴趣爱好介绍收藏夹的使用方法。
操作中注重教师的指导和学生的自主探索。
【教学过程】【课后总结】这节课主要是让学生掌握搜索引擎和收藏夹的使用方法。
以对玉龙湖或玉蟾山的内容进行搜索，通过搜索，让他们更了解自己的家乡，在信息技术的课堂教学中渗透了爱家爱国的感情；在整个搜索的过程中，学生可以自主地根据自己的兴趣去实践，去找自己想要的东西，学生学习热情高涨，学习气氛很好；最后让学生把自己的收藏与其他人共享，无形之中培养了他们与人同乐的道德情操。
总而言之，教学过程环环紧扣，学生动手贯穿始终，收效不错。
信息检索与搜索引擎
信息检索与搜索引擎信息检索是指通过计算机技术来获取符合用户需求的信息的过程。
而搜索引擎作为信息检索的重要工具，能够帮助用户快速、准确地找到所需的信息。
本文将从信息检索的概念、搜索引擎的分类及工作原理等方面进行探讨。
概念解析信息检索是现代信息技术的重要组成部分，它广泛应用于各个领域，包括文献检索、互联网搜索、数据挖掘等。
它的目标是从大量的存储介质（如文件、数据库）中检索出与用户需求最相关的信息，以满足用户的信息需求。
搜索引擎是信息检索的一种应用形式，它通过索引和搜索算法，将互联网上的信息整理、分类，并根据用户输入的关键词，提供相关的搜索结果。
搜索引擎以其高效、准确的特点在互联网时代得到了广泛应用。
搜索引擎的分类根据搜索引擎的不同特点和功能，可以将其分为如下几类：1.通用搜索引擎：通用搜索引擎是指对互联网上的综合信息进行搜索，并提供与搜索内容相关的各种信息资源，如Google、百度等。
这类搜索引擎具有较好的适应性和广泛的应用范围。
2.垂直搜索引擎：垂直搜索引擎是指针对特定领域或行业的信息进行搜索的引擎。
比如，携程旅行网是面向旅游领域的垂直搜索引擎，专门提供与旅游相关的信息资源。
垂直搜索引擎在特定行业中能够提供更专业、更精准的搜索结果。
3.学术搜索引擎：学术搜索引擎主要用于学术研究领域，提供与学术论文、学术期刊等相关的搜索结果。
如Google学术、万方等。
学术搜索引擎为学术研究人员提供了方便、快捷的信息检索工具。
搜索引擎的工作原理搜索引擎的工作原理可以大致分为下面几个步骤：1.爬取和索引：搜索引擎会通过网络爬虫爬取互联网上的网页，并建立起一个庞大的网页索引库。
爬虫会按照一定的规则，将网页的内容、链接等信息收集起来。
2.分析和识别：搜索引擎对这些爬取到的网页进行分析，识别其中的关键词、链接、标题等信息。
通过对网页的结构和内容进行分析，搜索引擎能够更好地理解网页的含义和关联。
3.查询处理：当用户输入关键词进行查询时，搜索引擎会根据用户输入的内容，在索引库中找到与之相关的网页。
搜索引擎实训报告心得
一、前言随着互联网的快速发展，搜索引擎已经成为我们获取信息、解决问题的重要工具。
为了更好地了解搜索引擎的工作原理和应用，我参加了本次搜索引擎实训。
通过实训，我对搜索引擎有了更加深入的认识，以下是我对本次实训的心得体会。
二、实训目的本次实训的主要目的是：1. 了解搜索引擎的基本原理和运作机制。
2. 掌握搜索引擎的关键技术，如索引、检索、排序等。
3. 学会使用搜索引擎进行信息检索和分析。
4. 提高信息素养，培养批判性思维。
三、实训内容1. 搜索引擎基本原理实训首先介绍了搜索引擎的基本原理，包括：（1）搜索引擎的工作流程：包括爬虫抓取、索引建立、检索查询等环节。
（2）搜索引擎的索引技术：包括倒排索引、倒排列表、倒排文件等。
（3）搜索引擎的检索算法：包括布尔检索、向量空间模型、深度学习等。
2. 搜索引擎关键技术实训详细讲解了搜索引擎的关键技术，包括：（1）爬虫技术：介绍了爬虫的工作原理、常用算法、优缺点等。
（2）索引技术：讲解了倒排索引的构建方法、优化策略等。
（3）检索算法：介绍了布尔检索、向量空间模型、深度学习等检索算法的原理和应用。
3. 搜索引擎应用实训通过实际案例，让我们了解了搜索引擎在各个领域的应用，如：（1）搜索引擎在信息检索中的应用：如百度、谷歌等。
（2）搜索引擎在推荐系统中的应用：如淘宝、京东等。
（3）搜索引擎在知识图谱中的应用：如百度知识图谱、搜狗知识图谱等。
四、实训心得1. 搜索引擎的工作原理和关键技术让我对搜索引擎有了更加深入的了解。
以前，我对搜索引擎只是停留在使用层面，而现在，我能够从技术角度去分析搜索引擎的优缺点，为以后的研究和工作打下基础。
2. 通过实训，我学会了如何使用搜索引擎进行信息检索和分析。
在实训过程中，我尝试了不同的检索方法，发现了一些以前未曾注意到的技巧，如使用引号、排除特定关键词等。
这些技巧大大提高了我的信息检索效率。
3. 实训让我认识到信息素养的重要性。
在信息爆炸的时代，我们不仅要学会如何快速获取信息，还要学会如何辨别信息的真伪、筛选有价值的信息。
“信息检索与利用”检索报告(搜索引擎检索)
学科范围：
检索年代：
文献类型：图书［］期刊［］学位论文［］会议文献［］专利文献［］其他［］
其他：
检索结果排序：相关度［］
独立网页信息：[序号]文献题名文献网页地址（检索时间）；
引自其他文献的信息：[序号]传统文献格式文献网页地址（检索时间）；
检索实习总结（检索方法、检索系统的比较，检索过程、检索结果的分析等）：
“信息组织与利用”检索报告
(注：利用搜索引擎查找相关信息)
班级学号姓名分数
课题名称
检索系统
课题分析（写出课题所属领域、背景、拟查找解决的问题等相关内容。可从基础理论、相关学科、应用范围等方面分析、判断，以便将表达文献主题内容且具有检索价值的主题概念提炼出来，为检索词的选择提供依据。）
主题词：
检索式及对应的检索字段
互联网信息检索实训报告
一、实训背景随着互联网技术的飞速发展，网络信息资源日益丰富，人们对于信息的获取和利用需求也越来越高。
为了提高学生利用互联网获取信息的能力，培养学生在信息时代中的信息素养，我校组织了一次互联网信息检索实训活动。
本次实训旨在让学生了解互联网信息检索的基本原理和方法，掌握信息检索工具的使用技巧，提高学生独立获取和利用信息的能力。
二、实训目的1. 了解互联网信息检索的基本原理和方法。
2. 掌握常用的信息检索工具和搜索引擎的使用技巧。
3. 培养学生独立获取和利用信息的能力，提高信息素养。
4. 增强学生的自主学习能力和团队协作能力。
三、实训内容1. 信息检索基本原理（1）信息检索的定义：信息检索是指从大量的信息资源中，根据用户的需求，迅速、准确地找到所需信息的过程。
（2）信息检索的分类：根据检索内容的不同，信息检索可以分为全文检索、关键词检索、分类检索等。
（3）信息检索的方法：包括直接检索、间接检索、组合检索等。
2. 常用信息检索工具和搜索引擎（1）搜索引擎：百度、谷歌、搜狗等。
（2）数据库：中国知网、万方数据、维普资讯等。
（3）学术搜索引擎：谷歌学术、百度学术等。
（4）其他检索工具：搜索引擎插件、在线百科全书等。
3. 信息检索技巧（1）关键词选择：关键词应准确、简洁，能够准确反映检索内容。
（2）检索式构建：利用布尔运算符（AND、OR、NOT）等，将关键词组合成检索式。
（3）检索策略调整：根据检索结果，调整关键词、检索式等，提高检索准确度。
四、实训过程1. 实训准备（1）学生分组：将学生分成若干小组，每组5-6人。
（2）分配任务：每组选择一个特定主题，进行信息检索。
2. 实训实施（1）各小组根据分配的主题，利用搜索引擎、数据库等检索工具，查找相关信息。
（2）各小组对检索到的信息进行筛选、整理，形成一份完整的报告。
（3）各小组在课堂上进行报告展示，分享检索过程和结果。
3. 实训总结（1）教师对各组报告进行点评，指出优点和不足。
计算机信息检索实验报告(6个)
实验一网上中文搜索引擎及其使用一、实验心得在电脑已经成为生活必备品的现在，日常搜索是一件很平常的事情。
俗话说，天天百度知识丰富。
当然，我国国内主要的搜索引擎除了百度，还有谷歌、雅虎、搜狗、网易、新浪。
一般来说，百度和谷歌是最多人用的。
不同的搜索引擎，不同的搜索方法，得到搜索结果的速度和准确度也不一样。
所以我觉得学习计算机信息检索的主要目的就是更好地提高自己搜索的速度和准确度。
在这次实验当中，我们主要学习和掌握以下搜索技巧的运用。
「“”」的基本用法、「+」或「空格」的基本用法、「+」的基本用法、「-」的基本用法、「OR」的基本用法、「site」的基本用法、「inurl」的基本用法、「intitle」的基本用法、「filetype」的基本用法。
比起以前直接把整个问题打上去然后从网页中寻找满意的答案，灵活使用这些搜索技巧可以更快地找到准确率高的答案。
这些技巧在现实生活中具有高度的可操作性和便捷性。
二、实验结果（一）请使用Google或百度搜索引擎完成以下知识测验：（请将检索结果复制到题干之后，并把所有有关的网页都下载到你的作业文件夹中，以作为本作业评分的依据。
）1．谁根据小仲马的《茶花女》改编了同名歌剧（ B ）/b/7602599.html A．奥斯汀B．威尔第C．福楼拜2．"生存还是死亡，这是一个问题。
"出自莎士比亚的哪部作品？（ A ）/question/25934693.html A．《哈姆雷特》 B．《李尔王》 C．《麦克白》 3．"侦探福尔摩斯"第一次出现是在下列哪部作品中: ( A ) /question/1306083005651.html A.《血字的研究》 B.《东方快车谋杀案》 C.《尼罗河上的惨案》D.《难逃一生》4．李清照词中名句"寻寻觅觅,冷冷清清,凄凄惨惨戚戚"的词牌名是: ( D ) /wenda/thread?tid=7c29ad4f072df739&hl=cn A.醉花阴 B.一剪梅 C.如梦令 D.声声慢（二）请在网上寻找如下列图片。
《信息检索》实验报告
《信息检索》实验报告一、OPAC检索1.利用“中图分类法”查找自己所在专业的分类号，并记录。
再使用书目查询系统查找该分类下的一本图书，写出该书的书名、作者、出版社、出版年、索书号、馆藏复本数、ISBN号、馆藏地（写一个即可）。
TU新农村景观设计艺术顾小玲东南大学出版社2011年索引号：TU982/14 2本ISBN号：2011002852 馆藏地：样本二库[4楼西，借期20天]2.查找作者姓“李”、索书号为“H31”的图书，记录下检索的结果数量，再在结果中检索由中山大学出版社出版的图书，记录下检索结果的数量，并写下任一检索结果的作者、书名、出版社、索书号、馆藏复本数、可借复本数。
1337 7疯狂英语.听力高级飞跃李俊青中山大学出版社H319.9/1322:3馆藏复本：24 可借复本：223.分类号是“TP311.1”的是关于哪方面内容的图书？写出此类书其中一种图书的书名、作者、出版社和索书号。
程序设计、软件工程中文版Access 2007数据库应用实用教程冯先锋秦小英清华大学出版社TP311.13/13024.自行熟悉OPAC中“我的图书馆”各项功能，并写出已借阅图书数量和今年所借阅的两本书的书名，如果可能请进行续借。
7 小高层住宅设计图集新型住宅平面设计方案二、电子图书检索1.利用“读秀学术搜索”打开并阅读书名包含“竞争情报”，作者为“王知津”的图书，写出该书的书名、出版社、出版日期，并从书中查阅竞争情报的概念。
书名：《竞争情报》出版社：科学技术文献出版社出版日期：2005.02竞争情报的概念：为达到竞争目标，合法而合乎职业伦理的搜集竞争对手和竞争环境的信息，并转变为情报的连续的系统化过程。
2.利用“读秀学术搜索”检索二本有关美国前总统的图书，写出图书的书名、著者、出版社。
书名：《改变世界历史的七天美国前总统尼克松1972年七天访华揭秘》作者：梁建增，赵微主编出版社：高等教育出版社书名：冷战后的美国外交政策从老布什到小布什作者：潘锐出版社：时事出版社3.利用“读秀学术搜索”找出与自己专业相关的图书，写出其中2本图书的书名、作者和出版社。
网络信息资源检索实训报告
一、实训背景随着互联网的普及，网络信息资源已成为人们获取知识、学习技能、研究问题的重要途径。
为了提高我们的网络信息检索能力，本实训课程以《网络信息资源检索》教材为基础，结合实际案例，通过一系列实训项目，使我们掌握网络信息资源检索的基本原理、方法和技巧。
二、实训目的1. 熟悉网络信息资源检索的基本原理和方法。
2. 掌握搜索引擎的使用技巧，提高检索效率。
3. 了解各类数据库、网络资源的特点，学会合理选择和使用。
4. 培养良好的信息素养，提高自我学习能力。
三、实训内容1. 网络信息资源检索的基本原理网络信息资源检索是利用计算机技术和网络通信技术，从海量网络信息中快速、准确地查找所需信息的过程。
其基本原理包括：（1）信息检索语言：包括关键词、布尔逻辑运算符、截词符等。
（2）检索策略：根据检索目的，合理组合检索词，形成检索式。
（3）检索工具：搜索引擎、数据库、专业网站等。
2. 搜索引擎的使用技巧（1）合理使用关键词：关键词应尽量准确、简洁，避免使用过于宽泛或过于具体的关键词。
（2）利用高级搜索功能：根据需求，选择合适的搜索范围、时间、语言等。
（3）善用布尔逻辑运算符：通过逻辑运算符组合关键词，提高检索的准确性和效率。
（4）利用工具栏插件：如百度、谷歌等搜索引擎的网页翻译、相关搜索、关键词推荐等功能。
3. 各类数据库、网络资源的特点及使用方法（1）学术数据库：如CNKI、万方、维普等，提供学术论文、学位论文、会议论文等资源。
（2）行业数据库：如食品行业数据库、医药行业数据库等，提供行业相关信息。
（3）综合数据库：如国家图书馆、清华大学图书馆等，提供各类图书、期刊、报纸等资源。
（4）专业网站：如气象水文、食品、医学等领域的专业网站，提供行业动态、研究报告、技术交流等资源。
4. 实训项目（1）利用搜索引擎检索相关信息，完成课题研究。
（2）在学术数据库中检索相关论文，分析研究现状。
（3）访问行业数据库，了解行业动态。
互联网的搜索引擎与信息检索
互联网的搜索引擎与信息检索随着互联网的快速发展，搜索引擎成为我们日常生活中获取信息的主要途径。
搜索引擎通过建立庞大的索引库，帮助用户快速搜索并获取所需的信息。
本文将探讨互联网的搜索引擎及信息检索的相关内容，以及其在我们生活中的作用和影响。
一、搜索引擎的定义和原理搜索引擎是一种能够通过关键词来查找相关网页、图片、视频等资料的互联网工具。
其原理主要包括网络爬虫、索引数据库和搜索算法。
首先，网络爬虫是搜索引擎工作的第一步。
爬虫程序会按照一定的规则在互联网上遍历网页，并将网页的内容下载到数据库中。
其次，索引数据库是搜索引擎的核心组成部分。
它建立了一个庞大的网页索引库，将爬虫程序下载的网页进行整理和分类，并建立相应的索引。
最后，搜索算法是搜索引擎的灵魂所在。
通过搜索算法，搜索引擎能够根据用户输入的关键词，在索引库中迅速找到相关的网页，并按照一定的排名规则进行排序，以便用户获取最相关的信息。
二、主要搜索引擎的分类和特点目前，市场上存在许多搜索引擎，其中最知名和应用最广泛的有谷歌、百度、必应等。
这些搜索引擎根据其特点和功能可分为一般搜索引擎和垂直搜索引擎两大类。
一般搜索引擎是最常见的搜索引擎类型，如谷歌和百度。
它们通过建立庞大的索引库，可以搜索到网络上几乎任何类型的信息，包括网页、图片、视频等。
这些搜索引擎通常采用复杂的搜索算法，能够精确匹配用户的搜索需求，并提供相关度排名，确保用户能够快速找到最有用的信息。
垂直搜索引擎是面向特定领域的搜索引擎，例如豆瓣电影和知乎。
这些搜索引擎主要针对特定领域的信息进行索引和搜索，能够提供更加专业和准确的搜索结果。
垂直搜索引擎的特点是覆盖深度较大，对某一特定领域的信息检索更为专业。
三、互联网搜索引擎的作用和影响互联网搜索引擎以其高效、准确的搜索功能改变了人们获取信息的方式，对我们的生活产生了巨大的影响。
首先，搜索引擎使我们能够快速方便地获取所需信息。
无论是学术研究、购物咨询还是旅游规划，我们只需要在搜索引擎中输入关键词，便能得到海量的相关信息，大大节省了我们的时间和精力。
信息检索课程报告
本科课程考查专用封面 作业题目： 信息检索课程报告 所修课程名称： 信息检索修课程时间：2012 年2 月至 2012 年 4 月 完成作业日期： 课程结束后一周内 评阅成绩： 评阅教师签名： 2012年5月 日 ____工____学院_____2011_____级____机电一体化______专业姓名_____杨博_______学号____2011180942________………………………………（密）………………………………（封）………………………………（线）………………………………说明：1、本报告总计40分，包括检索报告和学习报告两个部分，两部分各占20分。
2、本报告手写打印均可，打印请用宋体五号字（默认字体）排版。
3、写作前请仔细阅读题目要求，报告应包含题目要求的全部内容。
题目：一、检索报告（20分）自选一个检索课题，结合教学内容和学习体会，多方面获取所需要的信息。
要求：1、选择明确的课题。
2、根据检索课题进行信息需求分析。
3、明确各类信息获取的渠道。
4、简要列出你的检索过程和检索结果目录。
提示：同学之间的选题不能一样，请通过尽可能多的渠道检索信息，以展示你的所学，这是该题目得分高低的关键所在。
二、学习报告（20分）要求：第一部分：对自己的学习做个自我评价。
第二部分：每次课堂学习的收获。
第三部分：完成上机实验题目的收获。
第四部分：对信息检索这门课做个评价。
请把你的两个报告按顺序写在以下答题区。
答题纸不够可自行用相同大小纸张加页。
检索报告一、我选择的检索课题是：为考会计资格证搜集相关信息和资料二、这个课题相关的信息需求主要有：（1）报考的证书类型，方向（2）报考的相应条件（3）考试的类型和形式（4）考试大纲及科目（5）考试报名时间及考试时间（6）报考地点及考点（7）选择培训机构（8）了解培训机构的教育水平和过级率（9）知道专业课的参考书（10）考试科目的历年真题（11）各类培训讲义、培训视频等（12）了解申请会计资格证所需资料和手续（13）报送及审批时间三、相关信息的收缩渠道分别是：（1)通过百度、谷歌等搜索引擎了解报考的类型及相应条件（2)通过查找和浏览各高校或者相关学院网站了解考试时间、报名方式及考试大纲（3)通过搜魅网、马虎聚搜等元搜索引擎搜索相关培训机构信息（4)用图书馆的数据库查询图书的馆藏并去图书馆借阅参考书籍及历年真题（5)用电子书数据库查找下载相关书籍及历年真题（6)通过迅雷、搜狗、奇艺、优酷、土豆等下载各类培训视频（7)通过超级旋风、leapFTP、重点学科网络资源导航门户、hao123网址之家等搜索并下载培训讲义，申报表等.四、检索过程及结果如下：（1)在搜索引擎（如百度）中输入“非会计专业报考会计资格证相关条件”，通过浏览查找，发现要先考会计从业资格证，在报考全国会计专业技术资格考试。
第四课 网络信息检索的方法和使用搜索引擎》教案
第四课网络信息检索的方法和使用搜索引擎》教案广东汕头华侨中学杨时宏老师【课题名称】网络信息检索的方法和使用搜索引擎【教学目标】1、结合课本中的情景内容，认识网络信息的查找需要搜索引擎，使学生产生通过优化检索获取网络信息的强烈愿望。
2、结合情景以及学生的实际，讲解有关IE浏览器中地址栏的运用。
3、学生小组合作操作实践，掌握搜索引擎的分类查找、关键词的查找方法，并利用“搜索过程记录卡”进行搜索过程的总结，对常用的搜索引擎进行比较和评价。
4、结合课本的交流题进行交流分析，通过分组研讨，搜集、总结出在网络中进行高效的检索的重要性和相关技巧。
【教学重点】1、使学生在经历信息获取的实践过程中掌握信息获取的思想与方法。
2、掌握搜索引擎中的目录类搜索方法和全文（关键词）搜索方法。
【教学方法】采用讲解、探究、任务驱动和学生自主学习相结合的学习方法。
【学习时间】1课时【教学地点】计算机教室（或网络教室）【教学过程】1、情景引入：通过课本中的“开心辞典”中查询“目前世界上濒危动物华南虎的数量”引入，使学生认识到2信息虽然丰富，但多而杂，没有一定的信息技术素养的人，即使身在网络中，也会入宝山而空手归。
以此强调利用掌握获取网络信息的策略与技巧的重要性。
2、在引入情景时，简单讲解有关IE浏览器中“地址栏”的运用。
1）在“地址栏”键入用户要浏览的见解址。
2）可以直接键入要搜索的内容。
如“华南虎”。
3、查询“目前世界上濒危动物华南虎的数量”的情景来展开几种有关网络信息检索方法的简要讲解。
1）直接访问相关信息网页。
（）2）使用搜索引擎（百度搜索引擎：详情可见课本P31）3）直接访问在线数据库（查“虎华南亚种”）4）使用BBS论坛（BBS水木清华站：）3、让学生思考并填写课本P25 表2-6的网络信息检索方法表。
并进行学生提问：哪种方法可以最快找到要搜索的相关信息，为什么？（答案可参考课本P27有关搜索引擎的概念）以此引入搜索引擎提供的两种搜索信息的方法：按目录索引搜索和关键词搜索。
“信息检索与利用”检索报告(搜索引擎检索)
“信息组织与利用”检索报告
(注：利用搜索引擎查找相关信息)
班级：通信工程14-2班学号：5021210205 姓名：种姗分数
检索实习总结（检索方法、检索系统的比较，检索过程、检索结果的分析等）：1.检索方法与检索系统的比较
首先是选择搜索引擎，确定检索途径，然后是检索的方法：
（1）在信息检索系统齐全的情况下，首先使用信息检索工具指南来指导选择；（2）从所熟悉的信息检索工具中选择；
（3）通过网络在线帮助选择。
2.检索过程与检索结果分析
在本次课题的检索中,我用的搜索引擎是百度与谷歌，在搜索中输入相应的检索次，接着限制一些条件，例如，单片机的应用分类，结构，应用领域，然后出现了很多相关的文献。
检索结果都是与单片机应用研究课题相关的文章，其中有一些大学学生写的论文，文献中包括的单片机的结构特点，应用范围等，相对比较完整。
信息检索与搜索引擎实验综合项目课程大纲
信息检索与搜索引擎实验综合项目课程大纲一、课程简介信息检索与搜索引擎实验综合项目课程旨在提供学生综合应用信息检索与搜索引擎相关理论和技术的机会，通过实践项目的方式加深对该领域的理解和掌握。
通过该课程的学习，学生将能够独立完成一个基于实际需求的信息检索与搜索引擎项目，并具备相关领域的基本理论知识和实践技能。
二、课程目标1. 掌握信息检索与搜索引擎的基本原理和核心技术；2. 理解信息检索与搜索引擎的应用场景和实际需求；3. 学会使用常见的信息检索与搜索引擎工具和技术进行数据处理和分析；4. 培养解决实际问题的能力和创新思维；5. 提高团队合作和沟通能力。
三、教学内容和安排1. 信息检索与搜索引擎概述- 信息检索与搜索引擎的定义和发展历程- 信息检索与搜索引擎的基本原理和流程2. 搜索引擎索引与检索- 搜索引擎索引的建立和维护- 搜索引擎检索技术和策略- 搜索引擎结果的排序和评价指标3. 基于Web的信息检索- 网页抓取和解析技术- 网页内容的处理和分析- 网页链接分析和网页排名算法4. 搜索引擎推荐系统- 用户行为数据的收集和分析- 个性化搜索和推荐算法- 用户满意度评估和优化5. 搜索引擎应用案例- 垂直搜索引擎- 企业内部搜索引擎- 移动搜索引擎6. 综合实验项目- 学生根据实际需求，自主设计和完成一个综合实验项目- 实验项目包括需求分析、系统设计、算法实现、结果分析和报告撰写四、课程评分1. 平时成绩：包括课堂作业和讨论参与度，占总评成绩的30%2. 实验报告：根据综合实验项目的完成情况和报告质量，占总评成绩的40%3. 期末考试：考察学生对信息检索与搜索引擎理论和技术的掌握程度，占总评成绩的30%五、参考教材1. 《信息检索导论》（第三版）- Christopher D. Manning等著2. 《搜索引擎入门与高级应用》- 黄翔宇等著3. 《Web信息检索与挖掘》- 李荣华等著六、备注本课程要求学生具备一定的计算机科学和数学基础，熟悉编程和数据处理的相关知识和技能。
大学生信息检索实训报告
一、实训背景随着信息技术的飞速发展，信息检索已成为大学生必备的一项基本技能。
为了提高我们的信息素养，增强在学术研究、日常学习和未来工作中的信息获取和处理能力，我校特组织了本次大学生信息检索实训。
通过实训，我们旨在掌握信息检索的基本方法、技巧和策略，提高信息检索的效率和质量。
二、实训目的1. 熟悉各类信息检索工具的使用方法。
2. 掌握信息检索的基本原则和策略。
3. 提高信息检索的效率和质量。
4. 培养良好的信息素养和学术道德。
三、实训内容本次实训主要分为以下几个部分：1. 信息检索基础知识（1）信息检索的概念和类型（2）信息检索的基本原则（3）信息检索的基本策略2. 信息检索工具的使用（1）图书馆资源检索：图书馆OPAC系统、电子图书、期刊数据库等。
（2）网络资源检索：搜索引擎、学术搜索引擎、专业数据库等。
（3）社交媒体资源检索：微博、知乎、论坛等。
3. 信息检索技巧（1）关键词选择与组合（2）检索式的构建（3）检索结果的筛选与评价4. 信息素养与学术道德（1）信息素养的定义与内涵（2）学术道德的基本要求（3）信息检索中的知识产权保护四、实训过程1. 理论学习：通过课堂讲授、网络课程等方式，系统学习信息检索的相关知识。
2. 实践操作：在老师的指导下，利用图书馆、网络等资源进行信息检索实践。
3. 小组讨论：针对信息检索过程中遇到的问题，进行小组讨论和交流。
4. 实训报告撰写：总结实训过程中的收获和体会，撰写实训报告。
五、实训成果通过本次实训，我们取得了以下成果：1. 掌握了信息检索的基本方法和技巧，提高了信息检索的效率和质量。
2. 拓宽了信息获取渠道，丰富了知识储备。
3. 增强了学术道德意识，培养了良好的信息素养。
六、实训体会1. 信息检索是一项重要的技能，对学术研究、日常学习和未来工作具有重要意义。
2. 信息检索需要掌握一定的方法和技巧，同时也需要良好的信息素养和学术道德。
3. 在信息检索过程中，要注重信息资源的筛选和评价，确保信息的准确性和可靠性。
小学信息技术教案学习使用搜索引擎进行信息检索
小学信息技术教案学习使用搜索引擎进行信息检索一、引言现代社会信息爆炸，对信息的获取、处理和利用能力要求越来越高。
作为小学生的老师，我们要培养学生的信息素养，使他们能够运用信息技术进行信息检索，获取所需的知识。
本教案旨在帮助小学生学习使用搜索引擎进行信息检索的基本技巧和注意事项。
二、背景知识在学习使用搜索引擎之前，我们先给学生简要介绍一些背景知识，包括搜索引擎的定义、搜索引擎的分类和作用等。
搜索引擎是一种能够根据用户提供的关键词，在互联网上进行信息检索的工具。
常见的搜索引擎有百度、谷歌、搜狗等。
根据检索的方式和所搜索的内容不同，搜索引擎可以分为通用搜索引擎和垂直搜索引擎。
通用搜索引擎主要用于搜索互联网上的各类信息，而垂直搜索引擎则更加专注于某个领域的信息搜索，例如医疗、旅游、音乐等。
搜索引擎的作用是帮助用户找到所需的信息。
我们通常通过输入关键词来进行搜索。
搜索引擎会根据关键词在互联网上进行检索，并将与关键词相关的网页、图片、视频等展示给用户。
三、学习目标本节课的学习目标是：1. 学习搜索引擎的基本使用方法和搜索技巧；2. 学习如何选择合适的关键词进行搜索；3. 学习如何筛选和评估搜索结果，获取准确的信息。
四、教学步骤1. 介绍搜索引擎的基本使用方法a) 打开浏览器，并输入搜索引擎的网址；b) 在搜索框中输入关键词，点击搜索按钮；c) 浏览搜索结果，选择合适的链接进行点击。
2. 学习选择合适的关键词a) 关键词要准确地描述你所要搜索的内容；b) 关键词要尽量简洁明了，避免使用模糊的词语；c) 如果没有找到合适的搜索结果，可以尝试修改关键词。
3. 学习筛选和评估搜索结果a) 根据搜索结果的标题和摘要，判断是否与你所需的信息相符；b) 可以通过在搜索框中添加一些限定词来缩小搜索范围，例如添加地点、时间等；c) 注意评估搜索结果的可靠性，尽量选择来自权威机构或知名网站的信息。
4. 小结与拓展通过本节课的学习，我们掌握了使用搜索引擎进行信息检索的基本技巧。
大学信息检索实验报告
一、实验目的通过本次实验，使学生掌握信息检索的基本方法，提高利用图书馆资源的能力，培养学生的信息素养和自主学习能力。
二、实验时间2023年X月X日三、实验地点XX大学图书馆四、实验内容1. OPAC检索- 利用中图分类法查找所在专业的分类号，并记录。
- 使用书目查询系统查找该分类下的一本图书，记录书名、作者、出版社、出版年、索书号、馆藏复本等信息。
2. 数据库检索- 选择一个与自己专业相关的数据库，了解其检索功能和检索技巧。
- 使用数据库进行文献检索，记录检索结果的数量、文献标题、作者、发表时间等信息。
3. 网络信息检索- 使用搜索引擎进行信息检索，了解搜索引擎的检索原理和检索技巧。
- 在网络上查找与实验相关的资料，记录资料来源、作者、发表时间等信息。
五、实验步骤1. OPAC检索- 在图书馆检索机上，选择“中图分类法”检索方式。
- 输入所在专业名称，查找对应的分类号。
- 使用书目查询系统，输入分类号，查找相关图书。
- 记录书名、作者、出版社、出版年、索书号、馆藏复本等信息。
2. 数据库检索- 选择一个与自己专业相关的数据库，如CNKI、万方数据等。
- 了解数据库的检索功能和检索技巧，如关键词检索、布尔检索等。
- 输入检索关键词，进行文献检索。
- 记录检索结果的数量、文献标题、作者、发表时间等信息。
3. 网络信息检索- 使用搜索引擎，如百度、谷歌等，进行信息检索。
- 了解搜索引擎的检索原理和检索技巧，如关键词检索、高级检索等。
- 输入检索关键词，查找与实验相关的资料。
- 记录资料来源、作者、发表时间等信息。
六、实验结果与分析1. OPAC检索- 查找到与所在专业相关的图书共X本，其中馆藏复本X册。
- 通过OPAC检索，掌握了图书馆的图书资源分布情况，提高了图书借阅效率。
2. 数据库检索- 在数据库中检索到与实验相关的文献共X篇。
- 通过数据库检索，掌握了相关领域的最新研究成果，拓宽了知识面。
3. 网络信息检索- 在网络上找到与实验相关的资料共X篇。
信息检索与搜索引擎技术_实验3 倒排索引、正排索引
XXXX大学信息工程与自动化学院学生实验报告课程名称：信息检索与搜索引擎技术一、上机目的及内容1.上机目的熟悉索引的作用和重要性；熟悉正排索引和倒排索引及其建立；2.上机内容对 Doc1:清华/大学/清华/主页 Doc2:世纪/清华 Doc3:北京/大学建立正排索引和倒排索引二、实验环境Windows操作系统 PC机一台，MyEclipse三、实验原理将词项集合建立成为倒排索引的过程分为两个步骤:首先要将文本词项集合处理成正排索引,在建立正排索引的时候把词项列表的结构建立起来;然后再有正排索引建立成倒排索引.正排索引的建立方法:1.顺序扫描集合中的词项.2.当遇到在文档中第一次出现的词项时,要更新词项表,如果词项列表中已近含有这个词,则把改词的DF加1,否则添加这个词项,置DF为1.3.然后处理词项,生成词项的出现记录信息,插入到对应词项的Hit List中。
正排索引建立完成之后，依照索引中的WordID 为单位，将DocID进行填充，然后按照WordID对所有单位进行从小到大的排序，就可以得到基本的倒排索引。
要得到由WordID为键值的索引项，只需要再将WordID和DocID的存贮位置互换，并按照WordID进行归并即可。
最后再将词项列表中的Pointer指针置为指向对应词项的索引项存储地址。
这样得到的索引就可以用来进行检索了。
四、实验记录package com.liu.suoyin;import java.util.*;public class Suoyin {public static void main(String[] args) {Zhengpai zp=suoyin();daopai(zp);}public static Zhengpai suoyin(){String[][] doc ={{"清华","大学","清华","主页"},{"世纪","清华"},{"北京","大学"}};List<Cixiang> cixiang=new ArrayList<Cixiang>();List<Jilu> jilu=new ArrayList<Jilu>();for(int i=0;i<doc.length;i++)for(int j=0;j<doc[i].length;j++){if(cixiang.size()==0){Cixiang ci=new Cixiang();ci.worldID=0;ci.term=doc[i][j];ci.DF=1;ci.doc=i;cixiang.add(ci);Jilu jl=new Jilu();jl.docID=i;jl.wordID=0;jl.NoOfHit=1;jl.HitLise.add(j);jilu.add(jl);}else{int k;for(k=0;k<cixiang.size();k++){Cixiang ci=(Cixiang)cixiang.get(k);if(ci.term.equals(doc[i][j])){if(ci.doc!=i)ci.DF++;cixiang.set(k,ci);int m;for( m=jilu.size()-1;m>-1;m--){if(ci.doc==jilu.get(jilu.size()-1).docID && ci.worldID==jilu.get(m).wordID){Jilu jl=jilu.get(m);jl.HitLise.add(j);jl.NoOfHit++;jilu.set(m,jl);break;}if(m==0){Jilu jl=new Jilu();jl.docID=i;jl.wordID=ci.worldID;jl.NoOfHit=1;jl.HitLise.add(j);jilu.add(jl);}}break;}}if(k==(cixiang.size())){Cixiang ci=new Cixiang();ci.worldID=cixiang.size();ci.term=doc[i][j];ci.DF=1;cixiang.add(ci);Jilu jl=new Jilu();jl.docID=i;jl.wordID=ci.worldID;jl.NoOfHit=1;jl.HitLise.add(j);jilu.add(jl);}}System.out.println("worldID Term DF");for(int l=0;l<cixiang.size();l++){System.out.print(((Cixiang)cixiang.get(l)).worldID+"\t");System.out.print(((Cixiang)cixiang.get(l)).term+"\t");System.out.println(((Cixiang)cixiang.get(l)).DF);}System.out.println();System.out.println("DocID WorldID No.ofHit Hitlist");for(int l=0;l<jilu.size();l++){System.out.print("doc"+(1+((Jilu)jilu.get(l)).docID)+"\t");System.out.print(((Jilu)jilu.get(l)).wordID+"\t");System.out.print(((Jilu)jilu.get(l)).NoOfHit+"\t ");for(int m=0;m<((Jilu)jilu.get(l)).HitLise.size();m++)System.out.print( (int)((Jilu)jilu.get(l)).HitLise.get(m)+" ");System.out.println();}Zhengpai zhengpai=new Zhengpai();zhengpai.cixiang=cixiang;zhengpai.jilu=jilu;return zhengpai;}public static void daopai(Zhengpai zp){List<Cixiang> cixiang=new ArrayList<Cixiang>();List<Jilu> jilu=new ArrayList<Jilu>();for(int i=0;i<zp.cixiang.size();i++){Cixiang ci=zp.cixiang.get(i);for(int j=0;j<zp.jilu.size();j++){if(i==zp.jilu.get(j).wordID){jilu.add(zp.jilu.get(j));}}cixiang.add(ci);}for(int i=0;i<cixiang.size();i++){int k=0;for(int j=0;j<jilu.size();j++){if(i==jilu.get(j).wordID){if(cixiang.get(i).pointer[0]==-1){cixiang.get(i).pointer[0]=j;}k=j;}cixiang.get(i).pointer[1]=k;}System.out.println();System.out.println("worldID Term DF pointer");for(int l=0;l<cixiang.size();l++){System.out.print(((Cixiang)cixiang.get(l)).worldID+"\t");System.out.print(((Cixiang)cixiang.get(l)).term+"\t");System.out.print(((Cixiang)cixiang.get(l)).DF+" ");System.out.println(((Cixiang)cixiang.get(l)).pointer[0]+","+((Cixiang)cixiang.get(l)).pointer[1]);}System.out.println("\nWorldID DocID No.ofHit Hitlist");for(int l=0;l<jilu.size();l++){System.out.print(((Jilu)jilu.get(l)).wordID+"\t");System.out.print("doc"+(1+((Jilu)jilu.get(l)).docID)+"\t");System.out.print(((Jilu)jilu.get(l)).NoOfHit+"\t ");for(int m=0;m<((Jilu)jilu.get(l)).HitLise.size();m++)System.out.print( (int)((Jilu)jilu.get(l)).HitLise.get(m)+" ");System.out.println();}}}class Cixiang{int worldID;String term;int DF;int doc;int[] pointer={-1,-1};}class Zhengpai{List<Cixiang> cixiang=new ArrayList<Cixiang>();List<Jilu> jilu=new ArrayList<Jilu>();}class Jilu{int docID;int wordID;int NoOfHit;List<Integer> HitLise=new ArrayList<Integer>();}运行结果：a.正排索引b.倒排索引四、实验总结倒排索引源于实际应用中需要根据属性的值来查找记录。
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
《信息检索搜索引擎技术》
期末考试报告
学期： 2016-2017学年第一学期
任课教师：***
专业年级：计科133
学号： ************、 ************、
201310405330、 201310405325 学生姓名：李然、毛子铭、张倩、黄枫
目录
一、系统概述 (3)
二、系统需求分析 (3)
2.1功能需求分析 (3)
三、程序实现 (4)
3.1 爬虫的实现 (4)
3.1.1 对网页进行分析 (4)
3.1.2编写爬虫 (5)
3.2索引的实现 (7)
3.2.1分词的实现 (7)
3.2.2索引的建立 (8)
3.2.3检索索引 (9)
3.3向量空间模型的实现 (10)
3.3.1向量空间模型概述 (10)
3.3.2建立向量空间模型 (11)
3.4利用Lucene打分机制对文档打分 (13)
四、测试 (14)
五、心得体会 (17)
一、系统概述
随着互联网的迅猛发展、WEB信息的增加，用户要在信息海洋里查找自己所需的信息，就像大海捞针一样，搜索引擎技术恰好解决了这一难题。
搜索引擎是指互联网上专门提供检索服务的一类网站，这些站点的服务器通过网络搜索软件或网络登录等方式，将Intenet上大量网站的页面信息收集到本地，经过加工处理建立信息数据库和索引数据库，从而对用户提出的各种检索做出响应，提供用户所需的信息或相关指针。
用户的检索途径主要包括自由词全文检索、关键词检索、分类检索及其他特殊信息的检索。
本系统基于HTMLUNIT框架，构建爬虫，基于LUCENE 框架，构建索引，利用向量空间模型向量化表示文档间的相关性，利用
LUCENE给相关文档打分。
二、系统需求分析
2.1功能需求分析
该系统分为四个功能模块：
（1）爬虫模块
（2）索引模块
（3）向量化表示模块
（4）打分模块
具体实现分工如下：
①爬虫模块：该模块采用Htmlunit框架，主要负责爬取网页内容，在
本地建立文档库，以便于索引功能模块，将文档库里的文档内容建立成索引。
（毛子铭所做）
②索引模块：该模块采用Lucene框架，功能分为两块：一是建立索
引，将爬取的内容建立成索引。
二是检索索引，即提供给用户检索索引。
（张倩所做）
③向量化表示模块：该模块采用向量空间模型，其功能是将查询文本
和文档向量化表示，以一种直观的表示方法，展示出文档间的相似度。
（李然、黄枫合做）
④打分模块：该模块采用Lucene打分系统，计算查询文本和文档的相
似度，并对其文档打分。
（李然、黄枫合做）
三、程序实现
3.1 爬虫的实现
3.1.1 对网页进行分析
（1）我们首先，对网页进行分析，昆工新闻上每一则新闻，都有相应的链接，通过点击链接查看相应的新闻。
<1> 昆工新闻网页截图
<2> 新闻内容截图
（2）在浏览器中，查看新闻网的代码，确定我们所需要的内容并用XPATH表达式定位其内容。
<3> 新闻代码截图
3.1.2编写爬虫
（1）在这里，我们使用了HtmlUnit作为我们爬虫的框架，并指定内容，对昆工新闻网进行爬取。
<4> 部分代码展示
（2）编写XPATH表达式，定位所抓取的内容，在爬取过程中，首先要找到新闻的标题，然后，再模拟点击标题的动作，进入新闻页面。
（3）爬取内容，并将其写入文本文档中。
<5> 写入文档
<6>爬取内容
3.2索引的实现
3.2.1分词的实现
（1）在建立索引之前，分词是必不可少的步骤，我们所采用的是基于Lucene 框架的IK分词技术分词。
<7> 部分代码展示
（2）对爬取的内容，进行分词测试。
<9>测试
3.2.2索引的建立
（1）索引的建立，我们也是基于Lucene框架建立的倒排索引，分词技术的不同索引的差别也是很大，因此，分词技术的选取一定要合理。
<10> 部分代码展示
3.2.3检索索引
（1）在这里，我们对爬取好的内容，已经建立好了索引，我们分别测试了“宇宙”、“人民”这两关键词进行检索。
可以看见，符合“人民”这个关键词的文档有2个，符合“宇宙”这个关键词的文档不存在。
<12> 索引
<13> 索引结果3.3向量空间模型的实现
3.3.1向量空间模型概述
向量空间模型将文档映射为一个特征向量V(d)=(t
1,ω
1
(d)；…；t
n
, ω
n
(d))，
其中t
i (i=1,2, …,n)为一列互不雷同的词条项，ω
i
(d)为t
i
在d中的权值, 一
般被定义为t
i 在d中出现频率tf
i
(d)的函数，即。
在信息检索中常用的词条权值计算方法为TF-IDF 函数，其中N为所有文档的数目，ni为含有词条ti的文档数目。
TF-IDF公式有很多变种，下面是一个常用的TF-IDF公式：
根据TF-IDF公式，文档集中包含某一词条的文档越多，说明它区分文档类别属性的能力越低，其权值越小；另一方面，某一文档中某一词条出现的频率越高，说明它区分文档内容属性的能力越强，其权值越大。
两文档之间的相似度可以用其对应的向量之间的夹角余弦来表示，即文档di，dj的相似度可以表示为：
进行查询的过程中，先将查询条件Q进行向量化，主要依据布尔模型:当
ti在查询条件Q中时，将对应的第i坐标置为1，否则置为0，即：
从而文档d与查询Q的相似度为：
根据文档之间的相似度，结合机器学习的一些算法如神经网络算法，K-近邻算法和贝叶斯分类算法等，可以将文档集分类划分为一些小的文档子集。
在查询过程中，可以计算出每个文档与查询的相似度，进而可以根据相似度的大小，将查询的结果进行排序。
向量空间模型可以实现文档的自动分类和对查询结果的相似度排序，能够有效提高检索效率；它的缺点是相似度的计算量大，当有新文档加入时，则必须重新计算词的权值。
3.3.2建立向量空间模型
（1）将文档的前十五个关键字作为key并将文件的内容作为value存Treemap 中
<14> 部分代码展示
（2）求两个词项的并集
<15> 部分代码展示（3）求两个词项的交集
<15> 部分代码展示（4）计算文章相似度
<16> 部分代码展示
（5）计算公式：
3.4利用Lucene打分机制对文档打分
（1）在这里，我们是基于Lucene框架，利用其自带打分系统，对查询文本和文档计算它们的相似度，再进行打分。
Lucene打分公式如下：
（2）计算查询文本（TermQuery）与文档的相似度进行打分。
（3）在查找“人民”这两个关键词后出现两个相关文档，它们分别的得分为0.47782254和0.3901917，这说明第一个文档更符合查询
<17> 打分
四、测试
<18> 测试截图1
<19> 测试截图2
<20> 测试截图3
<21> 测试截图4
<22> 测试截图5
<23> 测试截图6
<24> 测试截图7
<25> 测试截图8
<26> 测试截图9
五、心得体会
此次报告要求实现第一个信息检索系统，涉及到多线程编程、排序、网络爬虫等多项技术。
多线程是提高效率的一个非常重要的途径，比如计算机并行计算等，本次实验完成了多线程的任务，对网络间通信以及搜索引擎如何实现向海量用户在很短时间内提供服务有了更深刻的认识。
通过实验我也认识到了多线程编程的边缘。
在下一步的研究学习之中有很大助力。
在此基础之上建立检索，通过对于索引的检索，一方面可以加深对于索引的深层认识，另一方面又可以是我们运用知识与学习知识相结合，可以使我们学的更好，运用的有理可循。
搜索引擎的处理对象是互联网网页，日前网页数量不计其数。
所以搜索引擎首先面临的问题就是：如何能够设计出高效的查询以及下载系统。
网络爬虫是搜索引擎中很关键也很基础的构建，通过网络爬虫的设计，加深了我对实验原理的理解，同时也加强了自身的实践能力。