文本相似度计算研究进展综述
利用lstm计算文本相似度案例
利用lstm计算文本相似度案例
最近，我公司开发了一个利用LSTM算法计算文本相似度的案例。
该案例是用于评估两个中文文本之间的相似性程度。
我们首先使用预处理技术对文本数据进行清洗和分词处理。
接着，我们将每个文本转化为词向量表示，这可以帮助我们更好地捕捉到文本的语义信息。
然后，我们构建了一个包含多个LSTM单元的模型。
每个LSTM单元都具有记忆和遗忘机制，能够从历史信息中学习和记忆，并生成一个表示文本语义的固定长度向量。
在训练模型时，我们使用了大量的已知文本对来进行监督学习。
通过对这些已知文本对进行学习，模型能够学习到从输入文本到输出相似度的映射关系。
在使用模型进行文本相似度计算时，我们将两个待比较的文本输入到模型中。
模型会根据学习到的映射关系，计算出它们之间的相似度得分。
我们的案例经过了大量的实验和验证，结果显示，我们的模型在文本相似度计算上取得了不错的性能。
它能够识别出语义上相似的文本，并给出相应的相似度得分。
这个利用LSTM计算文本相似度的案例，为我们提供了一个快速准确评估中文文本相似性的工具。
无论是在自然语言处理还是信息检索领域，它都具有重要的应用价值。
文本相似度计算研究进展综述
文本相似度计算研究进展综述研究文本相似度是文本挖掘和自然语言处理领域的重要课题之一、文本相似度计算的目的是通过比较两个文本的内容和语义结构，来确定它们之间的相似度程度。
文本相似度计算在许多应用中都具有重要的实际意义，如信息检索、文本聚类、文本分类、问题回答系统等。
本文将对文本相似度计算的研究进展进行综述。
传统的文本相似度计算方法主要基于词袋模型和向量空间模型。
在这些方法中，文本被表示为一个词汇表上的向量，其中每个维度代表一个词汇，向量的数值表示该词在文本中的重要性。
然后，可以使用不同的相似度度量方法（如余弦相似度）来计算两个文本之间的相似度。
这些方法的优点是简单而直观，但由于没有考虑到词汇的语义信息，所以在处理长文本或含有词汇歧义的文本时表现不佳。
近年来，随着深度学习技术的兴起，基于神经网络的文本相似度计算方法也得到了广泛关注。
这些方法通常使用循环神经网络（RNN）或卷积神经网络（CNN）来捕捉文本的上下文信息和语义结构。
其中，应用较广泛的方法是使用RNN模型，如长短时记忆网络（LSTM）和门控循环单元（GRU）。
这些模型通过学习文本的上下文信息和词汇之间的关联性，能够更好地表达文本的语义含义，从而提高文本相似度计算的准确性。
除了基于神经网络的方法，还有许多其他的文本相似度计算方法被提出。
例如，基于WordNet的方法使用词汇网络中的层次关系来计算文本之间的相似度。
这些方法可以利用WordNet中的同义词和上位词关系来衡量词汇之间的语义相似性。
此外，还有一些方法考虑了文本的结构信息，如基于树的方法和基于图的方法。
这些方法通过考虑句子的语法结构和依赖关系，来捕捉更丰富的语义信息。
尽管文本相似度计算已经取得了一些进展，但仍然存在一些挑战。
首先，文本的语义结构非常复杂，因此如何捕捉文本的语义信息仍然是一个难题。
其次，样本的数量和质量对于训练文本相似度计算模型至关重要。
如果没有足够多的样本和高质量的标注数据，模型将很难学习到准确的语义表示。
相似度量 方法 对比 总结 综述
相似度量方法对比总结综述相似度量是指用于衡量两个对象之间相似程度的方法。
在现实生活中，我们经常需要比较不同对象之间的相似性，比如文本相似度、图像相似度、音频相似度等。
相似度量方法可以帮助我们在各种领域进行对象之间的比较和匹配。
首先，让我们来看一些常用的相似度量方法。
在文本相似度方面，常用的方法包括余弦相似度、Jaccard相似度、编辑距离等。
余弦相似度通过计算两个向量之间的夹角来衡量它们的相似程度，而Jaccard相似度则通过计算两个集合的交集与并集的比值来衡量它们的相似程度。
在图像相似度方面，常用的方法包括结构相似性(SSIM)、均方误差(MSE)等。
这些方法都有各自的特点和适用范围，可以根据具体的应用场景选择合适的方法。
其次，让我们对这些相似度量方法进行对比。
不同的相似度量方法适用于不同的数据类型和应用场景。
比如，余弦相似度适用于文本数据的相似度比较，而SSIM适用于图像数据的相似度比较。
在选择相似度量方法时，需要考虑数据的特点、计算复杂度、准确性等因素。
有些方法可能在某些场景下表现更好，而在其他场景下表现较差。
因此，对不同方法进行对比可以帮助我们选择最合适的方法。
最后，综述一下相似度量方法的应用和发展趋势。
随着大数据和人工智能技术的发展，相似度量方法在各个领域都有着广泛的应用，比如推荐系统、信息检索、图像识别等。
未来，相似度量方法可能会更加注重多模态数据的相似度比较，比如文本和图像的跨模态相似度比较，以及结合深度学习等新技术进行相似度量的研究和应用。
总的来说，相似度量方法在数据分析和人工智能领域具有重要意义，不同的方法适用于不同的场景，通过对不同方法的对比和综述可以更好地理解和应用这些方法。
文本相似度算法研究研究背景与意义
文本相似度算法研究研究背景与意义文本相似度算法是自然语言处理领域一个重要的研究课题。
随着互联网和社交媒体的普及，大量的文本信息被人们创建和传播，如何快速准确地判断两段文本之间的相似度，对于信息检索、文本分类、机器翻译、智能问答等任务具有重要意义。
首先，文本相似度算法能够提高信息检索的效果。
在互联网上，用户通常通过引擎来获取所需的信息。
引擎需要快速、准确地匹配用户的查询与庞大的文本库中的文档，从而返回最相关的文档。
文本相似度算法可以用作引擎的排序算法，通过计算查询与文档之间的相似度，来确定文档的相关性，提高结果的质量和准确度。
其次，文本相似度算法对于文本分类有重要意义。
在文本分类任务中，我们需要将文本根据其内容或主题进行分类，例如将新闻文章分为政治、体育、娱乐等类别。
文本相似度算法可以用来比较待分类文本与已有的标注数据之间的相似度，从而将其准确分类。
在实际应用中，例如情感分析任务中，相似度算法还可以用来比较不同情感倾向的文本之间的相似程度，提供更准确的情感分析结果。
此外，文本相似度算法在机器翻译和智能问答领域也具有重要的应用价值。
机器翻译是指将一段文本从一种语言翻译成另一种语言的任务。
文本相似度算法可以用来比较源语言和目标语言之间的相似度，从而提高翻译的质量和准确性。
智能问答系统是指根据用户提出的问题，从大量的知识库中寻找最相关的答案。
文本相似度算法可以用来比较问题与答案之间的相似度，从而返回最符合用户需求的答案。
最后，文本相似度算法的研究对于自然语言处理的发展也具有重要意义。
随着深度学习等技术的发展，越来越多的模型和方法被提出来用于文本相似度计算，如Siamese Network、BERT等。
因此，对文本相似度算法的研究有助于推动自然语言处理技术的进步和应用。
同时，文本相似度算法也面临着各种挑战，如处理词义消歧、处理长文本、对不同领域进行建模等问题，这些问题的解决将进一步提高文本相似度算法的准确性和鲁棒性。
文本类型数据的特征提取以及相似度计算
文本类型数据的特征提取以及相似度计算随着信息技术的发展，文本数据不断增长，如何从大量的文本数据中提取有用的信息成为一项重要任务。
而文本特征提取和相似度计算是解决这一问题的关键步骤。
一、文本特征提取特征提取是将文本数据转化为计算机可以处理的数值向量的过程。
常用的文本特征提取方法有：1.词袋模型（Bag-of-Words）：将文本看作是由词汇组成的集合，构建一个词汇表，然后统计每个词汇在文本中的出现频率。
这种方法忽略了词汇的顺序和语法结构，只关注词汇的频率。
2.TF-IDF：TF-IDF（Term Frequency-Inverse Document Frequency）是一种衡量词汇在文本中重要性的方法。
它通过计算词频和逆文档频率的乘积来衡量词汇在文本中的重要程度。
3.Word2Vec：Word2Vec是一种基于神经网络的词嵌入模型，可以将词汇映射到一个低维向量空间中。
这种方法能够捕捉词汇之间的语义关系，同时保留了词汇的语法结构。
二、相似度计算相似度计算是衡量文本之间相似程度的方法。
常用的相似度计算方法有：1.余弦相似度：余弦相似度是通过计算两个向量之间的夹角余弦值来衡量它们的相似程度。
在文本特征提取中，可以将文本表示为向量，然后计算它们之间的余弦相似度。
2.编辑距离：编辑距离是衡量两个字符串之间相似程度的方法。
它通过计算将一个字符串转换为另一个字符串所需的最少编辑操作次数来衡量它们的相似程度。
3.基于语义的相似度：基于语义的相似度是通过计算两个文本之间的语义距离来衡量它们的相似程度。
常用的方法有基于词向量的相似度计算和基于语义网络的相似度计算。
三、应用场景文本特征提取和相似度计算在许多领域都有广泛的应用。
以下是一些常见的应用场景：1.文本分类：通过提取文本的特征，并计算不同文本之间的相似度，可以实现文本的自动分类。
例如，可以将新闻文章分类为政治、经济、体育等不同类别。
2.信息检索：通过计算查询文本和文档之间的相似度，可以实现信息的准确检索。
文本相似度计算的缺陷分析与改进
文本相似度计算的缺陷分析与改进随着信息技术的发展，文本相似度计算在自然语言处理、信息检索和文本挖掘等领域中扮演着重要的角色。
然而，当前的文本相似度计算方法存在一些缺陷，限制了其在实际应用中的效果。
本文将对文本相似度计算的缺陷进行分析，并提出一些改进的思路。
一、缺陷分析1. 语义理解不足：当前的文本相似度计算方法主要基于词袋模型或者基于规则的方法，忽略了词语之间的语义关系。
这导致了计算结果的不准确性，尤其是对于一些含有多义词或者上下文有关联的文本。
2. 忽略上下文信息：文本的相似度计算常常忽略了上下文信息的重要性。
例如，两个句子中存在相同的词语，但是由于上下文的不同，其含义可能完全不同。
当前的方法无法很好地捕捉到这种上下文信息，导致计算结果的偏差。
3. 长度差异问题：文本的长度差异也会对相似度计算造成影响。
较长的文本可能包含更多的信息，而较短的文本则可能缺乏充分的信息支持。
当前的方法对于长度差异的处理不够准确，容易导致计算结果的失真。
二、改进思路1. 语义建模：为了解决语义理解不足的问题，可以引入深度学习的方法，利用神经网络模型来进行语义建模。
通过训练大规模的语料库，模型可以学习到词语之间的语义关系，从而更准确地计算文本的相似度。
2. 上下文建模：为了更好地捕捉上下文信息，可以考虑引入上下文建模的方法。
例如，可以使用循环神经网络（RNN）或者注意力机制（Attention）来对文本的上下文进行建模，从而更准确地计算文本的相似度。
3. 长度归一化：为了解决长度差异问题，可以对文本进行长度归一化处理。
例如，可以将文本进行截断或者填充，使得所有文本的长度相同。
这样可以避免长度差异对相似度计算的影响，提高计算结果的准确性。
4. 结合其他特征：除了考虑语义和上下文信息外，还可以结合其他特征来进行相似度计算。
例如，可以考虑词频、词性、句法结构等特征，从多个角度综合考量文本的相似度。
三、总结文本相似度计算在实际应用中具有重要的意义，但当前的方法存在一些缺陷。
文本相似性算法范文
文本相似性算法范文文本相似性算法也被称为文本匹配算法或文本比较算法，是一种用于判断两段文本之间相似程度的算法。
它在信息检索、自然语言处理和文本挖掘等领域有着广泛的应用。
本文将介绍几种常见的文本相似性算法，并比较它们的优缺点。
一、余弦相似性算法余弦相似性算法是一种常见的文本相似性度量方法，它可以用于衡量两个向量之间的夹角，进而判断它们的相似程度。
在文本相似性匹配中，将两段文本分别表示为向量，然后计算它们之间的余弦相似度，值越接近1表示相似度越高。
优点：简单、高效，在大规模文本数据上具有较好的性能。
缺点：不考虑词语的重要性差异，不能很好地刻画文本的语义信息。
优点：能够捕捉到文本之间的语义差异，适用于衡量两段文本之间的相似程度。
缺点：时间复杂度较高，在大规模文本数据上计算效率低下。
三、词袋模型（Bag-of-Words）词袋模型将文本表示为一个包含所有词语的集合，通过计算文本中每个词语的权重来表示文本的特征。
可以使用词频（Term Frequency, TF）或者词频-逆文档频率（Term Frequency-Inverse Document Frequency, TF-IDF）作为词语的权重。
优点：简单、易于实现，在一定程度上可以反映文本的主题信息。
缺点：忽略词语的顺序，不能捕捉到文本之间的时序关系。
四、Word2Vec算法Word2Vec算法是一种基于神经网络的词向量表示算法，它可以将词语表示为一个连续向量，可以反映词语之间的语义关系。
通过计算两个词语向量之间的相似度，可以判断它们之间的相似程度。
优点：能够在一定程度上理解文本的语义，可以捕捉到词语之间的关联性。
缺点：计算复杂度较高，需要大规模的训练数据。
机器学习知识：机器学习中的文本相似度
机器学习知识：机器学习中的文本相似度随着社交媒体和互联网的兴起，大量的文本数据得以收集和储存。
而如何分析这些文本数据是机器学习领域中的一大难题。
其中一个重要的问题就是文本相似度的度量与计算。
在这篇文章中，我们将探讨机器学习中的文本相似度。
一、文本相似度的定义与应用文本相似度是通过计算两个文本之间的相似程度来量化它们之间的关系。
这种关系可以用来帮助分类、聚类和信息检索等应用，也可以用于判断抄袭和语义分析等任务。
文本相似度的计算可以基于不同的特征和技术，包括词汇、句法、语义和语境等。
在机器学习领域中，文本相似度通常是通过将两个文本映射到一个向量空间中，然后计算它们之间的距离或相似度来实现的。
二、文本相似度的方法与技术1.词频-逆文档频率（tf-idf）词频-逆文档频率（tf-idf）是一个常用的文本相似度方法。
它基于词在文本中的频率和在语料库中的频率来计算词的重要性。
首先计算一个文本中每个词的词频（tf），然后乘以一个逆文档频率（idf）因子。
逆文档频率是根据一个词在多少个文本中出现来计算的。
具有更高idf值的词通常是更加重要和有意义的。
使用tf-idf方法，可以将每个文本表示为一个数字向量，并计算它们之间的余弦相似度。
2.词嵌入模型词嵌入模型是一种基于神经网络的文本相似度方法。
它将每个单词映射到一个向量空间中，以表示它们之间的语义和语境关系。
领先的词嵌入模型包括word2vec和GloVe等。
使用这些模型，可以计算两个文本之间所有单词的嵌入向量的平均值，从而得到它们之间的相似度。
3.卷积神经网络（CNN）卷积神经网络（CNN）已经得到广泛的应用，特别是在计算机视觉领域。
最近，研究人员已经开始将其应用于文本相似度问题。
CNN模型通过使用卷积神经网络层、池化层和全连接层来识别文本中的重要特征。
使用这种模型，可以将每个文本表示为一个数字向量，并计算它们之间的余弦相似度。
三、文本相似度的挑战和未来展望虽然文本相似度已经成为许多应用程序的核心技术，但它仍然面临许多挑战。
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
中图分类号： TP 391. 1
文献标志码： A
A survey on research progress of text similarity calculation
WANG Hanru，ZHANG Yangsen
（ Computer School，Beijing Information Science ＆ Technology University，Beijing 100101，China）
( T1，T2，…，Tn) 构成了一个文档向量空间，采用空 间向量间的余弦相似度计算文本相似度。
VSM 的缺陷在于： ①对于大规模语料，VSM 会 产生高维稀疏矩阵，导致计算复杂度增加； ② VSM 假设文本中的各个特征词独立存在，割裂了词与词 之间的关系以及段落间的层次关系。因而用向量空 间进行文本相似度计算时，通常改进 TF-IDF 的计算 方法以提高精确度。例如，张奇等［4］将文本用 3 个 向量（ V1，V2，V3） 表示，V1 中的每一维代表特征词 的 TF-IDF 值，V2 根据一个 bi-gram 是否出现取值 0 或 1，V3 使用 tri-gram 信息，取值同 V2，用回归模型 将 3 对向量相似度综合得到句子的相似度； 华秀 丽［5］等利用 TF-IDF 选择特征项，利用知网计算文本 的语义相似度。 2. 2 基于主题模型：
1） 语言的多义同义问题。同一个词在不同的 语境下，可以 表 达 不 同 的 语 义，例 如“苹 果 ”既 可 以 表示水果，也可以表示科技公司； 同理，相同的语义 也可以由不同的词表达，例如“的士”、“计程车”都 可以表示出租车。
以检测出两段文本的抄袭程度； 在文本聚类方面，相 似度阈值可以作为聚类标准； 在自动文摘中，相似度 可以反映局部信息拟合主题的程度。
根据相似度计算方法的特点，文本相似度可以 分为字面 匹 配 相 似 度、语 义 相 似 度 和 结 构 相 似 度。 字面相似度一般采用 Jaccard 距离、最小编辑距离、 最长公共子串等基本方法进行文本相似度计算。语 义相似度可以从基于统计和基于规则两方面进行考 虑； 结构相似度计算的关键在于分析文本的句法 结构。
2 基于统计的经验主义方法
基于统计的经验主义思想源于 Harris 在 1954 年提出的分布假设（ distributional hypothesis） 。这个 假设认为具有相似上下文的词，应该具有相似的语 义。其计算完全依赖于语料库，根据词汇在文本中 的共现频率衡量其语义相似度。目前，根据语料将 文本表示成计算机可操作的向量形式，是利用统计 方法计算文本相似度的主要思路。基于构建向量的 方式 不 同，有 向 量 空 间 模 型 （ vector space model， VSM） 、主题模型以及神经网络模型 3 种表示方式。 2. 1 基于向量空间模型
DOI： 10. 16508 / j．cnki．11－5866 / n．2019. 01. 013
文本相似度计算研究进展综述
王寒茹，张仰森
（ 北京信息科技大学 计算机学院，北京 100192）
摘
要： 相似度计算是自然语言处理工作的基石。随着自然语言处理技术的发展，相似
度计算的研究价值和应用价值突显。现有的计算方法因其复杂度和精确度的问题，与现实应用的
收稿日期： 2018-09-17 基金项目： 国家自然科学基金项目（ 61772081） 第一作者简介： 王寒茹，女，硕士研究生； 通讯作者： 张仰森，男，博士，教授。
第1期
王寒茹等： 文本相似度计算研究进展综述
69
1 基于字面匹配的方法
基于字面匹配的相似度算法只是单纯从词形上 考虑文本的相似度，认为“形 似 即 义 似”。车 万 翔 等［1］采用编辑距离计算相似度，用词语代替单个汉 字或字符作为基本编辑单元； 俞婷婷等［2］根据 k（ ngram 窗口的大小） 个字符在文本中出现的频率及其 所占权重，用 Jaccard 距离计算 2 个文本间的相似 度； 李圣文等［3］利用公共字符串的信息熵评价文本 相似度。
第 34 卷 第 1 期 2019 年 2 月
北京信息科技大学学报 Journal of Beijing Information Science ＆ Technology University
Vol．34 No．1 Feb．2019
文 章 编 号： 1674－6864（ 2019） 01－0068－07
2） 语言的组合结构问题。词是自然语言中的 最小语义单位，由词可以组成句子和篇章，不同的词 序可以表达不同的语义，如“深度学习”和“学习深 度”； 更进一步，还存在句法结构问题，例如“从北京 到上海高铁”和“从上海到北京高铁”虽然含有的词 语完全相同，但其语义完全不同。
文本相似度的计算不能只停留在字面匹配的层 面，更需要语义层面的匹配，这涉及到语义的表示和 计算的问题。现有的算法分别从统计和规则两方面 进行考虑。
Keywords： distance formula； similarity calculation method； word similarity； sentence similarity； text similarity
0 引言
文本相似度计算是自然语言处理任务的基石， 对后续的文本处理起着非常关键的作用。文本相似 度一般指文本在语义上的相似程度，被广泛应用于 自然语言处理任务的各个领域。在机器翻译领域， 它可以作为翻译精确度的评价准则； 在搜索引擎领 域，可用于衡量检索文本与被检索文本之间的相似 程度； 在自动问答领域，可用来评定问题与答案之间 的语义匹配度； 在抄袭检测领域，通过相似度计算可
针对 VSM 中高维向量空间，一词多义和多词一 义的问题，学者们提出了各种主题模型。如潜在语 义分析模型和潜在狄利克雷分布模型，在词和文档 之间加入 主 题 的 概 念，对 文 本 隐 含 主 题 进 行 建 模。 两篇文档是否相关不仅仅取决于字面上的词汇重 复，更重要的是挖掘文字背后的语义关联。
Deerwester 等［6］于 1990 年提出潜在语 义 分 析 模型 （ latent semantic analysis，LSA） ，该算法的基本 思想是对大型语料库中的词语进行统计分析产生词 条－文档矩阵，并采用奇异值分解（ SVD） 技术剔除 不重要的奇 异 值，从 而 去 除 文 本 的“噪 音 ”，将 文 本 从稀疏的高维词汇空间映射到低维的潜在语义空 间，在低维语义空间上使用余弦距离计算文本相似 度。这样做的优点在于两个相关的文本即使没有相 同的词汇也能获得相似的向量表示，更加符合文本 本身的关系。由于 LSA 算法过高的计算成本，LSA 并没有得到大规模的应用。
随着深度学习在图像、语音方面取得的进展，学
70
北京信息科技大学学报
第 34 卷
者们又把目光转向了利用深度学习模型进行自然语 言 处 理 的 工 作。 如 DSSM、ConvNet、Tree-LSTM、 Siamese LSTM［9－13］都是在对词语或者句子建模的基 础上得到词向量或者句向量，并选择合适的距离公 式进行相似度计算。
3 基于规则的理性主义方法
基于规则的理性主义方法是采用人工构建的、 具有规则体系的知识库进行文本相似度计算。根据 知识库中定义的规则，将词汇分解成概念，这样词汇 间的相似性度量就可以转化为相似性最高的概念间 的相似度。
VSM 将 文 档 看 成 相 互 独 立 的 特 征 项 组 ( T1，T2，…，Tn) ，并根据其在文档中的重要程度赋 予其一定的特征项权重 W ； 将 ( T1，T2，…，Tn) 看作 一个 n 维坐标系中的坐标轴，( W1，W2，…，Wn) 为 相 应 的 坐 标 值。 这 样 由 特 征 项 组
需求并不匹配。针对现有需求，对于不同粒度的文本，研究出一套适合大规模实际应用的相似度
计算方法体系迫在眉睫。从方法论的角度，对目前主流的相似度计算方法进行总结，介绍了不同
粒度的文本相似度计算的差别以及近几年的研究进展，总结了目前相似度计算方向存在的问题，
并对发展趋势进行了展望。 关 键 词： 距离公式； 相似度计算方法； 词语相似度； 句子相似度； 篇章相似度
Blei 等［7］于 2013 年提出隐含狄利克雷分布模 型（ latent dirichlet allocation，LDA） 。它是一种对离 散数据主题信息进行建模的方法，可以用来识别大 规模文档集或语料库中的主题信息。文本的相似度 通过计算与之对应的主题概率分布来实现。由于短 文本的代表词少，LDA 对于短文本的主题挖掘并不 一定能达到预期效果，因而更适用于长文本。例如 王振振等［8］利用 LDA 建立文本主题空间，增强文本 的向量表示。LDA 对文档的主题建模，仅保留本质 信息，有助于高效处理大规模文档。 2. 3 基于神经网络模型
Abstract： Similarity calculation is the cornerstone of natural language processing． With the development of natural language processing technology，the research value and application value of similarity calculation become more and more important． However，the existing calculation methods do not match the requirements of real-world applications due to their complexity and accuracy． It is urgent to study a set of similarity calculation method system suitable for large － scale practical application for different granularity texts． From the perspective of methodology，this paper firstly expounds the current mainstream similarity calculation method，and then introduces the difference of text similarity calculation with different granularity and the research progress in recent years． Finally it summarizes the problems existing in the current similarity calculation direction and provides an outlook of development．