文本相似度计算方法及装置.pdf

上传人:000****221 文档编号:628123 上传时间:2018-02-27 格式:PDF 页数:16 大小:1.35MB
返回 下载 相关 举报
摘要
申请专利号:

CN201410323334.2

申请日:

2014.07.08

公开号:

CN104090865A

公开日:

2014.10.08

当前法律状态:

授权

有效性:

有权

法律详情:

授权|||实质审查的生效IPC(主分类):G06F 17/27申请日:20140708|||公开

IPC分类号:

G06F17/27; G06F17/30

主分类号:

G06F17/27

申请人:

安一恒通(北京)科技有限公司

发明人:

李阳; 林永峰; 罗灿

地址:

100091 北京市海淀区东北旺西路8号,中关村软件园4号楼C座1-03

优先权:

专利代理机构:

北京品源专利代理有限公司 11332

代理人:

胡彬;邓猛烈

PDF下载: PDF下载
内容摘要

本发明实施例公开了文本相似度计算方法及装置。该文本相似度计算方法包括:通过比较两个文本的节点,计算两个文本的增删距离与替换距离,其中所述增删距离与所述替换距离的和为所述两个文本的编辑距离;根据增删距离与替换距离,计算两个文本的相似度。本发明实施例提供的技术方案,能够采用一种不依赖于词典、切词以及模型训练的算法,来实现文本之间的相似度的计算,从而可以提高相似度的计算速度。

权利要求书

1.  一种文本相似度计算方法,其特征在于,包括:
通过比较两个文本的节点,计算所述两个文本的增删距离与替换距离,其中所述增删距离与所述替换距离的和为所述两个文本的编辑距离;
根据所述增删距离与替换距离,计算所述两个文本的相似度。

2.
  根据权利要求1所述的文本相似度计算方法,其特征在于,根据所述增删距离与替换距离,计算所述两个文本的相似度,包括:
按照公式S=(L1+L2)-[N×D1+M×D2]L1+L2,]]>计算所述两个文本的相似度;
其中,所述S为所述两个文本的相似度,L1为所述两个文本中第一文本的节点个数,L2为所述两个文本中第二文本的节点个数,D1为所述增删距离,D2为所述替换距离,N为设定的第一权重,M为设定的第二权重。

3.
  根据权利要求2所述的文本相似度计算方法,其特征在于,如果所述两个文本中的每个文本均是由中文字符组成,则所述第一权重N大于所述第二权重M;
如果所述两个文本中的每个文本均是由英文字符组成,则所述第一权重N小于所述第二权重M。

4.
  根据权利要求1所述的文本相似度计算方法,其特征在于,所述两个文本中的每个文本由至少两个字符组成,则在计算所述两个文本的增删距离与替换距离之前,还包括:
按照设定的编码方式,将所述两个文本中的字符转换为以字节为节点单位的二进制序列。

5.
  根据权利要求1所述的文本相似度计算方法,其特征在于,所述两个文本中至少一个文本的字符长度小于1024。

6.
  根据权利要求1所述的文本相似度计算方法,其特征在于,通过比较两个文本的节点,计算所述两个文本的增删距离与替换距离,包括:
如果Min(i,j)=0,则Dis1(Ai,Bj)=Max(i,j),Dis2(Ai,Bj)=0;如果Min(i,j)!=0,则
Xi,j=Dis1(Ai-1,Bj)+Dis2(Ai-1,Bj)+1,
Yi,j=Dis1(Ai,Bj-1)+Dis2(Ai,Bj-1)+1,
Zi,j=Dis1(Ai-1,Bj-1)+Dis2(Ai-1,Bj-1)+const,
如果F(Xi,j,Yi,j,Zi,j)=Xi,j,则
Dis1(Ai,Bj)=Dis1(Ai-1,Bj)+1,
Dis2(Ai,Bj)=Dis2(Ai-1,Bj);
如果F(Xi,j,Yi,j,Zi,j)=Yi,j,则
Dis1(Ai,Bj)=Dis1(Ai,Bj-1)+1,
Dis2(Ai,Bj)=Dis2(Ai,Bj-1);
如果F(Xi,j,Yi,j,Zi,j)=Zi,j,则
Dis1(Ai,Bj)=Dis1(Ai-1,Bj-1),
Dis2(Ai,Bj)=Dis2(Ai-1,Bj-1)+const;
其中,0≤i≤I,0≤j≤J,I为所述两个文本中第一文本的节点个数,J为所述两个文本中第二文本的节点个数;
Dis1(Ai,Bj)为所述两个文本中第一文本的前i个节点与第二文本的前j个节点的增删距离,Dis2(Ai,Bj)为所述两个文本中第一文本的前i个节点与第二文本的前j个节点的替换距离;
Dis1(Ai-1,Bj)为所述两个文本中第一文本的前(i-1)个节点与第二文本的前j个节点的增删距离,Dis2(Ai-1,Bj)为所述两个文本中第一文本的前(i-1)个节点与第二文本的前j个节点的替换距离;
Dis1(Ai,Bj-1)为所述两个文本中第一文本的前i个节点与第二文本的前(j-1)个节点的增删距离,Dis2(Ai,Bj-1)为所述两个文本中第一文本的前i个节点与第二文本的前(j-1)个节点的替换距离;
Dis1(Ai-1,Bj-1)为所述两个文本中第一文本的前(i-1)个节点与第二文本的前(j-1)个节点的增删距离,Dis2(Ai-1,Bj-1)为所述两个文本中第一文本的前(i-1)个节点与第二文本的前(j-1)个节点的替换距离;
如果所述第一文本的第i个节点与所述第二文本的第j个节点不相同,则const=1,否则const=0;
Xi,j为所述两个文本中第一文本的前i个节点与第二文本的前j个节点的第一编辑距离,Yi,j为所述两个文本中第一文本的前i个节点与第二文本的前j个节点的第二编辑距离,Zi,j为所述两个文本中第一文本的前i个节点与第二文本的前j个节点的第三编辑距离,F(Xi,j,Yi,j,Zi,j)为根据设定规则从Xi,j、Yi,j和Zi,j中选取的值最小的一个。

7.
  根据权利要求6所述的文本相似度计算方法,其特征在于,所述设定规则为:
如果在Xi,j、Yi,j和Zi,j各自对应的值中至少有两个值相等,且相等值为Xi,j、Yi,j和Zi,j各自对应的值中的最小值,则F(Xi,j,Yi,j,Zi,j)为Xi,j、Yi,j和Zi,j中值为最小的且所对应的增删距离最大的一个,否则F(Xi,j,Yi,j,Zi,j)=Mib(Xi,j,Yi,j,Zi,j);或者
如果在Xi,j、Yi,j和Zi,j各自对应的值中至少有两个值相等,且相等值为Xi,j、Yi,j和Zi,j各自对应的值中的最小值,则F(Xi,j,Yi,j,Zi,j)为Xi,j、Yi,j和Zi,j中值为最小的且所对应的替换距离最大的一个,否则F(Xi,j,Yi,j,Zi,j)=Min(Xi,j,Yi,j,Zi,j)。

8.
  一种文本相似度计算装置,其特征在于,包括:
文本距离计算单元,用于通过比较两个文本的节点,计算所述两个文本的增删距离与替换距离,其中所述增删距离与所述替换距离的和为所述两个文本的编辑距离;
文本相似度计算单元,用于根据所述增删距离与替换距离,计算所述两个文本的相似度。

9.
  根据权利要求8所述的文本相似度计算装置,其特征在于,所述文本相似度计算单元,具体用于:
按照公式S=(L1+L2)-[N×D1+M×D2]L1+L2,]]>计算所述两个文本的相似度;
其中,所述S为所述两个文本的相似度,L1为所述两个文本中第一文本的节点个数,L2为所述两个文本中第二文本的节点个数,D1为所述增删距离,D2为所述替换距离,N为设定的第一权重,M为设定的第二权重。

10.
  根据权利要求9所述的文本相似度计算装置,其特征在于,如果所述两个文本中的每个文本均是由中文字符组成,则所述第一权重N大于所述第二权重M;
如果所述两个文本中的每个文本均是由英文字符组成,则所述第一权重N小于所述第二权重M。

11.
  根据权利要求8所述的文本相似度计算装置,其特征在于,所述两个文本中的每个文本由至少两个字符组成,则所述装置还包括:
字符转换单元,用于在所述文本距离计算单元计算所述两个文本的增删距离与替换距离之前,按照设定的编码方式,将所述两个文本中的字符转换为以字节为节点单位的二进制序列。

12.
  根据权利要求8所述的文本相似度计算装置,其特征在于,所述两个文本中至少一个文本的字符长度小于1024。

13.
  根据权利要求1所述的文本相似度计算装置,其特征在于,所述文本距离计算单元,具体用于:
如果Min(i,j)=0,则Dis1(Ai,Bj)=Max(i,j),Dis2(Ai,Bj)=0;如果Min(i,j)!=0,则
Xi,j=Dis1(Ai-1,Bj)+Dis2(Ai-1,Bj)+1,
Yi,j=Dis1(Ai,Bj-1)+Dis2(Ai,Bj-1)+1,
Zi,j=Dis1(Ai-1,Bj-1)+Dis2(Ai-1,Bj-1)+const,
如果F(Xi,j,Yi,j,Zi,j)=Xi,j,则
Did1(Ai,Bj)=Dis1(Ai-1,Bj)+1,
Dis2(Ai,Bj)=Dis2(Ai-1,Bj);
如果F(Xi,j,Yi,j,Zi,j)=Yi,j,则
Dis1(Ai,Bj)=Dis1(Ai,Bj-1)+1,
Dis2(Ai,Bj)=Dis2(Ai,Bj-1);
如果F(Xi,j,Yi,j,Zi,j)=Zi,j,则
Dis1(Ai,Bj)=Dis1(Ai-1,Bj-1),
Dis2(Ai,Bj)=Dis2(Ai-1,Bj-1)+const;
其中,0≤i≤I,0≤j≤J,I为所述两个文本中第一文本的节点个数,J为所述两个文本中第二文本的节点个数;
Dis1(Ai,Bj)为所述两个文本中第一文本的前i个节点与第二文本的前j个节点的增删距离,Dis2(Ai,Bj)为所述两个文本中第一文本的前i个节点与第二文本的前j个节点的替换距离;
Dis1(Ai-1,Bj)为所述两个文本中第一文本的前(i-1)个节点与第二文本的前j个节点的增删距离,Dis2(Ai-1,Bj)为所述两个文本中第一文本的前(i-1)个节点与第二文本的前j个节点的替换距离;
Dis1(Ai,Bj-1)为所述两个文本中第一文本的前i个节点与第二文本的前(j-1)个节点的增删距离,Dis2(Ai,Bj-1)为所述两个文本中第一文本的前i个节点与第二文本的前(j-1)个节点的替换距离;
Dis1(Ai-1,Bj-1)为所述两个文本中第一文本的前(i-1)个节点与第二文本的前(j-1)个节点的增删距离,Dis2(Ai-1,Bj-1)为所述两个文本中第一文本的前(i-1)个节点与第二文本的前(j-1)个节点的替换距离;
如果所述第一文本的第i个节点与所述第二文本的第j个节点不相同,则const=1,否则const=0;
Xi,j为所述两个文本中第一文本的前i个节点与第二文本的前j个节点的第一编辑距离,Yi,j为所述两个文本中第一文本的前i个节点与第二文本的前j个节点的第二编辑距离,Zi,j为所述两个文本中第一文本的前i个节点与第二文本的前j个节点的第三编辑距离,F(Xi,j,Yi,j,Zi,j)为根据设定规则从Xi,j、Yi,j和Zi,j中选取的值最小的一个。

14.
  根据权利要求13所述的文本相似度计算装置,其特征在于,所述设定规则为:
如果在Xi,j、Yi,j和Zi,j各自对应的值中至少有两个值相等,且相等值为Xi,j、Yi,j和Zi,j各自对应的值中的最小值,则F(Xi,j,Yi,j,Zi,j)为Xi,j、Yi,j和Zi,j中值为最小的且所对应的增删距离最大的一个,否则F(Xi,j,Yi,j,Zi,j)=Min(Xi,j,Yi,j,Zi,j);或者
如果在Xi,j、Yi,j和Zi,j各自对应的值中至少有两个值相等,且相等值为Xi,j、Yi,j和Zi,j各自对应的值中的最小值,则F(Xj,j,Yi,j,Zi,j)为Xi,j、Yi,j和Zi,j中值为最小的且所对应的替换距离最大的一个,否则F(Xi,j,Yi,j,Zi,j)=Min(Xi,j,Yi,j,Zi,j)。

说明书

文本相似度计算方法及装置
技术领域
本发明实施例涉及计算机技术领域,尤其涉及一种文本相似度计算方法及装置。
背景技术
目前,由多个字符所组成的文本已成为一种十分重要的信息载体。其文本间相似度的计算,作为一种文档处理中所经常使用的方法,通常被应用于文本聚类、文本检索、数据挖掘、系统自动问答等诸多应用场合。
在现有技术中,一种文本相似度的计算方式是:先分别对两个长文本基于词典进行切词,并计算每个文本中切词得到的各个分词的词频,然后根据词典确定两文本中各分词间的相似度,进而根据所得到的相似度以及词频计算两文本的整体相似度;另一种文本相似度的计算方式是:预先通过机器学习方式,训练得到一文本相似度计算模型,然后根据该模型确定文本间的相似度。
然而,上述现有技术所存在的技术缺陷在于:对于第一种文本相似度的计算方式而言,其依赖于词典,需要对文本进行切词,其实现算法比较复杂且不利于改进;对于第二种文本相似度的计算方式而言,其需要预先训练得到一文本相似度计算模型,其实现算法也比较复杂。因此,这两种方式均会导致文本相似度的计算速度很低。
发明内容
本发明实施例提供一种文本相似度计算方法及装置,以采用一种不依赖于词典、切词以及模型训练的算法,来实现文本之间的相似度的计算,从而提高相似度的计算速度。
第一方面,本发明实施例提供了一种文本相似度计算方法,该方法包括:
通过比较两个文本的节点,计算所述两个文本的增删距离与替换距离,其中所述增删距离与所述替换距离的和为所述两个文本的编辑距离;
根据所述增删距离与替换距离,计算所述两个文本的相似度。
第二方面,本发明实施例还提供了一种文本相似度计算装置,该装置包括:
文本距离计算单元,用于通过比较两个文本的节点,计算所述两个文本的增删距离与替换距离,其中所述增删距离与所述替换距离的和为所述两个文本的编辑距离;
文本相似度计算单元,用于根据所述增删距离与替换距离,计算所述两个文本的相似度。
本发明实施例提出的技术方案,是根据两个文本的增删距离和替换距离,来计算文本之间的相似度,该计算过程不依赖于词典、切词,也无需预先构造文本相似度计算模型,且实现算法简单,因而能够很好的提高文本相似度的计算速度。
附图说明
图1是本发明实施例一提供的一种文本相似度计算方法的流程示意图;
图2是本发明实施例二提供的一种文本相似度计算方法的流程示意图;
图3是本发明实施例三提供的一种文本相似度计算方法的流程示意图;
图4是本发明实施例四提供的一种文本相似度计算装置的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1是本发明实施例一提供的一种文本相似度计算方法的流程示意图。本实施例可适用于对获取到的任意两文本进行相似度计算的情况。该方法可以由文本相似度计算装置来执行,所述装置可由软件和/或硬件执行,例如所述装置配置于具有存储器、处理器以及通信接口的终端设备或服务器。其中,存储器用于存储该文本相似度计算方法的程序指令,处理器用于执行存储器存储的程序指令,通信接口用于与外界其他设备进行数据通信。参见图1,该方法具体包括如下操作:
110、通过比较两个文本的节点,计算两个文本的增删距离与替换距离,其中增删距离与替换距离的和为两个文本的编辑距离;
120、根据所述增删距离与替换距离,计算两个文本的相似度。
在本实施例中,所述文本是用来计算相似度的两个文本,可由多个字符组成。每个字符可以是中文字符、英文字符或者其他特殊字符(例如“?”、“+”、“”等)。这两个文本可以是根据不同用户输入指令生成的,也可以是从其他装置获取得到的。例如,用来计算相似度的第一文本为:第一用户A针对微博 平台发布的主题Q所输入的回复信息;用来计算相似度的第二文本为:第二用户B针对微博平台发布的主题Q所输入的回复信息。
所谓节点,指的是对组成两文本的内容进行比较的比较单位。在本实施例中,可设定每个字符为一个节点;也可先按照设定的编码格式,预先将两个文本中的每个字符转换为相应的二进制序列,该二进制序列以字节为容量单位,在此种情况下,可设定每个字符对应的一个字节长度的二进制序列为一个节点。
所谓两个文本的编辑距离,指的是:由两个文本中的一个文本转换成另一个文本所需的最少编辑操作次数。其中,编辑操作包括将一个节点替换成另一个节点,插入一个节点,删除一个节点。两个文本的增删距离,指的是:所需的最少编辑操作次数中的插入次数和删除次数之和。两个文本的替换距离,指的是:所需的最少编辑操作次数中的替换次数。两个文本的增删距离与替换距离之和为编辑距离。
在本实施例的一个优选的实施方式中,可基于动态规划算法求解编辑距离的思想,通过比较两个文本的节点,计算两个文本的增删距离与替换距离。该过程具体包括:
如果Min(i,j)=0,则Dis1(Ai,Bj)=Max(i,j),Dis2(Ai,Bj)=0;如果Min(i,j)!=0,则
Xi,j=Dis1(Ai-1,Bj)+Dis2(Ai-1,Bj)+1,
Yi,j=Dis1(Ai,Bj-1)+Dis2(Ai,Bj-1)+1,
Zi,j=Dis1(Ai-1,Bj-1)+Dis2(Ai-1,Bj-1)+const,
如果F(Xi,j,Yi,j,Zi,j)=Xi,j,则
Dis1(Ai,Bj)=Dis1(Ai-1,Bj)+1,
Dis2(Ai,Bj)=Dis2(Ai-1,Bj);
如果F(Xi,j,Yi,j,Zi,j)=Yi,j,则
Dis1(Ai,Bj)=Dis1(Ai,Bj-1)+1,
Dis2(Ai,Bj)=Dis2(Ai,Bj-1);
如果F(Xi,j,Yi,j,Zi,j)=Zi,j,则
Dis1(Ai,Bj)=Dis1(Ai-1,Bj-1),
Dis2(Ai,Bj)=Dis2(Ai-1,Bj-1)+const;
其中,0≤i≤I,0≤j≤J,I为两个文本中第一文本的节点个数,J为两个文本中第二文本的节点个数;
Dis1(Ai,Bj)为两个文本中第一文本的前i个节点与第二文本的前j个节点的增删距离,Dis2(Ai,Bj)为两个文本中第一文本的前i个节点与第二文本的前j个节点的替换距离;
Dis1(Ai-1,Bj)为两个文本中第一文本的前(i-1)个节点与第二文本的前j个节点的增删距离,Dis2(Ai-1,Bj)为两个文本中第一文本的前(i-1)个节点与第二文本的前j个节点的替换距离;
Dis1(Ai,Bj-1)为两个文本中第一文本的前i个节点与第二文本的前(j-1)个节点的增删距离,Dis2(Ai,Bj-1)为两个文本中第一文本的前i个节点与第二文本的前(j-1)个节点的替换距离;
Dis1(Ai-1,Bj-1)为两个文本中第一文本的前(i-1)个节点与第二文本的前(j-1)个节点的增删距离,Dis2(Ai-1,Bj-1)为两个文本中第一文本的前(i-1)个节点与第二文本的前(j-1)个节点的替换距离;
如果第一文本的第i个节点与第二文本的第j个节点不相同,则const=1,否则const=0;
Xi,j为两个文本中第一文本的前i个节点与第二文本的前j个节点的第一编辑距离,Yi,j为两个文本中第一文本的前i个节点与第二文本的前j个节点的第二编辑距离,Zi,j为两个文本中第一文本的前i个节点与第二文本的前j个节点的第三编辑距离,F(Xi,j,Yi,j,Zi,j)为根据设定规则从Xi,j、Yi,j和Zi,j中选取的值最小的一个。
Dis1(AI,BJ)为两个文本的增删距离,Dis2(AI,BJ)为两个文本的替换距离。
进一步的,设定规则为:
如果在Xi,j、Yi,j和Zi,j各自对应的值中至少有两个值相等,且相等值为Xi,j、Yi,j和Zi,j各自对应的值中的最小值,则F(Xi,j,Yi,j,Zi,j)为Xi,j、Yi,j和Zi,j中值为最小的且所对应的增删距离最大的一个,否则F(Xi,j,Yi,j,Zi,j)=Min(Xi,j,Yi,j,Zi,j);或者
如果在Xi,j、Yi,j和Zi,j各自对应的值中至少有两个值相等,且相等值为Xi,j、Yi,j和Zi,j各自对应的值中的最小值,则F(Xi,j,Yi,j,Zi,j)为Xi,j、Yi,j和Zi,j中值为最小的且所对应的替换距离最大的一个,否则F(Xi,j,Yi,j,Zi,j)=Min(Xi,j,Yi,j,Zi,j)。
在本发明实施例中,Min(i,j)为i与j的最小值,Max(i,j)为i与j的最大值,Min(Xi,j,Yi,j,Zi,j)为Xi,j,Yi,j,Zi,j中的最小值。
本领域的普通技术人员应理解,设定规则还可以是:随机选取Xi,j、Yi,j和Zi,j中值为最小的一个作为F(Xi,j,Yi,j,Zi,j)。
由此可见,对于第一文本的前i个节点与第二文本的前j个节点的第一编辑距离、第二编辑距离和第三编辑距离,如果其中有至少两个编辑距离的值相等, 并且相等值是Xi,j、Yi,j和Zi,j中的最小值时,则会有一个路径选择规则(即上述设定规则),以从值相等的至少两个编辑距离中确定一个编辑距离,将所确定的编辑距离所对应的增删距离和替换距离,作为第一文本的前i个节点与第二文本的前j个节点之间的增删距离和替换距离。可根据具体的应用场景来设定路径选择规则。
如果增删操作对文本相似度的影响比较大,则可将路径选择规则设定为最大代价原则,即以对应的增删距离最大为选择原则确定值相等的至少两个编辑距离中的编辑距离。例如,第一文本的前i个节点与第二文本的前j个节点的第一编辑距离为5,其对应的增删距离Dis1(Ai,Bj)=Dis1(Ai-1,Bj)+1=2,Dis2(Ai,Bj)=Dis2(Ai-1,Bj)=3;第二编辑距离为5,其对应的增删距离Dis1(Ai,Bj)=Dis1(Ai,Bj-1)+1=4,Dis2(Ai,Bj)=Dis2(Ai,Bj-1)=1;第三编辑距离为7,其对应的增删距离Dis1(Ai,Bj)=Dis1(Ai-1,Bj-1)=4,Dis2(Ai,Bj)=Dis2(Ai-1,Bj-1)+const=3。最终确定的编辑距离为第二编辑距离,因为第二编辑距离与第一编辑距离相等,均小于第三编辑距离,并且第二编辑距离对应的增删距离4大于第一编辑距离对应的增删距离2。此时,第一文本的前i个节点与第二文本的前j个节点之间的增删距离和替换距离分别为4和1。
如果替换操作对文本相似度的影响比较大,则可将路径选择规则设定为最小代价原则,即以对应的替换距离最大为选择原则确定值相等的至少两个编辑距离中的编辑距离。
为更清楚的阐述基于动态规划算法求解编辑距离的思想来计算两个文本的增删距离与替换距离,现进行举例说明。例如,两个文本中的第一文本由四个 节点组成:第一个节点x1为“a”,第二个节点x2为“b”,第三个节点x3为“c”,第四个节点x4为“d”,x0为默认的空节点;第二文本由两个节点组成:第一个节点y1为“d”,第二个节点y2为“e”,y0为默认的空节点;所采用的设定规则为:如果在X,Y,Z各自对应的值中至少有两个值相等,且相等值为X,Y,Z各自对应的值中的最小值,则F(X,Y,Z)为X,Y,Z中所对应的增删距离最大的一个。两个文本之间的增删距离与替换距离如下表1所示:

参见表1,第一文本的前一个节点和第二文本的前一个节点的增删距离与替换距离分别为0和1,第一文本的前两个节点和第二文本的前两个节点的增删距离与替换距离分别为0和2,......,第一文本的前三个节点和第二文本的前两个节点的增删距离与替换距离分别为1和2,等等。
在得到两个文本的增删距离与替换距离之后,可根据增删距离与替换距离,计算两个文本的相似度。具体的,两文本的增删距离与替换距离越大,其相似度也就越小。
在本实施例的一个具体实施方式中,可以将两个文本的增删距离与替换距离组成一个二维坐标(D1,D2),然后计算所述二维坐标与(0,0)之间的欧式距离、余弦夹角或者范数作为两个文本之间的相似度。其中,D1为两个文本的增删距 离,D2为两个文本的替换距离。本领域普通技术人员应理解,还可通过其它方式来计算两个文本相似度。例如,首先分别为两个文本的增删距离与替换距离配置不同的权重W1和W2,然后计算二维坐标(W1×D1,W2×D2)与(0,0)之间的欧式距离、余弦夹角或者范数作为两个文本之间的相似度。当然,还可结合两个文本的节点个数,来计算两个文本的相似度。本实施例对此不作限定。
本实施例提出的技术方案,是根据两个文本的增删距离和替换距离,来计算文本之间的相似度,该计算过程不依赖于词典、切词,也无需预先构造文本相似度计算模型,且实现算法简单,因而能够很好的提高文本相似度的计算速度。并且,本实施例并不是将编辑距离直接作为两个文本的相似度,而是根据编辑距离中的增删距离与替换距离来确定两文本的相似度,这样能够细化编辑距离,区分并突出增删和替换两种操作对文本相似度的影响,便于后续基于相似度的文本处理。
实施例二
图2是本发明实施例二提供的一种文本相似度计算方法的流程示意图。本实施例在上述实施例的基础上,对“根据所述增删距离与替换距离,计算两个文本的相似度”这一操作120作进一步优化,以得到一种较为准确的,且利于后续文本聚类、文本检索、数据挖掘或系统自动问答等处理的文本相似度。参见图2,该方法包括如下操作:
210、通过比较两个文本的节点,计算两个文本的增删距离与替换距离,其中增删距离与替换距离的和为两个文本的编辑距离;
220、按照公式S=(L1+L2)-[N×D1+M×D2]L1+L2,]]>计算两个文本的相似度。
其中,S为两个文本的相似度,L1为两个文本中第一文本的节点个数,L2为两个文本中第二文本的节点个数,D1为两个文本的增删距离,D2为两个文本的替换距离,N为设定的第一权重,M为设定的第二权重。
在本实施例的一个优选的实施方式中,如果两个文本中的每个文本均是由中文字符组成,则第一权重N大于第二权重M;如果两个文本中的每个文本均是由英文字符组成,则第一权重N小于第二权重M。
当然,也可根据后续基于相似度的文档处理需求,来确定第一权重和第二权重。例如,如果增删距离对后续基于相似度的文档处理的影响较大时,可设第一权重大于第二权重,反之替换距离对后续基于相似度的文档处理的影响较大时,可设第一权重小于第二权重。
在第一权重大于第二权重的情况下:如果计算两个文本的增删距离与替换距离时所采用的设定规则为最大代价原则,则计算得到的相似度会较采用最小代价原则得到的相似度小,在后续基于相似度的文本聚类这一文档处理中被聚类的点会比较分散;如果计算两个文本的增删距离与替换距离时所采用的设定规则为最小代价原则,则后续计算得到的相似度会较采用最大代价原则得到的相似度大,在后续基于相似度的文本聚类这一文档处理中被聚类的点会比较分散,适合于合并差异很小的类。
对于第一权重小于第二权重的情况,与上述第一权重大于第二权重的情况相反,在此不再赘述。
本实施例的技术方案,为两个文本的增删距离与替换距离赋予不同的权重,然后根据权重值、两个文本的增删距离与替换距离及其两文本的节点个数,来计算两个文本的相似度,这样可以使得用户能够根据后续文本处理需求对文本 相似度的计算方法进行自适应调整,从而能够得到一种较为准确的,且利于后续文本聚类、文本检索、数据挖掘或系统自动问答等处理的文本相似度。
实施例三
图3是本发明实施例三提供的一种文本相似度计算方法的流程示意图。本实施例在上述各实施例的基础上,针对待比较的两个文本中的每个文本均是由至少两个字符组成的这一应用场景,在上述操作“通过比较两个文本的节点,计算两个文本的增删距离与替换距离”之前,增加了对字符进行编码以得到相应的以字节为节点单位的二进制序列的操作。参见图3,该方法包括如下操作:
310、按照设定的编码方式,将两个文本中的字符转换为以字节为节点单位的二进制序列;
320、通过比较两个文本的节点,计算两个文本的增删距离与替换距离,其中增删距离与替换距离的和为两个文本的编辑距离;
330、按照公式S=(L1+L2)-[N×D1+M×D2]L1+L2,]]>计算两个文本的相似度。
其中,S为两个文本的相似度,L1为两个文本中第一文本的节点个数,L2为两个文本中第二文本的节点个数,D1为两个文本的增删距离,D2为两个文本的替换距离,N为设定的第一权重,M为设定的第二权重。
在本实施例中,编码格式可以为UTF-8(8-bit Unicode Transformation Format,8位单一码转换格式)或GBK(汉字内码扩展规范)。其中,UTF-8可以根据不同的字符自动选择编码的长短,比如对于英文字母这一字符只将其转换为1个字节的二进制序列,为1个节点;对于汉字这一字符会将其转换为3个字节(即为3个节点)的二进制序列。GBK为一种汉字标准编码,不管字符是中文字符还是英文字母,均会将其转换为2个字节(即为2个节点)的二进制序列。当 然,还可采用其他编码方式将两个文本中的字符转换为以字节为节点单位的二进制序列,本实施例对此不作限定。
举例而言,两个文本中第一文本包括“业精于勤”4个字符,其GBK编码依次分别为:“1101001010110101、1011111010101011、1101001111011010、1100011111011010”,共8个节点,依次分别为:11010010、10110101、10111110、10101011、10111110、10101011、11000111、11011010;
第二文本包括“学业精深需勤奋”7个字符,其GBK编码依次分别为:“1101000110100111、1101001010110101、1011111010101011、1100100111101110、1101000011101000、1100011111011010、1011011111010111”,共14个节点,依次分别为:11010001、10100111、11010010、10110101、10111110、10101011、11001001、11101110、11010000、11101000、11000111、11011010、10110111、11010111。在比较两个文本中的节点时,只要待比较的两个节点的8位二进制序列中有1个对应位不相同,便可判断待比较这两个节点不同。
本实施例提供的技术方案,针对待比较的两个文本中的每个文本均是由至少两个字符组成的这一应用场景,预先对字符进行编码以得到相应的以字节为节点单位的二进制序列的操作,然后通过逐个比较两个文本的8位二进制序列,而非逐个比较两文本的字符,来计算两个文本的增删距离与替换距离,并根据所述增删距离与替换距离和两个文本的节点个数,计算两个文本的相似度,这样可使得在不便于直接比较两个文本中的字符,或者比较字符难度大、耗费资源较多的情况下,能够提供一种基于二进制序列比较的文本相似度计算方案。
在上述任意实施例的基础上,考虑到相似度的计算速度,优选的,两个文本中至少一个文本的字符长度小于1024。其中,字符长度指的是文本所包含的 字符个数。如果待比较文本的字符长度远大于1024,可预先对其进行切分,得到多个字符长度小于等于1024的子文本,然后利用本发明实施例提供的技术方案对待比较的不同文本间相应的各个子文本进行相似度的计算,最后根据所得到的多个子文本的相似度得到一个总的相似度,例如可以求取多个子文本的相似度的平均值作为最终的两文本的相似度。
举例而言,两文本中的第一文本依次包括第一子文本、第二子文本、第三子文本和第四子文本,第二文本依次包括第五子文本、第六子文本和第七子文本,在此情况下可分别计算两文本中对应子文本的相似度,即分别计算第一子文本与第五子文本、第二子文本与第六子文本、第三子文本与第七子文本之间的相似度,进而计算各个相似度的平均值。由于在第二文本中不存在与第一文本中的第四子文本对应的子文本,此时可根据第四子文本的字符长度在两文本的总字符长度中所占的比例,来确定是否对所得的平均值进行调整。如果所述比例大于设定阈值,可将所述平均值的0.5倍作为最终的两文本的相似度,否则直接将所述平均值作为最终的两文本的相似度。
实施例四
图4是本发明实施例四提供的一种文本相似度计算装置的结构示意图。本实施例可适用于对获取到的任意两文本进行相似度计算的情况。参见图4,该装置的具体结构包括:
文本距离计算单元410,用于通过比较两个文本的节点,计算所述两个文本的增删距离与替换距离,其中所述增删距离与所述替换距离的和为所述两个文本的编辑距离;
文本相似度计算单元420,用于根据所述增删距离与替换距离,计算所述两个文本的相似度。
进一步的,所述文本相似度计算单元420,具体用于:
按照公式S=(L1+L2)-[N×D1+M×D2]L1+L2,]]>计算所述两个文本的相似度;
其中,所述S为所述两个文本的相似度,L1为所述两个文本中第一文本的节点个数,L2为所述两个文本中第二文本的节点个数,D1为所述增删距离,D2为所述替换距离,N为设定的第一权重,M为设定的第二权重。
进一步的,如果所述两个文本中的每个文本均是由中文字符组成,则所述第一权重N大于所述第二权重M;
如果所述两个文本中的每个文本均是由英文字符组成,则所述第一权重N小于所述第二权重M。
进一步的,所述两个文本中的每个文本由至少两个字符组成,则所述装置还包括:
字符转换单元400,用于在所述文本距离计算单元410计算所述两个文本的增删距离与替换距离之前,按照设定的编码方式,将所述两个文本中的字符转换为以字节为节点单位的二进制序列。
进一步的,所述两个文本中至少一个文本的字符长度小于1024。
进一步的,所述文本距离计算单元410,具体用于:
如果Min(i,j)=0,则Dis1(Ai,Bj)=Max(i,j),Dis2(Ai,Bj)=0;如果Min(i,j)!=0,则
Xi,j=Dis1(Ai-1,Bj)+Dis2(Ai-1,Bj)+1,
Yi,j=Dis1(Ai,Bj-1)+Dis2(Ai,Bj-1)+1,
Zi,j=Dis1(Ai-1,Bj-1)+Dis2(Ai-1,Bj-1)+const,
如果F(Xi,j,Yi,j,Zi,j)=Xi,j,则
Dis1(Ai,Bj)=Dis1(Ai-1,Bj)+1,
Dis2(Ai,Bj)=Dis2(Ai-1,Bj);
如果F(Xi,j,Yi,j,Zi,j)=Yi,j,则
Dis1(Ai,Bj)=Dis1(Ai,Bj-1)+1,
Dis2(Ai,Bj)=Dis2(Ai,Bj-1);
如果F(Xi,j,Yi,j,Zi,j)=Zi,j,则
Dis1(Ai,Bj)=Dis1(Ai-1,Bj-1),
Dis2(Ai,Bj)=Dis2(Ai-1,Bj-1)+const;
其中,0≤i≤I,0≤j≤J,I为所述两个文本中第一文本的节点个数,J为所述两个文本中第二文本的节点个数;
Dis1(Ai,Bj)为所述两个文本中第一文本的前i个节点与第二文本的前j个节点的增删距离,Dis2(Ai,Bj)为所述两个文本中第一文本的前i个节点与第二文本的前j个节点的替换距离;
Dis1(Ai-1,Bj)为所述两个文本中第一文本的前(i-1)个节点与第二文本的前j个节点的增删距离,Dis2(Ai-1,Bj)为所述两个文本中第一文本的前(i-1)个节点与第二文本的前j个节点的替换距离;
Dis1(Ai,Bj-1)为所述两个文本中第一文本的前i个节点与第二文本的前(j-1)个节点的增删距离,Dis2(Ai,Bj-1)为所述两个文本中第一文本的前i个节点与第二文本的前(j-1)个节点的替换距离;
Dis1(Ai-1,Bj-1)为所述两个文本中第一文本的前(i-1)个节点与第二文本的前(j-1)个节点的增删距离,Dis2(Ai-1,Bj-1)为所述两个文本中第一文本的前(i-1)个节点与第二文本的前(j-1)个节点的替换距离;
如果所述第一文本的第i个节点与所述第二文本的第j个节点不相同,则const=1,否则const=0;
Xi,j为所述两个文本中第一文本的前i个节点与第二文本的前j个节点的第一编辑距离,Yi,j为所述两个文本中第一文本的前i个节点与第二文本的前j个节点的第二编辑距离,Zi,j为所述两个文本中第一文本的前i个节点与第二文本的前j个节点的第三编辑距离,F(Xi,j,Yi,j,Zi,j)为根据设定规则从Xi,j、Yi,j和Zi,j中选取的值最小的一个。
进一步的,所述设定规则为:
如果在Xi,j、Yi,j和Zi,j各自对应的值中至少有两个值相等,且相等值为Xi,j、Yi,j和Zi,j各自对应的值中的最小值,则F(Xi,j,Yi,j,Zi,j)为Xi,j、Yi,j和Zi,j中值为最小的且所对应的增删距离最大的一个,否则F(Xi,j,Yi,j,Zi,j)=Min(Xi,j,Yi,j,Zi,j);或者
如果在Xi,j、Yi,j和Zi,j各自对应的值中至少有两个值相等,且相等值为Xi,j、Yi,j和Zi,j各自对应的值中的最小值,则F(Xi,j,Yi,j,Zi,j)为Xi,j、Yi,j和Zi,j中值为最小的且所对应的替换距离最大的一个,否则F(Xi,j,Yi,j,Zi,j)=Min(Xi,j,Yi,j,Zi,j)。
上述文本相似度计算装置这一产品可执行本发明任意实施例所提供的文本相似度计算方法,具备执行文本相似度计算方法相应的功能模块和有益效果。
本领域的普通技术人员应理解:本实施例提供的文本相似度计算装置在执行文本相似度计算操作时,仅是以上述各功能单元的划分进行举例说明;在实 际应用当中,可以根据需要而将上述功能分配由不同的单元完成,即将文本相似度计算装置的内部结构划分成不同的功能单元,以完成以上描述的全部或者部分功能。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

文本相似度计算方法及装置.pdf_第1页
第1页 / 共16页
文本相似度计算方法及装置.pdf_第2页
第2页 / 共16页
文本相似度计算方法及装置.pdf_第3页
第3页 / 共16页
点击查看更多>>
资源描述

《文本相似度计算方法及装置.pdf》由会员分享,可在线阅读,更多相关《文本相似度计算方法及装置.pdf(16页珍藏版)》请在专利查询网上搜索。

1、10申请公布号CN104090865A43申请公布日20141008CN104090865A21申请号201410323334222申请日20140708G06F17/27200601G06F17/3020060171申请人安一恒通(北京)科技有限公司地址100091北京市海淀区东北旺西路8号,中关村软件园4号楼C座10372发明人李阳林永峰罗灿74专利代理机构北京品源专利代理有限公司11332代理人胡彬邓猛烈54发明名称文本相似度计算方法及装置57摘要本发明实施例公开了文本相似度计算方法及装置。该文本相似度计算方法包括通过比较两个文本的节点,计算两个文本的增删距离与替换距离,其中所述增删距离。

2、与所述替换距离的和为所述两个文本的编辑距离;根据增删距离与替换距离,计算两个文本的相似度。本发明实施例提供的技术方案,能够采用一种不依赖于词典、切词以及模型训练的算法,来实现文本之间的相似度的计算,从而可以提高相似度的计算速度。51INTCL权利要求书4页说明书9页附图2页19中华人民共和国国家知识产权局12发明专利申请权利要求书4页说明书9页附图2页10申请公布号CN104090865ACN104090865A1/4页21一种文本相似度计算方法,其特征在于,包括通过比较两个文本的节点,计算所述两个文本的增删距离与替换距离,其中所述增删距离与所述替换距离的和为所述两个文本的编辑距离;根据所述增。

3、删距离与替换距离,计算所述两个文本的相似度。2根据权利要求1所述的文本相似度计算方法,其特征在于,根据所述增删距离与替换距离,计算所述两个文本的相似度,包括按照公式计算所述两个文本的相似度;其中,所述S为所述两个文本的相似度,L1为所述两个文本中第一文本的节点个数,L2为所述两个文本中第二文本的节点个数,D1为所述增删距离,D2为所述替换距离,N为设定的第一权重,M为设定的第二权重。3根据权利要求2所述的文本相似度计算方法,其特征在于,如果所述两个文本中的每个文本均是由中文字符组成,则所述第一权重N大于所述第二权重M;如果所述两个文本中的每个文本均是由英文字符组成,则所述第一权重N小于所述第二。

4、权重M。4根据权利要求1所述的文本相似度计算方法,其特征在于,所述两个文本中的每个文本由至少两个字符组成,则在计算所述两个文本的增删距离与替换距离之前,还包括按照设定的编码方式,将所述两个文本中的字符转换为以字节为节点单位的二进制序列。5根据权利要求1所述的文本相似度计算方法,其特征在于,所述两个文本中至少一个文本的字符长度小于1024。6根据权利要求1所述的文本相似度计算方法,其特征在于,通过比较两个文本的节点,计算所述两个文本的增删距离与替换距离,包括如果MINI,J0,则DIS1AI,BJMAXI,J,DIS2AI,BJ0;如果MINI,J0,则XI,JDIS1AI1,BJDIS2AI1。

5、,BJ1,YI,JDIS1AI,BJ1DIS2AI,BJ11,ZI,JDIS1AI1,BJ1DIS2AI1,BJ1CONST,如果FXI,J,YI,J,ZI,JXI,J,则DIS1AI,BJDIS1AI1,BJ1,DIS2AI,BJDIS2AI1,BJ;如果FXI,J,YI,J,ZI,JYI,J,则DIS1AI,BJDIS1AI,BJ11,DIS2AI,BJDIS2AI,BJ1;如果FXI,J,YI,J,ZI,JZI,J,则DIS1AI,BJDIS1AI1,BJ1,DIS2AI,BJDIS2AI1,BJ1CONST;其中,0II,0JJ,I为所述两个文本中第一文本的节点个数,J为所述两个权利要。

6、求书CN104090865A2/4页3文本中第二文本的节点个数;DIS1AI,BJ为所述两个文本中第一文本的前I个节点与第二文本的前J个节点的增删距离,DIS2AI,BJ为所述两个文本中第一文本的前I个节点与第二文本的前J个节点的替换距离;DIS1AI1,BJ为所述两个文本中第一文本的前I1个节点与第二文本的前J个节点的增删距离,DIS2AI1,BJ为所述两个文本中第一文本的前I1个节点与第二文本的前J个节点的替换距离;DIS1AI,BJ1为所述两个文本中第一文本的前I个节点与第二文本的前J1个节点的增删距离,DIS2AI,BJ1为所述两个文本中第一文本的前I个节点与第二文本的前J1个节点的替。

7、换距离;DIS1AI1,BJ1为所述两个文本中第一文本的前I1个节点与第二文本的前J1个节点的增删距离,DIS2AI1,BJ1为所述两个文本中第一文本的前I1个节点与第二文本的前J1个节点的替换距离;如果所述第一文本的第I个节点与所述第二文本的第J个节点不相同,则CONST1,否则CONST0;XI,J为所述两个文本中第一文本的前I个节点与第二文本的前J个节点的第一编辑距离,YI,J为所述两个文本中第一文本的前I个节点与第二文本的前J个节点的第二编辑距离,ZI,J为所述两个文本中第一文本的前I个节点与第二文本的前J个节点的第三编辑距离,FXI,J,YI,J,ZI,J为根据设定规则从XI,J、Y。

8、I,J和ZI,J中选取的值最小的一个。7根据权利要求6所述的文本相似度计算方法,其特征在于,所述设定规则为如果在XI,J、YI,J和ZI,J各自对应的值中至少有两个值相等,且相等值为XI,J、YI,J和ZI,J各自对应的值中的最小值,则FXI,J,YI,J,ZI,J为XI,J、YI,J和ZI,J中值为最小的且所对应的增删距离最大的一个,否则FXI,J,YI,J,ZI,JMIBXI,J,YI,J,ZI,J;或者如果在XI,J、YI,J和ZI,J各自对应的值中至少有两个值相等,且相等值为XI,J、YI,J和ZI,J各自对应的值中的最小值,则FXI,J,YI,J,ZI,J为XI,J、YI,J和ZI,。

9、J中值为最小的且所对应的替换距离最大的一个,否则FXI,J,YI,J,ZI,JMINXI,J,YI,J,ZI,J。8一种文本相似度计算装置,其特征在于,包括文本距离计算单元,用于通过比较两个文本的节点,计算所述两个文本的增删距离与替换距离,其中所述增删距离与所述替换距离的和为所述两个文本的编辑距离;文本相似度计算单元,用于根据所述增删距离与替换距离,计算所述两个文本的相似度。9根据权利要求8所述的文本相似度计算装置,其特征在于,所述文本相似度计算单元,具体用于按照公式计算所述两个文本的相似度;其中,所述S为所述两个文本的相似度,L1为所述两个文本中第一文本的节点个数,L2为所述两个文本中第二文。

10、本的节点个数,D1为所述增删距离,D2为所述替换距离,N为设定的第一权重,M为设定的第二权重。10根据权利要求9所述的文本相似度计算装置,其特征在于,如果所述两个文本中的权利要求书CN104090865A3/4页4每个文本均是由中文字符组成,则所述第一权重N大于所述第二权重M;如果所述两个文本中的每个文本均是由英文字符组成,则所述第一权重N小于所述第二权重M。11根据权利要求8所述的文本相似度计算装置,其特征在于,所述两个文本中的每个文本由至少两个字符组成,则所述装置还包括字符转换单元,用于在所述文本距离计算单元计算所述两个文本的增删距离与替换距离之前,按照设定的编码方式,将所述两个文本中的字。

11、符转换为以字节为节点单位的二进制序列。12根据权利要求8所述的文本相似度计算装置,其特征在于,所述两个文本中至少一个文本的字符长度小于1024。13根据权利要求1所述的文本相似度计算装置,其特征在于,所述文本距离计算单元,具体用于如果MINI,J0,则DIS1AI,BJMAXI,J,DIS2AI,BJ0;如果MINI,J0,则XI,JDIS1AI1,BJDIS2AI1,BJ1,YI,JDIS1AI,BJ1DIS2AI,BJ11,ZI,JDIS1AI1,BJ1DIS2AI1,BJ1CONST,如果FXI,J,YI,J,ZI,JXI,J,则DID1AI,BJDIS1AI1,BJ1,DIS2AI,B。

12、JDIS2AI1,BJ;如果FXI,J,YI,J,ZI,JYI,J,则DIS1AI,BJDIS1AI,BJ11,DIS2AI,BJDIS2AI,BJ1;如果FXI,J,YI,J,ZI,JZI,J,则DIS1AI,BJDIS1AI1,BJ1,DIS2AI,BJDIS2AI1,BJ1CONST;其中,0II,0JJ,I为所述两个文本中第一文本的节点个数,J为所述两个文本中第二文本的节点个数;DIS1AI,BJ为所述两个文本中第一文本的前I个节点与第二文本的前J个节点的增删距离,DIS2AI,BJ为所述两个文本中第一文本的前I个节点与第二文本的前J个节点的替换距离;DIS1AI1,BJ为所述两个文本。

13、中第一文本的前I1个节点与第二文本的前J个节点的增删距离,DIS2AI1,BJ为所述两个文本中第一文本的前I1个节点与第二文本的前J个节点的替换距离;DIS1AI,BJ1为所述两个文本中第一文本的前I个节点与第二文本的前J1个节点的增删距离,DIS2AI,BJ1为所述两个文本中第一文本的前I个节点与第二文本的前J1个节点的替换距离;DIS1AI1,BJ1为所述两个文本中第一文本的前I1个节点与第二文本的前J1个节点的增删距离,DIS2AI1,BJ1为所述两个文本中第一文本的前I1个节点与第二文权利要求书CN104090865A4/4页5本的前J1个节点的替换距离;如果所述第一文本的第I个节点与。

14、所述第二文本的第J个节点不相同,则CONST1,否则CONST0;XI,J为所述两个文本中第一文本的前I个节点与第二文本的前J个节点的第一编辑距离,YI,J为所述两个文本中第一文本的前I个节点与第二文本的前J个节点的第二编辑距离,ZI,J为所述两个文本中第一文本的前I个节点与第二文本的前J个节点的第三编辑距离,FXI,J,YI,J,ZI,J为根据设定规则从XI,J、YI,J和ZI,J中选取的值最小的一个。14根据权利要求13所述的文本相似度计算装置,其特征在于,所述设定规则为如果在XI,J、YI,J和ZI,J各自对应的值中至少有两个值相等,且相等值为XI,J、YI,J和ZI,J各自对应的值中的。

15、最小值,则FXI,J,YI,J,ZI,J为XI,J、YI,J和ZI,J中值为最小的且所对应的增删距离最大的一个,否则FXI,J,YI,J,ZI,JMINXI,J,YI,J,ZI,J;或者如果在XI,J、YI,J和ZI,J各自对应的值中至少有两个值相等,且相等值为XI,J、YI,J和ZI,J各自对应的值中的最小值,则FXJ,J,YI,J,ZI,J为XI,J、YI,J和ZI,J中值为最小的且所对应的替换距离最大的一个,否则FXI,J,YI,J,ZI,JMINXI,J,YI,J,ZI,J。权利要求书CN104090865A1/9页6文本相似度计算方法及装置技术领域0001本发明实施例涉及计算机技术领。

16、域,尤其涉及一种文本相似度计算方法及装置。背景技术0002目前,由多个字符所组成的文本已成为一种十分重要的信息载体。其文本间相似度的计算,作为一种文档处理中所经常使用的方法,通常被应用于文本聚类、文本检索、数据挖掘、系统自动问答等诸多应用场合。0003在现有技术中,一种文本相似度的计算方式是先分别对两个长文本基于词典进行切词,并计算每个文本中切词得到的各个分词的词频,然后根据词典确定两文本中各分词间的相似度,进而根据所得到的相似度以及词频计算两文本的整体相似度;另一种文本相似度的计算方式是预先通过机器学习方式,训练得到一文本相似度计算模型,然后根据该模型确定文本间的相似度。0004然而,上述现。

17、有技术所存在的技术缺陷在于对于第一种文本相似度的计算方式而言,其依赖于词典,需要对文本进行切词,其实现算法比较复杂且不利于改进;对于第二种文本相似度的计算方式而言,其需要预先训练得到一文本相似度计算模型,其实现算法也比较复杂。因此,这两种方式均会导致文本相似度的计算速度很低。发明内容0005本发明实施例提供一种文本相似度计算方法及装置,以采用一种不依赖于词典、切词以及模型训练的算法,来实现文本之间的相似度的计算,从而提高相似度的计算速度。0006第一方面,本发明实施例提供了一种文本相似度计算方法,该方法包括0007通过比较两个文本的节点,计算所述两个文本的增删距离与替换距离,其中所述增删距离与。

18、所述替换距离的和为所述两个文本的编辑距离;0008根据所述增删距离与替换距离,计算所述两个文本的相似度。0009第二方面,本发明实施例还提供了一种文本相似度计算装置,该装置包括0010文本距离计算单元,用于通过比较两个文本的节点,计算所述两个文本的增删距离与替换距离,其中所述增删距离与所述替换距离的和为所述两个文本的编辑距离;0011文本相似度计算单元,用于根据所述增删距离与替换距离,计算所述两个文本的相似度。0012本发明实施例提出的技术方案,是根据两个文本的增删距离和替换距离,来计算文本之间的相似度,该计算过程不依赖于词典、切词,也无需预先构造文本相似度计算模型,且实现算法简单,因而能够很。

19、好的提高文本相似度的计算速度。附图说明0013图1是本发明实施例一提供的一种文本相似度计算方法的流程示意图;0014图2是本发明实施例二提供的一种文本相似度计算方法的流程示意图;说明书CN104090865A2/9页70015图3是本发明实施例三提供的一种文本相似度计算方法的流程示意图;0016图4是本发明实施例四提供的一种文本相似度计算装置的结构示意图。具体实施方式0017下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。0018实施例一0。

20、019图1是本发明实施例一提供的一种文本相似度计算方法的流程示意图。本实施例可适用于对获取到的任意两文本进行相似度计算的情况。该方法可以由文本相似度计算装置来执行,所述装置可由软件和/或硬件执行,例如所述装置配置于具有存储器、处理器以及通信接口的终端设备或服务器。其中,存储器用于存储该文本相似度计算方法的程序指令,处理器用于执行存储器存储的程序指令,通信接口用于与外界其他设备进行数据通信。参见图1,该方法具体包括如下操作0020110、通过比较两个文本的节点,计算两个文本的增删距离与替换距离,其中增删距离与替换距离的和为两个文本的编辑距离;0021120、根据所述增删距离与替换距离,计算两个文。

21、本的相似度。0022在本实施例中,所述文本是用来计算相似度的两个文本,可由多个字符组成。每个字符可以是中文字符、英文字符或者其他特殊字符例如“”、“”、“”等。这两个文本可以是根据不同用户输入指令生成的,也可以是从其他装置获取得到的。例如,用来计算相似度的第一文本为第一用户A针对微博平台发布的主题Q所输入的回复信息;用来计算相似度的第二文本为第二用户B针对微博平台发布的主题Q所输入的回复信息。0023所谓节点,指的是对组成两文本的内容进行比较的比较单位。在本实施例中,可设定每个字符为一个节点;也可先按照设定的编码格式,预先将两个文本中的每个字符转换为相应的二进制序列,该二进制序列以字节为容量单。

22、位,在此种情况下,可设定每个字符对应的一个字节长度的二进制序列为一个节点。0024所谓两个文本的编辑距离,指的是由两个文本中的一个文本转换成另一个文本所需的最少编辑操作次数。其中,编辑操作包括将一个节点替换成另一个节点,插入一个节点,删除一个节点。两个文本的增删距离,指的是所需的最少编辑操作次数中的插入次数和删除次数之和。两个文本的替换距离,指的是所需的最少编辑操作次数中的替换次数。两个文本的增删距离与替换距离之和为编辑距离。0025在本实施例的一个优选的实施方式中,可基于动态规划算法求解编辑距离的思想,通过比较两个文本的节点,计算两个文本的增删距离与替换距离。该过程具体包括0026如果MIN。

23、I,J0,则DIS1AI,BJMAXI,J,DIS2AI,BJ0;如果MINI,J0,则0027XI,JDIS1AI1,BJDIS2AI1,BJ1,0028YI,JDIS1AI,BJ1DIS2AI,BJ11,0029ZI,JDIS1AI1,BJ1DIS2AI1,BJ1CONST,0030如果FXI,J,YI,J,ZI,JXI,J,则说明书CN104090865A3/9页80031DIS1AI,BJDIS1AI1,BJ1,0032DIS2AI,BJDIS2AI1,BJ;0033如果FXI,J,YI,J,ZI,JYI,J,则0034DIS1AI,BJDIS1AI,BJ11,0035DIS2AI,B。

24、JDIS2AI,BJ1;0036如果FXI,J,YI,J,ZI,JZI,J,则0037DIS1AI,BJDIS1AI1,BJ1,0038DIS2AI,BJDIS2AI1,BJ1CONST;0039其中,0II,0JJ,I为两个文本中第一文本的节点个数,J为两个文本中第二文本的节点个数;0040DIS1AI,BJ为两个文本中第一文本的前I个节点与第二文本的前J个节点的增删距离,DIS2AI,BJ为两个文本中第一文本的前I个节点与第二文本的前J个节点的替换距离;0041DIS1AI1,BJ为两个文本中第一文本的前I1个节点与第二文本的前J个节点的增删距离,DIS2AI1,BJ为两个文本中第一文本的。

25、前I1个节点与第二文本的前J个节点的替换距离;0042DIS1AI,BJ1为两个文本中第一文本的前I个节点与第二文本的前J1个节点的增删距离,DIS2AI,BJ1为两个文本中第一文本的前I个节点与第二文本的前J1个节点的替换距离;0043DIS1AI1,BJ1为两个文本中第一文本的前I1个节点与第二文本的前J1个节点的增删距离,DIS2AI1,BJ1为两个文本中第一文本的前I1个节点与第二文本的前J1个节点的替换距离;0044如果第一文本的第I个节点与第二文本的第J个节点不相同,则CONST1,否则CONST0;0045XI,J为两个文本中第一文本的前I个节点与第二文本的前J个节点的第一编辑距。

26、离,YI,J为两个文本中第一文本的前I个节点与第二文本的前J个节点的第二编辑距离,ZI,J为两个文本中第一文本的前I个节点与第二文本的前J个节点的第三编辑距离,FXI,J,YI,J,ZI,J为根据设定规则从XI,J、YI,J和ZI,J中选取的值最小的一个。0046DIS1AI,BJ为两个文本的增删距离,DIS2AI,BJ为两个文本的替换距离。0047进一步的,设定规则为0048如果在XI,J、YI,J和ZI,J各自对应的值中至少有两个值相等,且相等值为XI,J、YI,J和ZI,J各自对应的值中的最小值,则FXI,J,YI,J,ZI,J为XI,J、YI,J和ZI,J中值为最小的且所对应的增删距离。

27、最大的一个,否则FXI,J,YI,J,ZI,JMINXI,J,YI,J,ZI,J;或者0049如果在XI,J、YI,J和ZI,J各自对应的值中至少有两个值相等,且相等值为XI,J、YI,J和ZI,J各自对应的值中的最小值,则FXI,J,YI,J,ZI,J为XI,J、YI,J和ZI,J中值为最小的且所对应的替换距离最大的一个,否则FXI,J,YI,J,ZI,JMINXI,J,YI,J,ZI,J。0050在本发明实施例中,MINI,J为I与J的最小值,MAXI,J为I与J的最大值,MINXI,J,YI,J,ZI,J为XI,J,YI,J,ZI,J中的最小值。0051本领域的普通技术人员应理解,设定规。

28、则还可以是随机选取XI,J、YI,J和ZI,J中值说明书CN104090865A4/9页9为最小的一个作为FXI,J,YI,J,ZI,J。0052由此可见,对于第一文本的前I个节点与第二文本的前J个节点的第一编辑距离、第二编辑距离和第三编辑距离,如果其中有至少两个编辑距离的值相等,并且相等值是XI,J、YI,J和ZI,J中的最小值时,则会有一个路径选择规则即上述设定规则,以从值相等的至少两个编辑距离中确定一个编辑距离,将所确定的编辑距离所对应的增删距离和替换距离,作为第一文本的前I个节点与第二文本的前J个节点之间的增删距离和替换距离。可根据具体的应用场景来设定路径选择规则。0053如果增删操作。

29、对文本相似度的影响比较大,则可将路径选择规则设定为最大代价原则,即以对应的增删距离最大为选择原则确定值相等的至少两个编辑距离中的编辑距离。例如,第一文本的前I个节点与第二文本的前J个节点的第一编辑距离为5,其对应的增删距离DIS1AI,BJDIS1AI1,BJ12,DIS2AI,BJDIS2AI1,BJ3;第二编辑距离为5,其对应的增删距离DIS1AI,BJDIS1AI,BJ114,DIS2AI,BJDIS2AI,BJ11;第三编辑距离为7,其对应的增删距离DIS1AI,BJDIS1AI1,BJ14,DIS2AI,BJDIS2AI1,BJ1CONST3。最终确定的编辑距离为第二编辑距离,因为第。

30、二编辑距离与第一编辑距离相等,均小于第三编辑距离,并且第二编辑距离对应的增删距离4大于第一编辑距离对应的增删距离2。此时,第一文本的前I个节点与第二文本的前J个节点之间的增删距离和替换距离分别为4和1。0054如果替换操作对文本相似度的影响比较大,则可将路径选择规则设定为最小代价原则,即以对应的替换距离最大为选择原则确定值相等的至少两个编辑距离中的编辑距离。0055为更清楚的阐述基于动态规划算法求解编辑距离的思想来计算两个文本的增删距离与替换距离,现进行举例说明。例如,两个文本中的第一文本由四个节点组成第一个节点X1为“A”,第二个节点X2为“B”,第三个节点X3为“C”,第四个节点X4为“D。

31、”,X0为默认的空节点;第二文本由两个节点组成第一个节点Y1为“D”,第二个节点Y2为“E”,Y0为默认的空节点;所采用的设定规则为如果在X,Y,Z各自对应的值中至少有两个值相等,且相等值为X,Y,Z各自对应的值中的最小值,则FX,Y,Z为X,Y,Z中所对应的增删距离最大的一个。两个文本之间的增删距离与替换距离如下表1所示0056说明书CN104090865A5/9页100057参见表1,第一文本的前一个节点和第二文本的前一个节点的增删距离与替换距离分别为0和1,第一文本的前两个节点和第二文本的前两个节点的增删距离与替换距离分别为0和2,第一文本的前三个节点和第二文本的前两个节点的增删距离与替。

32、换距离分别为1和2,等等。0058在得到两个文本的增删距离与替换距离之后,可根据增删距离与替换距离,计算两个文本的相似度。具体的,两文本的增删距离与替换距离越大,其相似度也就越小。0059在本实施例的一个具体实施方式中,可以将两个文本的增删距离与替换距离组成一个二维坐标D1,D2,然后计算所述二维坐标与0,0之间的欧式距离、余弦夹角或者范数作为两个文本之间的相似度。其中,D1为两个文本的增删距离,D2为两个文本的替换距离。本领域普通技术人员应理解,还可通过其它方式来计算两个文本相似度。例如,首先分别为两个文本的增删距离与替换距离配置不同的权重W1和W2,然后计算二维坐标W1D1,W2D2与0,。

33、0之间的欧式距离、余弦夹角或者范数作为两个文本之间的相似度。当然,还可结合两个文本的节点个数,来计算两个文本的相似度。本实施例对此不作限定。0060本实施例提出的技术方案,是根据两个文本的增删距离和替换距离,来计算文本之间的相似度,该计算过程不依赖于词典、切词,也无需预先构造文本相似度计算模型,且实现算法简单,因而能够很好的提高文本相似度的计算速度。并且,本实施例并不是将编辑距离直接作为两个文本的相似度,而是根据编辑距离中的增删距离与替换距离来确定两文本的相似度,这样能够细化编辑距离,区分并突出增删和替换两种操作对文本相似度的影响,便于后续基于相似度的文本处理。0061实施例二0062图2是本。

34、发明实施例二提供的一种文本相似度计算方法的流程示意图。本实施例在上述实施例的基础上,对“根据所述增删距离与替换距离,计算两个文本的相似度”这一操作120作进一步优化,以得到一种较为准确的,且利于后续文本聚类、文本检索、数据挖掘或系统自动问答等处理的文本相似度。参见图2,该方法包括如下操作0063210、通过比较两个文本的节点,计算两个文本的增删距离与替换距离,其中增删距离与替换距离的和为两个文本的编辑距离;0064220、按照公式计算两个文本的相似度。0065其中,S为两个文本的相似度,L1为两个文本中第一文本的节点个数,L2为两个文本中第二文本的节点个数,D1为两个文本的增删距离,D2为两个。

35、文本的替换距离,N为设定的第一权重,M为设定的第二权重。0066在本实施例的一个优选的实施方式中,如果两个文本中的每个文本均是由中文字符组成,则第一权重N大于第二权重M;如果两个文本中的每个文本均是由英文字符组成,则第一权重N小于第二权重M。0067当然,也可根据后续基于相似度的文档处理需求,来确定第一权重和第二权重。例如,如果增删距离对后续基于相似度的文档处理的影响较大时,可设第一权重大于第二权重,反之替换距离对后续基于相似度的文档处理的影响较大时,可设第一权重小于第二权重。说明书CN104090865A106/9页110068在第一权重大于第二权重的情况下如果计算两个文本的增删距离与替换距。

36、离时所采用的设定规则为最大代价原则,则计算得到的相似度会较采用最小代价原则得到的相似度小,在后续基于相似度的文本聚类这一文档处理中被聚类的点会比较分散;如果计算两个文本的增删距离与替换距离时所采用的设定规则为最小代价原则,则后续计算得到的相似度会较采用最大代价原则得到的相似度大,在后续基于相似度的文本聚类这一文档处理中被聚类的点会比较分散,适合于合并差异很小的类。0069对于第一权重小于第二权重的情况,与上述第一权重大于第二权重的情况相反,在此不再赘述。0070本实施例的技术方案,为两个文本的增删距离与替换距离赋予不同的权重,然后根据权重值、两个文本的增删距离与替换距离及其两文本的节点个数,来。

37、计算两个文本的相似度,这样可以使得用户能够根据后续文本处理需求对文本相似度的计算方法进行自适应调整,从而能够得到一种较为准确的,且利于后续文本聚类、文本检索、数据挖掘或系统自动问答等处理的文本相似度。0071实施例三0072图3是本发明实施例三提供的一种文本相似度计算方法的流程示意图。本实施例在上述各实施例的基础上,针对待比较的两个文本中的每个文本均是由至少两个字符组成的这一应用场景,在上述操作“通过比较两个文本的节点,计算两个文本的增删距离与替换距离”之前,增加了对字符进行编码以得到相应的以字节为节点单位的二进制序列的操作。参见图3,该方法包括如下操作0073310、按照设定的编码方式,将两。

38、个文本中的字符转换为以字节为节点单位的二进制序列;0074320、通过比较两个文本的节点,计算两个文本的增删距离与替换距离,其中增删距离与替换距离的和为两个文本的编辑距离;0075330、按照公式计算两个文本的相似度。0076其中,S为两个文本的相似度,L1为两个文本中第一文本的节点个数,L2为两个文本中第二文本的节点个数,D1为两个文本的增删距离,D2为两个文本的替换距离,N为设定的第一权重,M为设定的第二权重。0077在本实施例中,编码格式可以为UTF88BITUNICODETRANSFORMATIONFORMAT,8位单一码转换格式或GBK汉字内码扩展规范。其中,UTF8可以根据不同的字。

39、符自动选择编码的长短,比如对于英文字母这一字符只将其转换为1个字节的二进制序列,为1个节点;对于汉字这一字符会将其转换为3个字节即为3个节点的二进制序列。GBK为一种汉字标准编码,不管字符是中文字符还是英文字母,均会将其转换为2个字节即为2个节点的二进制序列。当然,还可采用其他编码方式将两个文本中的字符转换为以字节为节点单位的二进制序列,本实施例对此不作限定。0078举例而言,两个文本中第一文本包括“业精于勤”4个字符,其GBK编码依次分别为“1101001010110101、1011111010101011、1101001111011010、1100011111011010”,共8个节点,依。

40、次分别为11010010、10110101、10111110、10101011、10111110、10101011、11000111、11011010;说明书CN104090865A117/9页120079第二文本包括“学业精深需勤奋”7个字符,其GBK编码依次分别为“1101000110100111、1101001010110101、1011111010101011、1100100111101110、1101000011101000、1100011111011010、1011011111010111”,共14个节点,依次分别为11010001、10100111、11010010、101101。

41、01、10111110、10101011、11001001、11101110、11010000、11101000、11000111、11011010、10110111、11010111。在比较两个文本中的节点时,只要待比较的两个节点的8位二进制序列中有1个对应位不相同,便可判断待比较这两个节点不同。0080本实施例提供的技术方案,针对待比较的两个文本中的每个文本均是由至少两个字符组成的这一应用场景,预先对字符进行编码以得到相应的以字节为节点单位的二进制序列的操作,然后通过逐个比较两个文本的8位二进制序列,而非逐个比较两文本的字符,来计算两个文本的增删距离与替换距离,并根据所述增删距离与替换距离。

42、和两个文本的节点个数,计算两个文本的相似度,这样可使得在不便于直接比较两个文本中的字符,或者比较字符难度大、耗费资源较多的情况下,能够提供一种基于二进制序列比较的文本相似度计算方案。0081在上述任意实施例的基础上,考虑到相似度的计算速度,优选的,两个文本中至少一个文本的字符长度小于1024。其中,字符长度指的是文本所包含的字符个数。如果待比较文本的字符长度远大于1024,可预先对其进行切分,得到多个字符长度小于等于1024的子文本,然后利用本发明实施例提供的技术方案对待比较的不同文本间相应的各个子文本进行相似度的计算,最后根据所得到的多个子文本的相似度得到一个总的相似度,例如可以求取多个子文。

43、本的相似度的平均值作为最终的两文本的相似度。0082举例而言,两文本中的第一文本依次包括第一子文本、第二子文本、第三子文本和第四子文本,第二文本依次包括第五子文本、第六子文本和第七子文本,在此情况下可分别计算两文本中对应子文本的相似度,即分别计算第一子文本与第五子文本、第二子文本与第六子文本、第三子文本与第七子文本之间的相似度,进而计算各个相似度的平均值。由于在第二文本中不存在与第一文本中的第四子文本对应的子文本,此时可根据第四子文本的字符长度在两文本的总字符长度中所占的比例,来确定是否对所得的平均值进行调整。如果所述比例大于设定阈值,可将所述平均值的05倍作为最终的两文本的相似度,否则直接将。

44、所述平均值作为最终的两文本的相似度。0083实施例四0084图4是本发明实施例四提供的一种文本相似度计算装置的结构示意图。本实施例可适用于对获取到的任意两文本进行相似度计算的情况。参见图4,该装置的具体结构包括0085文本距离计算单元410,用于通过比较两个文本的节点,计算所述两个文本的增删距离与替换距离,其中所述增删距离与所述替换距离的和为所述两个文本的编辑距离;0086文本相似度计算单元420,用于根据所述增删距离与替换距离,计算所述两个文本的相似度。0087进一步的,所述文本相似度计算单元420,具体用于0088按照公式计算所述两个文本的相似度;说明书CN104090865A128/9页。

45、130089其中,所述S为所述两个文本的相似度,L1为所述两个文本中第一文本的节点个数,L2为所述两个文本中第二文本的节点个数,D1为所述增删距离,D2为所述替换距离,N为设定的第一权重,M为设定的第二权重。0090进一步的,如果所述两个文本中的每个文本均是由中文字符组成,则所述第一权重N大于所述第二权重M;0091如果所述两个文本中的每个文本均是由英文字符组成,则所述第一权重N小于所述第二权重M。0092进一步的,所述两个文本中的每个文本由至少两个字符组成,则所述装置还包括0093字符转换单元400,用于在所述文本距离计算单元410计算所述两个文本的增删距离与替换距离之前,按照设定的编码方式。

46、,将所述两个文本中的字符转换为以字节为节点单位的二进制序列。0094进一步的,所述两个文本中至少一个文本的字符长度小于1024。0095进一步的,所述文本距离计算单元410,具体用于0096如果MINI,J0,则DIS1AI,BJMAXI,J,DIS2AI,BJ0;如果MINI,J0,则0097XI,JDIS1AI1,BJDIS2AI1,BJ1,0098YI,JDIS1AI,BJ1DIS2AI,BJ11,0099ZI,JDIS1AI1,BJ1DIS2AI1,BJ1CONST,0100如果FXI,J,YI,J,ZI,JXI,J,则0101DIS1AI,BJDIS1AI1,BJ1,0102DIS2。

47、AI,BJDIS2AI1,BJ;0103如果FXI,J,YI,J,ZI,JYI,J,则0104DIS1AI,BJDIS1AI,BJ11,0105DIS2AI,BJDIS2AI,BJ1;0106如果FXI,J,YI,J,ZI,JZI,J,则0107DIS1AI,BJDIS1AI1,BJ1,0108DIS2AI,BJDIS2AI1,BJ1CONST;0109其中,0II,0JJ,I为所述两个文本中第一文本的节点个数,J为所述两个文本中第二文本的节点个数;0110DIS1AI,BJ为所述两个文本中第一文本的前I个节点与第二文本的前J个节点的增删距离,DIS2AI,BJ为所述两个文本中第一文本的前I个。

48、节点与第二文本的前J个节点的替换距离;0111DIS1AI1,BJ为所述两个文本中第一文本的前I1个节点与第二文本的前J个节点的增删距离,DIS2AI1,BJ为所述两个文本中第一文本的前I1个节点与第二文本的前J个节点的替换距离;0112DIS1AI,BJ1为所述两个文本中第一文本的前I个节点与第二文本的前J1个节点的增删距离,DIS2AI,BJ1为所述两个文本中第一文本的前I个节点与第二文本的前J1个节点的替换距离;说明书CN104090865A139/9页140113DIS1AI1,BJ1为所述两个文本中第一文本的前I1个节点与第二文本的前J1个节点的增删距离,DIS2AI1,BJ1为所述。

49、两个文本中第一文本的前I1个节点与第二文本的前J1个节点的替换距离;0114如果所述第一文本的第I个节点与所述第二文本的第J个节点不相同,则CONST1,否则CONST0;0115XI,J为所述两个文本中第一文本的前I个节点与第二文本的前J个节点的第一编辑距离,YI,J为所述两个文本中第一文本的前I个节点与第二文本的前J个节点的第二编辑距离,ZI,J为所述两个文本中第一文本的前I个节点与第二文本的前J个节点的第三编辑距离,FXI,J,YI,J,ZI,J为根据设定规则从XI,J、YI,J和ZI,J中选取的值最小的一个。0116进一步的,所述设定规则为0117如果在XI,J、YI,J和ZI,J各自对应的值中至少有两个值相等,且相等值为XI,J、YI,J和ZI,J各自对应的值中的最小值,则FXI,J,YI,J,ZI,J为XI,J、YI,J和ZI,J中值为最小的且所对应的增删距离最大的一个,否则FXI,J,YI,J,ZI,JMINXI,J,YI,J,ZI,J;或者0118如果在XI,J、YI,J和ZI,J各自对应的值中至少有两个值相等,且相等值为XI,J、YI,J和ZI,J各自。

展开阅读全文
相关资源
猜你喜欢
相关搜索

当前位置:首页 > 物理 > 计算;推算;计数


copyright@ 2017-2020 zhuanlichaxun.net网站版权所有
经营许可证编号:粤ICP备2021068784号-1