《关键字检测装置、其控制方法及控制程序,以及显示设备.pdf》由会员分享,可在线阅读,更多相关《关键字检测装置、其控制方法及控制程序,以及显示设备.pdf(27页珍藏版)》请在专利查询网上搜索。
1、10申请公布号CN104126188A43申请公布日20141029CN104126188A21申请号201280070282122申请日20121226201205799920120314JPG06K9/20200601G06F17/3020060171申请人欧姆龙株式会社地址日本京都府京都市72发明人相泽知祯74专利代理机构隆天国际知识产权代理有限公司72003代理人魏彦金相允54发明名称关键字检测装置、其控制方法及控制程序,以及显示设备57摘要字符串检测部113,从对象图像中检测用于促使搜索的特定字符串的特征点,字符识别部116将在上述对象图像中存在于被检测出的特征点的周围的字符串识别为。
2、搜索用关键字。30优先权数据85PCT国际申请进入国家阶段日2014082186PCT国际申请的申请数据PCT/JP2012/0836442012122687PCT国际申请的公布数据WO2013/136628JA2013091951INTCL权利要求书2页说明书15页附图9页19中华人民共和国国家知识产权局12发明专利申请权利要求书2页说明书15页附图9页10申请公布号CN104126188ACN104126188A1/2页21一种关键字检测装置,从对象图像中检测搜索用关键字,该搜索用关键字用于通过因特网上的搜索引擎进行搜索,其特征在于,具备特征点检测部,其从所述对象图像中检测用于促使所述搜索。
3、的特定字符串的特征点;以及关键字识别部,其在所述对象图像中,将存在于由所述特征点检测部检测出的特征点的周围的字符串,识别为所述搜索用关键字。2根据权利要求1所述的关键字检测装置,其特征在于,还具备搜索窗检测部,其在所述对象图像中,从由所述特征点检测部检测出的特征点的周围,检测用于输入所述搜索用关键字的搜索窗,所述关键字识别部,将由所述搜索窗检测部检测出的搜索窗内的字符串识别为所述搜索用关键字。3根据权利要求2所述的关键字检测装置,其特征在于,所述搜索窗检测部在所述对象图像中进行如下处理求得所述特定字符串的外接矩形,设定上部检测用矩形和下部检测用矩形,所述上部检测用矩形以求得的外接矩形的左上顶点。
4、作为右下顶点,所述下部检测用矩形以所述外接矩形的左下顶点作为为右上顶点,在已设定的上部检测用矩形以及下部检测用矩形内,分别检测所述搜索窗的上边以及下边,设定侧部检测用矩形,该侧部检测用矩形是由检测出的上边以及下边构成的矩形朝两侧方向扩大而构成的,在已设定的侧部检测用矩形内,检测所述搜索窗的左侧以及右侧的线,从而检测所述搜索窗。4根据权利要求2或3所述的关键字检测装置,其特征在于,所述对象图像为动画中的一系列的静止图像,所述搜索窗检测部,在从某个所述静止图像中检测出所述搜索窗的情况下,省略所述特征点检测部的动作,直到从之后的所述静止图像中检测不出所述搜索窗为止。5根据权利要求24中任一项所述的关。
5、键字检测装置,其特征在于,所述关键字识别部,针对构成所述搜索窗内的字符串的每个字符,进行字符识别并检测满足规定条件的一个或者多个字符候选,对各所述字符的字符候选进行组合,从而生成多个所述搜索用关键字的候选。6根据权利要求5所述的关键字检测装置,其特征在于,所述规定条件是指,通过所述字符识别得出的匹配可靠度大于规定阈值。7根据权利要求5或6所述的关键字检测装置,其特征在于,所述规定条件是指,通过所述字符识别得出的匹配可靠度与所述匹配可靠度最大的字符候选的匹配可靠度之间的差在规定范围内。8根据权利要求57中任一项所述的关键字检测装置,其特征在于,所述关键字识别部,将对各所述字符的字符候选进行了组合。
6、的识别字符串的得分,设为构成所述识别字符串的字符候选的匹配可靠度的平均值,将所述得分高的识别字符串设为所述搜索用关键字的候选。权利要求书CN104126188A2/2页39根据权利要求8所述的关键字检测装置,其特征在于,所述对象图像为动画中的一系列的静止图像,所述关键字识别部进行如下处理在所述搜索窗检测部从任意一个所述静止图像中检测出所述搜索窗后,从直至在之后接着的所述静止图像中检测不出所述搜索窗为止的过程中生成的识别字符串中,生成所述搜索用关键字的候选,与来自某个所述静止图像的识别字符串的字符数相比,每当下一个来自所述静止图像的识别字符串的字符数发生变化时,所述识别字符串的得分的加权增大,将。
7、被加权的所述得分高的识别字符串设为所述搜索用关键字的候选。10一种显示设备,其特征在于,具备从对象图像中检测用于通过因特网上的搜索引擎进行搜索的搜索用关键字的权利要求19中任一项所述的关键字检测装置,以及显示由所述关键字检测装置检测出的搜索用关键字和所述对象图像的显示装置。11一种关键字检测装置的控制方法,该关键字检测装置用于从对象图像中检测搜索用关键字,该搜索用关键字用于通过因特网上的搜索引擎进行搜索,其特征在于,包括如下步骤特征点检测步骤,从所述对象图像中检测用于促使所述搜索的特定字符串的特征点;以及关键字识别步骤,在所述对象图像中,将存在于通过所述特征点检测步骤检测出的特征点的周围的字符。
8、串,识别为所述搜索用关键字。12一种关键字检测装置动作的控制程序,该关键字检测装置用于从对象图像中检测搜索用关键字,该搜索用关键字用于通过因特网上的搜索引擎进行搜索,其特征在于,使计算机执行如下步骤特征点检测步骤,从所述对象图像中检测用于促使所述搜索的特定字符串的特征点;以及关键字识别步骤,在所述对象图像中,将存在于通过所述特征点检测步骤检测出的特征点的周围的字符串,识别为所述搜索用关键字。13一种记录介质,其特征在于,能够由计算机读取,并且记录有权利要求12所述的控制程序。权利要求书CN104126188A1/15页4关键字检测装置、其控制方法及控制程序,以及显示设备技术领域0001本发明涉。
9、及一种从对象图像中检测用于在因特网上的搜索引擎中进行搜索的搜索用关键字的关键字检测装置、其控制方法及控制程序以及显示设备。背景技术0002近年来,将用于在因特网上的搜索引擎中进行搜索的搜索用关键字包含在CMCOMMERCIALMESSAGE商业广告等的电视机以下,称为“TV”。播放用图像中,来播放。通过将上述搜索用关键字作为上述TV播放用图像的一部分显示在TV显像器上,能够促使用户在上述搜索引擎中检索上述搜索用关键字。0003但是,在很多情况下,上述搜索用关键字的显示时间很短,因此,用户有时会漏掉上述搜索用关键字。另外,在不是用户能够立即在因特网上进行上述搜索的环境的情况下,在进行上述搜索之前。
10、,有时会忘记所显示的搜索用关键字。0004为了避免上述的问题点,考虑从上述播放用图像中识别出搜索用关键字的字符串,提取上述搜索用关键字。0005例如,在专利文献1所记载的网络电视装置中,通过识别字符,来从电视播放的视频中检测字符串,从检测出的字符串中检测单词,并根据规定条件,从检测出的单词中决定用于检索因特网上的信息的关键字。0006另外,在专利文献2中,公开一种信息处理装置,该信息处理装置从在TV播放过程中提示的各种搜索引导画面中检测关键字,并进行使用了上述关键字的因特网搜索。具体而言,计算出最新的输入图像与规定时间前的输入图像之间的变化量,在该变化量在阈值以下的区域内,执行字符识别处理。就。
11、含有字符串的图像而言,为了使用户能够识别上述字符串,需要持续显示该图像达到某种程度的时间。因此,由于考虑到上述字符串的上述变化量非常小,所以能够通过上述字符识别处理提取包含上述关键字的字符串。0007现有技术文献0008专利文献0009专利文献1日本公开专利公报“特开2010039647号公报2010年2月18日公开”0010专利文献2日本公开专利公报“特开2009188886号公报2009年8月20日公开0011专利文献3日本公开专利公报“特开2009044658号公报2009年2月26日公开0012专利文献4日本公开专利公报“特开2010152800号公报2010年7月8日公开0013专利。
12、文献5日本公开专利公报“专利第4893861号公报2012年3月7日发行0014非专利文献1“数字图像处理”,第二版,财团法人图像信息教育振兴协会,2009年,P311313说明书CN104126188A2/15页5发明内容0015发明要解决的问题0016然而,在专利文献1所记载的网络电视装置中,是在对电视播放的视频整体进行字符识别的基础上,检测上述关键字。在该情况下,需要对多个字符中的每一个字符进行第一处理和第二处理,在该第一处理中,对该字符的特征点与上述视频的特征点进行对照,在该第二处理中,根据上述对照而检测的字符串搜索上述关键字。特别地,在日本、中国的汉字文化圈的情况下,成为字符识别的对。
13、象的字符的个数为三千以上,导致处理负担较大且处理时间增长。0017与此相对,在专利文献2的信息处理装置中,成为字符识别的对象的图像区域被限定于最新的输入图像与规定时间前的输入图像之间的变化量成为阈值以下的区域,因此能够缩短处理时间。然而,为了计算出上述变化量,需要处理至少两帧图像。因此,存在对存储器容量进行压迫,而使处理时间增长的问题。另外,根据相同的理由,上述信息处理装置无法使用于静止图像。0018因此,作为迅速提取上述搜索用关键字的技术,存在着眼于以特征的形态提供用于输入上述搜索用关键字的搜索窗的技术。0019此处,图9A图9E表示搜索窗的形态例。如图所示,在敦促搜索的“搜索”等的字符串的。
14、左侧,以矩形的形态或者与矩形类似的形态提供搜索窗,以及以左右边带弧度的形态提供搜索窗的情况较多。另外,就上述“搜索”等的字符串而言,有时以被矩形等的框包围的方式提供,有时也以不被框包围的方式提供。0020例如,在专利文献3中公开有从图像中提取成为水平或者垂直的直线的位置。由此,对确定模仿了检索引擎搜索引擎的搜索窗的区域,从而能够从该区域内提取搜索用关键字。0021另外,在专利文献4中公开了这样的技术从显示于画面的影像中提取具有字符输入区域搜索窗的形状的影像,亦即在该被提取的影像中,存在于该影像内的字符的排列方式具有被输入至上述字符输入区域内的字符的排列方式。由此,能够从图像中正确地仅提取以在上。
15、述字符输入区域内以搜索窗的特征形态排列字符的搜索窗区域。0022但是,在TV播放用图像等的动画中,往往不是显示搜索窗,而是显示包含风景部分在内的与搜索窗类似的矩形或多边形。但在专利文献3、4中,需要针对上述矩形或者多边形分别提取字符或者字符的特征量,其结果,导致处理时间增长。特别地,为了处理要求实时性的动画,导致较长的处理时间,这成为深刻的问题。0023用于解决问题的手段0024本发明是鉴于上述的问题点而完成的,其目的在于提供能够迅速检测搜索用关键字的关键字检测装置等。0025本发明所涉及的关键字检测装置,从对象图像中检测搜索用关键字,该搜索用关键字用于通过因特网上的搜索引擎进行搜索,为了解决。
16、上述问题,其特征在于,具备特征点检测部,其从所述对象图像中检测用于促使所述搜索的特定字符串的特征点;以及关键字识别部,其在所述对象图像中,将存在于由所述特征点检测部检测出的特征点的周围的字符串,识别为所述搜索用关键字。说明书CN104126188A3/15页60026另外,本发明涉及关键字检测装置的控制方法,该关键字检测装置用于从对象图像中检测搜索用关键字,该搜索用关键字用于通过因特网上的搜索引擎进行搜索,为了解决上述问题,其特征在于,包括如下步骤特征点检测步骤,从所述对象图像中检测用于促使所述搜索的特定字符串的特征点;以及关键字识别步骤,在所述对象图像中,将存在于通过所述特征点检测步骤检测出。
17、的特征点的周围的字符串,识别为所述搜索用关键字。0027根据上述的结构以及方法,在对象图像中检测用于促使搜索的特定字符串的特征点,将存在于被检测出的特征点的周围的字符串识别为搜索用关键字。0028然而,以往如专利文献1那样,有时针对对象图像整体进行字符识别后提取上述特定字符串。在该情况下,需要对多个字符中的每一个进行对上述字符的特征点与对象图像的特征点进行对照的第一处理,和进行在通过上述对照检测出的字符串是否包含有上述特定字符串的判断的第二处理。0029与此相对,在本发明中,对几个上述特定字符串中的每一个进行上述特定字符串的特征点与对象图像的特征点的对照的处理即可。即,在本发明中,与上述现有情。
18、况相比,第一处理是对少数字符中的每一个字符进行上述字符的特征点与对象图像的特征点的对照,省略第二处理。因此,处理个数少,并且上述对照的重复个数少即可,因此能够比现有技术迅速地进行检测。0030另外,在从对象图像中检测搜索窗的矩形框这样的现有技术的情况下,矩形等几何学形状的特征点的个数少,因此从对象图像中检测出多个特征点的可能性高,因此,需要从检测出的多个几何学形状中确定搜索窗的矩形框。与此相对,在从对象图像中检测上述特征字符串这样的本发明的情况下,上述特定字符串的特征点的个数多,因此从对象图像中检测出多个结果的可能性低,因此,与以往相比迅速进行检测的可能性也增高。0031另外,识别作为搜索用关。
19、键字的字符串的区域,不限定于被检测出的特征点的周围,因此能够迅速识别上述字符串。以上,与以往相比,能够迅速检测搜索用关键字。0032此外,作为用于促使上述搜索的特定字符串的例子,能够列举“搜索”、“检索SEARCH”、“确认”、“检查CHECK”、上述的译文等。另外,对于上述特定字符串的特征点的检测而言,也可以针对每个包含在上述特定字符串中的字符检测特征点,也可以以多个字符为单位检测特征点。当针对每个上述字符检测特征点的情况下,也可以首先检测包括于上述特定字符串中的某个字符的特征点,接下来从被检测出的特征点的周围检测包含在上述特定字符串中的其他字符的特征点。0033此外,对于具备从对象图像中检。
20、测用于通过因特网上的搜索引擎进行搜索的搜索用关键字的上述结构的关键字检测装置、显示由上述关键字检测装置检测出的搜索用关键字和上述对象图像的显示装置的显示设备,也能够起到与上述相同的效果。0034另外,能够通过控制程序在计算机上执行上述关键字检测装置的各部。并且,使上述控制程序存储于计算机能够读取的记录介质,从而能够在任意的计算机上执行上述关键字检测装置。0035发明效果0036如以上那样,本发明所涉及的关键字检测装置,在对象图像中检测用于促使搜索的特定字符串的特征点,将存在于被检测出的特征点的周围的字符串识别为搜索用关键字,因此能够迅速检测上述特定字符串的特征点,并且能够迅速识别上述字符串,其。
21、结果,说明书CN104126188A4/15页7与以往相比,起到能够迅速检测搜索用关键字的效果。附图说明0037图1是表示作为本发明的一实施方式的再生设备的概略结构的框图。0038图2是表示被上述再生设备的控制部执行的关键字检测处理的流程的流程图。0039图3是表示被上述再生设备的搜索窗检测部执行的搜索窗检测处理的流程的流程图。0040图4是表示搜索窗的一个例子的图。0041图5是表示作为本发明的其他的实施方式的显示装置的概略结构的框图。0042图6是表示被上述显示装置的搜索关键字生成部执行的处理的流程的流程图。0043图7是上述显示装置的主视图,且是表示上述显示装置的显示部的显示例的图。00。
22、44图8是表示被上述搜索关键字生成部执行的其他处理的流程的流程图。0045图9A图9E是表示各种各样的搜索窗以及“搜索”字符串的形态的图。具体实施方式0046第一实施方式0047以下,参照图1图4对本发明的一实施方式详细地进行说明。0048再生设备的结构0049图1示出了作为本实施方式的再生设备关键字检测装置110的概略结构。再生设备110对被存储的动画数据进行再生播放,例如将其发送至显示设备等的外部的设备。如图所示,再生设备110具备控制部10、发送部101以及存储部104。0050控制部10对再生设备110内的各种结构的动作统一地进行控制,并由包括例如CPUCENTRALPROCESSIN。
23、GUNIT中央处理器以及存储器的计算机构成。而且,各种结构的动作控制通过使控制程序在计算机执行而进行。此外,对控制部10的详细后述。0051存储部104对信息进行记录,并由硬盘、闪存、ROMREADONLYMEMORY只读存储器、RAMRANDOMACCESSMEMORY随机存取存储器等存储装置构成。此外,对存储部104的详细后述。0052发送部101在将来自控制部10的数据转换成适于数据发送的形式后,将其发送至外部的设备。此外,该发送可以通过有线方式进行,也可以通过无线方式进行。0053在本实施方式中,再生设备110从包含于动画中的静止图像对象图像中检测用于通过因特网上的搜索引擎进行搜索的搜。
24、索用关键字。再生设备110,在上述静止图像中检测促使上述搜索的特定字符串的特征点,从检测出的特征点的周围检测用于输入上述搜索用关键字的搜索窗,将检测出的搜索窗内的字符串识别为上述搜索用关键字。0054由此,与在对上述静止图像的整体进行字符识别后提取上述特定字符串的情况相比,只要与几个上述特定字符串的特征点进行对照即可,不需要与多个字符的特征点进行对照。其结果,能够迅速检测上述特定字符串的特征点。同样地,上述搜索窗限定有例如矩形等形状,因此能够迅速检测。另外,识别作为搜索用关键字的字符串的区域限定于上述搜索窗内,因此能够迅速识别上述字符串。其结果,与以往相比,能够迅速检测搜索用关键字。0055另。
25、外,只要从上述静止图像检测上述特定字符串的特征点即可,因此在复杂的背说明书CN104126188A5/15页8景下,也能够进行高精度并且实时的处理。即,即使在“搜索”等的特定字符串的背景下实施谐调处理GRADATION、插入风景等,也能够高精度地进行检测,其结果,能够提高搜索用关键字的检测的精度。另外,即使“搜索”等的特定字符串不被矩形围起,也能够无问题地进行检测。并且,不需要处理多帧图像,因此,存储器容量不成为问题。0056接下来,对控制部10以及存储部104的详细进行说明。如图1所示,控制部10是具备动画再生部111、静止图像生成部112、字符串检测部113特征点检测部、搜索窗检测部115。
26、、字符识别部116关键字识别部、以及合成部117的结构。另外,存储部104包括图像信息存储部121以及字符信息存储部122。0057图像信息存储部121用于存储动画数据。另外,字符信息存储部122用于存储字符信息DB数据库,该字符信息DB数据库是与字符有关的信息,亦即特定字符串的检测以及各种字符的识别所需的信息。具体而言,在上述字符信息DB包含有字符代码、特定字符串的特征量、各种字符的特征量。0058动画再生部111对存储于图像信息存储部121的动画数据进行再生。动画再生部111将再生的动画数据发送至静止图像生成部112以及合成部117。此外,图像信息存储部121也可以存储静止画数据,动画再生。
27、部111也可以对上述静止画数据进行再生。另外,上述再生为公知技术,因此省略其详细的说明。0059静止图像生成部112在每个规定的期间对来自动画再生部111的动画数据进行解码,而生成静止图像。静止图像生成部112将已生成的静止图像发送至字符串检测部113。0060字符串检测部113从来自静止图像生成部112的静止图像中检测包含在用于促使搜索的特定字符串中的各字符的特征点,从而检测上述特定字符串。字符串检测部113将检测出的特定字符串在上述静止图像上占据的位置信息与上述静止图像一同发送至搜索窗检测部115。此外,作为特征点的例子,能够列举在图像中亮度急剧变化的部分等。0061作为检测上述特定字符串。
28、的方法的一个例子,能够列举专利文献5所记载的方法。即,首先,基于构成上述静止图像的各像素所具有的颜色信息,至少定义一个由具有类似颜色的一定数目以上的像素群构成的群集CLUSTER。接下来,将上述静止图像分割成属于被定义的群集的像素群的区域与其他像素群的区域,从上述静止图像生成排除上述其他像素群的区域的限幅图像。然后,从已生成的限幅图像中检测包含在上述特定字符串中的各字符的特征点,从而检测上述特定字符串。0062此处,作为用于促使搜索的特定字符串的例子,能够列举“搜索”、“检索”、“确认”、“检查”、上述的译文等。以下,利用“搜索”作为用于促使上述搜索的特定字符串,将上述特定字符串记为“搜索”字。
29、符串。0063搜索窗检测部115使用来自字符串检测部113的静止图像与“搜索”字符串的位置信息,在上述静止图像中从“搜索”字符串占据的位置的周围检测搜索窗。搜索窗检测部115将检测出的搜索窗在上述静止图像上占据的区域信息与上述静止图像一同发送至字符识别部116。此外,对检测上述搜索窗的处理的详细后述。0064字符识别部116使用来自搜索窗检测部115的静止图像与上述搜索窗的区域信息,识别上述搜索窗内的一个或者多个字符。字符识别部116将由已识别出的字符构成的字符串作为搜索用关键字发送至合成部117。0065作为识别字符的方法的一个例子,能够列举非专利文献1所记载的方法,进一步说明书CN1041。
30、26188A6/15页9能够列举下述的方法。即,首先,使用对黑像素数进行了计数的直方图,取得应该进行字符识别的字符图像的外接矩形信息。接下来,在上述外接矩形内提取字符图像的边缘成分等,从而获得字符图像的特征矢量。而且,将上述字符图像的特征矢量与预先存储于字符信息存储部122中的字符识别用辞典内的特征矢量进行比较,取得与上述字符图像类似度高的一个或者多个字符的字符代码。该字符代码成为从上述字符图像识别出的字符的字符代码。0066合成部117使用来自动画再生部111的动画数据与来自字符识别部116的搜索用关键字,在上述动画的适当的位置合成上述搜索用关键字。合成部117经由发送部101将合成了上述搜。
31、索用关键字的动画的数据发送至外部的设备。0067再生设备的处理0068接下来,参照图2对上述结构的再生设备110的处理进行说明。此外,在本实施方式中,被再生的图像数据为动画媒体流动画的数据。0069图2是表示在再生设备110的控制部10中被执行的关键字检测处理的流程的流程图。如图所示,首先,将计时器未图示的时刻T复位成0,从而在搜索窗检测状态标志DETECTFLAG无效的状态FALSE下,即在未检测搜索窗的状态下,进行用于复位的初始化S101、102。然后,动画再生部111开始再生动画S103。由此,被再生的动画数据经由合成部117以及发送部101被发送至外部的设备。0070接下来,静止图像生。
32、成部112判断时刻T是否满足TKT0的条件S104。此处,K为自然数,T0为规定的周期。在未满足上述条件的情况下在S104中为否,进入步骤S111。0071另一方面,在满足上述条件的情况下在S104中为是,静止图像生成部112对由动画再生部111再生的动画数据框架图像的数据进行解码,而生成静止图像S105。此外,适当地设定上述规定的周期T0,从而能够对生成上述静止图像的周期进行调整。0072接下来,字符串检测部113,在由静止图像生成部112生成的静止图像中检测用于促使搜索处理的字符串,即“搜索”字符串在S106中,为特征点检测步骤。在无法检测出“搜索”字符串的情况下在S107中为否,进入步骤。
33、S111。0073另一方面,在能够检测“搜索”字符串的情况下在S107中为是,搜索窗检测部115从由字符串检测部113检测出的“搜索”字符串在上述静止图像中占据的位置的周围检测搜索窗S108。此外,对检测上述搜索窗的处理的详细后述。在能够检测出上述搜索窗的情况下在S109中为是,进入步骤S115。另一方面,在无法检测出上述搜索窗的情况下在S109中为否,进入步骤S110。0074在步骤S115中,搜索窗检测部115复位成使搜索窗检测状态标志DETECTFLAG有效的状态TRUE。这示出了检测出搜索窗的状态。接下来,字符识别部116识别由搜索窗检测部115检测出的搜索窗内的一个或者多个字符,并识。
34、别由识别出的字符构成的字符串在S116中,为关键字识别步骤。该字符的识别处理通过上述的公知技术而进行。0075接下来,静止图像生成部112待机,直至时刻T前进至满足TKT1的条件S117、S118为止。此处,T1是满足T1T0的规定的周期。例如,结束步骤S116的处理的时刻T为T0,若T1T02T1,则待机直至T2T1。0076若满足上述条件,静止图像生成部112与步骤S105同样地生成静止图像S119,说明书CN104126188A7/15页10然后返回步骤S108,搜索窗检测部115检测搜索窗。即,一旦检测出“搜索”字符串,从而检测出搜索窗,则之后能够省略“搜索”字符串的检测,直至检测不到。
35、搜索窗为止。由此,能够进一步迅速检测上述搜索用关键字。另外,与周期T0相比,能够缩短静止图像生成部112生成静止图像的周期T1T1T0。0077另外,对静止图像的整体进行调查来检测出“搜索”字符串的特征点,因此伴随着上述静止图像的尺寸增大,检测所需要的时间变长。因此,根据上述的结构,能够抑制因上述静止图像的尺寸变大而上述搜索用关键字的检测延迟。特别是,在上述静止图像为HD全尺寸1920像素1080像素的较大的尺寸的情况下有效。0078另一方面,在步骤S110中,字符识别部116判断搜索窗检测状态标志DETECTFLAG是否为有效的状态TRUE,即,判断是否从之前的静止图像中检测出上述搜索窗。在。
36、从之前的静止图像中检测出上述搜索窗的情况下,即,在上述搜索窗在这次的静止图像中消失的情况下进入步骤S113。另一方面,在未从之前的静止图像检测出上述搜索窗的情况下,即,在未检测出搜索窗的状态持续的情况下,进入步骤S111。0079在步骤S113中,合成部117将由字符识别部116识别出的字符串识别字符串的数据作为搜索用关键字的候选的数据,合成在由动画再生部111再生的动画数据中,从而将被合成的动画数据经由发送部101发送至外部的设备S113。0080此外,在字符识别部116无法识别字符串的情况下,合成部117也可以将“无法识别字符串”等的错误消息的数据合成在上述动画数据中,也可以将合成前的上述。
37、动画数据保持原样经由发送部101发送至外部的设备。另外,在字符识别部116能够识别出多个字符串的情况下,也可以将上述多个识别字符串的数据作为搜索用关键字的候选的数据,合成到上述动画数据中。0081接下来,合成部117复位成使搜索窗检测状态标志DETECTFLAG无效的状态FALSES114,然后,进入步骤S111。0082在步骤S111中,在经过单位时间后,动画再生部111对动画数据的再生是否结束进行判断S112。在未结束的情况下,返回步骤S104,反复上述的动作。另一方面,在已结束的情况下,结束处理。0083搜索窗检测处理0084接下来,参照图3、图4以及图9A图9E对图2所示的搜索窗的检测。
38、处理S108的进行详细说明。如图9A图9E所示,搜索窗SB通常位于“搜索”字符串SC的左侧,并且,搜索窗SB的上边上方的边的右端位于“搜索”字符串SC的左上方,搜索窗SB的下边下方的边的右端位于“搜索”字符串SC的左下方。0085因此,在本实施方式中,如下检测搜索窗SB。即,首先,将从“搜索”字符串SC的左上方的区域朝左方延伸的线段检测为搜索窗SB的上线上边,将从“搜索”字符串SC的左下方的区域朝左方延伸的线段检测为搜索窗SB的下线下边。接下来,将对被检测出的上线的右端与下线的右端进行连结的线线段或者曲线检测为搜索窗SB的右线,将对被检测出的上线的左端与下线的左端进行连结的线线段或者曲线检测为。
39、搜索窗SB的左线。由此,能够检测出构成搜索窗SB的所有的线上线、下线、左线、以及右线。0086图3是表示本实施方式的搜索窗检测部115检测搜索窗SB的搜索窗检测处理的流程的流程图。另外,图4是表示搜索窗的一个例子的图,图4A表示搜索窗位于“搜索”说明书CN104126188A108/15页11字符串的左侧附近的例子,图4B示出了搜索窗位于“搜索”字符串的上侧附近的例子。0087如图3以及图4的A所示,首先,取得字符串检测部113检测出的“搜索”字符串SC的外接矩形BBS1081,将已取得的外接矩形BB的左上顶点设为右下顶点,对作为规定尺寸的横长的矩形A进行设定S1082。0088接下来,从已设。
40、定的矩形A内检测相当于搜索窗SB的上边的线段第一线段S1083。具体而言,在已设定的矩形A内,将沿横向与外接矩形BB的上边平行的方向延伸的线段检测为第一线段。0089此外,当在矩形A内检测出多个线段的情况下,优选将最接近矩形A的下边的线段选择为第一线段。原因是,在没有如上所述那样进行选择的情况下,会在搜索窗SB内残留线段,从而在识别搜索窗SB内的字符时,有可能因残留的线段而导致产生误识别。0090在无法检测出第一线段的情况下在S1084中为否,作为无法检测出搜索窗SBS1084的情况,结束上述搜索窗检测处理,从而返回图2所示的原来的处理。0091另一方面,在能够检测出第一线段的情况下在S108。
41、4中为是,将外接矩形BB的左下顶点设为右上顶点,设定作为与矩形A相同的规定尺寸的横长的矩形BS1085。接下来,从已设定的矩形B内检测相当于搜索窗SB的下边的线段第二线段S1086。具体而言,在已设定的矩形B内,将沿横向与外接矩形BB的下边平行的方向延伸的线段检测为第二线段。0092此外,当在矩形B内检测出多个线段的情况下,优选将最接近矩形B的上边的线段选择为第二线段。原因是,在没有如上所述那样选择的情况下,会在搜索窗SB内残留线段,从而在识别搜索窗SB内的字符时,有可能因残留的线段而导致产生误识别。0093在无法检测出第二线段的情况下在S1087中为否,作为无法检测搜索窗SBS1084的情况。
42、,结束上述搜索窗检测处理,返回图2所示的原来的处理。另一方面,在能够检测出第二线段的情况下在S1087中为是,进入步骤S1088。0094然而,认为搜索窗SB的上边以及下边的长度大致相同。因此,如果在步骤S1083、S1086中检测出的第一线段以及第二线段的长度显著不同,则认为不是搜索窗SB的上边以及下边。0095因此,在步骤S1088中,对第一线段以及第二线段的长度的差是否在规定的阈值以上进行判断。在上述长度的差比规定的阈值大的情况下在S1088中为否,作为无法检测出搜索窗SBS1084的情况,结束上述搜索窗检测处理,返回图2所示的原来的处理。0096另一方面,在上述长度的差在规定的阈值以下。
43、的情况下在S1088中为是,使第一线段以及第二线段的各自的两端延长规定的长度差值,从而设定出将被延长的两个线段做为上边以及下边的矩形CS1089。此外,在图4A中,为了容易理解,矩形C的上边以及下边以从搜索窗SB的上边以及下边错开的方式进行记载。0097接下来,从已设定的矩形C内检测相当于搜索窗SB的左边左线以及右边右线的两条线线段或者圆弧S1090。具体而言,在已设定的矩形C内,将对第一线段与第二线段进行连结的两条线检测为相当于上述的左线以及右线的两条线。0098此外,上述两条线可以为线段也可以为圆弧。另外,用于检测相当于搜索窗SB的左线以及右线的两条线的范围,也可以不是矩形C内的整体。例如。
44、,也可以在矩形C内的左侧的1/3的区域检测相当于左线的线,在矩形C的右侧的1/3的区域检测相当于右线的线。说明书CN104126188A119/15页12在该情况下,进行检测的范围缩窄,因此能够缩短搜索窗SB的检测处理时间。0099在无法检测出相当于搜索窗SB的左线以及右线的两条线的情况下在S1091中为否,作为无法检测出搜索窗SBS1084的情况,结束上述搜索窗检测处理,返回图2所示的原来的处理。另一方面,在能够检测出上述两条线的情况下在S1091中为是,作为能够检测出搜索窗SBS1092的情况,结束上述搜索窗检测处理,返回图2所示的原来的处理。0100因此,用于检测搜索窗SB的区域限定于矩。
45、形A上部检测用矩形、矩形B下部检测用矩形以及矩形C侧部检测用矩形内的区域。因此,能够进一步迅速检测出搜索窗SB,其结果,能够进一步迅速检测出搜索用关键字。0101此外,检测搜索窗SB的上边的处理S1082S1084与检测搜索窗SB的下边的处理S1085S1087均可以先进行。0102另外,在本实施方式中,字符串检测部113从上述静止图像中检测包含于“搜索”字符串中的各字符的特征点,但是,例如也可以检测上述各字符的一个例如“索”的特征点,从被检测出的特征点的周围检测上述各字符的其他的一个例如“搜”的特征点。另外,字符串检测部113也可以从上述静止图像中同时检测包含于“搜索”字符串中的多个字符即“。
46、搜索”的特征点。0103变形例0104另外,在本实施方式中,虽对假定为搜索窗SB位于“搜索”字符串SC的左侧附近,在“搜索”字符串SC的左侧附近检测搜索窗SB的例子进行了说明,但本发明不限定于此。即,搜索窗SB也可以相对于“搜索”字符串SC用于促使搜索的字符串位于上下左右的任意一侧附近。0105为了在搜索窗SB位于“搜索”字符串SC的上下左右的任意一侧附近都能够进行检测,只要如下进行即可。即,首先,预先在“搜索”字符串SC的上下左右的方向,对进行检测的优先顺序例如,左、上、右、以及下的顺序进行设定。而且,若能够以被设定的优先顺序检测出搜索窗SB,以某方向检测出搜索窗SB,则在其时刻结束搜索窗S。
47、B的检测。0106在“搜索”字符串SC的左侧附近检测搜索窗SB的顺序如上所述。另外,在“搜索”字符串SC的右侧附近检测搜索窗SB的顺序只要在上述的顺序中更换“左”与“右”即可。0107参照图4B对在“搜索”字符串SC的上侧附近检测搜索窗SB的顺序的一个例子进行说明。0108即,首先,取得“搜索”字符串SC的外接矩形BB,将已取得的外接矩形BB的左上顶点设为右下顶点,设定作为规定尺寸的横长的矩形A,将外接矩形BB的右上顶点设为左下顶点,设定作为与矩形A相同的规定尺寸的横长的矩形B。接下来,在矩形A内,将反“”字状的线亦即上边以及下边到达矩形A的右端的线检测为第一线,在矩形B内,将“”字状的线亦即。
48、上边以及下边到达矩形B的左端的线检测为第二线。0109然后,检测对第一线以及第二线的上边彼此进行连结的第三线,检测对第一线以及第二线的下边彼此进行连结的第四线,从而检测由第一线第四线围起的搜索窗SB。或者,也可以设定包含第一线以及第二线的上边的矩形A,设定包含第一线以及第二线的下边的矩形B,进行与图4A所示的顺序相同的顺序,从而检测搜索窗SB。此外,在“搜索”字符串SC的下侧附近检测搜索窗SB的顺序只要在上述的顺序更换“上”与“下”即可。说明书CN104126188A1210/15页130110第二实施方式0111接下来,参照图5图8对本发明的其他的实施方式进行说明。此外,为了方便说明,对具有。
49、与在上述实施方式进行了说明的结构相同的功能的结构标注相同的附图标记,并省略其说明。0112显示装置的结构0113图5表示作为本实施方式的显示装置200显示设备的概略结构的框图。本实施方式的显示装置200是在TV显像器追加有因特网连接功能的所谓的网络电视。0114如图5所示,在显示装置200中,与图1所示的再生设备110相比,代替发送部101而设置有显示部201,并追加有网络I/F接口部202、操作部206以及播放接收部207的结构。另外,在显示装置200的控制部20中,与图1所示的再生设备110的控制部10相比,追加有关键字候选生成部217以及搜索要求部218的结构。0115显示部201基于来自控制部20的图像数据,对字符、图像等的各种信息进行显示输出。显示部201由LCD液晶显示元件、CRT阴极线管、等离子显示器等显示设备构成。0116网络I/F部202是控制部20与外部进行通信的网络未图示的接口。具体而言,网络I/F部202与上述通信网络连接,将来自控制部20的数据转换成适于上述通信网络的形式并将其发送至上述通信网络。另外,网络I/F部202将来自上述通信网络的数据转换成适于控制部20中的处理的形式并将其发送至控制部20。0117操作部206通过用户的操作从用户接受各种输入,由输入用按钮、触摸面板、其他的操作设。