《信息处理设备、信息处理方法和程序.pdf》由会员分享，可在线阅读，更多相关《信息处理设备、信息处理方法和程序.pdf（32页珍藏版）》请在专利查询网上搜索。
1、10申请公布号CN104094610A43申请公布日20141008CN104094610A21申请号201380008351022申请日2013112961/737,46920121214US13/934,47320130703USH04N21/8352200601H04N21/43620060171申请人索尼公司地址日本东京72发明人山岸靖明74专利代理机构中国国际贸易促进委员会专利商标事务所11038代理人郑宗玉54发明名称信息处理设备、信息处理方法和程序57摘要本公开内容涉及使得用户可以快速掌握可以同时显示的多条内容与分别显示的信息之间的对应关系的信息处理设备、信息处理方法和程序。根据。
2、本公开内容的第一方面，与终端设备一起构成家庭网络系统的信息处理设备配备有帧视觉属性设定单元，对设置在屏幕上以显示再现的内容项的窗口设置帧视觉属性；公开单元，向终端设备公开用于从终端设备请求已对窗口设定的帧视觉属性的通知的命令；以及通知单元，当终端设备调用命令时，向终端设备通知窗口的帧视觉属性。本公开内容可应用于使用ACR服务的家庭网络系统。30优先权数据85PCT国际申请进入国家阶段日2014080786PCT国际申请的申请数据PCT/JP2013/0821312013112987PCT国际申请的公布数据WO2014/091942JA2014061951INTCL权利要求书3页说明书18页附图。
3、10页19中华人民共和国国家知识产权局12发明专利申请权利要求书3页说明书18页附图10页10申请公布号CN104094610ACN104094610A1/3页21一种信息处理设备，所述信息处理设备与终端设备协作以构成家庭网络系统，所述信息处理设备包括帧视觉属性设定部分，被构造成对设置在屏幕上以显示再现的内容的窗口设定帧视觉属性；公开部分，被构造成向终端设备公开用于从终端设备请求对窗口设定的帧视觉属性的通知的命令；以及通知部分，被构造成响应于从所述终端设备调用所述命令，向所述终端设备通知所述窗口的帧视觉属性。2根据权利要求1所述的信息处理设备，其中所述显示控制部分对设置在所述屏幕上以显示多条不。
4、同内容的多个窗口设定不同的帧视觉属性，以及所述公开部分向终端设备公开用于从终端设备请求所述多个窗口的帧视觉属性的通知的命令。3根据权利要求2所述的信息处理设备，其中所述帧视觉属性设定部分响应于使用所述命令从所述终端设备发出的请求来改变窗口的帧视觉属性。4根据权利要求2所述的信息处理设备，其中所述公开部分直接在扩展UPNP的规定的装置描述中描述所述命令的URL，以向所述终端设备公开所述命令的URL。5根据权利要求2所述的信息处理设备，其中所述命令是WEBAPI。6根据权利要求2所述的信息处理设备，其中所述公开部分在所述家庭网络上对通知消息进行多播分发，并且响应于基于所述通知消息的来自所述终端设备。
5、的访问向所述终端设备公开所述装置描述。7根据权利要求2所述的信息处理设备，其中所述公开部分响应于来自所述终端设备的M搜索向所述终端设备公开所述装置描述。8根据权利要求2所述的信息处理设备，还包括识别请求处理部分，被构造成从再现的内容中提取代表该内容的特性的签名数据，产生至少包括所提取的所述签名数据的查询并且将所述查询发送到识别服务器，以及接收响应于所述查询从所述识别服务器发送回的并且代表所述再现的内容的识别结果的响应，其中所述公开部分还向终端设备公开用于从终端设备使得所述识别请求处理部分能够工作的命令。9一种用于信息处理设备的信息处理方法，所述信息处理设备与终端设备协作以构成家庭网络系统，所述。
6、方法由所述信息处理设备执行，所述方法包括帧视觉属性设定步骤，为设置在屏幕上以显示再现的内容的窗口设定帧视觉属性；公开步骤，向终端设备公开用于从终端设备请求对窗口设定的帧视觉属性的通知的命令；以及通知步骤，响应于从所述终端设备调用所述命令，向所述终端设备通知所述窗口的帧视觉属性。10一种程序，用于使得与终端设备协作以构成家庭网络系统的计算机用作帧视觉属性设定部分，被构造成对设置在屏幕上以显示再现的内容的窗口设定帧视觉权利要求书CN104094610A2/3页3属性；公开部分，被构造成向终端设备公开用于从终端设备请求对窗口设定的帧视觉属性的通知的命令；以及通知部分，被构造成响应于从所述终端设备调用。
7、所述命令，向所述终端设备通知所述窗口的帧视觉属性。11一种与内容显示设备协作以构成家庭网络系统的信息处理设备，所述内容显示设备在设置在屏幕上的窗口中显示内容，所述信息处理设备包括命令获取部分，被构造成获取用于从所述内容显示设备请求对设置在所述内容显示设备的屏幕上以显示再现的内容的窗口设定的帧视觉属性的通知的命令，并且调用所述命令以接收所述帧视觉属性的通知；关联应用执行部分，被构造成获取并且执行要根据设置在所述内容显示设备的屏幕上的窗口中显示的内容的进度执行的关联应用；以及帧显示控制部分，被构造成对要由所述关联应用显示的图像的帧设定与通知的帧视觉属性相同的帧视觉属性。12根据权利要求11所述的信。
8、息处理设备，其中所述命令获取部分获取在由所述内容显示设备公开的并且扩展UPNP的规定的装置描述中直接描述的命令的URL。13根据权利要求11所述的信息处理设备，其中所述命令是WEBAPI。14根据权利要求11所述的信息处理设备，其中所述命令获取部分基于由所述内容显示设备在所述家庭网络上多播分发的通知消息从所述内容显示设备获取所述装置描述。15根据权利要求11所述的信息处理设备，其中所述命令获取部分获取通过M搜索而搜索出的从所述内容显示设备供应的所述装置描述。16根据权利要求11所述的信息处理设备，其中所述内容显示设备包括识别请求处理部分，被构造成从再现的内容中提取代表该内容的特性的签名数据，产。
9、生至少包括所提取的签名数据的查询并且将所述查询发送到识别服务器，以及接收响应于所述查询从所述识别服务器发送回的并且代表所述再现的内容的识别结果的响应，所述命令获取部分还从所述内容显示设备获取用于使得所述内容显示设备的所述识别请求处理部分能够工作的命令，并且通过调用所述命令接收从所述内容显示设备传递的响应，以及所述关联应用执行部分基于接收到的所述响应中包括的并且与识别的内容对应的相关元数据，获取并且执行所述关联应用。17一种用于与内容显示设备协作以构成家庭网络系统的信息处理设备的信息处理方法，所述内容显示设备在设置在屏幕上的窗口中显示内容，所述方法由所述信息处理设备执行，所述方法包括获取步骤，获。
10、取用于从所述内容显示设备请求对设置在所述内容显示设备的屏幕上以显示再现的内容的窗口设定的帧视觉属性的通知的命令；接收步骤，调用所述命令以接收所述帧视觉属性的通知；关联应用执行步骤，获取并且执行要根据设置在所述内容显示设备的屏幕上的窗口中显示的内容的进度执行的关联应用；以及帧显示控制步骤，对要由所述关联应用显示的图像的帧设定与通知的帧视觉属性相同权利要求书CN104094610A3/3页4的帧视觉属性。18一种程序，用于使得与内容显示设备协作以构成家庭网络系统的计算机用作以下部分，所述内容显示设备在设置在屏幕上的窗口中显示内容命令获取部分，被构造成获取用于从所述内容显示设备请求对设置在所述内容显。
11、示设备的屏幕上以显示再现的内容的窗口设定的帧视觉属性的通知的命令，并且调用所述命令以接收所述帧视觉属性的通知；关联应用执行部分，被构造成获取并且执行要根据设置在所述内容显示设备的屏幕上的窗口中显示的内容的进度执行的关联应用；以及帧显示控制部分，被构造成对要由所述关联应用显示的图像的帧设定与通知的帧视觉属性相同的帧视觉属性。19一种用于家庭网络系统的信息处理方法，所述家庭网络系统包括内容显示设备和终端设备，所述信息处理方法包括由所述内容显示设备进行的帧视觉属性设定步骤，对设置在屏幕上以显示再现的内容的窗口设定帧视觉属性；由所述内容显示设备进行的公开步骤，向终端设备公开用于从终端设备请求对窗口设定。
12、的帧视觉属性的通知的命令；由所述终端设备进行的获取步骤，获取公开的所述命令；由所述内容显示设备进行的通知步骤，响应于由所述终端设备调用所述命令，向所述终端设备通知所述窗口的帧视觉属性；由所述终端设备进行的关联应用执行步骤，获取并且执行要根据设置在所述内容显示设备的屏幕上的窗口中显示的内容的进度执行的关联应用；以及由所述终端设备进行的帧显示控制步骤，对要由所述关联应用显示的图像的帧设定与通知的帧视觉属性相同的帧视觉属性。权利要求书CN104094610A1/18页5信息处理设备、信息处理方法和程序技术领域0001本公开内容涉及信息处理设备、信息处理方法和程序，具体地讲，涉及适合于在通过ACR自动。
13、内容识别服务识别构成家庭网络的某个屏幕装置上显示的内容并且在不同的屏幕装置上显示对应于内容的元数据或者根据内容的进度执行应用的情况下使用的信息处理设备、信息处理方法和程序。背景技术0002例如，假定在屏幕上向TV电视节目的观众显示与正在广播的TV节目下文中，被简称为节目相关的信息演员、剧情概要、预告片等、对观众有用的信息新闻、天气预报、交通信息等尽管它与节目没有直接关系等。0003为了实现这个过程，用于获取并启动专用的应用程序下文中，被简称为应用的命令可以与节目进度成关联关系地被发送到TV接收器等。实际上，在日本、欧洲等地，这是通过利用TV广播信号中用于数据广播的频带发送命令或者应用来实现的例。
14、如参照PTL1。0004同时，在美国，在TV广播信号中没有设置用于数据广播的频带，并且没有建立替代方法。因此，没有实现与节目进度成关联关系地执行应用。0005要注意的是，在美国，通过CATV、IPTV等观看节目的家庭的数量大于直接通过TV接收器接收并且在TV接收器上观看TV广播电波的家庭的数量。由于CATV或IPTV有时仅从TV广播信号中提取节目的视频信号和音频信号并且分发视频信号和音频信号，因此即使在美国在TV广播信号中设置了用于数据广播的频带，也无法保证包括应用和相关数据的数据广播信号被发送到接收设备。0006另外，近期的请求是，即使在不仅正在播放节目而且正在观看所记录的节目、从诸如DVD。
15、或BD的封装介质再现的视频、通过因特网下载的运动图片、音乐等所提及的这种节目等在下文中被称为内容的情况下，也与内容进度成关联关系地执行应用。0007为了实现这个请求，需要识别正被观看的内容，以及作为用于其的一种方法，被称为ACR自动内容识别服务的技术是可用的例如参照PTL2。0008由ACR客户端和ACR服务器实现ACR服务。被集成在诸如TV接收器的内容再现设备中的ACR客户端从正被观看的内容中提取代表内容特性的签名数据，并且通知ACR服务器请求识别该内容。ACR服务器比较接收到的签名数据与预先记录在数据库中的内容的签名数据，以识别正在内容再现设备上观看的内容。另外，ACR服务器向ACR客户端。
16、发出ACR响应，该ACR响应包括与识别的内容相关的元数据和指示将以成关联关系执行的应用这种应用在下文中被称为关联应用的信息。0009集成有接收响应的ACR客户端的内容再现设备从预定服务器获取关联应用并且执行该关联应用。0010引用列表0011专利文献说明书CN104094610A2/18页60012PTL1JP200650237A0013PTL2JP2012168801A发明内容0014技术问题0015顺带一提，在美国，由于CATV、IPTV等的普及，TV接收器被设置为外部设备的显示输出装置，所述外部设备例如是如上所述的CATV、IPTV等的机顶盒。0016因此，用户少有机会操作TV接收器的遥。
17、控器，而经常操作外部设备的遥控器。因此，可能的是，就用户的使用便利性而言，在作为由TV接收器的遥控器操作的内容再现设备的TV接收器中启动的关联应用的操作可能是不利的。0017因此，考虑到用户的便利性，已经产生并且正在产生使得第二屏幕装置显示与正在内容再现设备上观看的内容相关的元数据或者执行关联应用的请求，第二屏幕装置不同于集成有ACR客户端的内容再现设备TV接收器等。0018这里，作为第二屏幕装置，例如，可以列出平板型终端、平板PC、智能电话等。0019另外，近年来，可以利用在第二屏幕装置中启动的预定的应用程序来操作外部设备的类型即，可以用作外部设备的遥控器的类型的第二屏幕装置是可获得的。因此。
18、，从用于内容再现设备和外部设备的操作输入装置在第二屏幕装置上合成一体的角度来看，也期望实现上述的请求。0020此外，主要在美国，存在的趋势是，作为内容再现设备的TV接收器等的屏幕尺寸变成大于50至60英寸，并且在尺寸增大的屏幕上同时显示和观看互不相同的多条内容的使用形式开始逐渐普及。因此，需要还考虑将ACR客户端内建在具有这种大尺寸屏幕并且与第二屏幕装置关联的TV接收器等中的使用形式。在下面的描述中，具有大尺寸屏幕并且可以同时显示多条不同内容的TV接收器等被称为多窗口屏幕装置。0021图1是在假设将内建有ACR客户端的多窗口屏幕装置与第二屏幕装置彼此关联以使用ACR服务并且将这些装置布置在用户。
19、的家等中的情况下的空间的示意图。0022在图1中，多窗口屏幕装置11被安装在用户的前方，而多窗口屏幕装置12被安装在左侧壁。第二屏幕装置3被布置在用户附近。0023在多窗口屏幕装置11上可以设置多个在图1的情况下，三个窗口，并且可以在这些窗口中同时显示多条不同的内容可以彼此相同。在下面的描述中，例如，窗口A中显示的内容被称为内容A。这也类似地应用于在其它窗口中显示的其它多条内容。0024多窗口屏幕装置11可以通过使用ACR服务向第二屏幕装置3传递ACR响应，该ACR响应包括窗口中显示的多条内容的识别结果等。0025另外，多窗口屏幕装置12类似于多窗口屏幕装置11。然而，在图1中，多窗口屏幕装置。
20、12处于只有窗口X被设置在其屏幕上并且内容X被显示在窗口X中的状态。0026第二屏幕装置3可以同时显示与多窗口屏幕装置11或多窗口屏幕装置12的窗口中显示的多条内容对应的元数据和根据内容的进度而启动的关联应用。0027在图1的情况下，第二屏幕装置3处于同时显示用于窗口A的内容A的关联应用A、用于窗口C的内容C的另一个关联应用C和窗口X的内容X的元数据X的状态。0028在假设图1中示出的使用形式的情况下，可能的是，用户可能无法快速掌握第二说明书CN104094610A3/18页7屏幕装置3的屏幕上显示的多条信息关联应用的视频和元数据与多窗口屏幕装置11和12的窗口中显示的多条内容的对应关系。00。
21、29因此，需要使得用户快速掌握可以在多窗口屏幕装置11和12的窗口中同时显示的多条内容与可以在第二屏幕装置3上显示的多条信息关联应用的视频和元数据之间的对应关系的发明。0030本公开内容是依据如上所述的这种情形而做出的，并且使得用户可以快速掌握可以同时显示的多条内容与分别显示的信息之间的对应关系。0031问题的解决方案0032根据本公开内容的第一方面，提供了一种信息处理设备，所述信息处理设备与终端设备协作以构成家庭网络系统，所述信息处理设备包括帧视觉属性设定部分，被构造成对设置在屏幕上以显示再现的内容的窗口设定帧视觉属性；公开部分，被构造成向终端设备公开用于从终端设备请求对窗口设定的帧视觉属性。
22、的通知的命令；以及通知部分，被构造成响应于从所述终端设备调用所述命令，向所述终端设备通知所述窗口的帧视觉属性。0033所述显示控制部分可对设置在所述屏幕上以显示多条不同内容的多个窗口设定不同的帧视觉属性，以及所述公开部分可向终端设备公开用于从终端设备请求所述多个窗口的帧视觉属性的通知的命令。0034所述帧视觉属性设定部分可响应于使用所述命令从所述终端设备发出的请求来改变窗口的帧视觉属性。0035所述公开部分可直接在扩展UPNP的规定的装置描述中描述所述命令的URL，以向所述终端设备公开所述命令的URL。0036所述命令可以是WEBAPI。0037所述公开部分可在所述家庭网络上对通知消息进行多播。
23、分发，并且响应于基于所述通知消息的来自所述终端设备的访问向所述终端设备公开所述装置描述。0038所述公开部分可响应于来自所述终端设备的M搜索向所述终端设备公开所述装置描述。0039根据本公开内容的第一方面，所述信息处理设备还可以包括识别请求处理部分，被构造成从再现的内容中提取代表该内容的特性的签名数据，产生至少包括所提取的所述签名数据的查询并且将所述查询发送到识别服务器，以及接收响应于所述查询从所述识别服务器发送回的并且代表所述再现的内容的识别结果的响应，其中所述公开部分还可向终端设备公开用于从终端设备使得所述识别请求处理部分能够工作的命令。0040根据本公开内容的第一方面，提供了一种用于信息。
24、处理设备的信息处理方法，所述信息处理设备与终端设备协作以构成家庭网络系统，所述方法由所述信息处理设备执行，所述方法包括帧视觉属性设定步骤，为设置在屏幕上以显示再现的内容的窗口设定帧视觉属性；公开步骤，向终端设备公开用于从终端设备请求对窗口设定的帧视觉属性的通知的命令；以及通知步骤，响应于从所述终端设备调用所述命令，向所述终端设备通知所述窗口的帧视觉属性。0041根据本公开内容的第一方面，提供了一种程序，用于使得与终端设备协作以构成家庭网络系统的计算机用作帧视觉属性设定部分，被构造成对设置在屏幕上以显示再现的内容的窗口设定帧视觉属性；公开部分，被构造成向终端设备公开用于从终端设备请求说明书CN1。
25、04094610A4/18页8对窗口设定的帧视觉属性的通知的命令；以及通知部分，被构造成响应于从所述终端设备调用所述命令，向所述终端设备通知所述窗口的帧视觉属性。0042在本公开内容的第一方面，对设置在屏幕上以显示再现的内容的窗口设置帧视觉属性，以及向终端设备公开用于从终端设备请求对窗口设置的帧视觉属性的通知的命令。另外，响应于从终端设备调用命令，向终端设备通知窗口的帧视觉属性。0043根据本公开内容的第二方面，提供了一种与内容显示设备协作以构成家庭网络系统的信息处理设备，所述内容显示设备在设置在屏幕上的窗口中显示内容，所述信息处理设备包括命令获取部分，被构造成获取用于从所述内容显示设备请求对。
26、设置在所述内容显示设备的屏幕上以显示再现的内容的窗口设定的帧视觉属性的通知的命令，并且调用所述命令以接收所述帧视觉属性的通知；关联应用执行部分，被构造成获取并且执行要根据设置在所述内容显示设备的屏幕上的窗口中显示的内容的进度执行的关联应用；以及帧显示控制部分，被构造成对要由所述关联应用显示的图像的帧设定与通知的帧视觉属性相同的帧视觉属性。0044所述命令获取部分可获取在由所述内容显示设备公开的并且扩展UPNP的规定的装置描述中直接描述的命令的URL。0045所述命令可以是WEBAPI。0046所述命令获取部分可基于由所述内容显示设备在所述家庭网络上多播分发的通知消息从所述内容显示设备获取所述装。
27、置描述。0047所述命令获取部分可获取通过M搜索而搜索出的从所述内容显示设备供应的所述装置描述。0048所述内容显示设备可以包括识别请求处理部分，被构造成从再现的内容中提取代表该内容的特性的签名数据，产生至少包括所提取的签名数据的查询并且将所述查询发送到识别服务器，以及接收响应于所述查询从所述识别服务器发送回的并且代表所述再现的内容的识别结果的响应。所述命令获取部分还可从所述内容显示设备获取用于使得所述内容显示设备的所述识别请求处理部分能够工作的命令，并且通过调用所述命令接收从所述内容显示设备传递的响应，以及所述关联应用执行部分可基于接收到的所述响应中包括的并且与识别的内容对应的相关元数据，获。
28、取并且执行所述关联应用。0049根据本公开内容的第二方面，提供了一种用于与内容显示设备协作以构成家庭网络系统的信息处理设备的信息处理方法，所述内容显示设备在设置在屏幕上的窗口中显示内容，所述方法由所述信息处理设备执行，所述方法包括获取步骤，获取用于从所述内容显示设备请求对设置在所述内容显示设备的屏幕上以显示再现的内容的窗口设定的帧视觉属性的通知的命令；接收步骤，调用所述命令以接收所述帧视觉属性的通知；关联应用执行步骤，获取并且执行要根据设置在所述内容显示设备的屏幕上的窗口中显示的内容的进度执行的关联应用；以及帧显示控制步骤，对要由所述关联应用显示的图像的帧设定与通知的帧视觉属性相同的帧视觉属性。
29、。0050根据本公开内容的第二方面，提供了一种程序，用于使得与内容显示设备协作以构成家庭网络系统的计算机用作以下部分，所述内容显示设备在设置在屏幕上的窗口中显示内容命令获取部分，被构造成获取用于从所述内容显示设备请求对设置在所述内容显示设备的屏幕上以显示再现的内容的窗口设定的帧视觉属性的通知的命令，并且调用所述说明书CN104094610A5/18页9命令以接收所述帧视觉属性的通知；关联应用执行部分，被构造成获取并且执行要根据设置在所述内容显示设备的屏幕上的窗口中显示的内容的进度执行的关联应用；以及帧显示控制部分，被构造成对要由所述关联应用显示的图像的帧设定与通知的帧视觉属性相同的帧视觉属性。。
30、0051在本公开内容的第二方面，从内容显示设备获取用于请求对设置在内容显示设备的屏幕上以显示再现的内容的窗口设置帧视觉属性的通知的命令，并且调用所述命令以接收帧视觉属性的通知。获取并且执行要根据内容显示设备的屏幕上设置的窗口中显示的内容的进度执行的关联应用，以及对要显示关联应用的图像的帧设置与通知的帧视觉属性相同的帧视觉属性。0052根据本公开内容的第三方面，提供了一种用于家庭网络系统的信息处理方法，所述家庭网络系统包括内容显示设备和终端设备，所述信息处理方法包括由所述内容显示设备进行的帧视觉属性设定步骤，对设置在屏幕上以显示再现的内容的窗口设定帧视觉属性；由所述内容显示设备进行的公开步骤，向。
31、终端设备公开用于从终端设备请求对窗口设定的帧视觉属性的通知的命令；由所述终端设备进行的获取步骤，获取公开的所述命令；由所述内容显示设备进行的通知步骤，响应于由所述终端设备调用所述命令，向所述终端设备通知所述窗口的帧视觉属性；由所述终端设备进行的关联应用执行步骤，获取并且执行要根据设置在所述内容显示设备的屏幕上的窗口中显示的内容的进度执行的关联应用；以及由所述终端设备进行的帧显示控制步骤，对要由所述关联应用显示的图像的帧设定与通知的帧视觉属性相同的帧视觉属性。0053在本公开内容的第三方面中，通过内容显示设备，对设置在屏幕上以显示再现的内容的窗口设置帧视觉属性，以及向终端设备公开用于从终端设备请。
32、求对窗口设置的帧视觉属性的通知的命令。同时，通过终端设备，获取公开的命令。另外，通过内容显示设备，响应于由终端设备调用命令，向终端设备通知窗口的帧视觉属性。然后，通过终端设备，获取并且执行要根据内容显示设备的屏幕上设置的窗口中显示的内容的进度执行的关联应用。因此，对要显示关联应用的图像的帧设置与通知的帧视觉属性相同的帧视觉属性。0054本发明的有益效果0055利用本公开内容的第一方面，可以向终端设备通知对显示内容的窗口设置的帧视觉属性。0056利用本公开内容的第二方面，可以通过根据该内容的进度而执行的关联应用，对用于显示图像的帧设置与对在内容显示设备上显示内容的窗口设置的帧视觉属性相同的帧视觉。
33、属性。0057利用本公开内容的第三方面，可以通过由终端设备根据内容的进度而执行的关联应用，对在内容显示设备上显示该内容的窗口和用于显示图像的帧二者设置公共的帧视觉属性。附图说明0058图1图1是多窗口屏幕装置和第二屏幕装置彼此关联并且使用ACR服务的情况下的空间的示意图。0059图2图2是示出本公开内容的概要的空间的示意图。说明书CN104094610A6/18页100060图3图3是示出作为本公开内容的实施例的ACR服务使用系统的构造示例的框图。0061图4图4是示出ACR服务器的构造示例的框图。0062图5图5是示出ACR客户端的构造示例的框图。0063图6图6是示出ACR参考数据的数据结。
34、构的视图。0064图7图7是示出ACR查询的数据结构的视图。0065图8图8是示出ACR响应的数据结构的视图。0066图9图9是示出家庭网络系统中的预处理的流程图。0067图10图10是示出家庭网络系统中的另一个预处理的流程图。0068图11图11是示出ACR服务使用系统的操作的流程图。0069图12图12是示出计算机的构造示例的框图。具体实施方式0070下面，参照附图详细描述用于执行本公开内容的最佳模式下文中，被称为实施例。0071ACR服务使用系统的概要0072图2示出作为本公开内容的实施例的ACR服务使用系统的概要。ACR服务使用系统包括多窗口屏幕装置401和402和具有内置ACR客户端。
35、的第二屏幕装置50，并且使得这些装置彼此关联以使用ACR服务。0073在图2中，多窗口屏幕装置401被安装在用户前方，而多窗口屏幕装置402被安装在左侧壁。在用户附近，布置第二屏幕装置50。0074多个在图2的情况下，三个窗口可以设置在多窗口屏幕装置401的屏幕上，并且互不相同的多条内容可以彼此相同可以在窗口中同时显示。在下面的描述中，例如，窗口A中显示的内容被称为内容A。这也类似地应用于在其它窗口中显示的其它多条内容。0075另外，多窗口屏幕装置401可以通过使用ACR服务向第二屏幕装置50传递ACR响应，该ACR响应包括窗口中显示的多条内容的识别结果等。0076此外，多窗口屏幕装置401可。
36、以向各窗口的帧提供可以在视觉上与其它窗口包括多窗口屏幕装置402的窗口的帧区分开的属性下文中，被称为帧视觉属性。0077作为帧视觉属性，可以列出可通过CSS层叠样式表设置和改变的帧行的颜色、厚度和类型、三维显示的深度等。在图2的情况下，各窗口的帧行被设置成与其它窗口的帧的行不同，并且窗口A的帧行被设置成交替点划线；窗口B的帧行被设置成实线；而窗口C的帧行被设置成断线。0078多窗口屏幕装置402类似于多窗口屏幕装置401。然而，在图2中，多窗口屏幕装置402处于只有窗口X被设置在其屏幕上并且窗口X的帧行被设置成交替双点划线以显示内容X的状态中。0079在第二屏幕装置50中，与多窗口屏幕装置40。
37、1和402的窗口中显示的多条内容对应的元数据和遵循内容的进度的关联应用可以被启动并显示。0080另外，在第二屏幕装置50中，可以向待显示的每条信息与内容对应的关联应用说明书CN104094610A107/18页11或元数据的屏幕图像提供帧，并且向该帧设置与其中显示对应内容的窗口的帧的帧视觉属性类似的帧视觉属性。0081具体地讲，在图2的情况下，第二屏幕装置50处于以下状态中同时地，与窗口A的内容A对应的关联应用A显示在交替点划线的帧中；与窗口C的内容C对应的关联应用C显示在断线的帧中；而与窗口X的内容X对应的元数据显示在交替双点划线的帧中。要注意的是，另外，在这多条信息不是同时显示而是可切换地。
38、显示的情况下，可以向帧设置与其中显示对应内容的窗口的帧的帧视觉属性类似的帧视觉属性。0082ACR服务使用系统的构造示例0083图3示出本公开内容的实施例的ACR服务使用系统的构造示例。0084该ACR服务使用系统10识别同时在多窗口屏幕装置401和402诸如，具有大尺寸屏幕并且通过第二屏幕装置50向用户呈现与多条内容相关的元数据的TV接收器的屏幕上显示的一条以上内容，或者遵循内容的进度来执行关联应用。在下面的描述中，在不需要将多窗口屏幕装置401和402彼此单独区分开的情况下，其中的每个仅被称为多窗口屏幕装置40。0085这里，内容不限于正在广播的节目。具体地讲，所有AV内容诸如例如由外部设。
39、备诸如，与多窗口屏幕装置40连接的录像机记录和再现的节目、从封装介质再现的电影等的视频、以及通过因特网等下载的运动图片和音乐被包括在内容中。另外，插入节目之间或节目中途的商业广告下文中，被称为CM被包括在内容中。0086为了识别内容，使用ACR服务，在ACR服务中，将从正在观察的内容中周期性地提取的并且代表内容的特性的签名数据例如，水印或指纹与预先注册在数据库中的多条内容的签名数据进行比较，以识别内容。0087ACR服务使用系统10由供应内容和与该内容对应的关联应用等的一侧的供应方系统20和观看内容或使用关联应用的用户侧的家庭网络系统30构成。0088供应方系统20和家庭网络系统30通过广播网。
40、络11和双向通信网络12彼此连接。这里，广播网络11包括TV广播网络、CATV网络、IPTV网络等。双向通信网络12是以因特网为代表的IP通信网络。0089要注意的是，在图3中，属于家庭网络系统30的多窗口屏幕装置402与供应方系统20之间的通过广播网络11和双向通信网络12的线路被省略。0090对供应方系统20的描述0091供应方系统20由内容服务器21、元数据服务器22、应用服务器23和ACR服务器24构成。0092内容服务器21通过广播网络11播放诸如节目或CM的内容。另外，内容服务器21供应要广播到ACR服务器24的内容。要注意的是，作为供应内容的替代，预先从内容提取的内容标识符和签名。
41、数据可以被供应到ACR服务器24。0093元数据服务器22将与从内容服务器21广播的内容对应的元数据供应到ACR服务器24。元数据包括与内容相关的各种类型的信息、代表要根据内容的进度执行的关联应用的标识符、要在关联应用中使用的数据等。0094应用服务器23根据来自家庭网络系统30的第二屏幕装置50的请求，通过双向通信网络12供应应用和要在该应用中使用的数据。说明书CN104094610A118/18页120095ACR服务器24预先产生ACR参考数据，在ACR参考数据中，内容标识符、应用标识符等与以预定采样周期从可以在家庭网络系统30的多窗口屏幕装置40上观看的各条内容中提取的签名数据协调一致。
42、，以形成数据库并且保持该数据库。ACR服务器24基于ACR参考数据的数据库，响应于从多窗口屏幕装置40的ACR客户端42A至42C中的任一个发送的ACR查询来产生ACR响应，并且发送该ACR响应。0096要注意的是，构成供应方系统20的内容服务器21、元数据服务器22、应用服务器23和ACR服务器24可以按集中方式布置在一个地方，或者可以按分散方式分开布置。另选地，可以合适地组合组件中的一些。另外，可以为组件服务器中的每个提供多个服务器。0097对家庭网络系统30的描述0098家庭网络系统30由多窗口屏幕装置40诸如，具有大尺寸屏幕的TV接收器和第二屏幕装置50诸如，平板型终端、平板PC或智能。
43、电话构成。多窗口屏幕装置40和第二屏幕装置50例如通过无线LAN彼此连接。0099要注意的是，多个这种多窗口屏幕装置40和多个这种第二屏幕装置50可以设置在家庭网络系统30中。0100多窗口屏幕装置40在其屏幕上提供多个窗口并且在窗口中同时显示多条不同内容，以由用户观看。多窗口屏幕装置40包括内容渲染器41、ACR客户端42、UPNP通用即插即用服务器43、本地WEB服务器44和窗口管理器45。集成有与可以通过多窗口屏幕装置40设置的窗口数量相等的数量的这种内容渲染器41和这种ACR客户端42。0101在本实施例中，假设多窗口屏幕装置40可以在其屏幕上提供三个窗口A、B和C。在这种情形下，假设。
44、相应地集成有三个内容渲染器41A、41B和41C和三个ACR客户端42A、42B和42C。可以设置的窗口的数量不限于三个。在下面的描述中，在不需要将内容渲染器41A、41B和41C相互独立区分开的情况下，其中的每个被简称为内容渲染器41。这也类似地应用于ACR客户端42A、42B和42C。0102内容渲染器41A获取并分流要在多窗口屏幕装置40的屏幕上的窗口A中显示的所有多条内容，并且将这多条内容供应到ACR客户端42A。具体地讲，内容渲染器41A不仅获取并分流从内容服务器21播放的内容，而且获取并分流通过多窗口屏幕装置40的各种输入端子HDMI注册商标端子等输入的内容，以及将获取的内容供应到。
45、ACR客户端42A。这也类似地应用于内容渲染器41B和41C。0103ACR客户端42A以预定的采样周期从自内容渲染器41A输入到ACR客户端42A的内容中提取代表内容特性的签名数据。这里，作为签名数据的提取方法，使用与由供应方系统20的ACR服务器24使用的提取方法下文中描述相同的提取方法。0104另外，ACR客户端42A产生包括所提取的签名数据的ACR查询，并且通过双向通信网络12将ACR查询发送到供应方系统20的ACR服务器24。另外，ACR客户端42A接收并且保持响应于从ACR客户端42A发送的ACR查询而从ACR服务器24发送到ACR客户端42A的ACR响应。这也类似地应用于ACR客。
46、户端42B和42C。0105UPNP服务器43普遍地向与多窗口屏幕装置40一起构造家庭网络系统30的另一个装置在本情况下，第二屏幕装置50通知用于调用集成有UPNP服务器43本身的多窗口屏幕装置40的功能在本情况下，由ACR客户端42使用ACR服务的WEBAPI应用程序接口的细节。具体地讲，UPNP服务器43基于通用UPNP服务器提供的基础协议重新定说明书CN104094610A129/18页13义协议，并且使用所定义的协议来执行普遍的通知下文中进行详细描述。0106本地WEB服务器44使得与多窗口屏幕装置40一起构成家庭网络系统30的其它装置在本情况下，第二屏幕装置50使用集成有本地WEB服。
47、务器44本身的多窗口屏幕装置40的功能在本情况下，由ACR客户端42使用ACR服务。具体地讲，本地WEB服务器44响应于调用从UPNP服务器43得知的WEBAPI以使用ACR服务的事实来控制ACR客户端42，并且将从ACR服务器24发送回的ACR响应传递到第二屏幕装置50。0107窗口管理器45控制设置在多窗口屏幕装置40的屏幕上的窗口的帧的显示。0108在本实施方式中，第二屏幕装置50向用户呈现主要在多窗口屏幕装置40上观看的内容的元数据，或者根据内容的进度执行关联应用。第二屏幕装置50包括多个ACR应用51、关联应用管理器52、和窗口管理器53，其中关联应用管理器52的数量与ACR应用51。
48、的数量相等。0109在本实施例中，假设第二屏幕装置50包括三个ACR应用51A、51B和51C和三个关联应用管理器52A、52B和52C。然而，它们的数量不限于三个。在下面的描述中，在不需要将ACR应用51A、51B和51C单独区分开的情况下，其中的每个仅被称为ACR应用51。这也类似地应用于关联应用管理器52A、52B和52C。0110ACR应用51被预先安装在第二屏幕装置50中，并且当与多窗口屏幕装置40成关联关系地使用ACR服务时启动ACR应用51。ACR应用51从UPNP服务器43获取用于读取使用ACR服务的功能的WEBAPI，并且调用WEBAPI以通过本地WEB服务器44获取由ACR。
49、客户端42接收的来自ACR服务器24的ACR响应。此外，ACR应用51分析获取的ACR响应，并且将分析结果通知给关联应用管理器52。0111关联应用管理器52根据来自ACR应用51的通知向用户呈现ACR响应中包括的元数据，或者通过双向通信网络12从应用服务器23获取并执行与正在多窗口屏幕装置40上观看的内容对应的关联应用。要注意的是，WEB浏览器可被用作关联应用管理器52。0112窗口管理器53对显示由每个关联应用管理器52显示的信息的帧，执行与其中显示对应内容的多窗口屏幕装置40的窗口的帧视觉属性的设置相同的设置。0113ACR服务器24的详细构造示例0114图4示出供应方系统20中包括的A。
50、CR服务器24的详细构造示例。0115ACR服务器24由内容获取部分61、签名提取部分62、ACR数据库DB63、ACR响应产生部分64和通信部分65构成。0116内容获取部分61从内容服务器21等获取由内容服务器21调度为通过广播网络11进行广播的内容或者可以在多窗口屏幕装置40上观看的各条内容，并且将获取的内容供应到签名提取部分62。签名提取部分62使用预定的提取方法以预定的采样周期从自内容获取部分61供应到签名提取部分62的内容中提取代表内容特性的签名数据，并且将签名数据输出到ACR数据库63。0117至于签名提取部分62提取签名数据的方法，可以应用现有的任意方法。例如，可以提取预先嵌入。