鼠标触摸协同控制方法、装置及智能电视交互方法、系统.pdf

摘要
申请专利号：	CN201210422490.5	申请日：	2012.10.29
公开号：	CN102968245A	公开日：	2013.03.13
当前法律状态：	授权	有效性：	有权
法律详情：	授权\|\|\|实质审查的生效IPC(主分类):G06F 3/0481申请日:20121029\|\|\|公开
IPC分类号：	G06F3/0481(2013.01)I; G06F3/041; G06F3/0354(2013.01)I; H04N21/472(2011.01)I	主分类号：	G06F3/0481
申请人：	TCL集团股份有限公司
发明人：	王幼琳
地址：	516001 广东省惠州市鹅岭南路6号TCL工业大厦8楼技术中心
优先权：
专利代理机构：	深圳中一专利商标事务所 44237	代理人：	张全文
PDF下载：	PDF下载

内容摘要

本发明适用于智能电视领域，提供了一种鼠标触摸协同控制方法、装置及智能电视交互方法、系统，所述鼠标触摸协同控制方法包括：根据用户发起的触摸输入的触摸位置及触摸时间判断是否捕捉到鼠标光标；是则将触摸输入设置为触摸控制鼠标输入；否则由触摸直接控制输入。所述智能电视交互方法包括：通过用户操作感触屏获取用户操作控制信号；根据鼠标触摸协同控制方法与交互场景将操作控制信号转换为鼠标输入信号或者触摸控制输入信号；根据鼠标输入信号执行鼠标操作交互指令，或根据触摸控制输入信号执行触摸操作交互指令。实现了一种兼容触摸屏与鼠标两种设备的协同操作，并对智能电视提供了更完善的空中鼠标交互实现方案。

权利要求书

权利要求书一种鼠标触摸协同控制方法，其特征在于，所述方法包括下述步骤：
用户发起触摸输入；
根据所述触摸输入的触摸位置及触摸时间判断所述触摸输入是否捕捉到鼠标光标；
若捕捉到鼠标光标，则将触摸输入设置为触摸控制鼠标输入；
若未捕捉到鼠标光标，则由触摸控制输入。
如权利要求1所述的方法，其特征在于，所述根据所述触摸输入的触摸位置及触摸时间判断所述触摸输入是否捕捉到鼠标光标包括：
判断所述触摸输入的触摸位置是否在预设的鼠标光标限定范围内；
若所述触摸输入的触摸位置与鼠标指针的距离在预设的鼠标光标限定范围内，且触摸输入的持续按下时间大于限定时间则所述触摸输入捕捉到鼠标光标；
若所述触摸输入的触摸位置与鼠标指针的距离不在预设的鼠标光标限定范围内，则所述触摸输入未捕捉到鼠标光标。
如权利要求1所述的方法，其特征在于，所述将触摸输入设置为触摸控制鼠标输入包括：
通过触摸移动鼠标光标位置；或
触摸移动鼠标光标时触发鼠标点选，向系统发送当前鼠标光标所在位置的触摸消息；或
捕捉到鼠标光标后，触摸不同于鼠标光标的另一触摸点，放开当前鼠标光标所在的触摸点，则所述另一触摸点控制鼠标输入；或
捕捉到鼠标光标后，同时触摸另两个触摸点，并释放当前鼠标光标所在的触摸点，则根据所述另两个触摸点与鼠标光标所在的触摸点形成的三角关系由所述另两个触摸点控制鼠标输入。
一种智能电视交互方法，其特征在于，所述的方法基于如权利要求1至3任一项所述的鼠标触摸协同控制方法，还包括：
通过遥控器上设置的用户操作感触屏获取用户的操作控制信号；
根据所述的鼠标触摸协同控制方法与交互场景将所述的操作控制信号转换为鼠标输入信号或者触摸控制输入信号；
在智能电视端，根据接收到的鼠标输入信号执行鼠标操作交互指令，或根据接收到的触摸控制输入信号执行触摸操作交互指令。
如权利要求4所述的方法，其特征在于，所述的鼠标操作交互指令包括光标移动指令与鼠标按键指令，所述触摸操作交互指令包括单点触控指令、多点触控指令、菜单触摸指令。
如权利要求4所述的方法，其特征在于，所述根据交互场景将所述的操作控制信号转换为鼠标输入信号或者触摸控制输入信号，在于根据操作系统或者应用程序当前与用户交互的交互场景，选择默认的交互方式将所述的操作控制信号转换为鼠标输入信号或者触摸控制输入信号。
如权利要求4所述的方法，其特征在于，所述在智能电视端，根据所述的鼠标触摸协同控制方法与交互场景将所述的操作控制信号转换为鼠标输入信号或者触摸控制输入信号，还包括：
如所述的智能电视为鼠标控制的操作系统，当执行触摸操作时，所述操作控制信号中的触摸控制信息被发送到一鼠标信号转换中间件进行转换，映射成鼠标光标位置消息与鼠标按键消息，并一起以操作系统鼠标消息形式发送到系统模拟鼠标处理。
如所述的智能电视为触摸控制的操作系统，当执行鼠标操作时，根据所述操作控制信号中的触摸位置信号，在智能电视屏幕上虚拟显示一操作光标，并当获取到用户操作的鼠标按键信号后，把相应的位置信号与按键信号发送到一触摸信号转换中间件进行转换，把所述的位置信号与按键信号映射成触摸操作的指令消息。
一种鼠标触摸协同控制装置，其特征在于，所述装置包括：
触摸输入发起单元，用于用户发起触摸输入；
光标捕捉判断单元，用于根据触摸输入的触摸位置及触摸时间判断触摸输入是否捕捉到鼠标光标；
触摸控制鼠标输入单元，用于当光标捕捉判断单元捕捉到鼠标光标时，将触摸输入设置为触摸控制鼠标进行输入；
触摸控制输入单元，用于当光标捕捉判断单元未捕捉到鼠标光标时，由触摸控制输入。
如权利要求8所述的装置，其特征在于，所述触摸控制鼠标输入单元包括：
触摸移动光标单元，用于通过触摸移动鼠标光标位置；
触摸移动光标触发点选单元，用于触摸移动鼠标光标时触发鼠标点选，向系统发送当前鼠标光标所在位置的触摸消息；
换点控制鼠标单元，用于捕捉到鼠标光标后，触摸不同于鼠标光标的另一触摸点，放开当前鼠标光标所在的触摸点，则所述另一触摸点控制鼠标输入；
多点触控鼠标输入单元，用于捕捉到鼠标光标后，同时触摸另两个触摸点，并释放当前鼠标光标所在的触摸点，则根据所述另两个触摸点与鼠标光标所在的触摸点形成的三角关系由所述另两个触摸点控制鼠标输入。
一种智能电视交互系统，其特征在于，所述交互系统包括建立无线连接的遥控器与智能电视，其特征在于，所述交互系统基于如权利要求8所述的鼠标触摸协同控制装置，并且所述的遥控器设置包括：
一用户操作感触屏，用于获取用户的操作控制信号；
信号处理模块，用于将所述的操作控制信号发送给智能电视；
所述智能电视包括：
操作模式选择模块，用于根据所述的鼠标触摸协同控制装置与交互场景选择将所述的操作控制信号转换为鼠标输入信号或者触摸控制输入信号；
操作指令转换与执行模块，用于根据接收到的鼠标输入信号执行鼠标操作交互指令，或根据接收到的触摸控制输入信号执行触摸操作交互指令。
如权利要求10所述的系统，其特征在于，所述的鼠标操作交互指令包括光标移动指令与鼠标按键指令，所述触摸操作交互指令包括单点触控指令、多点触控指令、菜单触摸指令。
如权利要求10所述的系统，其特征在于，所述操作模式选择模块包括：
鼠标触控协同控制模块，用于若所述的智能电视为鼠标控制的操作系统，当执行触摸操作时，所述操作控制信号中的触摸控制信息被发送到一鼠标信号转换中间件进行转换，映射成鼠标光标位置消息与鼠标按键消息，并一起以操作系统鼠标消息形式发送到系统模拟鼠标处理；或若所述的智能电视为触摸控制的操作系统，当执行鼠标操作时，根据所述操作控制信号中的触摸位置信号，在智能电视屏幕上虚拟显示一操作光标，并当获取到用户操作的鼠标按键信号后，把相应的位置信号与按键信号发送到一触摸信号转换中间件进行转换，把所述的位置信号与按键信号映射成触摸操作的指令消息；
交互场景控制模块，用于根据操作系统或者应用程序当前与用户交互的交互场景，选择默认的交互方式将所述的操作控制信号转换为鼠标输入信号或者触摸控制输入信号。

说明书

说明书鼠标触摸协同控制方法、装置及智能电视交互方法、系统
技术领域
本发明属于智能电视领域，尤其涉及一种鼠标触摸协同控制方法、装置及智能电视交互方法、系统。
背景技术
目前在各种交互式电子设备中，鼠标与触摸屏均被广泛使用。当今大多电子设备仍然是单独使用鼠标控制输入或单独使用触摸控制输入，即使已有一些设备具备了多种输入控制的方式，然而由于鼠标与触摸屏的控制输入方式不一致，导致在兼容这两种输入方式的电子设备中出现了冲突。如windows平台是基于鼠标的操作系统，触摸设备想控制系统必须将触摸消息转换为鼠标消息。对于基于触摸控制的操作系统而言，鼠标消息无法直接被应用程序使用，也必须将鼠标消息转换为触摸消息。因而，在基于鼠标或者触摸的单一控制方式操作系统中，鼠标或触摸输入设备在内部消息的统一和转换上冲突较多。
在现在智能电视的交互中，开始出现一种空中鼠标的交互控制方法，即用户不再单纯依靠传统遥控器进行的菜单选择，而是通过控制内置鼠标的遥控器方式，达到像控制个人电脑一样在客厅里控制智能电视。
然而，目前空中鼠标的控制方式还存在诸多问题，如灵敏度不高、操作不方便等，更完善的空中鼠标交互实现方案是当前智能电视领域技术前沿的探索方向。
发明内容
本发明实施例的目的在于提供一种鼠标触摸协同控制方法、装置及智能电视交互方法、系统，旨在解决当今的操作系统难以兼容鼠标与触摸等多种控制输入的问题。
本发明实施例的另一目的在于提供一种智能电视交互方法及装置，旨在提供更完善的空中鼠标交互实现方案。
本发明实施例是这样实现的，一种鼠标触摸协同控制方法，所述方法包括：
用户发起触摸输入；
根据所述触摸输入的触摸位置及触摸时间判断所述触摸输入是否捕捉到鼠标光标；
若捕捉到鼠标光标，则将触摸输入设置为触摸控制鼠标输入；
若未捕捉到鼠标光标，则由触摸控制输入。
本发明实施例的另一目的在于提供一种鼠标触摸协同控制装置，所述装置包括：
触摸输入发起单元，用于用户发起触摸输入；
光标捕捉判断单元，用于根据触摸输入的触摸位置及触摸时间判断触摸输入是否捕捉到鼠标光标；
触摸控制鼠标输入单元，用于当光标捕捉判断单元捕捉到鼠标光标时，将触摸输入设置为触摸控制鼠标进行输入；
触摸控制输入单元，用于当光标捕捉判断单元未捕捉到鼠标光标时，由触摸控制输入。
本发明实施例的另一目的在于提供一种智能电视交互方法，所述的方法基于所述的鼠标触摸协同控制方法，还包括：
在遥控器上设置一用户操作感触屏，用于获取用户的操作控制信号；
根据所述的鼠标触摸协同控制方法与用户的控制信号将所述的操作控制信号转换为鼠标输入信号或者触摸控制输入信号；
在智能电视端，根据接收到的鼠标输入信号执行鼠标操作交互指令，根据接收到的触摸控制输入信号执行触摸操作交互指令。
本发明实施例的另一目的在于提供一种智能电视交互系统，所述交互系统包括建立无线连接的遥控器与智能电视，所述交互系统基于所述的鼠标触摸协同控制装置，并且所述的遥控器设置包括：
一用户操作感触屏，用于获取用户的操作控制信号；
信号处理模块，用于将所述的操作控制信号发送给智能电视，
所述智能电视设置包括：
操作模式选择模块，用于根据所述的鼠标触摸协同控制装置与交互场景选择将所述的操作控制信号转换为鼠标输入信号或者触摸控制输入信号；
操作指令转换与执行模块，用于根据接收到的鼠标输入信号执行鼠标操作交互指令，根据接收到的触摸控制输入信号执行触摸操作交互指令
在本发明实施例中，首先根据用户发起的触摸输入捕捉鼠标光标，若捕捉到鼠标光标则将触摸输入设置为触摸控制鼠标输入，若未捕捉到鼠标光标则由触摸控制输入，实现了一种兼容的操作控制方式实现触摸屏与鼠标两种设备的协同操作，使得用户可采用触摸或鼠标兼容控制输入，且使用方便。而本发明提供的智能电视交互方法，基于所述鼠标触摸协同控制，实现了较为完善的空中鼠标交互控制方法。
附图说明
图1是本发明第一实施例提供的鼠标触摸协同控制方法实施例的流程图；
图2是本发明第二实施例提供的基于实施例一提供的鼠标触摸协同控制方法的智能电视交互方法的流程图；
图3是本发明第三实施例提供的鼠标触摸协同控制装置实施例的结构示意图；
图4是本发明第四实施例提供的基于实施例三提供的鼠标触摸协同控制装置的智能电视交互系统的结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
为了说明本发明所述的技术方案，下面通过具体实施例来进行说明。
实施例一：
如图1所示为本发明第一实施例提供的鼠标触摸协同控制方法的流程图，为了便于说明，仅示出了与本发明实施例相关的部分。
在步骤S101中，用户发起触摸输入。
在步骤S102中，根据触摸输入的触摸位置及触摸时间判断触摸输入是否捕捉到鼠标光标，是则执行步骤S103，否则执行步骤S104。
在本发明实施例中，通过判断用户发起的这个触摸输入的触摸位置是否在预设的鼠标光标限定范围内来判断该触摸输入是否捕捉到鼠标光标。在鼠标光标上方或附近触摸屏幕，若触摸输入的触摸位置与鼠标指针的距离在预设的鼠标光标限定范围内，则鼠标光标周围出现圆圈表明捕获光标，此时持续触捕捉到的触摸点，若持续按下时间大于限定时间（如2秒）则鼠标光标周围的圆圈消失，表明触摸输入捕捉到鼠标光标。若所述触摸输入的触摸位置与鼠标指针的距离不在预设的鼠标光标限定范围内，则触摸输入未捕捉到鼠标光标。
在步骤S103中，将触摸输入设置为触摸控制鼠标进行输入。
在本发明实施例中，捕捉到鼠标光标，则将用户发起的触摸输入设置为触摸控制鼠标输入，且后续的触摸都为通过触摸的方式来控制鼠标输入，实现了用户方便地在遥控器触摸屏实现鼠标控制与触摸控制的切换。
在本发明实施例中，触摸控制鼠标输入的操作包括但不限于：单点控制及多点控制，其中，单点控制包括但不限于：单点拖控鼠标、换点单点拖控鼠标、拖控中点击、拖控多按钮点击等；多点控制包括但不限于：多点拖控鼠标、多点换点拖控鼠标、多点旋转鼠标、拖控中点击及拖控多按钮点击等。具体的，通过触摸来控制鼠标输入的实现方法包括以下几种：
一、通过触摸移动鼠标光标位置。
捕捉到鼠标光标后，通过在触摸屏上触摸鼠标光标来移动鼠标光标的位置，相应的鼠标光标所在位置的横坐标及纵坐标信息转换成光标控制消息，使得鼠标光标随着用户的遥控器触摸而移动。
二、触摸移动鼠标光标时触发鼠标点选，向系统发送当前鼠标光标所在位置的触摸消息。
在触摸移动鼠标光标时触发鼠标点选，根据当前鼠标光标的位置向系统发送当前鼠标光标所处位置的触摸消息（其中触摸消息中的当前鼠标光标所处位置为该位置的横坐标及纵坐标信息），所述的触摸消息满足触摸控制操作系统的触控消息封装。系统接到当前鼠标光标所处位置被触摸的消息，则触摸消息映射完成。
三、换点控制鼠标。
当捕捉到鼠标光标后，在通过触摸移动鼠标光标位置时，手指或触摸笔等可能会挡住鼠标光标，且鼠标光标也可能受触摸区域的限制，因而需要换触摸点来控制鼠标。需要更换触摸点控制鼠标时，触摸当前鼠标光标所在的触摸点，同时，触摸不同于当前鼠标光标所在位置的一触摸点，随后放开当前鼠标光标所在的触摸点，则另一触摸点控制鼠标输入。此时鼠标光标与另一触摸点的角度不变，仅需同步另一触摸点在横坐标及纵坐标方向上的位移。
四、多点触摸控制鼠标输入。
当捕捉到鼠标光标后，同时触摸另两个触摸点，并释放当前鼠标光标所在的触摸点，则根据另两个触摸点与鼠标光标所在的触摸点形成的三角关系，并由另两个触摸点控制鼠标输入，这时鼠标不仅可以同步鼠标光标横坐标及纵坐标的移动还可以通过另两个触摸点进行鼠标光标角度旋转控制。
在步骤S104中，由触摸控制输入。
在本步骤S104中，用户没有捕捉光标，则进行触摸遥控智能电视。由于智能电视不同于智能手机，触摸操作一般不方便在显示屏上操作，需要借助在遥控器感触屏的触摸来实现智能电视的触摸控制。在本步骤中，遥控器感触屏的触摸映射为智能电视屏幕的触摸操作，所述感触屏的触摸信息发送给智能电视处理。这里，所述的感触屏指的是一般可显示图像的触摸屏或者不能显示图像的触控板。
在本发明实施例中，可在智能电视上显示一鼠标光标，首先根据用户发起的触摸输入捕捉鼠标光标，若捕捉到鼠标光标则将触摸输入设置为触摸控制鼠标输入，若未捕捉到鼠标光标则由鼠标光标保持不动，由触摸控制输入，实现了一种遥控器上兼容触摸操作与鼠标操作的操作控制方式，实现触摸屏与鼠标两种设备的协同控制切换，使得用户可采用遥控器对智能设备触摸或鼠标兼容控制输入，且使用方便。
值得说明的是，对于触摸控制的操作系统的智能电视的触控操作，本方案是通过遥控器的感触屏的触摸信号映射为智能电视屏幕的触摸，电视屏幕可不显示移动光标，然而在智能电视上可以采用的远程触控感知交互方式，例如在电视屏幕上显示触摸位置的触摸波纹，使得操作用户能感知被触摸的位置。特别是遥控器设置的是不能同步显示图像的触控板时候，在智能电视上根据用户触摸遥控器触控板触摸位置在智能电视上进行的远程交互响应更显必要。
实施例二：
如图2所示为本发明第二实施例提供的基于实施例一提供的鼠标触摸协同控制方法的智能电视交互方法的流程图，为了便于说明，仅示出了与本发明实施例相关的部分。
在本发明实施例中，智能电视的遥控器上设置有一用于用户操作控制的感触屏。这里，所述的感触屏指的是一般可显示图像的触摸屏或者不能显示图像的触控板。
在步骤S201中，用户操作感触屏获取用户的操作控制信号。
在本发明实施例中，通过遥控器上设置的用户操作感触屏来获取用户的操作控制信号。用户通过触摸该用户操作感触屏来发起操作控制信号。
在步骤S202中，根据鼠标触控协同控制方法与交互场景将用户的操作控制信号转换为鼠标输入信号或者触摸控制输入信号。
在本发明实施例中，根据交互场景来转换操作控制信号是由于在一些特定的交互场景中，可明显趋向于转换为某种更为便利的交互。如：当前正在显示图片，则在当前的图片浏览交互场景下，可预见通过多点触摸控制输入来实现图片的方法、缩小或移动等交互更为便利。因而将用户的操作控制信号转换为触摸控制输入信号。
具体为，根据交互场景将所述的操作控制信号转换为鼠标输入信号或者触摸控制输入信号，在于根据操作系统或者应用程序当前与用户交互的交互场景，选择默认的交互方式将所述的操作控制信号转换为鼠标输入信号或者触摸控制输入信号。其中，由于系统预先已根据交互场景的不同设置了最为便利的交互方式作为各交互场景的默认交互方式。如以上述图片浏览为例，则在图片浏览的交互场景中，已将触摸控制输入的交互方式设置为默认交互方式。
而根据实施例一提供的鼠标触控协同控制方法转换操作控制信号的具体方法如实施例一，其中，由于智能电视的操作系统不同，其操作方式有所不同。
具体为，
若智能电视为鼠标控制的操作系统（如windows），则当执行触摸操作时（也就是实施例一中未捕捉到鼠标光标，则通过触摸控制输入的一种方式），用户的在遥控器上的操作控制信号中的触摸控制信息被发送到一鼠标信号转换中间件进行转换，转换成鼠标光标位置消息与鼠标按键消息，并一起以操作系统鼠标消息形式发送到系统模拟鼠标处理。
当执行触摸输入时候，例如当前用户正在浏览图片需要通过多点触控放大或者缩小图片，则将在当前触摸点的触摸输入转换为对应的虚拟鼠标消息发送到系统实现虚拟触摸功能。也就是在用户发起触摸输入时，触摸消息被转换成触摸对应的虚拟鼠标消息（例如鼠标点击拖动放大）发送到系统模拟鼠标处理功能，此时鼠标光标不需要更新，只发送虚拟鼠标消息即可。
在本发明实施例中，触摸屏与鼠标控制数据采用统一的数据结构，触摸屏的触摸点、或者对应菜单键可变成左键/右键按下的鼠标操作，触摸点及鼠标光标的位置信息采用同样的横纵坐标。因而，当触摸点选时触摸信息可转换并代替鼠标坐标，此时获取鼠标光标状态都是得到触摸信息（此时鼠标光标留在原地不动），当用户捕捉到光标时，鼠标光标再次起作用，此时获取的鼠标光标坐标为鼠标的位置信息。
若智能电视为触摸控制的操作系统（例如Android系统），当执行鼠标操作时，根据所述操作控制信号中的触摸位置信号，在智能电视屏幕上虚拟显示一操作光标，并当获取到用户操作的鼠标按键信号后，把遥控器相应的位置信号与按键信号发送到一触摸信号转换中间件进行转换，把所述的位置信号与按键信号映射成智能电视操作系统触摸操作的指令消息。
则将触摸输入作为普通的触摸事件进行处理。即：当用户发起触摸输入时，触摸的信息会直接转化成触摸系统的横纵坐标位置信息，以触摸消息的形式传给操作系统触摸消息处理。
值得说明的是，对于触摸控制的操作系统的智能电视的触控操作，本方案是通过遥控器的感触屏的触摸信号映射为智能电视屏幕的触摸，电视屏幕可不显示移动光标，然而在智能电视上可以采用的远程触控感知交互方式，例如在电视屏幕上显示触摸位置的触摸波纹，使得操作用户能感知被触摸的位置。特别是遥控器设置的是不能同步显示图像的触控板时候，在智能电视上根据用户触摸遥控器触控板触摸位置在智能电视上进行的远程交互响应更显必要。
在本发明实施例中，根据鼠标触摸协同控制方法与交互场景将操作控制信号转换为鼠标输入信号或者触摸控制输入信号既可以在遥控器端实现也可以在智能电视端实现，此处不做限制。
在步骤S203中，在智能电视端，根据接收到的鼠标输入信号执行鼠标操作交互指令，或根据接收到的触摸控制输入信号执行触摸操作交互指令。
在本发明实施例中，在将遥控触摸操作控制信号转换为远程智能电视鼠标输入信号或者触摸控制输入信号后，智能电视即可根据接收到的鼠标输入信号执行鼠标操作交互指令，或根据接收到的触摸控制输入信号执行触摸操作交互指令。其中，鼠标操作交互指令包括但不限于光标移动指令与鼠标按键指令，触摸操作交互指令包括但不限于单点触控指令、多点触控指令、菜单触摸指令。
在本发明实施例中，通过该基于鼠标触控协同控制方法的智能电视交互方法，在智能电视端实现了一种较为完善的空中鼠标实现方案，用户不再单纯依靠遥控器来对电视进行菜单选择，而可以通过触摸控制鼠标来实现对智能电视的控制。
实施例三：
图3为本发明实施例提供的鼠标触摸协同控制装置结构示意图，为了便于说明，仅示出了与本发明实施例相关的部份。该装置可以是内置于手机、电视机等多媒体设备中的软件单元、硬件单元或者软硬件相结合的单元，或者作为独立的挂件集成到这些多媒体设备或多媒体设备的应用系统中。其中：
触摸输入发起单元31，用于用户发起触摸输入。
光标捕捉判断单元32，用于根据触摸输入的触摸位置及触摸时间判断触摸输入是否捕捉到鼠标光标。
触摸控制鼠标输入单元33，用于当光标捕捉判断单元32捕捉到鼠标光标时，将触摸输入设置为触摸控制鼠标进行输入。
在本发明实施例中，所述触摸控制鼠标输入单元33包括四个子单元：
触摸移动光标单元331，用于通过触摸移动鼠标光标位置；
触摸移动光标触发点选单元332，用于触摸移动鼠标光标时触发鼠标点选，向系统发送当前鼠标光标所在位置的触摸消息，所述的鼠标点选可以在遥控器的感触屏上进行点选，也可以在遥控器上设置菜单键，通过菜单键点选；
换点控制鼠标单元333，用于捕捉到鼠标光标后，触摸不同于鼠标光标的另一触摸点，放开当前鼠标光标所在的触摸点，则另一触摸点控制鼠标输入；
多点触控鼠标输入单元334，用于捕捉到鼠标光标后，同时触摸另两个触摸点，并释放当前鼠标光标所在的触摸点，则根据另两个触摸点与鼠标光标所在的触摸点形成的三角关系由另两个触摸点控制鼠标输入。
触摸控制输入单元34，用于当光标捕捉判断单元32未捕捉到鼠标光标时，通过在遥控器上感触屏的触摸消息映射为智能电视屏幕的触摸消息，实现触摸控制输入。
在本发明实施例中，首先根据用户发起的触摸输入捕捉鼠标光标，若捕捉到鼠标光标则将触摸输入设置为触摸控制鼠标输入，若未捕捉到鼠标光标则由触摸控制输入，实现了一种兼容的操作控制方式，即实现触摸屏与鼠标两种设备的协同操作，使得用户可采用触摸或鼠标兼容控制输入，且使用方便。
实施例四：
如图4所示为本发明第四实施例提供的基于实施例三提供的鼠标触摸协同控制装置的智能电视交互系统的结构示意图，为了便于说明，仅示出了与本发明实施例相关的部分。
所述交互系统包括建立无线连接的遥控器41与智能电视42，所述的遥控器41设置包括：
一个用户操作感触屏411，用于获取用户的操作控制信号；
信号处理模块412，用于将操作控制信号发送给智能电视。
所述智能电视42包括：
操作模式选择模块421，用于根据鼠标触摸协同控制装置与交互场景选择将操作控制信号转换为鼠标输入信号或者触摸控制输入信号；
在本发明实施例中，所述操作模式选择模块421包括：
鼠标触控协同控制模块4211，用于若智能电视为鼠标控制的操作系统，当执行触摸操作时，操作控制信号中的触摸控制信息被发送到一鼠标信号转换中间件进行转换，映射成鼠标光标位置消息与鼠标按键消息，并一起以操作系统鼠标消息形式发送到系统模拟鼠标处理；或若智能电视为触摸控制的操作系统，当执行鼠标操作时，根据操作控制信号中的触摸位置信号，在智能电视屏幕上虚拟显示一操作光标，并当获取到用户操作的鼠标按键信号后，把相应的位置信号与按键信号发送到一触摸信号转换中间件进行转换，把位置信号与按键信号映射成触摸操作的指令消息；
交互场景控制模块4212，用于根据操作系统或者应用程序当前与用户交互的交互场景，选择默认的交互方式将所述的操作控制信号转换为鼠标输入信号或者触摸控制输入信号。
操作指令转换与执行模块422，用于根据接收到的鼠标输入信号执行鼠标操作交互指令，或根据接收到的触摸控制输入信号执行触摸操作交互指令。
在本发明实施例中，鼠标操作交互指令包括光标移动指令与鼠标按键指令，触摸操作交互指令包括单点触控指令、多点触控指令、菜单触摸指令。
值得说明的是，所述鼠标触控协同控制模块4211，主要是实现鼠标消息与触控消息的相互转换，可以预见的是，该模块还可以设置在遥控器中。在遥控器上，控制信号经过转换处理生成交互消息再发送给智能电视处理。
在本发明实施例中，通过该基于鼠标触控协同控制方法的智能电视交互方法，在智能电视端实现了一种较为完善的空中鼠标实现方案，用户不再单纯依靠遥控器来对电视进行菜单选择，而可以通过触摸控制鼠标来实现对智能电视的控制。
本领域普通技术人员可以理解，实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，所述的程序可以在存储于一计算机可读取存储介质中，所述的存储介质，如ROM/RAM、磁盘、光盘等。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

资源描述

《鼠标触摸协同控制方法、装置及智能电视交互方法、系统.pdf》由会员分享，可在线阅读，更多相关《鼠标触摸协同控制方法、装置及智能电视交互方法、系统.pdf（13页珍藏版）》请在专利查询网上搜索。

1、(10)申请公布号 CN 102968245 A(43)申请公布日 2013.03.13CN102968245A*CN102968245A*(21)申请号 201210422490.5(22)申请日 2012.10.29G06F 3/0481(2013.01)G06F 3/041(2006.01)G06F 3/0354(2013.01)H04N 21/472(2011.01)(71)申请人 TCL集团股份有限公司地址 516001 广东省惠州市鹅岭南路6号TCL工业大厦8楼技术中心(72)发明人王幼琳(74)专利代理机构深圳中一专利商标事务所 44237代理人张全文(54) 发明名称鼠标触摸协。

2、同控制方法、装置及智能电视交互方法、系统(57) 摘要本发明适用于智能电视领域，提供了一种鼠标触摸协同控制方法、装置及智能电视交互方法、系统，所述鼠标触摸协同控制方法包括：根据用户发起的触摸输入的触摸位置及触摸时间判断是否捕捉到鼠标光标；是则将触摸输入设置为触摸控制鼠标输入；否则由触摸直接控制输入。所述智能电视交互方法包括：通过用户操作感触屏获取用户操作控制信号；根据鼠标触摸协同控制方法与交互场景将操作控制信号转换为鼠标输入信号或者触摸控制输入信号；根据鼠标输入信号执行鼠标操作交互指令，或根据触摸控制输入信号执行触摸操作交互指令。实现了一种兼容触摸屏与鼠标两种设备的协同操作，并对智能电视提供了。

3、更完善的空中鼠标交互实现方案。(51)Int.Cl.权利要求书3页说明书7页附图2页(19)中华人民共和国国家知识产权局(12)发明专利申请权利要求书 3 页说明书 7 页附图 2 页1/3页21.一种鼠标触摸协同控制方法，其特征在于，所述方法包括下述步骤：用户发起触摸输入；根据所述触摸输入的触摸位置及触摸时间判断所述触摸输入是否捕捉到鼠标光标；若捕捉到鼠标光标，则将触摸输入设置为触摸控制鼠标输入；若未捕捉到鼠标光标，则由触摸控制输入。2.如权利要求1所述的方法，其特征在于，所述根据所述触摸输入的触摸位置及触摸时间判断所述触摸输入是否捕捉到鼠标光标包括：判断所述触摸输入的触摸位置是否在。

4、预设的鼠标光标限定范围内；若所述触摸输入的触摸位置与鼠标指针的距离在预设的鼠标光标限定范围内，且触摸输入的持续按下时间大于限定时间则所述触摸输入捕捉到鼠标光标；若所述触摸输入的触摸位置与鼠标指针的距离不在预设的鼠标光标限定范围内，则所述触摸输入未捕捉到鼠标光标。3.如权利要求1所述的方法，其特征在于，所述将触摸输入设置为触摸控制鼠标输入包括：通过触摸移动鼠标光标位置；或触摸移动鼠标光标时触发鼠标点选，向系统发送当前鼠标光标所在位置的触摸消息；或捕捉到鼠标光标后，触摸不同于鼠标光标的另一触摸点，放开当前鼠标光标所在的触摸点，则所述另一触摸点控制鼠标输入；或捕捉到鼠标光标后，同时触摸另两个触摸点，。

5、并释放当前鼠标光标所在的触摸点，则根据所述另两个触摸点与鼠标光标所在的触摸点形成的三角关系由所述另两个触摸点控制鼠标输入。4.一种智能电视交互方法，其特征在于，所述的方法基于如权利要求1至3任一项所述的鼠标触摸协同控制方法，还包括：通过遥控器上设置的用户操作感触屏获取用户的操作控制信号；根据所述的鼠标触摸协同控制方法与交互场景将所述的操作控制信号转换为鼠标输入信号或者触摸控制输入信号；在智能电视端，根据接收到的鼠标输入信号执行鼠标操作交互指令，或根据接收到的触摸控制输入信号执行触摸操作交互指令。5.如权利要求4所述的方法，其特征在于，所述的鼠标操作交互指令包括光标移动指令与鼠标按键指令，所述触。

6、摸操作交互指令包括单点触控指令、多点触控指令、菜单触摸指令。6.如权利要求4所述的方法，其特征在于，所述根据交互场景将所述的操作控制信号转换为鼠标输入信号或者触摸控制输入信号，在于根据操作系统或者应用程序当前与用户交互的交互场景，选择默认的交互方式将所述的操作控制信号转换为鼠标输入信号或者触摸控制输入信号。7.如权利要求4所述的方法，其特征在于，所述在智能电视端，根据所述的鼠标触摸协同控制方法与交互场景将所述的操作控制信号转换为鼠标输入信号或者触摸控制输入信号，还包括：权利要求书CN 102968245 A2/3页3如所述的智能电视为鼠标控制的操作系统，当执行触摸操作时，所述操作控制信。

7、号中的触摸控制信息被发送到一鼠标信号转换中间件进行转换，映射成鼠标光标位置消息与鼠标按键消息，并一起以操作系统鼠标消息形式发送到系统模拟鼠标处理。如所述的智能电视为触摸控制的操作系统，当执行鼠标操作时，根据所述操作控制信号中的触摸位置信号，在智能电视屏幕上虚拟显示一操作光标，并当获取到用户操作的鼠标按键信号后，把相应的位置信号与按键信号发送到一触摸信号转换中间件进行转换，把所述的位置信号与按键信号映射成触摸操作的指令消息。8.一种鼠标触摸协同控制装置，其特征在于，所述装置包括：触摸输入发起单元，用于用户发起触摸输入；光标捕捉判断单元，用于根据触摸输入的触摸位置及触摸时间判断触摸输入是否捕捉到鼠。

8、标光标；触摸控制鼠标输入单元，用于当光标捕捉判断单元捕捉到鼠标光标时，将触摸输入设置为触摸控制鼠标进行输入；触摸控制输入单元，用于当光标捕捉判断单元未捕捉到鼠标光标时，由触摸控制输入。9.如权利要求8所述的装置，其特征在于，所述触摸控制鼠标输入单元包括：触摸移动光标单元，用于通过触摸移动鼠标光标位置；触摸移动光标触发点选单元，用于触摸移动鼠标光标时触发鼠标点选，向系统发送当前鼠标光标所在位置的触摸消息；换点控制鼠标单元，用于捕捉到鼠标光标后，触摸不同于鼠标光标的另一触摸点，放开当前鼠标光标所在的触摸点，则所述另一触摸点控制鼠标输入；多点触控鼠标输入单元，用于捕捉到鼠标光标后，同时触摸另两个触摸。

9、点，并释放当前鼠标光标所在的触摸点，则根据所述另两个触摸点与鼠标光标所在的触摸点形成的三角关系由所述另两个触摸点控制鼠标输入。10.一种智能电视交互系统，其特征在于，所述交互系统包括建立无线连接的遥控器与智能电视，其特征在于，所述交互系统基于如权利要求8所述的鼠标触摸协同控制装置，并且所述的遥控器设置包括：一用户操作感触屏，用于获取用户的操作控制信号；信号处理模块，用于将所述的操作控制信号发送给智能电视；所述智能电视包括：操作模式选择模块，用于根据所述的鼠标触摸协同控制装置与交互场景选择将所述的操作控制信号转换为鼠标输入信号或者触摸控制输入信号；操作指令转换与执行模块，用于根据接收到的鼠标输入。

10、信号执行鼠标操作交互指令，或根据接收到的触摸控制输入信号执行触摸操作交互指令。11.如权利要求10所述的系统，其特征在于，所述的鼠标操作交互指令包括光标移动指令与鼠标按键指令，所述触摸操作交互指令包括单点触控指令、多点触控指令、菜单触摸指令。12.如权利要求10所述的系统，其特征在于，所述操作模式选择模块包括：鼠标触控协同控制模块，用于若所述的智能电视为鼠标控制的操作系统，当执行触摸操作时，所述操作控制信号中的触摸控制信息被发送到一鼠标信号转换中间件进行转换，权利要求书CN 102968245 A3/3页4映射成鼠标光标位置消息与鼠标按键消息，并一起以操作系统鼠标消息形式发送到系统模拟。

11、鼠标处理；或若所述的智能电视为触摸控制的操作系统，当执行鼠标操作时，根据所述操作控制信号中的触摸位置信号，在智能电视屏幕上虚拟显示一操作光标，并当获取到用户操作的鼠标按键信号后，把相应的位置信号与按键信号发送到一触摸信号转换中间件进行转换，把所述的位置信号与按键信号映射成触摸操作的指令消息；交互场景控制模块，用于根据操作系统或者应用程序当前与用户交互的交互场景，选择默认的交互方式将所述的操作控制信号转换为鼠标输入信号或者触摸控制输入信号。权利要求书CN 102968245 A1/7页5鼠标触摸协同控制方法、装置及智能电视交互方法、系统技术领域0001 本发明属于智能电视领域，尤其涉。

12、及一种鼠标触摸协同控制方法、装置及智能电视交互方法、系统。背景技术0002 目前在各种交互式电子设备中，鼠标与触摸屏均被广泛使用。当今大多电子设备仍然是单独使用鼠标控制输入或单独使用触摸控制输入，即使已有一些设备具备了多种输入控制的方式，然而由于鼠标与触摸屏的控制输入方式不一致，导致在兼容这两种输入方式的电子设备中出现了冲突。如windows平台是基于鼠标的操作系统，触摸设备想控制系统必须将触摸消息转换为鼠标消息。对于基于触摸控制的操作系统而言，鼠标消息无法直接被应用程序使用，也必须将鼠标消息转换为触摸消息。因而，在基于鼠标或者触摸的单一控制方式操作系统中，鼠标或触摸输入设备在内部消息的统一和。

13、转换上冲突较多。0003 在现在智能电视的交互中，开始出现一种空中鼠标的交互控制方法，即用户不再单纯依靠传统遥控器进行的菜单选择，而是通过控制内置鼠标的遥控器方式，达到像控制个人电脑一样在客厅里控制智能电视。0004 然而，目前空中鼠标的控制方式还存在诸多问题，如灵敏度不高、操作不方便等，更完善的空中鼠标交互实现方案是当前智能电视领域技术前沿的探索方向。发明内容0005 本发明实施例的目的在于提供一种鼠标触摸协同控制方法、装置及智能电视交互方法、系统，旨在解决当今的操作系统难以兼容鼠标与触摸等多种控制输入的问题。0006 本发明实施例的另一目的在于提供一种智能电视交互方法及装置，旨在提供更完善。

14、的空中鼠标交互实现方案。0007 本发明实施例是这样实现的，一种鼠标触摸协同控制方法，所述方法包括：0008 用户发起触摸输入；0009 根据所述触摸输入的触摸位置及触摸时间判断所述触摸输入是否捕捉到鼠标光标；0010 若捕捉到鼠标光标，则将触摸输入设置为触摸控制鼠标输入；0011 若未捕捉到鼠标光标，则由触摸控制输入。0012 本发明实施例的另一目的在于提供一种鼠标触摸协同控制装置，所述装置包括：0013 触摸输入发起单元，用于用户发起触摸输入；0014 光标捕捉判断单元，用于根据触摸输入的触摸位置及触摸时间判断触摸输入是否捕捉到鼠标光标；0015 触摸控制鼠标输入单元，用于当光标捕捉判断单。

15、元捕捉到鼠标光标时，将触摸输入设置为触摸控制鼠标进行输入；0016 触摸控制输入单元，用于当光标捕捉判断单元未捕捉到鼠标光标时，由触摸控制说明书CN 102968245 A2/7页6输入。0017 本发明实施例的另一目的在于提供一种智能电视交互方法，所述的方法基于所述的鼠标触摸协同控制方法，还包括：0018 在遥控器上设置一用户操作感触屏，用于获取用户的操作控制信号；0019 根据所述的鼠标触摸协同控制方法与用户的控制信号将所述的操作控制信号转换为鼠标输入信号或者触摸控制输入信号；0020 在智能电视端，根据接收到的鼠标输入信号执行鼠标操作交互指令，根据接收到的触摸控制输入信号执行触摸操作。

16、交互指令。0021 本发明实施例的另一目的在于提供一种智能电视交互系统，所述交互系统包括建立无线连接的遥控器与智能电视，所述交互系统基于所述的鼠标触摸协同控制装置，并且所述的遥控器设置包括：0022 一用户操作感触屏，用于获取用户的操作控制信号；0023 信号处理模块，用于将所述的操作控制信号发送给智能电视，0024 所述智能电视设置包括：0025 操作模式选择模块，用于根据所述的鼠标触摸协同控制装置与交互场景选择将所述的操作控制信号转换为鼠标输入信号或者触摸控制输入信号；0026 操作指令转换与执行模块，用于根据接收到的鼠标输入信号执行鼠标操作交互指令，根据接收到的触摸控制输入信号执行触摸操。

17、作交互指令0027 在本发明实施例中，首先根据用户发起的触摸输入捕捉鼠标光标，若捕捉到鼠标光标则将触摸输入设置为触摸控制鼠标输入，若未捕捉到鼠标光标则由触摸控制输入，实现了一种兼容的操作控制方式实现触摸屏与鼠标两种设备的协同操作，使得用户可采用触摸或鼠标兼容控制输入，且使用方便。而本发明提供的智能电视交互方法，基于所述鼠标触摸协同控制，实现了较为完善的空中鼠标交互控制方法。附图说明0028 图1是本发明第一实施例提供的鼠标触摸协同控制方法实施例的流程图；0029 图2是本发明第二实施例提供的基于实施例一提供的鼠标触摸协同控制方法的智能电视交互方法的流程图；0030 图3是本发明第三实施例提供的。

18、鼠标触摸协同控制装置实施例的结构示意图；0031 图4是本发明第四实施例提供的基于实施例三提供的鼠标触摸协同控制装置的智能电视交互系统的结构示意图。具体实施方式0032 为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。0033 为了说明本发明所述的技术方案，下面通过具体实施例来进行说明。0034 实施例一：0035 如图1所示为本发明第一实施例提供的鼠标触摸协同控制方法的流程图，为了便说明书CN 102968245 A3/7页7于说明，仅示出了与本发明实施例相关的部分。。

19、0036 在步骤S101中，用户发起触摸输入。0037 在步骤S102中，根据触摸输入的触摸位置及触摸时间判断触摸输入是否捕捉到鼠标光标，是则执行步骤S103，否则执行步骤S104。0038 在本发明实施例中，通过判断用户发起的这个触摸输入的触摸位置是否在预设的鼠标光标限定范围内来判断该触摸输入是否捕捉到鼠标光标。在鼠标光标上方或附近触摸屏幕，若触摸输入的触摸位置与鼠标指针的距离在预设的鼠标光标限定范围内，则鼠标光标周围出现圆圈表明捕获光标，此时持续触捕捉到的触摸点，若持续按下时间大于限定时间（如2秒）则鼠标光标周围的圆圈消失，表明触摸输入捕捉到鼠标光标。若所述触摸输入的触摸位置与鼠标指针的距。

20、离不在预设的鼠标光标限定范围内，则触摸输入未捕捉到鼠标光标。0039 在步骤S103中，将触摸输入设置为触摸控制鼠标进行输入。0040 在本发明实施例中，捕捉到鼠标光标，则将用户发起的触摸输入设置为触摸控制鼠标输入，且后续的触摸都为通过触摸的方式来控制鼠标输入，实现了用户方便地在遥控器触摸屏实现鼠标控制与触摸控制的切换。0041 在本发明实施例中，触摸控制鼠标输入的操作包括但不限于：单点控制及多点控制，其中，单点控制包括但不限于：单点拖控鼠标、换点单点拖控鼠标、拖控中点击、拖控多按钮点击等；多点控制包括但不限于：多点拖控鼠标、多点换点拖控鼠标、多点旋转鼠标、拖控中点击及拖控多按钮点击等。具体的。

21、，通过触摸来控制鼠标输入的实现方法包括以下几种：0042 一、通过触摸移动鼠标光标位置。0043 捕捉到鼠标光标后，通过在触摸屏上触摸鼠标光标来移动鼠标光标的位置，相应的鼠标光标所在位置的横坐标及纵坐标信息转换成光标控制消息，使得鼠标光标随着用户的遥控器触摸而移动。0044 二、触摸移动鼠标光标时触发鼠标点选，向系统发送当前鼠标光标所在位置的触摸消息。0045 在触摸移动鼠标光标时触发鼠标点选，根据当前鼠标光标的位置向系统发送当前鼠标光标所处位置的触摸消息（其中触摸消息中的当前鼠标光标所处位置为该位置的横坐标及纵坐标信息），所述的触摸消息满足触摸控制操作系统的触控消息封装。系统接到当前鼠标光标。

22、所处位置被触摸的消息，则触摸消息映射完成。0046 三、换点控制鼠标。0047 当捕捉到鼠标光标后，在通过触摸移动鼠标光标位置时，手指或触摸笔等可能会挡住鼠标光标，且鼠标光标也可能受触摸区域的限制，因而需要换触摸点来控制鼠标。需要更换触摸点控制鼠标时，触摸当前鼠标光标所在的触摸点，同时，触摸不同于当前鼠标光标所在位置的一触摸点，随后放开当前鼠标光标所在的触摸点，则另一触摸点控制鼠标输入。此时鼠标光标与另一触摸点的角度不变，仅需同步另一触摸点在横坐标及纵坐标方向上的位移。0048 四、多点触摸控制鼠标输入。0049 当捕捉到鼠标光标后，同时触摸另两个触摸点，并释放当前鼠标光标所在的触摸说明书。

23、CN 102968245 A4/7页8点，则根据另两个触摸点与鼠标光标所在的触摸点形成的三角关系，并由另两个触摸点控制鼠标输入，这时鼠标不仅可以同步鼠标光标横坐标及纵坐标的移动还可以通过另两个触摸点进行鼠标光标角度旋转控制。0050 在步骤S104中，由触摸控制输入。0051 在本步骤S104中，用户没有捕捉光标，则进行触摸遥控智能电视。由于智能电视不同于智能手机，触摸操作一般不方便在显示屏上操作，需要借助在遥控器感触屏的触摸来实现智能电视的触摸控制。在本步骤中，遥控器感触屏的触摸映射为智能电视屏幕的触摸操作，所述感触屏的触摸信息发送给智能电视处理。这里，所述的感触屏指的是一般可显示图像的触摸。

24、屏或者不能显示图像的触控板。0052 在本发明实施例中，可在智能电视上显示一鼠标光标，首先根据用户发起的触摸输入捕捉鼠标光标，若捕捉到鼠标光标则将触摸输入设置为触摸控制鼠标输入，若未捕捉到鼠标光标则由鼠标光标保持不动，由触摸控制输入，实现了一种遥控器上兼容触摸操作与鼠标操作的操作控制方式，实现触摸屏与鼠标两种设备的协同控制切换，使得用户可采用遥控器对智能设备触摸或鼠标兼容控制输入，且使用方便。0053 值得说明的是，对于触摸控制的操作系统的智能电视的触控操作，本方案是通过遥控器的感触屏的触摸信号映射为智能电视屏幕的触摸，电视屏幕可不显示移动光标，然而在智能电视上可以采用的远程触控感知交互方式，。

25、例如在电视屏幕上显示触摸位置的触摸波纹，使得操作用户能感知被触摸的位置。特别是遥控器设置的是不能同步显示图像的触控板时候，在智能电视上根据用户触摸遥控器触控板触摸位置在智能电视上进行的远程交互响应更显必要。0054 实施例二：0055 如图2所示为本发明第二实施例提供的基于实施例一提供的鼠标触摸协同控制方法的智能电视交互方法的流程图，为了便于说明，仅示出了与本发明实施例相关的部分。0056 在本发明实施例中，智能电视的遥控器上设置有一用于用户操作控制的感触屏。这里，所述的感触屏指的是一般可显示图像的触摸屏或者不能显示图像的触控板。0057 在步骤S201中，用户操作感触屏获取用户的操作控制信号。

26、。0058 在本发明实施例中，通过遥控器上设置的用户操作感触屏来获取用户的操作控制信号。用户通过触摸该用户操作感触屏来发起操作控制信号。0059 在步骤S202中，根据鼠标触控协同控制方法与交互场景将用户的操作控制信号转换为鼠标输入信号或者触摸控制输入信号。0060 在本发明实施例中，根据交互场景来转换操作控制信号是由于在一些特定的交互场景中，可明显趋向于转换为某种更为便利的交互。如：当前正在显示图片，则在当前的图片浏览交互场景下，可预见通过多点触摸控制输入来实现图片的方法、缩小或移动等交互更为便利。因而将用户的操作控制信号转换为触摸控制输入信号。0061 具体为，根据交互场景将所述的操作控制。

27、信号转换为鼠标输入信号或者触摸控制输入信号，在于根据操作系统或者应用程序当前与用户交互的交互场景，选择默认的交互方式将所述的操作控制信号转换为鼠标输入信号或者触摸控制输入信号。其中，由于系统预先已根据交互场景的不同设置了最为便利的交互方式作为各交互场景的默认交互方式。如以上述图片浏览为例，则在图片浏览的交互场景中，已将触摸控制输入的交互方式设置说明书CN 102968245 A5/7页9为默认交互方式。0062 而根据实施例一提供的鼠标触控协同控制方法转换操作控制信号的具体方法如实施例一，其中，由于智能电视的操作系统不同，其操作方式有所不同。0063 具体为，0064 若智能电视为鼠标控制。

28、的操作系统（如windows），则当执行触摸操作时（也就是实施例一中未捕捉到鼠标光标，则通过触摸控制输入的一种方式），用户的在遥控器上的操作控制信号中的触摸控制信息被发送到一鼠标信号转换中间件进行转换，转换成鼠标光标位置消息与鼠标按键消息，并一起以操作系统鼠标消息形式发送到系统模拟鼠标处理。0065 当执行触摸输入时候，例如当前用户正在浏览图片需要通过多点触控放大或者缩小图片，则将在当前触摸点的触摸输入转换为对应的虚拟鼠标消息发送到系统实现虚拟触摸功能。也就是在用户发起触摸输入时，触摸消息被转换成触摸对应的虚拟鼠标消息（例如鼠标点击拖动放大）发送到系统模拟鼠标处理功能，此时鼠标光标不需要更新，。

29、只发送虚拟鼠标消息即可。0066 在本发明实施例中，触摸屏与鼠标控制数据采用统一的数据结构，触摸屏的触摸点、或者对应菜单键可变成左键/右键按下的鼠标操作，触摸点及鼠标光标的位置信息采用同样的横纵坐标。因而，当触摸点选时触摸信息可转换并代替鼠标坐标，此时获取鼠标光标状态都是得到触摸信息（此时鼠标光标留在原地不动），当用户捕捉到光标时，鼠标光标再次起作用，此时获取的鼠标光标坐标为鼠标的位置信息。0067 若智能电视为触摸控制的操作系统（例如Android系统），当执行鼠标操作时，根据所述操作控制信号中的触摸位置信号，在智能电视屏幕上虚拟显示一操作光标，并当获取到用户操作的鼠标按键信号后，把遥控器相。

30、应的位置信号与按键信号发送到一触摸信号转换中间件进行转换，把所述的位置信号与按键信号映射成智能电视操作系统触摸操作的指令消息。0068 则将触摸输入作为普通的触摸事件进行处理。即：当用户发起触摸输入时，触摸的信息会直接转化成触摸系统的横纵坐标位置信息，以触摸消息的形式传给操作系统触摸消息处理。0069 值得说明的是，对于触摸控制的操作系统的智能电视的触控操作，本方案是通过遥控器的感触屏的触摸信号映射为智能电视屏幕的触摸，电视屏幕可不显示移动光标，然而在智能电视上可以采用的远程触控感知交互方式，例如在电视屏幕上显示触摸位置的触摸波纹，使得操作用户能感知被触摸的位置。特别是遥控器设置的是不能同步显。

31、示图像的触控板时候，在智能电视上根据用户触摸遥控器触控板触摸位置在智能电视上进行的远程交互响应更显必要。0070 在本发明实施例中，根据鼠标触摸协同控制方法与交互场景将操作控制信号转换为鼠标输入信号或者触摸控制输入信号既可以在遥控器端实现也可以在智能电视端实现，此处不做限制。0071 在步骤S203中，在智能电视端，根据接收到的鼠标输入信号执行鼠标操作交互指令，或根据接收到的触摸控制输入信号执行触摸操作交互指令。0072 在本发明实施例中，在将遥控触摸操作控制信号转换为远程智能电视鼠标输入信号或者触摸控制输入信号后，智能电视即可根据接收到的鼠标输入信号执行鼠标操作交互说明书CN 10296。

32、8245 A6/7页10指令，或根据接收到的触摸控制输入信号执行触摸操作交互指令。其中，鼠标操作交互指令包括但不限于光标移动指令与鼠标按键指令，触摸操作交互指令包括但不限于单点触控指令、多点触控指令、菜单触摸指令。0073 在本发明实施例中，通过该基于鼠标触控协同控制方法的智能电视交互方法，在智能电视端实现了一种较为完善的空中鼠标实现方案，用户不再单纯依靠遥控器来对电视进行菜单选择，而可以通过触摸控制鼠标来实现对智能电视的控制。0074 实施例三：0075 图3为本发明实施例提供的鼠标触摸协同控制装置结构示意图，为了便于说明，仅示出了与本发明实施例相关的部份。该装置可以是内置于手机、电视机等多。

33、媒体设备中的软件单元、硬件单元或者软硬件相结合的单元，或者作为独立的挂件集成到这些多媒体设备或多媒体设备的应用系统中。其中：0076 触摸输入发起单元31，用于用户发起触摸输入。0077 光标捕捉判断单元32，用于根据触摸输入的触摸位置及触摸时间判断触摸输入是否捕捉到鼠标光标。0078 触摸控制鼠标输入单元33，用于当光标捕捉判断单元32捕捉到鼠标光标时，将触摸输入设置为触摸控制鼠标进行输入。0079 在本发明实施例中，所述触摸控制鼠标输入单元33包括四个子单元：0080 触摸移动光标单元331，用于通过触摸移动鼠标光标位置；0081 触摸移动光标触发点选单元332，用于触摸移动鼠标光标时触发。

34、鼠标点选，向系统发送当前鼠标光标所在位置的触摸消息，所述的鼠标点选可以在遥控器的感触屏上进行点选，也可以在遥控器上设置菜单键，通过菜单键点选；0082 换点控制鼠标单元333，用于捕捉到鼠标光标后，触摸不同于鼠标光标的另一触摸点，放开当前鼠标光标所在的触摸点，则另一触摸点控制鼠标输入；0083 多点触控鼠标输入单元334，用于捕捉到鼠标光标后，同时触摸另两个触摸点，并释放当前鼠标光标所在的触摸点，则根据另两个触摸点与鼠标光标所在的触摸点形成的三角关系由另两个触摸点控制鼠标输入。0084 触摸控制输入单元34，用于当光标捕捉判断单元32未捕捉到鼠标光标时，通过在遥控器上感触屏的触摸消息映射为智能。

35、电视屏幕的触摸消息，实现触摸控制输入。0085 在本发明实施例中，首先根据用户发起的触摸输入捕捉鼠标光标，若捕捉到鼠标光标则将触摸输入设置为触摸控制鼠标输入，若未捕捉到鼠标光标则由触摸控制输入，实现了一种兼容的操作控制方式，即实现触摸屏与鼠标两种设备的协同操作，使得用户可采用触摸或鼠标兼容控制输入，且使用方便。0086 实施例四：0087 如图4所示为本发明第四实施例提供的基于实施例三提供的鼠标触摸协同控制装置的智能电视交互系统的结构示意图，为了便于说明，仅示出了与本发明实施例相关的部分。0088 所述交互系统包括建立无线连接的遥控器41与智能电视42，所述的遥控器41设置包括：0089 一个用户操作感触屏411，用于获取用户的操作控制信号；说明书CN 102968245 A10。

展开阅读全文