《用于基于接近的输入的装置和方法.pdf》由会员分享，可在线阅读，更多相关《用于基于接近的输入的装置和方法.pdf（19页珍藏版）》请在专利查询网上搜索。
1、(10)申请公布号 CN 102884499 A (43)申请公布日 2013.01.16 C N 1 0 2 8 8 4 4 9 9 A *CN102884499A* (21)申请号 201180022671.2 (22)申请日 2011.03.02 12/732,816 2010.03.26 US G06F 3/0488(2013.01) G06F 3/041(2006.01) (71)申请人诺基亚公司 地址芬兰埃斯波 (72)发明人 M尼尔米 (74)专利代理机构北京市金杜律师事务所 11256 代理人酆迅 (54) 发明名称 用于基于接近的输入的装置和方法 (57) 摘要 提供了一种用。
2、于控制基于接近检测的用户界 面功能的方法。响应于检测到同时存在紧邻输入 表面(100)的第一物体(110)和第二物体(112)， 可以激活输入模式，在该输入模式中，第一动作与 第一物体(110)所进行的输入相关联，而第二动 作与第二物体(112)所进行的输入相关联。 (30)优先权数据 (85)PCT申请进入国家阶段日 2012.11.05 (86)PCT申请的申请数据 PCT/FI2011/050174 2011.03.02 (87)PCT申请的公布数据 WO2011/117462 EN 2011.09.29 (51)Int.Cl. 权利要求书3页 说明书9页 附图6页 (19)中华人民共和。
3、国国家知识产权局 (12)发明专利申请 权利要求书 3 页 说明书 9 页 附图 6 页 1/3页 2 1.一种装置，包括： 至少一个处理器：以及 包括计算机程序代码的至少一个存储器， 所述至少一个存储器和所述计算机程序代码被配置为利用所述至少一个处理器，使得 所述装置至少执行： 检测存在紧邻输入表面的第一物体， 检测存在紧邻所述输入表面的第二物体，以及 响应于检测到同时存在所述第一物体和所述第二物体，激活输入模式，在所述输入模 式中第一动作与所述第一物体所进行的输入相关联，并且第二动作与所述第二物体所进行 的输入相关联。 2.根据权利要求1的装置，其中所述装置被配置为响应于检测到所述第一物体。
4、和/或 所述第二物体从紧邻所述输入表面移除，停用所述输入模式。 3.根据权利要求1或2的装置，其中所述装置被配置为： 进一步基于所述第一物体和/或所述第二物体的位置来响应于所述第一物体和/或所 述第二物体所进行的输入而确定操作。 4.根据前述任一项权利要求的装置，其中所述装置被配置为： 响应于检测到所述第一物体所进行的输入，对与所检测到的所述第一物体所进行的输 入相关联的信息元素执行选择动作，以及 响应于检测到所述第二物体所进行的输入，对与所检测到的所述第二物体所进行的输 入相关联的信息元素显示可选择项的菜单。 5.根据前述任一项权利要求的装置，其中所述装置被配置为响应于所述输入模式的所 述激。
5、活和/或在所述输入模式期间的动作，修改对待显示的图形用户界面元素的至少一个 关联。 6.根据前述任一项权利要求的装置，其中所述装置被配置为： 响应于检测到紧邻所述输入表面的所述第一物体和所述第二物体，使得显示指针元 素，以及 使得所述指针元素的显示关于所检测到的所述第一物体和/或所述第二物体的移动 而移动。 7.根据前述任一项权利要求的装置，其中所述装置被配置为基于所述物体之间的距 离，控制所述输入模式的所述激活和/或停用。 8.根据前述任一项权利要求的装置，其中操作在所述输入模式期间与所述第一物体所 进行的输入和所述第二物体所进行的输入的组合相关联。 9.根据前述任一项权利要求的装置，其中所。
6、述装置是包括触摸屏的移动通信设备。 10.一种方法，包括： 检测存在紧邻输入表面的第一物体， 检测存在紧邻所述输入表面的第二物体，以及 响应于检测到同时存在所述第一物体和所述第二物体，激活输入模式，在所述输入模 式中第一动作与所述第一物体所进行的输入相关联，并且第二动作与所述第二物体所进行 的输入相关联。 权 利 要 求 书CN 102884499 A 2/3页 3 11.根据权利要求10的方法，进一步包括：响应于检测到所述第一物体和/或所述第 二物体从紧邻所述输入表面移除，停用所述输入模式。 12.根据权利要求10或11的方法，其中，进一步基于所述第一物体和/或所述第二物 体的位置来响应于所。
7、述第一物体和/或所述第二物体所进行的输入而确定操作。 13.根据权利要求10、11或12的方法，其中，响应于检测到在紧邻所述输入表面存在所 述第二物体，检查所述第一物体向所述输入表面的接近，以及 响应于第一物体仍然保持紧邻所述输入表面，激活所述输入模式，并且对与所述第一 物体和/或所述第二物体所进行的输入相关联的功能进行适配。 14.根据权利要求10至13中任一项的方法，其中响应于所述输入模式的所述激活和/ 或在所述输入模式期间的动作，修改对待显示的图形用户界面元素的至少一个关联。 15.根据权利要求10至14中任一项的方法，进一步包括： 响应于检测到所述第一物体所进行的输入，对与所检测到的所。
8、述第一物体所进行的输 入相关联的信息元素执行选择动作，以及 响应于检测到所述第二物体所进行的输入，对与所检测到的所述第二物体所进行的输 入相关联的信息元素显示可选择项的菜单。 16.根据权利要求10至15中任一项的方法，其中基于所述物体之间的距离，控制所述 输入模式的所述激活和/或停用。 17.根据前述权利要求10至16中任一项的方法，进一步包括： 响应于检测到存在所述第一物体和所述第二物体，使得显示指针元素，以及 使得所述指针元素的显示关于所检测到的所述第一物体和/或所述第二物体的移动 而移动。 18.一种电子设备，包括： 触摸屏； 用于无线传输的通信单元； 接近检测系统，其具有至少一个用于。
9、检测存在紧邻输入表面的物体的接近检测器；以 及 根据权利要求1至8中任一项的装置。 19.一种用于电子设备的用户界面，包括： 接近检测系统，其具有至少一个用于检测存在紧邻输入表面的第一物体和第二物体的 接近检测器，其中所述用户界面被配置为响应于检测到同时存在所述第一物体和所述第二 物体，以输入模式进行操作，在所述输入模式中第一动作与所述第一物体所进行的输入相 关联，并且第二动作与所述第二物体所进行的输入相关联。 20.一种计算机可读存储介质，包括一个或多个指令的一个或多个序列，当所述指令被 装置的一个或多个处理器执行时，使得所述装置执行根据权利要求10至17中任一项的方 法。 21.一种装置，。
10、包括： 用于检测存在紧邻输入表面的第一物体的装置， 用于检测存在紧邻所述输入表面的第二物体的装置，以及 用于响应于检测到同时存在所述第一物体和所述第二物体，激活输入模式的装置，在 权 利 要 求 书CN 102884499 A 3/3页 4 所述输入模式中第一动作与所述第一物体所进行的输入相关联，并且第二动作与所述第二 物体所进行的输入相关联。 权 利 要 求 书CN 102884499 A 1/9页 5 用于基于接近的输入的装置和方法 技术领域 0001 本发明的实施例涉及一种用于检测基于接近的输入的装置和方法。 背景技术 0002 触摸屏被用在许多便携式电子设备中，例如在PDA(个人数字助。
11、理)设备、桌面和 移动设备中使用。触摸屏可通过指点设备(或触笔)和/或通过手指进行操作。通常，设 备还包括用于某些操作的常规按钮。 0003 三维(3D)内容显示技术和3D交互、或者3D交互传感也已经针对便携式电子设备 进行了研发。已经建议了还将触摸屏表面上方的空间作为用于用户输入的另外的装置加以 应用。 发明内容 0004 在权利要求中阐述本发明示例的各种方面。 0005 根据一个方面，提供了一种装置，包括至少一个处理器；以及至少一个存储器，该 存储器包括计算机程序代码，至少一个存储器和计算机程序代码被配置为利用至少一个处 理器使得装置至少执行：检测存在紧邻输入表面的第一物体，检测存在紧邻输。
12、入表面的第 二物体，以及响应于检测到同时存在第一物体和第二物体，激活输入模式，在该输入模式中 第一动作与第一物体所进行的输入相关联，并且第二动作与第二物体所进行的输入相关 联。 0006 根据一个方面，提供了一种方法，包括：检测存在紧邻输入表面的第一物体，检测 存在紧邻输入表面的第二物体，以及响应于检测到同时存在第一物体和第二物体，激活输 入模式，在该输入模式中第一动作与第一物体所进行的输入相关联，并且第二动作与第二 物体所进行的输入相关联。 0007 根据一个方面，提供了一种包括接近检测系统的电子设备的用户界面，该接近检 测系统具有至少一个用于检测存在紧邻输入表面的第一物体和第二物体的接近检。
13、测器， 其中该用户界面被配置为响应于检测到同时存在第一物体和第二物体，以输入模式进行操 作，在该输入模式中第一动作与第一物体所进行的输入相关联，并且第二动作与第二物体 所进行的输入相关联。 0008 根据一个实施例，该输入模式响应于检测到第一物体和/或第二物体从紧邻输入 表面而移除而被停用。 0009 本发明的各种实施例提供了若干优势，这将从以下的详细描述而变得明显。 附图说明 0010 为了更为全面地理解本发明的示例实施例，现在参考以下结合附图所进行的描 述，其中： 0011 图1是依据本发明实施例的输入装置的侧视图的简化框图； 说 明 书CN 102884499 A 2/9页 6 0012。
14、 图2是依据本发明实施例的装置的侧视图的简化框图； 0013 图3图示了根据本发明实施例的方法； 0014 图4图示了根据本发明实施例的方法； 0015 图5a和图5b示出了根据本发明实施例的方法的示例； 0016 图6a至图6d图示了根据本发明实施例的用户界面动作的序列； 0017 图7图示了根据本发明实施例的、具有与物体相关的光标的显示器的俯视图；以 及 0018 图8图示了依据本发明实施例的电子设备。 具体实施方式 0019 图1图示了具有一个或多个输入和/或输出设备的装置10。输入设备例如可以从 按钮、开关、滑动器、按键或键盘、导航面板、触摸板、触摸屏等中进行选择。输出设备例如可 以从。
15、显示器、扬声器、指示器等中进行选择。 0020 装置10进一步包括接近检测系统或单元120，其被配置为在诸如手指或触笔的物 体110、112紧邻输入表面100但并未与之相接触时进行检测。输入表面100可以是触摸屏 或能够检测用户输入的装置的其它输入设备的表面。例如，输入表面100能够与诸如按钮 的输入设备相结合地在壳体处提供，或者作为手持电子设备的(多个)侧面或背面上的具 体输入区域。 0021 感应区域140可以图示出物体110、112被检测为紧邻表面100的接近区域和/或 距离。感应区域140还可以被称作悬停区域，并且物体110、112进入悬停区域以及物体110、 112在悬停区域中所进行。
16、的可能另外的(非触摸)输入可以被称作悬停。在一些实施例中， 悬停区域140还使得机制没有触摸到输入表面110也能够在装置10中输入和/或访问数 据。 0022 装置10进一步包括或者耦合至控制器130。接近检测系统120被配置为在物体 110、112进入悬停区域140时向控制器130提供信号。基于这样的输入信号，可以发起命 令、选择和其它类型的动作，通常引起用户的可视、可听和/或触觉反馈。 0023 装置10可以是诸如键盘或鼠标的外围设备，或者集成在电子设备中。电子设备的 示例包括如计算机、媒体播放器、无线通信终端设备等的任意消费者电子设备。 0024 在一些实施例中，在包括触摸屏显示器的装置。
17、中提供接近检测系统120。图2图示 了根据一个实施例的包括触摸屏210的装置200。提供多个触摸敏感检测器212以检测对 屏幕显示表面部分的输入。 0025 装置200包括用于检测对象110、112紧邻触摸屏210的表面的接近检测电路220。 在一些实施例中，检测系统220通过一个或多个接近传感器222而生成感应场。 0026 在一个实施例中，应用电容式接近检测系统，因此传感器222是电容感应节点。监 视一个或多个物体110、112在感应场中的干扰并且基于所检测的干扰来检测存在一个或 多个物体。电容检测电路220检测触摸屏210表面上方的电容变化。 0027 然而，将要意识到的是，当前特征宾部。
18、局限于任何特定类型的接近检测的应用。接 近检测系统120、220可以基于红外接近检测、光学阴影检测、声音发射检测、超声检测或者 任意其它适当的接近检测技术。例如，在接近检测系统120、220将基于红外检测的情况下， 说 明 书CN 102884499 A 3/9页 7 该系统将包括一个或多个发出红外光的发射器。可以提供一个或多个检测器以用于检测 来自临近物体110、112的光的反射。如果系统检测到反射光，则假设物体存在。检测系统 120、220可以被配置为估计物体距输入表面的距离。根据所应用的技术、装置和输入表面的 大小以及所期望的用户交互，例如，悬停区域140、240可以被布置为以从数毫米到。
19、多达数 十厘米所选择的距离从输入表面进行延伸。接近检测系统120、220还可以检测用户手部的 另外部分，但是系统可以被布置为辨认这样的错误输入并且避免进一步的动作。 0028 检测电路220耦合至控制器230。针对触摸屏检测212的输入可以经由控制电路 以信号发送至控制器230或另一控制器。控制器230还可以连接到一个或多个输出设备， 诸如触摸屏显示器210。控制器230可以被配置为对显示器210上的不同应用视图进行控 制。 0029 接近检测系统120、220被配置为检测并指示多个物体110、112的同时接近。在悬 停区域140、240中同时检测到的每个物体110、112可以与至少一个动作或。
20、功能相关联，该 动作或功能响应于响应物体所进行的进一步输入而被发起。 0030 可以由物体110、112在悬停区域240中的相应输入区域250、252内提供另外的输 入。装置200可以被配置为响应于检测到一个或多个物体110、112按压触摸屏显示器表面 和/或在悬停区域240中执行具体手势来检测这样的另外输入。宽泛范围的功能可供选择 为与触摸敏感检测系统和/或接近检测系统220所检测的输入相关联。控制器230可以被 配置为例如根据装置200的当前操作状态、用户如入或者装置200中执行的应用对关联进 行适配。例如，关联可以是特定于应用的、特定于菜单的、特定于视图的和/或特定于上下 文(其可以基于。
21、从当前环境或装置200的使用所获得的信息来定义)的。所要注意的是， 一个或多个输入区域250、252和/或物体110、112可以被设置为表示特定动作而无论电子 设备的当前操作状态如何。一个或多个关联可以响应于检测到两个或更多物体110、112进 入悬停区域140、240而被特别适配。 0031 图3示出了根据一个实施例的用于控制多物体悬停输入模式的方法。该方法例如 可以被控制器130、230作为控制算法来应用。该方法在步骤302开始，由此检测同时存在 紧邻输入表面210的两个或更多物体。因此，可以在已经在悬停区域140、240中检测到两 个或更多物体110、112时进入步骤302，即使并没有与。
22、输入表面进行物理接触。可能存在另 外的条件，诸如物体彼此处于预定距离之内，或者一个或多个物体与电子设备的输入表面 的物体或表面处于预定距离之内。 0032 响应于步骤302的检测，通过发起304具体输入模式而对用户界面功能进行适配， 该输入模式在这里被称作多物体悬停输入模式。因此，一个或多个具体动作可以与第一物 体和/或第二物体相关联或者与之相链接，该动作在第一或第二物体单独使用期间并不可 用。 0033 图3中所示的方法持续检查306基于悬停和/或触摸的用户输入。响应于发起多 物体悬停模式，该方法可以开始确定输入来源。如果检测到由第一物体所进行的输入308， 则可以执行310与第一物体相关联。
23、的动作。如果在步骤312中，检测到第二物体所进行的 输入，则可以执行314与第二物体相关联的动作。 0034 虽然没有在图3中图示，但是该方法通常还检查输入的目标(信息元素)，例如显 示器上的应用区域或窗口或特定图形用户界面(GUI)元素。因此，可以确定当前与悬停输 说 明 书CN 102884499 A 4/9页 8 入区域250、252相关联的软件功能。 0035 该方法进一步检查316是否已经检测到一个或两个物体从紧邻表面100而被移 除。如果是，则在步骤318，多物体悬停模式被停用或结束。否则，该方法可以返回步骤306 以检查后续的用户输入。虽然没有在图3中图示，但是该过程可以从操作3。
24、10和314返回 至步骤306以检查另外的用户输入或者返回至操作316。 0036 可以以各种方式来确定306、308、312输入来源，例如输入是否由第一或第二物体 (或另外的物体)所提供。在一个实施例中，接近检测系统120、220和/或控制器130、230 被布置为基于对所检测输入关于其它物体的感应位置的位置进行分析来确定输入来源。基 于所检测到的相关位置，可以确定308、312提供输入的物体并且选择310、314相关联的动 作。该过程可以确定输入物体关于x轴和/或y轴(沿输入表面)的位置。例如，如果在 其它(悬停的)物体110左侧检测到物体112所进行的输入，则可以响应于检测到输入而 确定。
25、物体关于彼此的位置或者对其进行持续监视。在另一个实施例中，该过程可以被配置 为基于物体110、112的一个或多个所感应属性来确定输入来源。作为利用与悬停区域中物 体(的末端)相关的感应信息的替代或者除其之外，在确定输入物体时可以利用例如与用 户的手部相关的另外的检测信息。例如，装置10、200可以被配置为检测用户的手部以及是 左手还是右手被用来进行悬停。 0037 图4图示了根据另一个实施例的方法。该方法可以在检查所检测输入并且基于所 检测输入对另外的用户界面功能进行控制的控制器130、230中作为控制算法而被加以应 用。 0038 在步骤402中，检测到存在紧邻第一输入区域的物体。例如，图2。
26、的物体220被检 测到与第一输入区域250相接近。发起404与第一输入区域相关联的动作。例如，可以显 示第一输入区域附近的图形用户界面(GUI)元素，但是也可以存在大量其它动作选择。 0039 该方法继续监视任意悬停输入。简化图4图示了在步骤406检测到存在紧邻第二 输入区域的第二物体。例如，物体112可以被检测到处于触摸屏显示器210的第二输入区 域252上方的悬停区域中。 0040 该方法可以在步骤408检查第一物体是否仍然保持紧邻输入表面100，在图2的 示例中，则是悬停区域240或具体输入区域250。如果是，则在步骤410，对与第一输入区域 和/或第二输入区域相关联的用户界面功能进行适。
27、配。因此，可以发起结合图3所图示的 多物体悬停模式以及步骤304。 0041 如果第一物体已经从悬停区域240移除，则如结合步骤318所图示的，多物体悬停 模式可以被停用，并且可以以单输入悬停模式发起412与第二输入区域相关联的动作。 0042 该特征使得能够带来为具有悬停能力的用户界面带来进一步的多样性和输入选 择。在应用两个物体的情况下，通过两个物体在悬停区域的同时出现而提供了三种输入级 别或配置。可以在多物体输入模式期间提供预先确定的特定于物体的动作，这甚至与输入 关于输入区域的位置无关。 0043 在一些实施例中，多物体悬停模式提供至少一些与计算机鼠标功能相类似的功 能。图5a图示了鼠。
28、标左键的功能在存在至少两个紧邻输入表面100的物体期间与第一(或 第二)物体相关联的实施例。 0044 在步骤502，检测到与信息元素相关联的输入。例如，检测到第一物体110对显示 说 明 书CN 102884499 A 5/9页 9 GUI元素的输入区域240的输入。针对该信息元素执行选择动作。该信息元素可以在被选 择时进行显示，或者可以针对所选择的信息元素执行进一步的动作。例如，在第一物体对项 列表中的项进行双击类型的两次输入的情况下，使得首先选择该项并且随后打开用于所选 择项的窗口。 0045 图5b图示了典型的鼠标右键输入的基本特征。在步骤552，检测到与信息元素相 关联的输入。例如，。
29、检测到第二物体112针对显示在第二区域242上的GUI信息元素所进 行的悬停输入或者对触摸屏210表面所进行的输入。在步骤554，显示可用动作的菜单。例 如，该菜单可以是上下文敏感的(context-sensitive)并且取决于用户界面或应用的当前 状态、所选择的应用窗口或信息元素。该菜单可以包括文本信息、图像和/或任意其它图形 信息。 0046 因此，可以通过在悬停区域140、240中引入至少两个物体而启用专用的鼠标按钮 功能。可以通过利用相关联物体的进一步输入来选择鼠标的右键或左键动作。 0047 图6a至图6d图示了根据实施例的用户界面交互序列。图6a图示了具有多个图 像GUI元素的初。
30、始显示内容。当用户将其两个手指在屏幕顶端并且紧邻屏幕表面进行移动 时，接近检测系统检测到现在在屏幕区域的顶端存在两个手指，这两个手指例如图6b所示 的食指和中指110、100。例如控制器130、230的控制系统通过将鼠标左键的功能链接到左 侧手指并且将鼠标右键功能链接到右侧手指而发起多物体悬停模式。如果用户利用手指中 的一个按压屏幕，则该按压根据哪个手指被使用而激活鼠标右键或左键功能。 0048 如图6c所示，如果用户利用其左侧手指按压图像602，则这样所检测的输入与功 能相关联，该功能类似于和按压鼠标左键相关联的功能，并且与该输入区域相关联的图像 可以被打开610至全屏模式。 0049 如图。
31、6d所示，如果用户利用其右侧手指100按压图像602，则这样检测的输入与类 似于鼠标右键功能的功能相关联并且可以激活弹出菜单620。 0050 以上所说明的功能使得能够提供虚拟的悬停鼠标，其可以跨UI进行使用而作为 传统鼠标功能的替代。该悬停鼠标可以提供常规的鼠标点击功能和逻辑。除了以上所说明 的功能之外或者作为其替代，包括诸如滚动之类的非点击交互在内的鼠标按键功能以及两 个或更多鼠标按键的各种组合可以被加以应用以提供另外且新颖的UI交互。 0051 在一个实施例中，该接近检测系统可以被布置为检测两个或更多物体的组合使 用，这可以被解释为多物体悬停输入模式中的第三类型的输入。操作可以与两个或更。
32、多物 体110、112所进行的输入组合相关联。例如，利用两个物体同时进行的多触摸输入可以与 仅通过单个物体所进行的触摸输入的动作有所不同的另一个动作相关联。因此，除了检查 410、412之外，针对输入可以存在一个或多个另外的检查，诸如针对第一和第二物体所进行 的同时输入的第三检查。 0052 结合图5a至图6d所说明的通常与鼠标按键相关联的动作仅表示可以在多物体悬 停模式期间与物体110、112相关联的可用动作的一些示例。例如，这样的动作可以从物体 的摇动、旋转、滚动、编辑、缩放、整形的群组中进行选择。 0053 图3至图6d仅图示了用来响应于检测到紧邻输入表面的两个或更多物体而布置 多物体功。
33、能的一些可用方法和功能。以下对一些另外或备选的实施例进行说明。 0054 根据一些实施例，在悬停区域140、240中使用多于两个的物体110、112，并且可以 说 明 书CN 102884499 A 6/9页 10 响应于检测到另外的物体而触发具体功能。例如，在悬停区域140、240中引入三个或四个 手指的组合可以触发另外的具体功能或模式。一个另外的示例是响应于检测到悬停区域中 的三个手指而发起三物体的虚拟鼠标功能。中间的物体例如可以与滚轮功能相关联。 0055 根据一些实施例，响应于多物体悬停模式期间的激活304、410和/或动作对与所 要显示的图形用户界面元素的至少一个关联进行修改。该一般。
34、被称之为在显示器上添加和 /或修改一个或多个信息元素。例如，具体GUI被临时显示或者在多物体悬停模式期间进行 显示。装置10、200还可以响应于进入多物体悬停模式和/或响应于在多物体悬停模式期 间检测到输入而产生例如可听和/或触觉输出的另外输出。因此，可以通知用户具体的多 物体悬停模式得到支持以及输入逻辑被改变。在另外的实施例中，触摸屏的区域在多物体 悬停模式期间得以被扩展。区域还可以响应于在多物体悬停模式期间在该区域上检测到物 体而被扩展。 0056 可以例如在触摸屏210上向用户指示多物体悬停模式期间可用并且与悬停区域 140、240和/或具体输入区域250、252相关联的软件功能或动作。。
35、可以当功能可在相应区 域140、240、250、254中使用时和/或当已经检测到针对悬停区域250、252的输入时对该功 能进行指示。 0057 在一个实施例中，悬停区域140、240中所检测到的(多个)物体和/或(多个)相 应物体可用的动作在多物体悬停模式期间被指示给用户。例如，每个可用动作由与GUI相 关联的对相应物体110、112进行可视化的GUI元素所指示。动作和/或物体的可视化可以 在屏幕上进行显示，并且在自动立体显示器的情况下还存在各种3D可视化选项。 0058 在一个实施例中，显示悬停区域140、240中所检测到的物体110、112。例如，依据 悬停区域140、240中所检测到的。
36、物体的数量显示一个、两个或更多手指的图像。在另一个 示例中，与应用视觉鼠标模式相结合，可以显示鼠标的图像。在又另外的示例中，装置10、 200可以被布置为在悬停区域140、240中显示物体110、112的非透明或半透明阴影。此外， 可以通过改变所显示物体的可视化来指示针对物体所检测308、312的动作。例如，所显示 鼠标的左侧按键响应于检测到第一物体110所进行的输入而移动回去。另外，可以结合相 应物体的图像或阴影对物体所进行的另外输入可用的动作进行指示。 0059 在一个实施例中，装置10、200被配置为响应于检测到存在紧邻输入表面100的第 一物体和第二物体110、112而使得指针元素进行。
37、显示。简化的图7图示了在触摸屏上显示 的指针700。所显示的指针元素700的位置关于所检测的第一物体和/或第二物体的移动 而有所变化。因此，用户可以容易检测到虚拟鼠标类型的功能被激活的多物体悬停模式。 0060 在另外的实施例中，指针700在多物体悬停模式期间指示用于进行输入的目标屏 幕区域。因此，可以由用户界面提供另外的虚拟鼠标罗技，并且对于用户而言向与悬停区域 140、240相比更小的GUI元素提供输入变得更为容易。例如，与显示光标相关的特征在通过 引用结合于此的专利申请号PCT/IB2010/050752中有所描述，并且可结合该多物体悬停输 入模式而得以应用。 0061 在一个实施例中，。
38、多物体悬停输入模式仅应用于装置10、200的屏幕上所显示的 一些项。控制器130、230可以被布置为响应于多物体悬停输入模式的激活和/或在其期间 向用户告知哪些UI对象支持多物体悬停输入模式，诸如结合图5a至图6d所说明的虚拟鼠 标按键功能。例如，这样的UI对象可以被放大，在3D可视化的情况下进行前置，移动至更 说 明 书CN 102884499 A 10 7/9页 11 接近于物体，或者可以改变这些项的可视化。 0062 装置10、200可以被配置为确定悬停区域140、240中的对象110、112之间的距离。 并且在多输入悬停模式期间可以依据所检测的距离(或距离变化)来选择动作。例如，响 应。
39、于检测到第一物体110远离第二物体112，诸如放大相关联GUI元素的具体动作可以被触 发。在另外的实施例中，多物体悬停输入模式的发起和/或无效进一步被物体之间的距离 所影响。例如，用于进入步骤304的另外的条件可以是物体之间紧邻。在一个实施例中，结 合图3的步骤302对物体之间的距离进行检查。输入模式可以被设置为仅在至少两个手指 互相足够接近时才被激活。此外，输入模式可以在物体110、112互相分开足够远时被停用 318。 0063 在一个实施例中，用户可以对与多物体悬停模式相关联的各种设置进行配置。例 如，用户可以指定要在多物体悬停模式中应用的与物体110、112和/或悬停区域250、252。
40、 相关联的功能。另外的示例是用户可以选择左手或右手按键布置，并且与物体相关联的功 能也相应地得以适配。在另外的示例中，依据用户输入添加另外的关联。例如，用户可以将 动作链接至另外的具体悬停输入。因而，用户可以根据其偏好来定制多物体模式的功能。 0064 在一些实施例中，本特征结合提供3D交互或3D交互传感的用户界面而应用。例 如，可以应用各种自动立体屏幕。接近检测系统120、220可以被配置为确定与表面100的 距离并且根据该距离选择诸如显示输出的动作。例如，GUI元素在物体110、112从表面100 后退时被放大。 0065 在一个实施例中，装置10、200被配置为检测一个或多个物体(单独或。
41、组合地)在 输入表面上方的悬停区域140、240中所进行的手势来触发多物体悬停模式或者在多物体 悬停模式期间检测输入。因此可以对接近感应场的变化进行监视。基于所检测到的变化来 识别手势。随后可以执行与所识别手势相关联的动作。例如，基于手势的输入可以结合图 3至图6d中的至少一些操作而应用。一个非常简单的示例是响应于检测到与双击鼠标按 键时的手指移动相类似的手势而选择GUI元素并且针对所选择的GUI元素执行进一步的动 作，例如显示具有所选择URL的内容的新的应用窗口。另一个示例是装置10、200被配置为 检测物体形成圆环的移动并且因此移动至后续或之前的视图。 0066 如已经指出的那样，多物体悬。
42、停模式期间的输入可以与物体110、112所进行的触 摸和/或悬停输入相关联。例如，诸如右侧手指的第二物体112在触摸屏210上所进行的 输入可以与敲击选择功能相关联，而诸如左侧手指的第一物体110所进行的非触摸悬停输 入可以同时被监视。 0067 在一个实施例中，装置10、200被配置为基于与单个物体或物体110、112的组合在 多物体悬停模式期间的移动相关联的另外属性来控制用户界面动作。例如，装置10、200可 以包括连接至控制器130、230的压力传感器，并且可以依据所检测到的压力对UI操作进行 控制。在另一个示例中，该装置被配置为基于连续输入之间的时间、对触摸屏210进行触摸 的时间、物。
43、体110、112在悬停区域140、240中的移动速度等来控制动作。例如，可基于物体 相对于触摸屏210的速度来选择两个或更多动作，例如，快速和缓慢触摸输入可以被区分 开来。这样另外的具体输入可以在多物体悬停模式期间被检测，例如作为与图3的操作308 至314中的至少一个相结合的附加检查或另外检查。 0068 以上所说明的特征可以被应用于不同应用和应用模式。针对其可获得特定优势的 说 明 书CN 102884499 A 11 8/9页 12 一些应用示例包括浏览器应用、利用地图的应用、媒体内容相关的应用和服务、利用有所增 强的真实性交互的应用，等等。 0069 虽然以上已经结合小型显示器对一些示。
44、例进行了说明，但是该悬停相关特征可以 结合大型显示器和表面而加以应用。另外，接近检测系统120、220可以被配置为布置多个 手的手指。例如，系统可以支持双手进行悬停。另外，系统可以支持检测与大型显示器的不 同区域进行交互的两个或更多用户所进行的悬停。 0070 图8示出了根据示例实施例的电子设备800的结构的框图。该电子设备可以包括 装置10或200。虽然图示了电子设备800的一个实施例并且其随后将出于示例的目的而 被描述，但是其它类型的电子设备也可以采用本实施例，其它类型的电子设备诸如但不限 于便携式数字助理(PDA)、寻呼机、移动计算机、台式计算机、膝上计算机、媒体播放器、电视 机、游戏设。
45、备、相机、视频录影机、定位设备、电子书、可佩戴设备、投影仪设备和其它类型的 电子系统。此外，示例实施例的装置并无需是整个电子设备，而在其它示例实施例中可以是 电子设备的组件或组件群组。 0071 处理器802被配置为执行指令并实施与电子设备800相关联的操作。处理器802 可以包括用于执行例如包括结合图1至7所描述的一个或多个功能在内的各种功能的装 置，诸如数字信号处理器设备、微处理器设备和电路。处理器802可以通过使用从存储器所 获取的指令对电子设备800的组件之间的输入和输出数据的接收和处理进行控制。处理器 802可以在单个芯片、多个芯片或多个电子组件上实现。能够用于处理器802的一些架构。
46、示 例包括专用或嵌入式处理器以及ASIC。 0072 处理器802可以包括对一个或多个计算机程序进行操作的功能。计算机程序代码 可以存储在非瞬时或有形存储器804中。至少一个存储器和计算机程序代码可以被配置为 利用至少一个处理器使得该装置执行例如包括结合图1至7所描述的一个或多个功能在内 的至少一个实施例。通常，处理器802与操作系统一起进行操作以执行计算机代码并产生 和使用数据。 0073 作为示例，存储器804可以包括诸如EEPROM、闪存等的非易失性部分，以及诸如包 括用于临时存储数据的高速缓存区域的随机访问存储器(RAM)的易失性部分。信息还可以 驻留于可移动存储介质上并且在需要时被加。
47、载或安装到电子设备800中。 0074 电子设备800可以包括与包括传送器和接收器的收发器单元806进行可操作通 信的天线(或多个天线)。电子设备800可以利用一种或多种空中接口标准和通信协议 进行操作。作为说明，电子设备800可以依据任意多种第一、第二、第三和/或第四代通信 协议等进行操作。例如，电子设备800可以依据诸如以太网和数字用户线路(DSL)的有线 协议，依据诸如IS-136(时分多址(TDMA)、全球移动通信系统(GSM)和IS-95(码分多址 (CDMA)的第二代(2G)无线通信协议，依据诸如第三代合作伙伴计划(3GPP)所给出的3G 协议、CDMA2000、宽带CDMA(WC。
48、DMA)和时分同步CDMA(TD-SCDMA)的第三代(3G)无线通信协 议，或者依据第四代(4G)无线通信协议、诸如802.11的无线局域网协议、诸如蓝牙的短距 离无线协议等进行操作。 0075 电子设备800的用户接口可以包括诸如扬声器的输出设备808，诸如麦克风的一 个或多个输入设备810，键盘或者一个或多个按钮或致动器，以及用于以二维或更多维度显 示信息的显示器812 说 明 书CN 102884499 A 12 9/9页 13 0076 输入设备810可以包括被配置为从用户触摸接收输入并且将该信息发送至处理 器802的触摸感应设备。这样的触摸感应设备可以被配置为还识别触摸敏感表面上的。
49、触摸 位置和大小。触摸感应设备可以基于包括但不限于电容感应、电阻感应、表面声波感应、压 力感应、电感感应和光学感应在内的感应技术。此外，触摸感应设备可以基于单点感应或多 点感应。在一个实施例中，输入设备是触摸屏，其位于显示器812的前端。输入设备810可 以被配置为响应于检测到(302)第一物体和第二物体同时接近而以一种输入模式进行操 作，其中第一动作与第一物体所进行的输入相关联而第二输入与第二物体所进行的输入相 关联。 0077 显示器812可以为适用于所讨论电子设备800的任意类型，一些示例包括等离子 显示面板(PDP)、液晶显示器(LCD)、发光二极管(LED)、有机发光二极管(OLED)、投影仪、全 息显示器等。悬停甚至可以布置在显示器被投影于其上的表面上方。例如，可以使用相机 来检测手指的接近和位置。 0078 电子设备800还包括操作耦合至处理器802的接近检测系统814，诸如之前所说明 的系统120、220。接近检测系统814被配置为当手指、触笔或其它定位。