《用于操作用户装置的传感器的方法和设备.pdf》由会员分享，可在线阅读，更多相关《用于操作用户装置的传感器的方法和设备.pdf（23页珍藏版）》请在专利查询网上搜索。
1、10申请公布号CN104049738A43申请公布日20140917CN104049738A21申请号201410095200X22申请日20140314102013002722320130314KRG06F3/01200601G06F3/034620130171申请人三星电子株式会社地址韩国京畿道水原市72发明人金大成姜志营金镇龙李宝嬴林承卿全轸泳74专利代理机构北京铭硕知识产权代理有限公司11286代理人韩明星金玉兰54发明名称用于操作用户装置的传感器的方法和设备57摘要一种用于操作用户装置的传感器的方法和设备，所述方法包括检测使用用户输入部件进行的输入，测量用户输入部件与用户装置的屏幕之。
2、间的深度值，通过基于测量的深度值选择性地驱动多个传感器中的一个或更多个传感器来激活手势识别功能，基于由被选择性地驱动的传感器收集的信息段来识别用户手势。30优先权数据51INTCL权利要求书2页说明书11页附图9页19中华人民共和国国家知识产权局12发明专利申请权利要求书2页说明书11页附图9页10申请公布号CN104049738ACN104049738A1/2页21一种操作用户装置的多个传感器的方法，所述方法包括检测用户输入部件；测量用户输入部件与用户装置的屏幕之间的深度值；通过基于测量的深度值选择性地驱动所述多个传感器中的一个或更多个传感器来激活手势识别功能；以及基于由被选择性地驱动的传感。
3、器收集的信息段来识别用户手势。2根据权利要求1所述的方法，其中，激活手势识别功能的步骤包括确定所述多个传感器中的哪个传感器具有包括测量的深度值的识别范围；以及选择性地驱动所述多个传感器中确定的一个或更多个传感器。3根据权利要求1所述的方法，还包括当用户输入部件的深度值改变时，响应于改变的深度值来驱动不同的传感器。4根据权利要求1所述的方法，还包括响应于基于由被选择性地驱动的传感器收集的信息段中的每个信息段的用户手势来执行功能。5根据权利要求4所述的方法，其中，运行功能的步骤包括基于用户输入部件的深度值，根据功能的执行来提供视觉反馈。6根据权利要求1所述的方法，其中，用户手势包括根据由被选择性地。
4、驱动的传感器收集的信息段被分类和设置的特定手势。7根据权利要求1所述的方法，其中，识别用户手势的步骤包括基于由被选择性地驱动的传感器收集的信息段来识别以下项中的至少一个单点触摸手势、多点触摸手势、单点悬停手势、多点悬停手势和手部动作手势。8一种用户装置，包括传感器单元，被配置为包括多个传感器，用于检测用户输入和输入的改变；以及控制单元，被配置为检测用户输入部件，测量用户输入部件与用户装置的屏幕之间的深度值，通过基于测量的深度值选择性地驱动所述多个传感器中的一个或更多个传感器来激活手势识别功能，并基于由被选择性地驱动的传感器收集的信息段来识别用户手势。9根据权利要求8所述的用户装置，其中，传感器。
5、单元包括以下传感器中的一个或更多个传感器触摸传感器，用于识别触摸输入；接近传感器，用于检测外部对象或用户输入部件的接近；距离测量传感器，用于测量触摸输入部件与用户装置之间的距离；图像传感器，用于采集图像；动作识别传感器，用于在3D空间中识别动作和运动；方向传感器，用于检测方向；加速度传感器，用于检测运动速度；和环境检测传感器。10根据权利要求8所述的用户装置，其中，所述控制单元确定所述多个传感器中的哪个传感器具有包括测量的深度值的识别范围，并选择性地驱动确定的一个或更多个传感器。11根据权利要求8所述的用户装置，其中，当确定用户输入部件的深度值已改变时，控制单元响应于改变的深度值来驱动不同的传。
6、感器。12根据权利要求8所述的用户装置，还包括存储器单元，用于存储响应于基于由传感器收集的信息段的用户手势而设置的功能执行命令。13根据权利要求8所述的用户装置，其中，控制单元响应于识别的用户手势，基于功能执行命令和深度值来提供不同的视觉反馈。权利要求书CN104049738A2/2页314根据权利要求8所述的用户装置，其中，用户手势包括根据由被选择性地驱动的传感器收集的信息段被分类和设置的特定手势。15根据权利要求8所述的用户装置，其中，所述控制单元基于由被选择性地驱动的传感器收集的信息段来识别以下项中的至少一个单点触摸手势、多点触摸手势、单点悬停手势、多点悬停手势和手部动作手势。权利要求书。
7、CN104049738A1/11页4用于操作用户装置的传感器的方法和设备技术领域0001本发明总体地涉及一种用于操作用户装置的传感器的方法和设备，更具体地讲，涉及一种用于操作识别各种类型的用户手势的用户装置的传感器的方法和设备。背景技术0002用户装置（例如，智能电话、平板PC和膝上型计算机）由于它们便于使用和携带而被用在各种领域。用户装置通过经由显示单元提供各种内容和功能来支持功能的直观使用。用户可使用各种输入部件（诸如，触摸、语音和动作）来操纵显示在显示单元上的内容和功能，或将必要的信息输入到装置。0003用户装置可配备有各种类型的感应器以识别用户的各种输入。可根据装置与执行用户的输入的空。
8、间之间的距离对传感器进行分类，并且传感器可在指定的界限内根据动作的方向和环境的特性来识别用户的输入。例如，电容型触摸传感器基于用户身体的电容值的变化来识别用户的输入。电容型触摸传感器可准确地检测用户输入的位置，但具有以下缺点当装置与用户之间的距离是特定值或更大的值时，由于电容值的变化很小，准确度会降低。红外线传感器具有针对用户输入的最宽距离识别范围，但具有以下缺点用户输入的位置会无法被准确地识别。0004在常规的用户装置中，各种传感器可具有各自被驱动的不同约束条件。由于这个缘故，尽管用户装置可包括各种传感器，但用户装置具有针对用户的输入的有限识别范围。发明内容0005本发明已被做出以至少解决上。
9、述问题和缺点，并至少提供下述优点。因此，本发明的一方面提供一种用于操作用户装置的传感器的方法和设备，其中，所述方法和设备在根据用户装置与用户之间的距离有组织地结合各种传感器进行操作的同时，能够扩大用户输入的识别范围。0006此外，本发明提供一种用于操作用户装置的传感器的方法和设备，其中，所述方法和设备通过使用某一传感器对另一传感器的局限进行增补，来减少用户装置的功耗并提高用户输入的准确度。0007根据本发明的一方面，一种操作用户装置的多个传感器的方法包括检测用户输入部件，测量用户输入部件与用户装置的屏幕之间的深度值，通过基于测量的深度值选择性地驱动所述多个传感器中的一个或更多个传感器来激活手势。
10、识别功能，并基于由被选择性地驱动的传感器收集的信息段来识别用户手势。0008根据本发明的另一方面，一种用户装置包括传感器单元，被配置为包括多个传感器，用于检测用户输入和输入的改变；控制单元，被配置为检测用户输入部件，测量用户输入部件与用户装置的屏幕之间的深度值，通过基于测量的深度值选择性地驱动所述多个传感器中的一个或更多个传感器来激活手势识别功能，并基于由被选择性地驱动的传感器收集的信息段来识别用户手势。说明书CN104049738A2/11页5附图说明0009通过结合附图进行的以下详细的描述，本发明的实施例的以上和其他方面、特征和优点将更加清楚，其中0010图1是示出根据本发明的实施例的移动。
11、终端的配置的框图；0011图2是示出根据本发明的实施例的用于操作移动终端的传感器的方法的流程图；0012图3示出根据本发明的实施例的用于操作移动终端的传感器的方法；0013图4示出根据本发明的实施例的基于操作传感器的方法与移动终端进行的用户交互；0014图5示出根据本发明的另一实施例的基于操作传感器的方法与移动终端进行的用户交互；0015图6示出根据本发明的实施例的基于操作传感器的方法根据移动终端与用户的手之间的距离提供不同视觉反馈的移动终端的屏幕；0016图7到图9示出根据本发明的实施例的基于操作传感器的方法被移动终端识别的各种用户手势。具体实施方式0017参照附图详细描述根据本发明的实施例。
12、的用于操作用户装置的传感器的方法和设备。在详细描述本发明之前，下文所用的术语或词语不应被理解为具有普通或词典含义，而应被理解为具有符合本发明的技术领域的含义和概念。此外，以下描述和附图示出本发明的实施例，并不限制本发明的范围。本领域的普通技术人员应理解存在所述实施例的各种等同物和修改。此外，在附图中，一些元件被放大地示出并被示意性地示出。每一个元件的尺寸并未准确地反映它的真实尺寸。因此，本发明不受画在附图中的相对尺寸或空间的限制。0018根据本发明的方法和设备可被应用于移动终端。所述移动终端可以是移动电话、智能电话、平板PC、手持PC、便携式媒体播放器（PMP）或个人数字助理（PDA）。在以下。
13、描述中，根据本发明的用于操作用户装置的传感器的方法和设备假定被应用于移动终端。0019图1是示出根据本发明的实施例的移动终端的配置的框图。0020参照图1，在本发明的实施例中，移动终端包括显示单元110、输入单元120、无线通信单元130、音频处理单元140、相机150、传感器单元160、存储器单元170和控制单元180。0021显示单元110显示针对移动终端的步骤所必需的各种功能屏幕。显示单元110在控制单元180的控制下将从控制单元180接收到的图像数据转换为模拟信号，并显示所述模拟信号。显示单元110包括用于当操作移动终端时提供各种屏幕的显示面板和用于支持在显示面板的前侧或后侧上产生输入。
14、事件的触摸面板。电阻型面板、电容型面板或电磁感应型面板可用于触摸面板。0022显示单元110支持基于深度值（即，屏幕与用户输入部件之间的距离）相应于用户的特定手势来改变屏幕的图形效果的功能，并输出改变的图形效果。0023输入单元120产生用于移动终端的步骤的各种输入信号。输入单元120包括用说明书CN104049738A3/11页6于接收数字或字母信息并设置各种功能的多个输入键和功能键（例如，侧键、热键和主屏幕键）。所述输入单元120产生与对移动终端的功能进行的用户设置和控制有关的键信号，并将所述键信号传送到控制单元180。控制单元180根据响应于键信号的相应输入信号来控制功能。如果移动终端1。
15、00的触摸面板支持全触摸屏形式，则可通过虚拟触摸板的形式来提供输入单元120。此外，如果触摸面板被包括在显示单元110中，则显示单元110操作为输入单元120。在这种情况下，通过触摸面板来产生用于移动终端的步骤的输入信号。0024无线通信单元130执行移动终端的通信。无线通信单元130连同可支持的移动通信网络，形成通信信道并执行通信（诸如，语音通信、视频通信和数据通信）。无线通信单元包括射频接收器，用于对接收到的信号的频率执行低噪声放大和下变换。如果移动终端未提供无线通信功能，则无线通信单元130可被省略。0025音频处理单元140包括扬声器，用于支持从移动终端100产生的或由移动终端100解。
16、码的音频信号的输出；麦克风，用于采集音频信号以便支持语音呼叫、视频电话和记录功能。音频处理单元140可包括编码器/解码器（即，编解码器）。编解码器可包括用于处理分组数据的数据编解码器和用于处理音频信号（诸如，语音）的音频编解码器。音频处理单元140通过音频编解码器将接收到的数字音频信号转换为模拟信号，并通过扬声器播放所述模拟信号。音频处理单元140通过音频编解码器将通过麦克风接收到的模拟音频信号转换为数字音频信号，并将所述数字音频信号传送到控制单元180。0026相机150通过捕获来采集图像，并提供采集的图像。相机150包括相机传感器，用于将接收到的光信号转换为电信号；图像信号处理器，用于将由。
17、相机传感器获得的模拟图像信号转换为数字数据；数字信号处理器，用于对视频信号执行图像处理（例如，缩放、去除噪声和转换为RCG信号）以便将从图像信号处理器输出的数字数据显示在触摸屏幕上。相机传感器可以是电荷耦合器件（CCD）传感器或互补金属氧化物半导体（CMOS）传感器，并且，可使用DSP来代替数字信号处理器。相机150在控制单元180的控制下支持用于识别用户手势的传感器功能。相机150可选择性地以后台功能的形式被开启，从而能够将通过镜头采集到的图像传送到控制单元180。0027传感器单元160检测用户的输入的变化和周围环境的变化，并将相应信息传送到控制单元180。传感器单元160包括各种类型的传。
18、感器（例如，用于识别触摸输入的触摸传感器、用于检测外部对象或用户输入部件的靠近的接近传感器、用于测量触摸输入部件与移动终端之间的距离的距离测量传感器、用于采集图像的图像传感器、用于识别3D空间中的动作和运动的动作识别传感器、用于识别方向的方向传感器、用于检测运动速度的加速度传感器和环境检测传感器）。在传感器单元160中，根据用户与移动终端之间的距离（即，深度值）来驱动不同传感器。传感器单元160支持用于将由驱动传感器采集的信息传送到控制单元180的功能。0028存储器单元170存储移动终端100的操作系统（OS）和各种应用（以下，称为APP）以及从移动终端产生的各种数据。数据可包括当运行移动终。
19、端的APP时产生的数据，也可包括使用移动终端产生或从外部（例如，外部服务器、另一移动终端或PC）接收且被存储的其它类型的数据。存储器单元170存储由移动终端提供的用户界面以及关于与移动终端功能的处理有关的各种类型的设置的信息。存储器单元170还存储用于确定用户手势的映射表。映射表可以是用于存储基于触摸的手势、基于悬停的手势和基于图像（例如，手部动作）说明书CN104049738A4/11页7的手势的数据库。如果映射表通过特定服务器来提供，则移动终端访问特定服务器并识别根据用户输入的用户手势。存储器单元170还存储关于功能的执行的信息，其中，响应于特定用户手势，基于屏幕和用户输入部件之间的深度值。
20、来逐步地设置所述功能。0029控制单元180控制移动终端的全部步骤和移动终端的内部元件之间的信号流。控制单元180还执行用于处理数据的功能。控制单元180控制从电池到内部元件的供电。当被供电时，控制单元180控制引导移动终端的处理，并执行存储在程序区域中的各种应用，以便移动终端响应于用户设置来执行功能。0030控制单元180包括传感器驱动单元181和手势识别单元182。当传感器单元180检测用户输入部件的靠近时，传感器驱动单元181测量用户输入部件与屏幕之间的深度值。用户输入部件可以是用户的手或触摸笔，但不限于此。控制单元180基于红外线传感器是否检测到热度来确定用户的手是否靠近。传感器驱动单。
21、元181基于用户的手的深度值来选择多个传感器中的一个或更多个驱动传感器。例如，如果用户的手靠近屏幕，则传感器驱动单元181仅驱动触摸传感器。相反，如果用户的手远离屏幕，则因为基于触摸传感器的用户输入是有限的，所以传感器驱动单元181关闭触摸传感器。然而，传感器驱动单元181开启红外线传感器或相机传感器，以便收集用户输入信息。如果特定传感器的步骤停止，则传感器驱动单元181控制驱动传感器，使得驱动传感器被关闭。此外，传感器驱动单元181在睡眠模式或待机模式下驱动所述驱动传感器，使得驱动传感器的步骤停止。如果在睡眠模式或待机模式下的传感器需要再次被驱动，则传感器驱动单元181将中断信号传送到传感器。
22、以便驱动所述传感器。0031传感器驱动单元181选择性地驱动选择的传感器，从被驱动的传感器收集关于被驱动的传感器的信息，并将收集到的信息传送到手势识别单元182。手势识别单元182支持基于关于选择性地被驱动的传感器的信息来确定用户手势的功能。用户手势可包括触摸手势、悬停手势和手部动作手势，但用户手势不限于此。手势识别单元182根据来自驱动传感器的用户输入来提取特性（例如，位置的改变、行为的改变和距离的改变），并识别与提取的特性相匹配的用户手势。0032以下参照图2和图3来详细描述控制单元180的功能。0033图2和图3示出根据本发明的实施例的用于操作移动终端的传感器的方法。0034参照图2和图。
23、3，在步骤210，移动终端响应于用户输入或根据预定的安排来开启显示单元110的屏幕。在这种情况下，移动终端在准备接收用户的输入的待机模式下操作，并将根据移动终端的步骤的运行屏幕输出到待机屏幕。运行屏幕可包括主屏幕、APP运行屏幕、菜单屏幕、键盘屏幕、消息书写屏幕、互联网屏幕和锁定屏幕。0035在步骤220，移动终端确定靠近事件是否已被检测到。用户可将用户输入部件（例如，触摸笔或用户的手）靠近移动终端。0036靠近事件包括通过触摸传感器或红外线传感器检测到靠近所述移动终端的对象，但靠近事件不限于对象的检测。例如，如果触摸面板是电容型的，则触摸传感器可基于触摸面板中改变的电容值来检测靠近移动终端的。
24、人体部位（例如，手）。此外，红外线传感器可通过检测从人体产生的红外线的变化来检测靠近移动终端的手。当靠近事件被检测到时，移动终端识别出用户输入部件已靠近屏幕。0037在步骤230，移动终端测量靠近屏幕的用户输入部件与屏幕之间的距离（即，深度说明书CN104049738A5/11页8值）。用户输入部件可以是用户的手或触摸笔。在描述于此的本发明的实施例中，用户输入部件被假定为用户的手。深度值可由红外线传感器测量，但本发明不限于此。例如，如果移动终端配备有红外线传感器，则从发光单元产生的红外线从对象被反射，并被光接收单元接收。这里，红外线传感器将关于电压根据接收的红外线的量的变化的信息传送到控制单元。
25、180。控制单元180基于关于电压的变化的信息来测量用户输入部件与屏幕之间的距离。0038在步骤240，移动终端通过响应于测量的深度值选择性地驱动多个传感器中的一个或更多个传感器来激活手势识别功能。在控制单元180的控制下，根据响应于用户输入部件与屏幕之间的深度值被驱动的传感器，来激活手势识别功能。0039例如，如图3所示，本发明的移动终端被假定包括传感器A，用于检测第一识别区域310中的用户输入；传感器B，用于检测第二识别区域320中的用户输入；传感器C，用户检测第三识别区域330中的用户输入。0040传感器A识别在0L厘米（例如，011厘米）距离内靠近或触摸屏幕的用户输入部件。传感器B识别。
26、在M厘米厘米（例如，1厘米300厘米）距离内的用户输入部件。传感器C识别在N厘米厘米距离内的用户输入部件。以下表1列出了传感器A、传感器B和传感器C的特性，其中，所述特性仅是说明性的，单独地被提供以为了便于描述传感器，并且本发明不限于此。0041表100420043说明书CN104049738A6/11页90044如表1所示，传感器A、B和C在识别用户的输入的范围方面有差异。在现有技术中，因为包括在移动终端中的传感器根据各自的识别区域单独地操作，所以它们具有有限的识别用户的输入的范围。0045根据本发明的实施例，移动终端通过根据用户输入部件与屏幕之间的距离选择性地驱动传感器来识别各种用户手势。。
27、为此，移动终端支持基于用户输入部件与屏幕之间的深度值，根据图3的302中示出的形式的每个传感器的特性来选择性地驱动传感器A、传感器B和传感器C的功能。例如，如果用户输入部件位于L厘米内，则移动终端仅驱动传感器A。移动终端响应于从传感器A接收到的信号来检测触摸和悬停，并识别方向、可及性、关于坐标的信息和与用户输入有关的深度值。0046如果用户输入部件位于LM厘米内，则移动终端驱动传感器A和传感器B。如果在传感器A和传感器B已被驱动的状态下，用户输入部件的位置改变为在L厘米内的位置，则移动终端停止传感器B的操作。当传感器B停止操作时，移动终端关闭传感器B，但本发明不限于此。例如，移动终端可控制传感。
28、器B，使得传感器B在睡眠模式或待机模式下操作。当产生中断信号时，在睡眠模式或待机模式下操作的传感器B再次启动它的传感器功能。0047如果用户输入部件位于MN厘米内，则移动终端仅驱动传感器B。如果用户输入部件位于N厘米厘米内，则移动终端驱动传感器B和传感器C。例如，传感器A可以是触摸传感器，传感器B可以是红外线传感器，并且传感器C可以是相机传感器，但本发明不限于此示例。0048如图3的302中所示，可存在以下区域，其中，传感器A的第一识别区域310可与传感器B的第二识别区域320重叠，并且传感器B的第二识别区域320可与传感器C的第三识别区域330重叠。0049如果两个或更多个传感器被驱动，则移。
29、动终端支持以互补的方式驱动传感器。例如，移动终端可驱动传感器A和传感器B，使得驱动传感器A以仅识别坐标（因为传感器A具有高功耗），并且驱动传感器B以识别方向和深度值。0050此外，如果从一个传感器接收到的信号弱于从其它传感器接收到的信号，则移动终端基于从所述其它传感器接收到的更强信号来识别用户手势。移动终端可通过传感器B来检测人体，并确定是否通过传感器A接收到人体检测信号以便提高检测人体的准确度，由此能够提高识别对象的准确度。0051在步骤250，移动终端确定用户输入部件的深度值是否已改变。如果确定深度值未被改变，则移动终端返回到步骤230，其中，在所述步骤230中，移动终端基于深度值选择性地。
30、驱动传感器。0052如果确定深度值已改变，则在步骤260中，移动终端使用基于用户输入部件的深度值被选择性地驱动的传感器来检测用户手势。移动终端响应于检测到的用户手势来执行说明书CN104049738A7/11页10预定的执行命令。0053如上所述，在本发明的实施例中，响应于用户与移动终端之间的深度值来驱动不同的传感器，并且由驱动传感器收集的信息会有所不同。移动终端使用响应于深度值选择性地被驱动的传感器来识别各种用户输入。相应地，尽管由传感器收集的信息指示相同的手势，但移动终端对功能进行细分并操作所述功能，这是因为收集到的信息根据距离而不同。0054下文描述基于根据本发明的操作传感器的方法进行的。
31、用户交互的详细示例。0055图4示出根据本发明的实施例的基于操作传感器的方法与移动终端进行的用户交互。在图4中，假定虚拟拨盘（JOGDIAL）出现在屏幕上方，用户手势被描述为旋转虚拟拨盘430的手势，但本发明不限于此。0056参照图4，移动终端响应于来自用户的请求将视频播放屏幕410输出到显示单元110。0057用户可把他们的手420靠近屏幕以便执行用于运动图像的特定功能。移动终端检测靠近事件，并测量用户的手420与屏幕之间的深度值（例如，距离）。移动终端通过基于测量的深度值选择性地驱动传感器来激活手势识别功能。0058用户可在播放运动图像的同时做出旋转虚拟拨盘430的手势，以便改变播放时间。。
32、响应于所述手势，移动终端基于选择性地被驱动的传感器来检测使用指尖的输入（例如，多点触摸区域或多点悬停区域的输入）。如果距离首先输入的原点超过特定角度的动作被检测到，则移动终端确定已做出旋转虚拟拨盘430的手势。在这种情况下，移动终端根据手势的运动方向来前后移动运动图像的播放或执行快速倒回功能。0059在本发明的实施例中，因为基于用户的手420与屏幕之间的距离来激活不同的传感器，所以移动终端响应于由传感器收集的信号来细分和识别用户的输入。0060例如，用户的手420可具有以下状态手420已触摸屏幕的状态、手420已经在第一距离与屏幕分离的状态、手420已经在第二距离与屏幕分离的状态、手420已经。
33、在第三距离与屏幕分离的状态。如果手420已触摸屏幕，则移动终端可选择性地仅驱动第一传感器。如果手420已经在第一距离与屏幕分离，则移动终端可驱动第一传感器和第二传感器。如果手420已经在第二距离与屏幕分离，则移动终端可仅驱动第二传感器。如果手420已经在第三距离与屏幕分离，则移动终端可驱动第二传感器和第三传感器。0061以下表2列出根据被激活的传感器关于可识别用户输入的信息和关于分类的功能的信息。0062表20063说明书CN104049738A108/11页110064如上所述，用户可基于用户的手420与屏幕之间的深度值以非常小的单位来控制功能（诸如，快速倒回功能或倒回功能），或以大单位来控。
34、制所述功能。此外，旋转虚拟拨盘的手势可应用于除运动图像的播放之外的各种APP（诸如音量控制功能和音频通道搜索功能）。0065图5示出根据本发明的另一实施例的基于操作传感器的方法与移动终端进行的用户交互。在图5中，用户手势被描述为抓住并上拉对象的手势，但本发明不限于此。0066参照图5，移动终端响应于用户输入来输出包括至少一个对象的屏幕510。0067用户可将他们的手530靠近屏幕510以便操纵显示在显示单元110上的屏幕。响应于此，移动终端响应于手530与屏幕510之间的深度值来选择传感器。0068用户可做出使用手530抓住显示在屏幕上的特定对象520的手势，并可做出使特定对象520远离屏幕的。
35、手势。响应于此，移动终端选择显示在与指尖被检测到的区域相应的位置上的特定对象520，并输出图形效果（诸如选择的特定对象被上拉的效果）。0069在这种情况下，虽然响应于用户的手530与屏幕510之间的深度值，可改变驱动传感器，但移动终端保持上拉特定对象520的手势的识别。0070此外，如图5的502所示，移动终端响应于来自用户的请求将2D地图屏幕540输出到显示单元。在这种情况下，可选择2D地图屏幕中的特定位置。在2D地图屏幕已被显示的状态下，用户可做出抓住对象的手势和使对象远离屏幕的手势。0071响应于此，移动终端识别抓住手势和上拉手势，并提供以下图形效果以3D图像形式输出包括与特定位置的选择。
36、的位置相应的地图的屏幕550。0072图6示出根据本发明的实施例的基于操作传感器的方法根据移动终端与用户的说明书CN104049738A119/11页12手之间的距离来提供不同的视觉反馈的移动终端的屏幕。0073参照图6，根据屏幕与用户的手之间的距离并基于用户的特定手势，移动终端可通过不同的方式来改变用于屏幕的图形效果。移动终端然后提供改变的图形效果。0074例如，如图6的601所示，用户可将他的手靠近屏幕620并做出迅速移动手的扫掠手势610。响应于此，移动终端识别用户的扫掠手势610，并响应于扫掠手势610提供在屏幕620上波浪上升的图形效果。根据本发明的实施例，如果用户将他的手更加靠近屏。
37、幕并做出扫掠手势610，则移动终端输出在屏幕620上更强的波浪上升的图形效果。如果用户将他的手远离屏幕然后做出扫掠手势610，则移动终端输出在屏幕620上较弱的波浪上升的图形效果。例如，以下表3列出传感器根据扫掠手势610的图形效果，但本发明不限于此示例。0075表300760077此外，如图6的602所示，用户可将一根手指靠近屏幕并执行指点（POINTING）手势630，其中，在指点手势630期间，一段时间过去。0078响应于此，移动终端识别用户的指点手势，并提供水滴落到屏幕生成波纹的图形效果640。根据本发明的实施例，移动终端输出以下图形效果随着手指离开屏幕的距离增加，波纹的大小增大，好像。
38、水滴从更高的距离落下。0079例如，以下表4示出传感器根据指点手势630的图形效果，但本发明不限于此示例。0080表40081说明书CN104049738A1210/11页130082图7到图9示出根据本发明的实施例的基于操作传感器的方法被移动终端识别的各种用户手势。0083参照图7的（A）到（J），移动终端支持通过响应于用户的手与屏幕之间的深度值选择性地开启手势识别传感器，来识别手势的功能。根据本发明的实施例，通过选择性地开启和驱动传感器来识别各种类型的手势，以便扩大识别用户手势的范围。0084图7的（A）到（J）是在未触摸屏幕的情况下使用一只手进行的用户交互的示例。在图7的（A）中，移动终。
39、端识别以下手势在触摸传感器和红外线传感器已被驱动的状态下，使手掌指向触摸传感器和红外线传感器，使手掌靠近屏幕，然后拉动手掌远离屏幕。在图7的（B）中，移动终端识别以下手势垂直地放置手掌，然后沿特定方向（向右、向左、向上或向下）迅速地移动手掌。在图7的（C）中，移动终端识别以下手势使手掌指向红外线传感器、触摸传感器和相机传感器然后水平地摇动手掌（左方向和右方向）。在图7的（D）中，移动终端识别以下手势在红外线传感器、触摸传感器和相机传感器已被驱动的状态下，使手掌靠近红外线传感器、触摸传感器和相机传感器。在图7的（E）中，移动终端识别以下手势在触摸传感器和相机传感器已被驱动的状态下，将两个手指向内。
40、捏或向外张。在图7的（F）中，移动终端识别以下手势在触摸传感器已被驱动的状态下，测量指尖的位置，其中，指尖与屏幕之间插有特定距离。在图7的（G）中，移动终端识别顺时针转动手的手势。在图7的（H）中，根据被驱动的传感器的类型，移动终端识别逆时针转动手的手势。在图7的（I）中，移动终端识别将手靠近传感器然后保持覆盖特定时间的手势。在图7的（J）中，移动终端识别推动手掌靠近传感器的手势。0085如图8所示，移动终端还根据选择性地被驱动的传感器识别使用双手的各种类型的用户交互。图8的（A）是推动两个手掌靠近传感器的手势，图8的（B）是将两个手掌指向传感器然后拓宽双手之间的距离的手势。图8的（C）是将两。
41、个手掌水平地彼此面对然后旋转手掌使得它们垂直地彼此面对的手势。图8的（D）是将两个手掌水平地彼此面对然后将手掌移动到一起的手势。此外，在图8的（E）中，根据本发明的实施例，移动终端识别以下手势在某一只手正触摸屏幕的状态下将另一只手靠近屏幕，但移动的手尚未触摸屏幕。0086此外，如图9的（A）（G）中所示，本发明的移动终端基于手的形状识别各种手部动作手势。图9的（A）中是将手掌指向输入单元120的手部动作。图9的（B）是握紧拳头说明书CN104049738A1311/11页14并将拳头指向输入单元120的手部动作。图9的（C）是在拳头被紧握的状态下仅使拇指向上的手部动作。图9的（D）是将食指指向。
42、输入单元120的手部动作。图9的（E）是使用拇指和食指形成圆圈并伸展其余手指的手部动作。图9的（F）是伸展期望数量的手指的手部动作。图9的（G）是将手掌朝向传感器伸展然后抓住手指的手部动作。根据本发明的实施例，图9的（A）（G）是可被识别的手部动作的示例，但本发明不限于此示例。0087根据本发明的实施例，根据用于操作移动终端的传感器的方法和设备，通过响应于深度值（即，装置与用户输入部件（例如，用户的手）之间的距离）选择性地开启多个传感器，多个具有不同特性的传感器如一个传感器一样进行操作。0088此外，根据本发明的实施例，在宽范围内识别手势，这是因为尽管一个传感器没有准确地识别用户输入，但可由另。
43、一传感器灵活地增补用户输入。因此，可提高输入的准确度和可靠性。此外，如果根据本发明的特定传感器具有高功耗，则可通过在相同的识别范围用低功耗的传感器增补所述特定传感器来降低功耗。0089如上所述，以上已通过说明书和附图描述了根据本发明的用于操作用户装置的传感器的方法和设备。尽管使用了特定术语，但仅根据它们的普通含义来使用所述术语，以便容易地描述本发明的技术内容并有助于理解本发明。本发明不限于前述的本发明的实施例。也就是说，本领域的技术人员将清楚的是各种基于本发明的技术精神的实施例可被实施。说明书CN104049738A141/9页15图1说明书附图CN104049738A152/9页16图2说明书附图CN104049738A163/9页17图3说明书附图CN104049738A174/9页18图4说明书附图CN104049738A185/9页19图5说明书附图CN104049738A196/9页20图6说明书附图CN104049738A207/9页21图7说明书附图CN104049738A218/9页22图8说明书附图CN104049738A229/9页23图9说明书附图CN104049738A23。