电子装置及其控制方法.pdf

摘要
申请专利号：	CN201410006813.1	申请日：	2014.01.07
公开号：	CN103914144A	公开日：	2014.07.09
当前法律状态：	撤回	有效性：	无权
法律详情：	发明专利申请公布后的视为撤回IPC(主分类):G06F 3/01申请公布日:20140709\|\|\|实质审查的生效IPC(主分类):G06F 3/01申请日:20140107\|\|\|公开
IPC分类号：	G06F3/01; G06F3/0487(2013.01)I	主分类号：	G06F3/01
申请人：	三星电子株式会社
发明人：	李东宪; 金正根; 张星炫; 金在权
地址：	韩国京畿道
优先权：	2013.01.07 KR 10-2013-0001771
专利代理机构：	北京市柳沈律师事务所 11105	代理人：	刘虹
PDF下载：	PDF下载

内容摘要

提供了电子装置的控制方法，该控制方法包括：在所述定点控制模式中显示执行定点功能的定点图形用户接口（GUI）；当预定事件发生时，将所述定点GUI转换为控制预定对象的四方向移动的四方向GUI，并且改变为四方向控制模式；以及根据对所述四方向GUI的操纵控制所述预定对象的四方向移动。

权利要求书

权利要求书
1.  一种支持定点控制模式和四方向控制模式的电子装置的控制方法，该控制方法包括：
在所述定点控制模式中在显示器上显示执行定点功能的定点图形用户接口（GUI）；
当预定事件发生时，将所述定点GUI转换为控制预定对象的四方向移动的四方向GUI并且改变为所述四方向控制模式；以及
根据对所述四方向GUI的操纵控制所述预定对象的四方向移动。

2.  如权利要求1所述的方法，其中在所述四方向控制模式中，所述预定对象根据对所述四方向GUI的操纵选择在所述显示器上显示的项目。

3.  如权利要求1所述的方法，其中，所述预定事件是根据用户命令选择模式转换菜单的事件、和显示包括所述预定对象的屏幕的事件中的至少一个。

4.  如权利要求1所述的方法，还包括：
当所述四方向GUI位于所述显示器上显示的、在所述定点控制模式中能够控制的项目上时，将所述四方向GUI转换为所述定点GUI并且将所述四方向控制模式改变为所述定点控制模式。

5.  如权利要求1所述的方法，其中，所述四方向GUI包括向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮。

6.  如权利要求5所述的方法，还包括：
当虚拟指针被定位在所述四方向GUI上的所述向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮之一上时，突出显示所述向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮之一。

7.  如权利要求6所述的方法，还包括：
当所述虚拟指针被定位在所述显示器上显示的所述四方向GUI的外部时，将所述四方向GUI移动到所述虚拟指针的位置。

8.  如权利要求1所述的方法，其中，所述定点GUI和所述四方向GUI根据用户的动作命令来控制。

9.  一种支持定点控制模式和四方向控制模式的电子装置，该电子装置包括：
显示器，其在所述定点控制模式中显示执行定点功能的定点图形用户接口（GUI）；
用户接口，其接收命令；以及
控制器，其当预定事件发生时将所述定点GUI转换为控制预定对象的四方向移动的四方向GUI并且改变为所述四方向控制模式，并且根据对所述四方向GUI的操纵控制所述预定对象的四方向移动。

10.  如权利要求9所述的电子装置，其中，在所述四方向控制模式中所述预定对象根据对所述四方向GUI的操纵选择在所述显示器上显示的项目。

11.  如权利要求9所述的电子装置，其中，所述预定事件是根据用户命令选择模式转换菜单的事件、和显示包括所述预定对象的屏幕的事件中的至少一个。

12.  如权利要求9所述的电子装置，其中，当所述四方向GUI位于所述显示器上显示的、在所述定点控制模式中能够控制的项目上时，所述控制器改变为所述定点控制模式，并且将所述四方向GUI转换为所述定点GUI。

13.  如权利要求9所述的电子装置，其中，所述四方向GUI包括向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮，而且当虚拟指针被定位在所述向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮之一上时，所述控制器突出显示所述向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮之一。

14.  如权利要求13所述的电子装置，其中，当所述虚拟指针被定位在所述显示器上的所述四方向GUI的外部时，所述控制器将所述四方向GUI移动到所述虚拟指针的位置。

15.  如权利要求9所述的电子装置，其中，所述定点GUI和所述四方向GUI根据用户的动作命令来控制。

说明书

说明书电子装置及其控制方法
相关申请的交叉引用
本申请要求2013年1月7日向韩国知识产权局提交的第10-2013-0001771号韩国专利申请的优先权，其公开通过引用整体并入本文。
技术领域
与示例性实施例相一致的装置和方法涉及电子装置及其控制方法，更具体地，涉及提供多个操作模式的电子装置及其控制方法。
背景技术
由于电子技术的发展，已经开发并分发了各种类型的电子装置。特别地，在家中已经使用包括电视（TV）在内的各种类型的电子装置。电子装置的功能由于用户的需求而增加。例如，TV现在能够提供因特网服务。特别地，TV通过提供对因特网的接入来支持因特网服务。此外，用户可以通过TV观看大量的数字广播频道。
因此，需要各种输入方法以有效地使用电子装置的各种功能。例如，使用遥控器、鼠标或触摸垫的输入方法被用于电子装置。
然而，仅使用简单的输入方法可能难以有效地利用电子装置的各种功能。例如，如果电子装置的所有功能仅由遥控器控制，则遥控器上的按钮的数目将增加。随着遥控器上的按钮的数目的增加，一般用户难以习惯操作遥控器。此外，如果各种不同的菜单被显示在屏幕上，则不方便用户查找和选择所需的菜单。此外，不方便用户在复杂的菜单树中选择所需的菜单。
为了克服这种不便，最近已经开发了动作识别技术，以使得电子装置能够被更方便地控制而且可以基于用户的直觉来控制。也就是说，已经越来越多地使用通过识别由用户做出的动作来控制电子装置的技术。
在相关技术的动作识别技术中，在屏幕上显示的指针根据动作而移动，但是在这种情况下，很难使用控制器的四个方向按钮来支持操作。
发明内容
示例性实施例克服以上缺点和以上没有描述的其他缺点。此外，示例性实施例不需要克服以上描述的缺点，而且示例性实施例可以不克服以上描述的任何问题。
示例性实施例提供了能够容易地将定点控制模式（pointing control mode）改变为四方向控制模式（four-directional control mode）的电子装置及其控制方法。
根据示例性实施例的一方面，一种支持定点控制模式和四方向控制模式的电子装置的控制方法包括：在定点控制模式中在显示器上显示执行定点功能的定点图形用户接口（GUI）；当预定事件发生时，将定点GUI转换为控制预定对象的四方向移动的四方向GUI，并且改变为四方向控制模式；以及根据对四方向GUI的操纵控制预定对象的四方向移动。
预定对象可以是在四方向控制模式中根据对四方向GUI的操纵选择项目的对象。
预定事件可以是根据用户命令选择模式转换菜单的事件、和显示包括所述预定对象的屏幕的事件中的至少一个。
该方法还可以包括：当所述四方向GUI位于在所述定点控制模式中可控制的项目上时，将所述四方向GUI转换为所述定点GUI并且改变为所述定点控制模式。
四方向GUI可以包括向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮。
该方法还可以包括：当虚拟指针被定位在所述四方向GUI上的所述向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮之一上时，突出显示所述向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮之一。
该方法还可以包括：当所述虚拟指针被定位在所述显示器上显示的所述四方向GUI的外部时，将所述四方向GUI移动到所述虚拟指针的位置。
定点GUI和四方向GUI可以根据用户的动作命令来控制。
根据示例性实施例的另一方面，一种支持定点控制模式和四方向控制模式的电子装置包括：显示器，其在定点控制模式中显示执行定点功能的定点图形用户接口（GUI）；用户接口，其接收命令；以及控制器，其当预定事件发生时将定点GUI转换为控制预定对象的四方向移动的四方向GUI并且改变为四方向控制模式，并且根据对四方向GUI的操纵来控制预定对象的四方向移动。
在四方向控制模式中预定对象根据对四方向GUI的操纵来选择在显示器上显示的项目。
预定事件可以是根据用户命令选择模式转换菜单的事件、和显示包括所述预定对象的屏幕的事件中的至少一个。
当所述四方向GUI位于在所述定点控制模式中可控制的项目上时，所述控制器可以改变为所述定点控制模式，并且将所述四方向GUI转换为所述定点GUI。
四方向GUI可以包括向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮，而且当虚拟指针被定位在所述向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮之一上时，所述控制器可以突出显示所述向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮之一。
当所述虚拟指针被定位在所述四方向GUI的外部时，所述控制器可以将所述四方向GUI移动到所述虚拟指针的位置。
定点GUI和四方向GUI可以根据用户的动作命令来控制。
根据各种示例性实施例，定点控制模式可以容易地改变为四方向控制模式。
以上和/或其他方面和优点将在以下描述中部分地阐述，并将从该描述中部分地显而易见，或者可以通过对示例性实施例的实践来习得。
附图说明
通过参照附图描述某些示例性实施例，以上和/或其他方面将变得更加清楚，在附图中：
图1是示出根据示例性实施例的电子装置的示意性示图；
图2是根据示例性实施例的电子装置的配置的示意性框图；
图3是根据另一示例性实施例的电子装置的配置的框图；
图4示出了根据示例性实施例的存储在存储装置中的软件的配置；
图5示出了根据示例性实施例的提供用户接口（UI）的方法；
图6A至图6C示出了根据示例性实施例的操纵四方向图形用户接口（GUI）的方法；
图7A和图7B示出了根据另一示例性实施例的提供UI的方法；以及
图8是示出根据示例性实施例的电子装置的控制方法的流程图。
具体实施方式
现在将参照附图更详细地描述某些示例性实施例。
在下面的描述中，即使在不同的附图中，相同的参照标记被用于相同的元件。描述中定义的、诸如详细结构和元件的事项被提供以便帮助全面理解。因此，显而易见的是，示例性实施例可以在没有这些具体定义的事项的情况下实现。此外，没有详细描述公知的功能或结构，因为它们会以不必要的细节模糊示例性实施例。
图1是示出根据示例性实施例的电子装置的示意性示图。
根据示例性实施例的电子装置100可以被实现为数字TV，或实现为可显示的设备，诸如个人计算机（PC）监视器。
电子装置100可以支持定点控制模式和四方向控制模式。在定点控制模式中，通过移动显示在屏幕上的指针来选择或运行项目。在四方向控制模式中，通过根据控制器的四方向控制移动位于屏幕上的项目上的对象10（例如，突出显示（highlight）或焦点（focus））来选择或运行项目。
特别地，电子装置100可以控制在定点控制模式中显示的指针的移动状态或者在四方向控制模式中显示的对象的移动状态。
因此，电子装置100可以在感测用户的动作的设备中实现，并根据感测到的动作被控制。更具体地，电子装置100感测用户的动作，生成关于感测到的动作的动作信息，将动作信息转换为控制电子装置100的控制信号，并且基于该控制信号执行功能。
下面将参照附图描述电子装置100的特定操作。
图2是根据示例性实施例的电子装置100的配置的示意性框图。参照图2，电子装置100可以包括显示器110、用户接口120和控制器130。
电子装置100可以是智能TV，但是这仅仅是一个例子。电子装置100可以被实现为各种类型的电子设备，诸如智能电话、平板PC和笔记本计算机。
显示器110显示从各种源输入的图像信号。例如，显示器110可以显示与通过广播接收器接收的广播信号相对应的图像、通过外部端子输入器（未示出）输入的图像数据（例如，运动图像）。
此外，显示器110可以显示定点图形用户接口（GUI），其在定点控制模式中执行定点功能。例如，显示器110可以显示用于定点的、圆形形状的GUI，但是用于定点的GUI的形式不限于此。用于定点的GUI或定点GUI可以是各种形式，诸如箭头和手。
此外，显示器110可以显示四方向GUI，用于在四方向控制模式中控制预定对象的四方向移动。例如，显示器110可以显示四方向GUI，其包括向上、向下、向左、向右按钮以及选择或进入按钮。
用于定点的GUI或定点GUI以及四方向GUI可以以屏上显示（OSD）的格式显示。
显示器110可以利用液晶显示器（LCD）面板或有机发光二极管（OLED）来实现，但不限于此。特别地，显示器110可以被实现为触摸屏，其与触摸垫构成层结构。在这种情况下，显示器110可以用作用户接口120，其将在下面描述，以及输出设备。触摸屏可以感测触摸输入压力以及触摸输入位置和区域。然而，用户接口120也可以与显示器110分离。
用户接口120接收各种用户命令。
特别地，用户接口120可以接收将定点控制模式改变成四方向控制模式的用户命令。例如，用户接口120可以接收用于选择模式转换的预定菜单项的用户命令。
此外，用户接口120可以接收移动定点GUI的命令、在定点控制模式中选择定点GUI所在的项目的命令、选择四方向GUI上的按钮的命令、操纵所选择的按钮的命令、以及在四方向控制模式中通过操纵四方向GUI选择对象所在的项目的命令。例如，这样的用户命令可以通过用户的动作输入。
在这种情况下，用户接口120可以利用动作输入器111来实现，该动作输入器111通过拍摄用户动作的照片来接收图像信号（例如，连续帧）并将该图像信号提供给控制器130。例如，动作输入器111可以利用相机来实现，该相机包括镜头和图像传感器以拍摄用户动作。此外，动作输入器111可以与电子装置100被一体地形成或者可以与电子装置100分离地形成。分离的动作输入器可以通过有线或无线网络连接到电子装置100。
控制器130控制显示器110和用户接口120。控制器130可以包括中央处理单元（CPU）、用于控制电子装置100的模块、用于存储数据的只读存储器（ROM）、以及随机存取存储器（RAM）。
特别地，在定点控制模式中，当预定事件发生时，控制器130将定点GUI转换为用于控制预定对象的四方向移动的四方向GUI，并显示四方向GUI。预定对象可以是位于显示器上的项目上的突出显示或焦点。根据用户的操纵，突出显示或焦点被移动到另一项目上并选择该项目，但不限于此。
预定事件可以是根据用户命令选择模式转换菜单的事件、以及显示包括预定对象的屏幕以便在四方向控制模式中选择项目的事件。例如，后者是显示用于将焦点定位在电子装置上的项目上的应用屏幕并根据四方向操纵控制焦点的情况。
此外，控制器130可以根据用户的命令基于四方向GUI的操纵来控制预定对象的四方向移动。例如，在根据四方向GUI的操纵移动的焦点位于项目上的状态下，当选择四方向GUI的向上按钮时，控制器130将该焦点移动到位于该焦点当前所在的项目上方的另一项目上。
此外，控制器130可以在四方向控制模式中根据用户命令选择预定对象位于其上的项目。例如，在焦点位于特定项目上的状态下，当选择四方向GUI的选择按钮时，控制器130可以选择并运行该特定项目。
更具体地，当选择包括在四方向GUI上的按钮之一时，控制器130可以突出显示所选择的按钮。
四方向GUI可以包括用于选择包括在四方向GUI上的按钮之一的虚拟指针。在示例性实施例中，虚拟指针不一定显示在屏幕上。
在这种情况下，控制器130可以根据四方向GUI内虚拟指针的移动来选择向上、向下、向左、向右按钮和选择按钮之一，并且可以突出显示所选择的按钮。例如，当四方向GUI上的虚拟指针根据用户的命令移动到向上按钮时，控制器130突出显示向上按钮。
此外，当虚拟指针移动到四方向GUI之外时，控制器130可以移动四方向GUI。例如，当四方向GUI上的虚拟指针根据用户的命令移动到四方向GUI之外时，控制器130将四方向GUI移动到已移动的虚拟指针的位置。
此外，当四方向GUI位于在定点控制模式中能够控制的项目上时，控制器130可以将四方向GUI转换为定点GUI，并显示该定点GUI。例如，当四方向GUI移动到在四方向控制模式中根据用户命令可控制的应用屏幕之外显示的且能够由指针选择的菜单项时，则控制器130可以将四方向GUI转换为定点GUI，并显示该定点GUI。
定点GUI和四方向GUI可以如上所述通过用户的动作来控制。
当通过动作输入器111输入用户的动作时，控制器130使用动作感测模块和动作数据库来识别动作。在动作识别时，动作识别模块将背景和手区域（例如，张开手、将手掬成环形（cup a hand）或握拳）与通过动作输入器111输入的用户的动作所对应的图像（例如，连续帧）分离，并且识别手的连续移动。如果输入了用户的动作，则控制器130按帧存储接收到的图像，并使用所存储的帧来感测作为用户动作的主体的对象（例如，用户的手）。控制器130通过感测对象的形状、颜色和动作中的至少一个来检测对象。控制器130可以使用包括在多个帧中的对象的位置来跟踪检测到的对象的移动。
控制器130根据所跟踪的对象的形状和移动来确定动作。例如，控制器130使用对象的形状、速度、位置和方向的变化中的至少一个来确定用户的动作。用户的动作可以包括作为攥用户的手的动作的抓动作（grab motion）、作为利用手移动所显示的指针的动作的定点移动动作（pointing move motion）、作为在一个方向上以预定的速度或更快的速度移动手的动作的拍动作（slap motion）、作为从一边到另一边或者上下摇动手的动作的摇动动作（shake motion）和旋转手的动作的旋转动作。示例性实施例的技术想法可以应用于上面没有提及的其他动作。例如，还可以包括作为张开用户原本握成拳的手的动作的展开动作（spread motion）。
控制器130可以根据识别出的用户动作移动定点GUI或运行由定点GUI所选择的项目。例如，控制器130可以基于用户将他的用于控制定点GUI的右手或左手向左移动的动作来将定点GUI向左移动，
此外，控制器130可以根据识别出的用户动作选择四方向GUI上的特定按钮，或根据对所选择的按钮的操纵来运行焦点所选择的项目。例如，控制器130通过根据向上移动手的用户动作来移动四方向GUI上的虚拟指针，来选择向上按钮，并且当向上按钮被突出显示时根据攥手的抓动作运行向上按钮，以使特定项目上的焦点可以移动到位于特定项目上方的项目。
图3是根据另一示例性实施例的电子装置100的配置的框图。参照图3，电子装置100可以包括显示器110、用户接口120、控制器130、存储装置140、广播接收机150、外部端子输入器160、遥控信号接收器170、通信器180、声音输入器190和音频输出器195。
在图3所示的组件当中，与图2所示的部件重叠的部分的详细描述不再重复。
控制器130可以包括RAM131、ROM132、主CPU133、图形处理器134、第一接口135-1至第n接口135–n、和总线136。
RAM131、ROM132、主CPU133、图形处理器134、第一接口135-1至第n接口135–n可以通过总线136彼此连接。
第一接口135-1至第n接口135–n连接到上述组件。接口之一可以是通过网络连接到外部设备的网络接口。
主CPU133访问存储装置140，并使用存储在存储装置140中的操作系统（OS）来引导系统。此外，主CPU133使用存储在存储装置140中的各种不同的程序、内容和数据来执行不同的操作。
ROM132存储用于引导系统的命令集。当输入开启命令并且供应电力时，主CPU133将存储在存储装置140中的操作系统（OS）复制到RAM131，并根据存储在ROM132中的命令运行OS，以使得系统能够被引导。当系统引导完成时，主CPU133将存储在存储装置140中的各种应用程序复制到RAM131，并运行所复制的应用程序，以使得可以执行各种操作。
图形处理器134使用运算器（未示出）和绘制器（未示出）生成包括诸如图标、图像和文本的各种不同对象的屏幕。运算器根据屏幕的布局运算每个对象的属性值，诸如坐标值、形状、大小和颜色。绘制器基于运算器运算出的属性值，生成包括对象的具有各种不同的布局的屏幕。由绘制器生成的屏幕被显示在显示器110的显示区域上。
存储装置140存储各种不同的数据和程序以驱动和控制电子装置100。存储装置140存储用于识别通过动作输入器输入的动作的动作识别模块。
此外，存储装置140可以包括动作数据库。动作数据库是用于记录诸如用户手的动作的预定动作、以及动作任务的数据库，所述动作任务是与动作相关联的操作，并且与预定的手的动作相匹配。
广播接收器150经由线缆或无线地从外部接收广播信号。广播信号包括视频、音频和附加数据（例如，电子节目指南（EPG））。广播接收器150可以从不同的源，例如地面广播、有线广播、卫星广播、和因特网广播，接收广播信号。
外部端子输入器160从电子装置100之外或外部接收视频数据（例如，运动图像和画面）和音频数据（例如，音乐）。外部端子输入器160可以包括高清晰度多媒体接口（HDMI）输入端子161、分量输入端子162、PC输入端子163以及通用串行总线（USB）输入端子164中的至少一个。遥控信号接收器170从外部遥控器接收遥控信号。即使当电子装置100处于语音任务模式或动作任务模式中时，遥控信号接收器170也可以接收遥控信号。
通信器180可以通过控制器130的控制，连接电子装置100与外部设备（例如，服务器）。控制器130可以从通过通信器180连接的外部装置下载应用，或者可以执行网络浏览。通信器180可以提供以太网181、无线局域网络（LAN）182和蓝牙183中的至少一个。
语音输入器190接收由用户发出的语音输入。语音输入器190将输入语音信号转换为电信号并将电信号输出到控制器130。语音输入器190可以利用麦克风来实现。语音输入器190可以与电子装置100一体地形成，或者可以与电子装置100分离。分离的语音输入器190可以通过有线或无线网络连接到电子装置100。
音频输出器195根据控制器130的控制，输出与广播信号相对应的声音。音频输出器195可以包括扬声器195a、耳机输出端子195b和索尼飞利浦数字接口（S/PDIF）输出端子195c中的至少一个。
当控制器130从语音输入器190接收用户的语音时，控制器130使用语音识别模块和语音数据库来识别语音。语音识别被划分为孤立词识别（isolated word recognition）、连续语音识别（continuous speech recognition）和关键词检出（keyword spotting），孤立词识别用于通过划分词语来识别发出的语音，连续语音识别用于识别连续的词语、句子和对话声音，关键词检出是孤立词识别和连续语音识别的中间形式，用于检测和识别预定的关键词。
如果输入了用户语音，则控制器130通过在输入语音信号中检测用户发出的语音的开始和结束来确定语音段（voice section）。控制器130计算输入语音信号的能量、按照计算出的能量对语音信号的能量水平进行分类、并通过动态编程来检测语音段。控制器130基于声学模型从检测到的语音段内的语音信号中检测作为最小的声音单位的音素（phoneme），并且生成音素数据。控制器130通过将隐马尔可夫模型（HMM）应用到已生成的音素数据来生成文本信息。然而，用于识别用户的语音的这个方法仅仅是示例。还可以使用其他方法来识别用户的语音。因此，控制器识别包含在语音信号中的用户的语音。
图4示出了根据示例性实施例的存储在存储装置140中的软件的配置。参照图4，存储装置140可以包括电力控制模块140a、频道控制模块140b、音量控制模块140c、外部输入控制模块140d、屏幕控制模块140e、音频控制模块140f、因特网控制模块140g、应用模块140h、搜索控制模块140i、用户接口（UI）处理模块140j、语音识别模块140k、动作识别模块140l、语音数据库140m和动作数据库140n。这些模块140a到140n可以分别通过执行电力控制功能、频道控制功能、音量控制功能、外部输入控制功能、屏幕控制功能、音频控制功能、因特网控制功能、应用运行功能、搜索控制功能和UI处理功能的软件来实现。控制器130通过运行存储在存储装置140中的软件来执行相应的功能。
下面参照图5至图7描述根据各种不同示例性实施例的提供UI的方法。
图5示出了根据示例性实施例的提供UI的方法。在定点控制模式中，当如图中的50A所示显示需要四方向控制的屏幕时，用户可以选择模式转换菜单520以使得所显示的定点GUI510可以改变为四方向GUI540。在这里，需要四方向控制的屏幕是在其上的焦点10通过四方向控制移动和选择项目的屏幕，如图5所示。例如，需要四方向控制的屏幕可以是在四方向控制模式中控制的应用运行屏幕，但不限于此。
当如图中的50B所示指针10位于第一项目530上时，用户可以使用四方向GUI540移动指针10，并选择用户想要的项目。例如，当用户通过操纵被聚焦的向下按钮541将位于第一项目530上的指针10向下移动时，指针10移动到位于第一项目530下面的特定项目（未示出）。显示器上的项目可以是用户正在观看的节目或应用上的不同的项目。
如图中的50C所示，当根据用户的命令，诸如用户手的动作，选择和操纵四方向UI540上的向上按钮542时，位于第一项目530上的指针10移动到位于第一项目530上方的第二项目550，如图中50D所示。例如，当用户输入向上移动他或她的手的动作时，位于向下按钮541上的焦点移到向上按钮542。当向上按钮542被聚焦并被操纵时，位于第一项目530上的指针10移动到位于第一项目530上方的第二项目550
图6A至图6C示出了根据示例性实施例的操作四方向GUI的方法。
如图6A所示，虚拟指针610可以存在于四方向GUI540上。可以根据虚拟指针610的移动来选择四方向GUI540上的按钮。例如，当如图6A所示虚拟指针610移动到与四方向GUI540上的向上按钮541相对应的区域时，向上按钮541被突出显示。
当如图6B所示虚拟指针610根据用户的命令移出四方向GUI540时，四方向GUI540可以根据虚拟指针610的移动而移动。
例如，当如图6C所示虚拟指针610移出四方向GUI540并且向上移动时，四方向GUI540相应地向上移动。
在图6A和图6B中，为了便于说明显示了虚拟指针610，但是虚拟指针可以不必显示。然而，在某些情况下，也可以在四方向GUI540中显示虚拟指针610，以使得用户可以识别出虚拟指针610。
图7A和图7B示出了根据另一示例性实施例的提供UI的方法。
如图7A和图7B所示，当四方向GUI540根据用户的命令移动到在定点控制模式中可控制的项目710上时，四方向GUI540被转换为定点GUI510。也就是说，四方向控制模式自动转换为定点控制模式。
图7A和图7B中所示的示例性实施例仅仅是例子。四方向GUI540和定点GUI510之间的切换可以通过用户的特定动作或通过对屏幕上显示的预定菜单（未示出）的选择来执行。
图8是示出根据示例性实施例的电子装置的控制方法的流程图。
首先，在操作S810中，在定点控制模式中显示用于执行定点功能的定点GUI。
其后，当预定事件发生（操作S820中：是）时，在操作S830中，定点控制模式转换为四方向控制模式，定点GUI转换为用于控制预定对象的四方向移动的四方向GUI，并且显示四方向GUI。预定对象可以是在四方向控制模式中选择项目的对象。预定事件可以是根据用户的命令选择模式转换菜单的事件、和显示包括预定对象的屏幕的事件中的至少一个。
在操作S840中，根据对四方向GUI的操纵，控制预定对象的四方向移动。
此外，当四方向GUI位于在定点控制模式中可控制的项目上时，四方向GUI被转换为定点GUI，而且四方向控制模式改变为定点控制模式。
四方向GUI可以包括向上、向下、向左、向右按钮以及选择按钮。在这种情况下，在向上、向下、向左、向右按钮以及选择按钮当中，根据四方向 GUI内虚拟指针的移动，虚拟指针位于其上的按钮可以被聚焦并被显示。另外，当虚拟指针移出四方向GUI时，四方向GUI移动到虚拟指针的位置。
定点GUI和四方向GUI可以通过用户的动作来控制。
鉴于上述情况，定点控制模式的操作方法被保持，并且支持对四方向控制模式中的移动的操纵。
根据各种不同的示例性实施例的电子装置的控制方法可以在程序中实现，并且被提供给电子装置。
例如，在非临时性计算机可读介质中可以存储执行方法的程序，所述方法包括：当输入用户的动作命令时，在定点控制模式中显示执行定点功能的定点GUI，当预定事件发生时，将定点GUI转换为用于控制预定对象的四方向移动的四方向GUI，转换为四方向控制模式，并且根据对四方向GUI的操纵来控制预定对象的四方向移动。
非临时性计算机可读存储介质是不像诸如寄存器、高速缓存和存储器一样临时地存储数据，而是半永久地存储数据并且由设备可读的介质。更具体地，上述各种应用或程序可以被存储和提供在非临时性计算机可读存储介质中，诸如致密盘（CD）、数字视频盘（DVD）、硬盘、蓝光盘、通用串行总线（USB）、存储卡和只读存储器（ROM）。
前述示例性实施例和优点仅仅是示例性的，并且不被解释为限制。前述示例性实施例可以容易地应用于其它类型的装置。此外，示例性实施例的描述旨在是说明性的，而不是限制权利要求的范围，而且许多替换、修改和变化将对本领域技术人员显而易见。

资源描述

《电子装置及其控制方法.pdf》由会员分享，可在线阅读，更多相关《电子装置及其控制方法.pdf（19页珍藏版）》请在专利查询网上搜索。

1、(10)申请公布号 CN 103914144 A (43)申请公布日 2014.07.09 CN 103914144 A (21)申请号 201410006813.1 (22)申请日 2014.01.07 10-2013-0001771 2013.01.07 KR G06F 3/01(2006.01) G06F 3/0487(2013.01) (71)申请人三星电子株式会社地址韩国京畿道 (72)发明人李东宪金正根张星炫金在权 (74)专利代理机构北京市柳沈律师事务所 11105 代理人刘虹 (54) 发明名称电子装置及其控制方法 (57) 摘要提供了电子装置的控制方法，。

2、该控制方法包括：在所述定点控制模式中显示执行定点功能的定点图形用户接口（GUI）；当预定事件发生时，将所述定点 GUI 转换为控制预定对象的四方向移动的四方向 GUI，并且改变为四方向控制模式；以及根据对所述四方向 GUI 的操纵控制所述预定对象的四方向移动。 (30)优先权数据 (51)Int.Cl. 权利要求书 2 页说明书 9 页附图 7 页 (19)中华人民共和国国家知识产权局 (12)发明专利申请权利要求书2页说明书9页附图7页 (10)申请公布号 CN 103914144 A CN 103914144 A 1/2 页 2 1. 一种支持定点。

3、控制模式和四方向控制模式的电子装置的控制方法，该控制方法包括：在所述定点控制模式中在显示器上显示执行定点功能的定点图形用户接口（GUI）；当预定事件发生时，将所述定点 GUI 转换为控制预定对象的四方向移动的四方向 GUI 并且改变为所述四方向控制模式；以及根据对所述四方向 GUI 的操纵控制所述预定对象的四方向移动。 2. 如权利要求 1 所述的方法，其中在所述四方向控制模式中，所述预定对象根据对所述四方向 GUI 的操纵选择在所述显示器上显示的项目。 3. 如权利要求 1 所述的方法，其中，所述预定事件是根据用户命令选择模式转换菜单的事件、和显示包括所述。

4、预定对象的屏幕的事件中的至少一个。 4. 如权利要求 1 所述的方法，还包括：当所述四方向 GUI 位于所述显示器上显示的、在所述定点控制模式中能够控制的项目上时，将所述四方向 GUI 转换为所述定点 GUI 并且将所述四方向控制模式改变为所述定点控制模式。 5. 如权利要求 1 所述的方法，其中，所述四方向 GUI 包括向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮。 6. 如权利要求 5 所述的方法，还包括：当虚拟指针被定位在所述四方向 GUI 上的所述向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮之一上时，突出显示所述向上按钮、向下按钮。

5、、向左按钮、向右按钮以及选择按钮之一。 7. 如权利要求 6 所述的方法，还包括：当所述虚拟指针被定位在所述显示器上显示的所述四方向 GUI 的外部时，将所述四方向 GUI 移动到所述虚拟指针的位置。 8.如权利要求1所述的方法，其中，所述定点GUI和所述四方向GUI根据用户的动作命令来控制。 9. 一种支持定点控制模式和四方向控制模式的电子装置，该电子装置包括：显示器，其在所述定点控制模式中显示执行定点功能的定点图形用户接口（GUI）；用户接口，其接收命令；以及控制器，其当预定事件发生时将所述定点 GUI 转换为控制预定对象的四方向移动的四方向。

6、 GUI 并且改变为所述四方向控制模式，并且根据对所述四方向 GUI 的操纵控制所述预定对象的四方向移动。 10. 如权利要求 9 所述的电子装置，其中，在所述四方向控制模式中所述预定对象根据对所述四方向 GUI 的操纵选择在所述显示器上显示的项目。 11. 如权利要求 9 所述的电子装置，其中，所述预定事件是根据用户命令选择模式转换菜单的事件、和显示包括所述预定对象的屏幕的事件中的至少一个。 12.如权利要求9所述的电子装置，其中，当所述四方向GUI位于所述显示器上显示的、在所述定点控制模式中能够控制的项目上时，所述控制器改变为所述定点控制模式，并且将所述四方向。

7、 GUI 转换为所述定点 GUI。 13. 如权利要求 9 所述的电子装置，其中，所述四方向 GUI 包括向上按钮、向下按钮、向权利要求书 CN 103914144 A 2 2/2 页 3 左按钮、向右按钮以及选择按钮，而且当虚拟指针被定位在所述向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮之一上时，所述控制器突出显示所述向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮之一。 14. 如权利要求 13 所述的电子装置，其中，当所述虚拟指针被定位在所述显示器上的所述四方向 GUI 的外部时，所述控制器将所述四方向 GUI 移动到所述虚拟指针的。

8、位置。 15. 如权利要求 9 所述的电子装置，其中，所述定点 GUI 和所述四方向 GUI 根据用户的动作命令来控制。权利要求书 CN 103914144 A 3 1/9 页 4 电子装置及其控制方法 0001 相关申请的交叉引用 0002 本申请要求 2013 年 1 月 7 日向韩国知识产权局提交的第 10-2013-0001771 号韩国专利申请的优先权，其公开通过引用整体并入本文。技术领域 0003 与示例性实施例相一致的装置和方法涉及电子装置及其控制方法，更具体地，涉及提供多个操作模式的电子装置及其控制方法。背景技术 0004 由于电子技术的发展，已。

9、经开发并分发了各种类型的电子装置。特别地，在家中已经使用包括电视（TV）在内的各种类型的电子装置。电子装置的功能由于用户的需求而增加。例如， TV 现在能够提供因特网服务。特别地， TV 通过提供对因特网的接入来支持因特网服务。此外，用户可以通过 TV 观看大量的数字广播频道。 0005 因此，需要各种输入方法以有效地使用电子装置的各种功能。例如，使用遥控器、鼠标或触摸垫的输入方法被用于电子装置。 0006 然而，仅使用简单的输入方法可能难以有效地利用电子装置的各种功能。例如，如果电子装置的所有功能仅由遥控器控制，则遥控器上的按钮的数目将增加。随着遥控器上的按。

10、钮的数目的增加，一般用户难以习惯操作遥控器。此外，如果各种不同的菜单被显示在屏幕上，则不方便用户查找和选择所需的菜单。此外，不方便用户在复杂的菜单树中选择所需的菜单。 0007 为了克服这种不便，最近已经开发了动作识别技术，以使得电子装置能够被更方便地控制而且可以基于用户的直觉来控制。也就是说，已经越来越多地使用通过识别由用户做出的动作来控制电子装置的技术。 0008 在相关技术的动作识别技术中，在屏幕上显示的指针根据动作而移动，但是在这种情况下，很难使用控制器的四个方向按钮来支持操作。发明内容 0009 示例性实施例克服以上缺点和以上没有描述的其他缺点。此。

11、外，示例性实施例不需要克服以上描述的缺点，而且示例性实施例可以不克服以上描述的任何问题。 0010 示例性实施例提供了能够容易地将定点控制模式（pointing control mode）改变为四方向控制模式（four-directional control mode）的电子装置及其控制方法。 0011 根据示例性实施例的一方面，一种支持定点控制模式和四方向控制模式的电子装置的控制方法包括：在定点控制模式中在显示器上显示执行定点功能的定点图形用户接口（GUI）；当预定事件发生时，将定点 GUI 转换为控制预定对象的四方向移动的四方向 GUI，并且改变为四方向。

12、控制模式；以及根据对四方向 GUI 的操纵控制预定对象的四方向移动。 0012 预定对象可以是在四方向控制模式中根据对四方向 GUI 的操纵选择项目的对象。说明书 CN 103914144 A 4 2/9 页 5 0013 预定事件可以是根据用户命令选择模式转换菜单的事件、和显示包括所述预定对象的屏幕的事件中的至少一个。 0014 该方法还可以包括：当所述四方向 GUI 位于在所述定点控制模式中可控制的项目上时，将所述四方向 GUI 转换为所述定点 GUI 并且改变为所述定点控制模式。 0015 四方向 GUI 可以包括向上按钮、向下按钮、向左按钮、向右按钮以及选择。

13、按钮。 0016 该方法还可以包括：当虚拟指针被定位在所述四方向 GUI 上的所述向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮之一上时，突出显示所述向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮之一。 0017 该方法还可以包括：当所述虚拟指针被定位在所述显示器上显示的所述四方向 GUI 的外部时，将所述四方向 GUI 移动到所述虚拟指针的位置。 0018 定点 GUI 和四方向 GUI 可以根据用户的动作命令来控制。 0019 根据示例性实施例的另一方面，一种支持定点控制模式和四方向控制模式的电子装置包括：显示器，其在定点控制模式中显示执行定点。

14、功能的定点图形用户接口（GUI）；用户接口，其接收命令；以及控制器，其当预定事件发生时将定点 GUI 转换为控制预定对象的四方向移动的四方向 GUI 并且改变为四方向控制模式，并且根据对四方向 GUI 的操纵来控制预定对象的四方向移动。 0020 在四方向控制模式中预定对象根据对四方向 GUI 的操纵来选择在显示器上显示的项目。 0021 预定事件可以是根据用户命令选择模式转换菜单的事件、和显示包括所述预定对象的屏幕的事件中的至少一个。 0022 当所述四方向 GUI 位于在所述定点控制模式中可控制的项目上时，所述控制器可以改变为所述定点控制模式，并且将所述四。

15、方向 GUI 转换为所述定点 GUI。 0023 四方向 GUI 可以包括向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮，而且当虚拟指针被定位在所述向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮之一上时，所述控制器可以突出显示所述向上按钮、向下按钮、向左按钮、向右按钮以及选择按钮之一。 0024 当所述虚拟指针被定位在所述四方向 GUI 的外部时，所述控制器可以将所述四方向 GUI 移动到所述虚拟指针的位置。 0025 定点 GUI 和四方向 GUI 可以根据用户的动作命令来控制。 0026 根据各种示例性实施例，定点控制模式可以容易地改变为四方向控制。

16、模式。 0027 以上和 / 或其他方面和优点将在以下描述中部分地阐述，并将从该描述中部分地显而易见，或者可以通过对示例性实施例的实践来习得。附图说明 0028 通过参照附图描述某些示例性实施例，以上和 / 或其他方面将变得更加清楚，在附图中： 0029 图 1 是示出根据示例性实施例的电子装置的示意性示图； 0030 图 2 是根据示例性实施例的电子装置的配置的示意性框图； 0031 图 3 是根据另一示例性实施例的电子装置的配置的框图；说明书 CN 103914144 A 5 3/9 页 6 0032 图 4 示出了根据示例性实施例的存储在存储装置中的软件的配置。

17、； 0033 图 5 示出了根据示例性实施例的提供用户接口（UI）的方法； 0034 图 6A 至图 6C 示出了根据示例性实施例的操纵四方向图形用户接口（GUI）的方法； 0035 图 7A 和图 7B 示出了根据另一示例性实施例的提供 UI 的方法；以及 0036 图 8 是示出根据示例性实施例的电子装置的控制方法的流程图。具体实施方式 0037 现在将参照附图更详细地描述某些示例性实施例。 0038 在下面的描述中，即使在不同的附图中，相同的参照标记被用于相同的元件。描述中定义的、诸如详细结构和元件的事项被提供以便帮助全面理解。因此，显而易见的是，示。

18、例性实施例可以在没有这些具体定义的事项的情况下实现。此外，没有详细描述公知的功能或结构，因为它们会以不必要的细节模糊示例性实施例。 0039 图 1 是示出根据示例性实施例的电子装置的示意性示图。 0040 根据示例性实施例的电子装置 100 可以被实现为数字 TV，或实现为可显示的设备，诸如个人计算机（PC）监视器。 0041 电子装置 100 可以支持定点控制模式和四方向控制模式。在定点控制模式中，通过移动显示在屏幕上的指针来选择或运行项目。在四方向控制模式中，通过根据控制器的四方向控制移动位于屏幕上的项目上的对象 10（例如，突出显示（highlight）或。

19、焦点（focus））来选择或运行项目。 0042 特别地，电子装置 100 可以控制在定点控制模式中显示的指针的移动状态或者在四方向控制模式中显示的对象的移动状态。 0043 因此，电子装置 100 可以在感测用户的动作的设备中实现，并根据感测到的动作被控制。更具体地，电子装置 100 感测用户的动作，生成关于感测到的动作的动作信息，将动作信息转换为控制电子装置 100 的控制信号，并且基于该控制信号执行功能。 0044 下面将参照附图描述电子装置 100 的特定操作。 0045 图2是根据示例性实施例的电子装置100的配置的示意性框图。参照图2，电子装置 10。

20、0 可以包括显示器 110、用户接口 120 和控制器 130。 0046 电子装置 100 可以是智能 TV，但是这仅仅是一个例子。电子装置 100 可以被实现为各种类型的电子设备，诸如智能电话、平板 PC 和笔记本计算机。 0047 显示器110显示从各种源输入的图像信号。例如，显示器110可以显示与通过广播接收器接收的广播信号相对应的图像、通过外部端子输入器（未示出）输入的图像数据（例如，运动图像）。 0048 此外，显示器 110 可以显示定点图形用户接口（GUI），其在定点控制模式中执行定点功能。例如，显示器110可以显示用于定点的、圆形。

21、形状的GUI，但是用于定点的GUI的形式不限于此。用于定点的 GUI 或定点 GUI 可以是各种形式，诸如箭头和手。 0049 此外，显示器 110 可以显示四方向 GUI，用于在四方向控制模式中控制预定对象的四方向移动。例如，显示器110可以显示四方向GUI，其包括向上、向下、向左、向右按钮以及选择或进入按钮。说明书 CN 103914144 A 6 4/9 页 7 0050 用于定点的 GUI 或定点 GUI 以及四方向 GUI 可以以屏上显示（OSD）的格式显示。 0051 显示器 110 可以利用液晶显示器（LCD）面板或有机发光二极管（OLE。

22、D）来实现，但不限于此。特别地，显示器 110 可以被实现为触摸屏，其与触摸垫构成层结构。在这种情况下，显示器110可以用作用户接口120，其将在下面描述，以及输出设备。触摸屏可以感测触摸输入压力以及触摸输入位置和区域。然而，用户接口 120 也可以与显示器 110 分离。 0052 用户接口 120 接收各种用户命令。 0053 特别地，用户接口 120 可以接收将定点控制模式改变成四方向控制模式的用户命令。例如，用户接口 120 可以接收用于选择模式转换的预定菜单项的用户命令。 0054 此外，用户接口 120 可以接收移动定点 GUI 的命令、在定点控制。

23、模式中选择定点 GUI 所在的项目的命令、选择四方向 GUI 上的按钮的命令、操纵所选择的按钮的命令、以及在四方向控制模式中通过操纵四方向 GUI 选择对象所在的项目的命令。例如，这样的用户命令可以通过用户的动作输入。 0055 在这种情况下，用户接口 120 可以利用动作输入器 111 来实现，该动作输入器 111 通过拍摄用户动作的照片来接收图像信号（例如，连续帧）并将该图像信号提供给控制器 130。例如，动作输入器 111 可以利用相机来实现，该相机包括镜头和图像传感器以拍摄用户动作。此外，动作输入器111可以与电子装置100被一体地形成或者可以与电子装置。

24、100 分离地形成。分离的动作输入器可以通过有线或无线网络连接到电子装置 100。 0056 控制器 130 控制显示器 110 和用户接口 120。控制器 130 可以包括中央处理单元（CPU）、用于控制电子装置 100 的模块、用于存储数据的只读存储器（ROM）、以及随机存取存储器（RAM）。 0057 特别地，在定点控制模式中，当预定事件发生时，控制器 130 将定点 GUI 转换为用于控制预定对象的四方向移动的四方向 GUI，并显示四方向 GUI。预定对象可以是位于显示器上的项目上的突出显示或焦点。根据用户的操纵，突出显示或焦点被移动到另一项目上并选。

25、择该项目，但不限于此。 0058 预定事件可以是根据用户命令选择模式转换菜单的事件、以及显示包括预定对象的屏幕以便在四方向控制模式中选择项目的事件。例如，后者是显示用于将焦点定位在电子装置上的项目上的应用屏幕并根据四方向操纵控制焦点的情况。 0059 此外，控制器 130 可以根据用户的命令基于四方向 GUI 的操纵来控制预定对象的四方向移动。例如，在根据四方向 GUI 的操纵移动的焦点位于项目上的状态下，当选择四方向 GUI 的向上按钮时，控制器 130 将该焦点移动到位于该焦点当前所在的项目上方的另一项目上。 0060 此外，控制器 130 可以在四方向控制模式中。

26、根据用户命令选择预定对象位于其上的项目。例如，在焦点位于特定项目上的状态下，当选择四方向 GUI 的选择按钮时，控制器 130 可以选择并运行该特定项目。 0061 更具体地，当选择包括在四方向GUI上的按钮之一时，控制器130可以突出显示所选择的按钮。 0062 四方向 GUI 可以包括用于选择包括在四方向 GUI 上的按钮之一的虚拟指针。在示例性实施例中，虚拟指针不一定显示在屏幕上。 0063 在这种情况下，控制器130可以根据四方向GUI内虚拟指针的移动来选择向上、向说明书 CN 103914144 A 7 5/9 页 8 下、向左、向右按钮和选择按钮之一。

27、，并且可以突出显示所选择的按钮。例如，当四方向 GUI 上的虚拟指针根据用户的命令移动到向上按钮时，控制器 130 突出显示向上按钮。 0064 此外，当虚拟指针移动到四方向 GUI 之外时，控制器 130 可以移动四方向 GUI。例如，当四方向 GUI 上的虚拟指针根据用户的命令移动到四方向 GUI 之外时，控制器 130 将四方向 GUI 移动到已移动的虚拟指针的位置。 0065 此外，当四方向GUI位于在定点控制模式中能够控制的项目上时，控制器130可以将四方向 GUI 转换为定点 GUI，并显示该定点 GUI。例如，当四方向 GUI 移动到在四方向控制模式。

28、中根据用户命令可控制的应用屏幕之外显示的且能够由指针选择的菜单项时，则控制器 130 可以将四方向 GUI 转换为定点 GUI，并显示该定点 GUI。 0066 定点 GUI 和四方向 GUI 可以如上所述通过用户的动作来控制。 0067 当通过动作输入器 111 输入用户的动作时，控制器 130 使用动作感测模块和动作数据库来识别动作。在动作识别时，动作识别模块将背景和手区域（例如，张开手、将手掬成环形（cup a hand）或握拳）与通过动作输入器 111 输入的用户的动作所对应的图像（例如，连续帧）分离，并且识别手的连续移动。如果输入了用户的动作，则。

29、控制器 130 按帧存储接收到的图像，并使用所存储的帧来感测作为用户动作的主体的对象（例如，用户的手）。控制器 130 通过感测对象的形状、颜色和动作中的至少一个来检测对象。控制器 130 可以使用包括在多个帧中的对象的位置来跟踪检测到的对象的移动。 0068 控制器 130 根据所跟踪的对象的形状和移动来确定动作。例如，控制器 130 使用对象的形状、速度、位置和方向的变化中的至少一个来确定用户的动作。用户的动作可以包括作为攥用户的手的动作的抓动作（grab motion）、作为利用手移动所显示的指针的动作的定点移动动作（pointing move mo。

30、tion）、作为在一个方向上以预定的速度或更快的速度移动手的动作的拍动作（slap motion）、作为从一边到另一边或者上下摇动手的动作的摇动动作（shake motion）和旋转手的动作的旋转动作。示例性实施例的技术想法可以应用于上面没有提及的其他动作。例如，还可以包括作为张开用户原本握成拳的手的动作的展开动作（spread motion）。 0069 控制器 130 可以根据识别出的用户动作移动定点 GUI 或运行由定点 GUI 所选择的项目。例如，控制器 130 可以基于用户将他的用于控制定点 GUI 的右手或左手向左移动的动作来将定点 GUI 向左移。

31、动， 0070 此外，控制器130可以根据识别出的用户动作选择四方向GUI上的特定按钮，或根据对所选择的按钮的操纵来运行焦点所选择的项目。例如，控制器 130 通过根据向上移动手的用户动作来移动四方向 GUI 上的虚拟指针，来选择向上按钮，并且当向上按钮被突出显示时根据攥手的抓动作运行向上按钮，以使特定项目上的焦点可以移动到位于特定项目上方的项目。 0071 图3是根据另一示例性实施例的电子装置100的配置的框图。参照图3，电子装置 100 可以包括显示器 110、用户接口 120、控制器 130、存储装置 140、广播接收机 150、外部端子输入器 160。

32、、遥控信号接收器 170、通信器 180、声音输入器 190 和音频输出器 195。 0072 在图 3 所示的组件当中，与图 2 所示的部件重叠的部分的详细描述不再重复。 0073 控制器 130 可以包括 RAM131、 ROM132、主 CPU133、图形处理器 134、第一接口 135-1 至第 n 接口 135n、和总线 136。说明书 CN 103914144 A 8 6/9 页 9 0074 RAM131、 ROM132、主 CPU133、图形处理器 134、第一接口 135-1 至第 n 接口 135n 可以通过总线 136 彼此连接。 0075 第。

33、一接口 135-1 至第 n 接口 135n 连接到上述组件。接口之一可以是通过网络连接到外部设备的网络接口。 0076 主 CPU133 访问存储装置 140，并使用存储在存储装置 140 中的操作系统（OS）来引导系统。此外，主 CPU133 使用存储在存储装置 140 中的各种不同的程序、内容和数据来执行不同的操作。 0077 ROM132 存储用于引导系统的命令集。当输入开启命令并且供应电力时，主 CPU133 将存储在存储装置 140 中的操作系统（OS）复制到 RAM131，并根据存储在 ROM132 中的命令运行 OS，以使得系统能够被引导。当系统引导。

34、完成时，主 CPU133 将存储在存储装置 140 中的各种应用程序复制到 RAM131，并运行所复制的应用程序，以使得可以执行各种操作。 0078 图形处理器 134 使用运算器（未示出）和绘制器（未示出）生成包括诸如图标、图像和文本的各种不同对象的屏幕。运算器根据屏幕的布局运算每个对象的属性值，诸如坐标值、形状、大小和颜色。绘制器基于运算器运算出的属性值，生成包括对象的具有各种不同的布局的屏幕。由绘制器生成的屏幕被显示在显示器 110 的显示区域上。 0079 存储装置 140 存储各种不同的数据和程序以驱动和控制电子装置 100。存储装置 140 存储用于。

35、识别通过动作输入器输入的动作的动作识别模块。 0080 此外，存储装置 140 可以包括动作数据库。动作数据库是用于记录诸如用户手的动作的预定动作、以及动作任务的数据库，所述动作任务是与动作相关联的操作，并且与预定的手的动作相匹配。 0081 广播接收器 150 经由线缆或无线地从外部接收广播信号。广播信号包括视频、音频和附加数据（例如，电子节目指南（EPG））。广播接收器 150 可以从不同的源，例如地面广播、有线广播、卫星广播、和因特网广播，接收广播信号。 0082 外部端子输入器160从电子装置100之外或外部接收视频数据（例如，运动图像和画面。

36、）和音频数据（例如，音乐）。外部端子输入器 160 可以包括高清晰度多媒体接口（HDMI）输入端子 161、分量输入端子 162、 PC 输入端子 163 以及通用串行总线（USB）输入端子 164 中的至少一个。遥控信号接收器 170 从外部遥控器接收遥控信号。即使当电子装置 100 处于语音任务模式或动作任务模式中时，遥控信号接收器 170 也可以接收遥控信号。 0083 通信器 180 可以通过控制器 130 的控制，连接电子装置 100 与外部设备（例如，服务器）。控制器 130 可以从通过通信器 180 连接的外部装置下载应用，或者可以执行网络浏览。

37、。通信器 180 可以提供以太网 181、无线局域网络（LAN） 182 和蓝牙 183 中的至少一个。 0084 语音输入器 190 接收由用户发出的语音输入。语音输入器 190 将输入语音信号转换为电信号并将电信号输出到控制器 130。语音输入器 190 可以利用麦克风来实现。语音输入器 190 可以与电子装置 100 一体地形成，或者可以与电子装置 100 分离。分离的语音输入器 190 可以通过有线或无线网络连接到电子装置 100。 0085 音频输出器 195 根据控制器 130 的控制，输出与广播信号相对应的声音。音频输出器 195 可以包括扬声器 195a、耳机。

38、输出端子 195b 和索尼飞利浦数字接口（S/PDIF）输出端子 195c 中的至少一个。 0086 当控制器 130 从语音输入器 190 接收用户的语音时，控制器 130 使用语音说明书 CN 103914144 A 9 7/9 页 10 识别模块和语音数据库来识别语音。语音识别被划分为孤立词识别（isolated word recognition）、连续语音识别（continuous speech recognition）和关键词检出（keyword spotting），孤立词识别用于通过划分词语来识别发出的语音，连续语音识别用于识别连续的词语、句子和。

39、对话声音，关键词检出是孤立词识别和连续语音识别的中间形式，用于检测和识别预定的关键词。 0087 如果输入了用户语音，则控制器 130 通过在输入语音信号中检测用户发出的语音的开始和结束来确定语音段（voice section）。控制器 130 计算输入语音信号的能量、按照计算出的能量对语音信号的能量水平进行分类、并通过动态编程来检测语音段。控制器 130 基于声学模型从检测到的语音段内的语音信号中检测作为最小的声音单位的音素（phoneme），并且生成音素数据。控制器 130 通过将隐马尔可夫模型（HMM）应用到已生成的音素数据来生成文本信息。然而，用于识。

40、别用户的语音的这个方法仅仅是示例。还可以使用其他方法来识别用户的语音。因此，控制器识别包含在语音信号中的用户的语音。 0088 图4示出了根据示例性实施例的存储在存储装置140中的软件的配置。参照图4，存储装置 140 可以包括电力控制模块 140a、频道控制模块 140b、音量控制模块 140c、外部输入控制模块140d、屏幕控制模块140e、音频控制模块140f、因特网控制模块140g、应用模块 140h、搜索控制模块 140i、用户接口（UI）处理模块 140j、语音识别模块 140k、动作识别模块 140l、语音数据库 140m 和动作数据库。

41、140n。这些模块 140a 到 140n 可以分别通过执行电力控制功能、频道控制功能、音量控制功能、外部输入控制功能、屏幕控制功能、音频控制功能、因特网控制功能、应用运行功能、搜索控制功能和 UI 处理功能的软件来实现。控制器 130 通过运行存储在存储装置 140 中的软件来执行相应的功能。 0089 下面参照图 5 至图 7 描述根据各种不同示例性实施例的提供 UI 的方法。 0090 图 5 示出了根据示例性实施例的提供 UI 的方法。在定点控制模式中，当如图中的 50A 所示显示需要四方向控制的屏幕时，用户可以选择模式转换菜单 520 以使得所显示的定点。

42、GUI510 可以改变为四方向 GUI540。在这里，需要四方向控制的屏幕是在其上的焦点 10通过四方向控制移动和选择项目的屏幕，如图5所示。例如，需要四方向控制的屏幕可以是在四方向控制模式中控制的应用运行屏幕，但不限于此。 0091 当如图中的50B所示指针10位于第一项目530上时，用户可以使用四方向GUI540 移动指针10，并选择用户想要的项目。例如，当用户通过操纵被聚焦的向下按钮541将位于第一项目 530 上的指针 10 向下移动时，指针 10 移动到位于第一项目 530 下面的特定项目（未示出）。显示器上的项目可以是用户正在观看的节目或应用上的不同的项。

43、目。 0092 如图中的 50C 所示，当根据用户的命令，诸如用户手的动作，选择和操纵四方向 UI540 上的向上按钮 542 时，位于第一项目 530 上的指针 10 移动到位于第一项目 530 上方的第二项目550，如图中50D所示。例如，当用户输入向上移动他或她的手的动作时，位于向下按钮541上的焦点移到向上按钮542。当向上按钮542被聚焦并被操纵时，位于第一项目 530 上的指针 10 移动到位于第一项目 530 上方的第二项目 550 0093 图 6A 至图 6C 示出了根据示例性实施例的操作四方向 GUI 的方法。 0094 如图 6A 所示，虚拟指针。

44、 610 可以存在于四方向 GUI540 上。可以根据虚拟指针 610 的移动来选择四方向 GUI540 上的按钮。例如，当如图 6A 所示虚拟指针 610 移动到与四方向 GUI540 上的向上按钮 541 相对应的区域时，向上按钮 541 被突出显示。说明书 CN 103914144 A 10 8/9 页 11 0095 当如图 6B 所示虚拟指针 610 根据用户的命令移出四方向 GUI540 时，四方向 GUI540 可以根据虚拟指针 610 的移动而移动。 0096 例如，当如图 6C 所示虚拟指针 610 移出四方向 GUI540 并且向上移动时，四方向 GUI5。

45、40 相应地向上移动。 0097 在图 6A 和图 6B 中，为了便于说明显示了虚拟指针 610，但是虚拟指针可以不必显示。然而，在某些情况下，也可以在四方向 GUI540 中显示虚拟指针 610，以使得用户可以识别出虚拟指针 610。 0098 图 7A 和图 7B 示出了根据另一示例性实施例的提供 UI 的方法。 0099 如图 7A 和图 7B 所示，当四方向 GUI540 根据用户的命令移动到在定点控制模式中可控制的项目 710 上时，四方向 GUI540 被转换为定点 GUI510。也就是说，四方向控制模式自动转换为定点控制模式。 0100 图 7A 和图 7。

46、B 中所示的示例性实施例仅仅是例子。四方向 GUI540 和定点 GUI510 之间的切换可以通过用户的特定动作或通过对屏幕上显示的预定菜单（未示出）的选择来执行。 0101 图 8 是示出根据示例性实施例的电子装置的控制方法的流程图。 0102 首先，在操作 S810 中，在定点控制模式中显示用于执行定点功能的定点 GUI。 0103 其后，当预定事件发生（操作S820中：是）时，在操作S830中，定点控制模式转换为四方向控制模式，定点 GUI 转换为用于控制预定对象的四方向移动的四方向 GUI，并且显示四方向 GUI。预定对象可以是在四方向控制模式中选择项目。

47、的对象。预定事件可以是根据用户的命令选择模式转换菜单的事件、和显示包括预定对象的屏幕的事件中的至少一个。 0104 在操作 S840 中，根据对四方向 GUI 的操纵，控制预定对象的四方向移动。 0105 此外，当四方向GUI位于在定点控制模式中可控制的项目上时，四方向GUI被转换为定点 GUI，而且四方向控制模式改变为定点控制模式。 0106 四方向 GUI 可以包括向上、向下、向左、向右按钮以及选择按钮。在这种情况下，在向上、向下、向左、向右按钮以及选择按钮当中，根据四方向 GUI 内虚拟指针的移动，虚拟指针位于其上的按钮可以被聚焦并被显示。另外，当。

48、虚拟指针移出四方向 GUI 时，四方向 GUI 移动到虚拟指针的位置。 0107 定点 GUI 和四方向 GUI 可以通过用户的动作来控制。 0108 鉴于上述情况，定点控制模式的操作方法被保持，并且支持对四方向控制模式中的移动的操纵。 0109 根据各种不同的示例性实施例的电子装置的控制方法可以在程序中实现，并且被提供给电子装置。 0110 例如，在非临时性计算机可读介质中可以存储执行方法的程序，所述方法包括：当输入用户的动作命令时，在定点控制模式中显示执行定点功能的定点 GUI，当预定事件发生时，将定点 GUI 转换为用于控制预定对象的四方向移动的四方向 GU。

49、I，转换为四方向控制模式，并且根据对四方向 GUI 的操纵来控制预定对象的四方向移动。 0111 非临时性计算机可读存储介质是不像诸如寄存器、高速缓存和存储器一样临时地存储数据，而是半永久地存储数据并且由设备可读的介质。更具体地，上述各种应用或程序可以被存储和提供在非临时性计算机可读存储介质中，诸如致密盘（CD）、数字视频盘说明书 CN 103914144 A 11 9/9 页 12 （DVD）、硬盘、蓝光盘、通用串行总线（USB）、存储卡和只读存储器（ROM）。 0112 前述示例性实施例和优点仅仅是示例性的，并且不被解释为限制。前述示例性实施例可以容易地应用于其它类型的装置。此外，示例性实施例的描述旨在是说明性的，而不是限制权利要求的范围，而且许多替换、修改和变化将对本。

展开阅读全文