CN201380048593.2
2013.09.17
CN104813268A
2015.07.29
实审
审中
实质审查的生效IPC(主分类):G06F 3/0484申请日:20130917|||公开
G06F3/0484(2013.01)I; G06F3/14; G06F3/03; G03B21/00
G06F3/0484
三星电子株式会社
徐俊奎; 姜京我; 郭知妍; 金贤真; 李根镐
韩国京畿道
10-2012-0103481 2012.09.18 KR
北京市柳沈律师事务所11105
张泓; 邵亚丽
提供了一种柔性装置。该柔性装置包括:屏幕生成器,被配置为生成用户界面(UI)屏幕;多个传感器,被配置为感测柔性装置的变形并且输出感测的结果;存贮器,存储关于柔性装置的折皱的折皱确定条件;以及控制器,被配置为确定由多个传感器进行的感测的结果是否满足存储在存贮器中的折皱确定条件,并且响应于确定折皱确定条件被满足,执行与折皱确定条件相对应的操作。
1. 一种柔性装置,包括:屏幕生成器,被配置为生成用户界面(UI)屏幕;多个传感器,被配置为感测柔性装置的变形并且输出感测的结果;存贮器,存储关于柔性装置的折皱的折皱确定条件;以及控制器,被配置为确定由多个传感器进行的感测的结果是否满足存储在存贮器中的折皱确定条件,并且响应于确定折皱确定条件被满足,执行与折皱确定条件相对应的操作。2. 根据权利要求1所述的柔性装置,其中,操作包括控制屏幕生成器改变UI屏幕。3. 根据权利要求2所述的柔性装置,其中,折皱确定条件包括关于传感器的最大数量的条件,并且其中,当多个传感器中的至少一个感测到柔性装置的变形并且输出感测值时,控制器被配置为将输出感测值的传感器的数量与关于传感器的最大数量的条件相比较,并且如果传感器的数量超过关于传感器的最大数量的条件则确定折皱确定条件被满足。4. 根据权利要求2所述的柔性装置,其中,折皱确定条件包括以下中的至少一个:关于由柔性装置的变形所形成的弯曲线的最大数量的条件、关于每一个弯曲线的形成方向的条件、关于每一个弯曲线的成形角的条件、关于弯曲线之间的交叉点的数量的条件以及关于形成弯曲线的时间范围的条件。5. 根据权利要求2所述的柔性装置,进一步包括:显示器,是柔性的并且被配置为显示UI屏幕。6. 根据权利要求2所述的柔性装置,进一步包括:光束投影仪,被配置为发射与UI屏幕相对应的光束。7. 根据权利要求2所述的柔性装置,进一步包括:通信器,被配置为与外部显示装置进行通信。8. 根据权利要求2所述的柔性装置,其中,操作包括与在UI屏幕上显示的内容有关的操作。9. 根据权利要求2所述的柔性装置,其中,操作包括以下中的一个:重新安排在UI屏幕上显示的多个内容的位置的拖曳操作、删除与UI屏幕相对 应的内容或程序的删除操作、删除UI屏幕或关掉柔性装置的电源的关闭操作。10. 根据权利要求1所述的柔性装置,其中,多个传感器被布置在柔性装置的表面上,其中,控制器被进一步配置为如果由多个传感器进行的感测的结果指示由多个传感器当中的布置在一个区域中的至少一个传感器感测到形状变形则确定发生向上捏以捡起柔性装置的局部区域或者向下捅以按下局部区域,并且执行与向上捏或者向下捅相对应的操作。11. 根据权利要求10所述的柔性装置,其中,与向上捏或向下捅相对应的操作包括以下中的至少一个:放大或缩小在对应点显示的对象的操作、复制对象的操作、在剪贴板区域上粘贴所复制的对象的操作、增加或减少在对应点显示的数字的操作、显示关于对象的详细信息的操作、显示关于对象的调整菜单的操作、删除对象的操作、执行与对象相对应的程序的操作以及向外部装置传送与对象相对应的内容的操作。12. 一种用于控制柔性装置的方法,该方法包括:接收由布置在柔性装置中的多个传感器进行的感测的结果;确定感测的结果是否满足关于柔性装置的折皱的折皱确定条件;以及响应于确定折皱确定条件被满足,执行与折皱确定条件相对应的操作。13. 根据权利要求12所述的方法,其中,操作包括改变用户界面(UI)屏幕。14. 根据权利要求13所述的方法,其中,折皱确定条件包括以下中的至少一个:关于感测柔性装置的形状变形的传感器的最大数量的条件、关于由柔性装置的形状变形所形成的弯曲线的最大数量的条件、关于由柔性装置的形状变形所形成的每一个弯曲线的形成方向的条件、关于每一个弯曲线的成形角的条件以及关于弯曲线之间的交叉点的数量的条件。15. 根据权利要求13所述的方法,进一步包括发射光束来显示所改变的UI屏幕。
柔性装置及其控制方法 技术领域 按照示例性实施例的装置和方法涉及柔性装置及其控制方法,并且更具体地涉及感测诸如折皱、向上捏或者向下捅之类的变形并且执行与变形相对应的操作的柔性装置以及其控制方法。 背景技术 随着电子技术的发展,各种类型的显示装置已经被开发并且被实施于各种装置应用中。具体地,诸如电视机(TV)、个人计算机(PC)、膝上计算机、平板机PC、移动电话机和MP3播放机之类的显示装置被广泛地使用,达到了能够在大多数家庭中能够找到它们的这样的程度。 为了满足消费者对于显示器的新功能和新形式的需求,正在努力开发新形式的显示装置。该努力的结果之一是柔性显示装置形式的下一代显示装置。 柔性显示装置指的是可以变形为不同的形状和外形的显示装置。 可以通过由用户施加的力来使诸如柔性显示装置的柔性装置变形。 发明内容 技术问题 一个或多个示例性实施例提供一种柔性装置以及其控制方法,当感测到诸如折皱、向上捏或者向下捅之类的变形时能够执行与所感测的变形相对应的操作。 解决方案 一个或多个示例性实施例可以克服以上缺点和未如上所述的其他缺点。然而,可以明白,不需要一个或多个示例性实施例克服如上所述的缺点,并且一个或多个示例性实施例可以不克服任何如上所述的问题。 根据示例性实施例的一方面,提供了一种柔性装置,包括:屏幕生成器,被配置为生成用户界面(UI)屏幕;多个传感器,被配置为感测柔性装置的变形并且输出感测的结果;存贮器,被配置为存储关于柔性装置的折皱的折 皱确定条件;以及控制器,被配置为确定由多个传感器进行的感测的结果是否满足存储在存贮器中的折皱确定条件,并且响应于确定折皱确定条件被满足,执行与折皱确定条件相对应的操作。 控制器可以被配置为控制屏幕生成器改变UI屏幕。 折皱确定条件可以包括关于传感器的最大数量的条件。当多个传感器中的至少一个感测到柔性装置的变形并且输出感测值时,控制器被配置为将输出感测值的传感器的数量与关于传感器的最大数量的条件相比较,并且如果传感器的数量超过关于传感器的最大数量的条件则确定折皱确定条件被满足。 折皱确定条件可以包括以下中的至少一个:关于由柔性装置的变形所形成的弯曲线的最大数量的条件、关于每一个弯曲线的形成方向的条件、关于每一个弯曲线的成形角的条件、关于弯曲线之间的交叉点的数量的条件以及关于在其内形成弯曲线的时间范围的条件。 柔性装置还可以包括:显示器,其是柔性的并且被配置为显示UI屏幕。 柔性装置还可以包括:光束投影仪,被配置为发射与UI屏幕相对应的光束。 柔性装置还可以包括:通信器,被配置为与外部显示装置进行通信。 控制器可以被配置为执行与在UI屏幕上显示的内容有关的操作。 操作可以是以下中的一个:重新安排在UI屏幕上显示的多个内容的位置的拖曳操作、删除与UI屏幕相对应的内容和程序的删除操作、删除UI屏幕并关掉柔性装置的电源的关闭操作。 多个传感器可以被布置在柔性装置的表面上。控制器被进一步配置为如果由多个传感器进行的感测的结果指示由多个传感器当中的布置在一个区域中的至少一个传感器感测到变形则确定发生向上捏以捡起柔性装置的局部区域或者向下捅以按下局部区域,并且执行与向上捏或者向下捅相对应的操作。 与向上捏或向下捅相对应的操作包括以下中的至少一个:放大或缩小在对应点所显示的对象的操作、复制对象的操作、在剪贴板区域上粘贴所复制的对象的操作、增加或减少在对应点显示的数字的操作、显示关于对象的详细信息的操作、显示关于对象的调整菜单的操作、删除对象的操作、执行与对象相对应的程序的操作以及向外部装置传送与对象相对应的内容的操作。 根据另一个示例性实施例的方面,提供一种柔性显示装置,包括:屏幕 生成器,被配置为生成用户界面(UI)屏幕;显示器,被配置为显示UI屏幕;多个传感器,被布置在显示器中,并且被配置为感测柔性显示装置的变形并且输出感测的结果;以及控制器,被配置为基于由多个传感器进行的感测的结果来确定是发生向上捏以捡起显示器的局部区域还是向下捅以按下局部区域,并且响应于确定发生向上捏或向下捅来控制屏幕生成器改变UI屏幕。 显示器可以包括:显示面板;第一保护层,堆叠在显示面板的第一表面上并且由柔性材料制成;以及第二保护层,堆叠在显示面板的第二表面上并且由柔性材料制成。当沿第一方向发生向上捏时,第一保护层可以在发生向上捏的点与第一表面局部地分离。当沿与第一方向相对的第二方向发生向上捏时,第二保护层可以在发生向上捏的点与第二表面局部地分离。 多个传感器可以是被布置在显示面板的第一表面或第二表面上的触摸传感器,并且被配置为感测第一保护层和显示面板之间的分离以及第二保护层和显示面板之间的分离。 控制器被配置为响应于确定发生向上捏或向下捅来执行与在UI屏幕上显示的对象有关的操作。 操作包括以下中的至少一个:放大或缩小在对应点所显示的对象的操作、复制对象的操作、在剪贴板区域上粘贴所复制的对象的操作、增加或减少在对应点显示的数字的操作、显示关于对象的详细信息的操作、显示关于对象的调整菜单的操作、删除对象的操作、执行与对象相对应的程序的操作以及向外部装置传送与对象相对应的内容的操作。 根据另一个示例性实施例的方面,提供一种用于控制柔性装置的方法,该方法包括:接收由布置在柔性装置中的多个传感器进行的感测的结果;确定感测的结果是否满足关于柔性装置的折皱的折皱确定条件;以及响应于确定折皱确定条件被满足,来执行与折皱确定条件相对应的操作。 折皱确定条件可以包括以下中的至少一个:关于感测柔性装置的形状变形的传感器的最大数量的条件、关于由柔性装置的形状变形所形成的弯曲线的最大数量的条件、关于由柔性装置的形状变形所形成的每一个弯曲线的形成方向的条件、关于每一个弯曲线的成形角的条件以及关于弯曲线之间的交叉点的数量的条件。 该方法还可以包括发射光束来显示改变后的UI屏幕。 该方法还可以包括向外部显示装置传送关于改变后的UI屏幕的数据。 与折皱相对应的操作可以是以下中的一个:重新安排在UI屏幕上显示的多个内容的位置的拖曳操作、删除与UI屏幕相对应的内容或程序的删除操作、删除内容或关掉柔性装置的电源的关闭操作。 该方法还可以包括:如果由多个传感器进行的感测的结果指示由多个传感器当中的布置在一个区域中的至少一个传感器感测到形状变形,则确定发生向上捏柔性装置的局部区域或向下捅以按下局部区域;以及,响应于发生确定向上捏或向下捅,执行以下中的至少一个:放大或缩小在对应点所显示的对象的操作、复制对象的操作、在剪贴板区域上粘贴所复制的对象的操作、增加或减少在对应点显示的数字的操作、额外显示关于对象的详细信息的操作、额外显示关于对象的调整菜单的操作、删除对象的操作、执行与对象相对应的程序的操作以及向外部装置传送与对象相对应的内容的操作。 根据另一个示例性实施例的方面,提供一种用于控制柔性显示装置的方法,该方法包括:在显示器上显示用户界面(UI)屏幕;由分布在显示器上的多个传感器感测柔性显示装置的变形;基于感测的结果来确定是发生向上捏以捡起显示器的局部区域还是向下捅以按下局部区域;以及,响应于确定发生向上捏或向下捅,来执行与向上捏或向下捅相对应的操作。 操作包括改变在显示器的屏幕上显示的UI屏幕。 操作可以是以下中的至少一个:放大或缩小在发生向上捏或向下捅的点所显示的对象的操作、复制对象的操作、在剪贴板区域上粘贴所复制的对象的操作、增加或减少在对应点显示的数字的操作、额外显示关于对象的详细信息的操作、额外显示关于对象的调整菜单的操作、删除对象的操作、执行与对象相对应的程序的操作以及向外部装置传送与对象相对应的内容的操作。 有益效果 根据如上所述的各个示例性实施例,可以广泛地使用柔性装置,并且用户喜欢使用柔性装置,因此用户的满意度得以提高。 附图说明 通过参考附图详细描述示例性实施例,以上和/或其他方面将更明显,在附图中: 图1是图示出根据示例性实施例的柔性装置的配置的框图; 图2是图示出感测柔性装置的形状变形的配置的示例的视图; 图3是图示出在具有图2的配置的柔性装置中用于感测形状变形的方法的视图; 图4是图示出处于折皱状态中的柔性装置的视图; 图5是图示出当发生折皱时所形成的弯曲线的视图; 图6是图示出感测柔性装置的形状变形的配置的另一个示例的视图; 图7和图8是图示出在具有图6的配置的柔性装置中用于感测形状变形的方法的视图; 图9是图示出包括显示功能的柔性装置的配置的示例的视图; 图10至图12是图示出用于当发生折皱时改变用户界面(UI)屏幕的方法的各种示例的视图; 图13是图示出包括光束投影功能的柔性装置的配置的示例的视图; 图14是图示出与外部显示装置进行通信的柔性装置的操作的视图; 图15A和图15B是图示出作为柔性装置的局部形状变形的示例的向上捏的视图; 图16A和图16B是图示出作为柔性装置的局部形状变形的另一个示例的向下捅的视图; 图17是图示出用于使用多个传感器来感测局部形状变形的方法的视图; 图18是图示出感测局部形状变形的显示器的配置的示例的视图; 图19是图示出其中在图18的显示器中发生局部形状变形的局部形状变形的状态的视图; 图20至图28是图示出当发生位置形状变形时所执行的操作的各种示例的视图; 图29是图示出根据示例性实施例的柔性装置的控制方法的流程图; 图30是图示出根据各个示例性实施例的柔性装置的控制方法的流程图; 图31是图示出根据各个示例性实施例的柔性装置的配置的框图;并且 图32是图示出在柔性装置中使用的程序的配置的示例的视图。 具体实施方式 在下文中,将参考附图更详细地描述示例性实施例。 在以下描述中,对于在不同的图中所描绘的相同的要素使用相同的附图 标记。提供诸如详细构造和要素之类的在说明书中限定的事件,来帮助示例性实施例的全面的理解。因此,很明显,可以在没有那些具体地限定的事件的情况下执行示例性实施例。而且,不详细描述在相关技术中已知的功能或要素以避免用不必要的细节使示例性实施例模糊。 图1是图示出根据示例性实施例的柔性装置的配置的框图。柔性装置100指的是全部或部分地由柔性材料制造的装置并且通过用户的力使其形状发生改变。可以使用诸如移动电话机、个人数字助理(PDA)、电子相册、电子图书、电子调度器、MP3播放机、平板机PC、膝上型计算机、监视器、电话亭、个人计算机(PC)、远程控制器和光束投影仪之类的各种类型的装置来实施柔性装置100。参考图1,柔性装置100包括多个传感器110-1至110-N、屏幕生成器120、控制器130和存贮器140。 多个传感器110-1至110-n被布置在柔性装置100中并且感测柔性装置100的形状变形。可以通过使用应变计来实施传感器110-1至110-n中的每一个。应变计使用电阻根据作用力被大大地改变的半导体或金属,并且根据电阻值的改变来感测要被测量的对象的表面的变形。众所周知的是,诸如金属的材料在金属的长度通过外力被伸展时增大电阻值,并且在长度被收缩时缩小电阻值。因此,当压缩力被施加到传感器110-1至110-n中的每一个时,电阻值减小,并且,当施加张力时,电阻值增大。从传感器110-1至110-n中的每一个输出的电信号的强度根据传感器110-1至110-n中的每一个的电阻值而改变。控制器130可以通过确定传感器110-1至110-n中的每一个的输出值的改变来确定形状变形。可以通过使用压电传感器或者其他的弯曲传感器来实施传感器110-1至110-n。 存贮器140存储在柔性装置100中使用的各种程序和数据。存贮器140可以存储用于确定形状变形的类型的条件。形状变形的类型可以包括仅仅边缘或者一角被弯曲的“单弯”、两个或更多部分被弯曲的“多弯”、柔性装置被弯曲超过预定角度的“折叠”、“卷起”、“扭曲”、“折皱”、一部分被拿起的“向上捏”、和一部分被按下的“向下戳”,以及其他变形的类型。 当接收到由多个传感器110-1至110-n中的每一个进行的感测的结果时,控制器130将感测的结果与所存储的确定条件相比较,并且确定是否发生形状变形。具体而言,当由多个传感器110-1至110-n进行的感测的结果满足折皱确定条件时,控制器130确定柔性装置100被折皱。 屏幕生成器120可以被配置为生成各种用户界面(UI)屏幕。UI屏幕指的是:包括诸如图标、图像和文字之类的各种对象的屏幕;通过执行各种应用所生成的应用屏幕;在其上显示软键盘或者各种键的输入屏幕;在其上显示各种菜单的主屏幕;在其上显示各种图标的图标显示屏幕;和/或通知锁定状态的锁定屏幕。 屏幕生成器120可以包括计算器(未示出)、渲染器(未示出)和缓冲器(未示出)。计算器根据存储在存贮器140中的对应的屏幕的布局来计算将被显示的每个对象的诸如坐标值、形状、大小和色彩之类的属性值。渲染器基于由计算器计算的属性值生成包括对象的各种布局的屏幕。由渲染器生成的屏幕数据被存储在缓冲器中。可以由各种元件来使用存储在缓冲器中的屏幕数据。 当确定发生折皱时,控制器130执行与折皱相对应的操作。控制器130控制屏幕生成器120来根据折皱改变UI屏幕。可以根据当发生折皱时所执行的应用的种类、内容的种类或功能的种类或者当发生折皱时所显示的UI屏幕的配置来确定与折皱相对应的操作。 具体而言,如果在包括至少一个对象的UI屏幕被显示时发生折皱,则控制器130可以执行各种操作,诸如对显示在UI屏幕上的多个内容的次序进行重新安排的拖曳操作、在将UI屏幕变形为折皱形状的同时删除与UI屏幕相对应的内容或程序的删除操作、删除UI屏幕并关掉柔性装置的电源的关闭操作。将在以下详细说明根据这样的操作的UI屏幕的改变。 如图1中所示的柔性装置100的每个元件可以被嵌入在壳体中。壳体可以全部或部分地由柔性材料制成。具体而言,可以通过使用可由外部压力变形的塑造基底(例如,聚合物膜)来实施壳体。塑造基底具有通过对带基薄膜的相对表面进行防渗涂覆而形成的结构。可以通过使用诸如聚酰亚胺(PI)、聚碳酸酯(PC)、聚对酞酸乙二酯(PET)、聚醚砜(PES)、聚萘二甲酸乙二醇酯(PEN)和纤维增强塑料(FRP)之类的各种树脂来实施带基薄膜。对带基薄膜的相对表面执行防渗涂覆。有机膜或无机膜可以用于维持柔性的目的。因此,可以通过用户使柔性装置100变形。 图2是图示出根据示例性实施例的传感器的布置的示例的视图。参考图2,可以沿着柔性装置100的边缘排成一队地布置多个传感器110-1至110-n。尽管在图2中将多个传感器110-1至110-n排成一队地对准,但根据示例性实 施例可以在两个或更多队中对准多个传感器110-1至110-n。 在其中布置通过使用应变计所实施的传感器110-1至110-n的状态中,压缩力或张力被施加到位于发生形状变形的地方的传感器110-1至110-n。传感器110-1至110-n输出与压缩力或张力相对应的水平的感测值。控制器130根据输出感测值的传感器的位置和感测值的水平来确定形状变形的类型。 图3图示出柔性装置100的多个区域被弯曲的多弯。参考图3,当沿着边缘布置多个传感器110-1至110-n并且一个角和一个边缘区域被弯曲时,在弯曲区域和其他区域之间形成弯曲线。沿着弯曲线布置的传感器经受比其他传感器的压缩力或张力大的压缩力或张力。参考图3,当左上角区域被弯曲时,形成连接第三传感器110-3和第9传感器110-9的弯曲线,并且,当右边缘区域被弯曲,形成连接第8传感器110-8和第n-2的传感器110-n-2的弯曲线。 尽管在图3中沿垂直于柔性装置100的表面的第一方向弯曲柔性装置100,但也可以沿与第一方向相对的第二方向弯曲柔性装置100。当传感器110-1至110-n关于柔性装置100的中心被布置在后表面上时,并且,当沿第一方向弯曲柔性装置100时,张力被施加于传感器110-1至110-n,并且,当沿第二方向弯曲柔性装置100时,压缩力被施加于传感器110-1至110-n。另一方面,当传感器110-1至110-n关于柔性装置100的中心被布置在前表面上时,并且,当沿第一方向弯曲柔性装置100时,压缩力被施加于传感器110-1至110-n,并且,当沿第二方向弯曲柔性装置100时,张力被施加于传感器110-1至110-n。 当第三传感器110-3和第9传感器110-9在预定时间内输出感测值时,控制器130确定左上角被弯曲,并且根据感测值的水平来确定是沿第一方向还是第二方向弯曲左上角。同样,当第8传感器110-8和第n-2传感器110-n-2在预定时间内输出感测值时,控制器180确定右边缘区域被弯曲,并且根据感测值的水平来确定是沿第一方向还是第二方向弯曲右边缘区域。可以基于在存贮器140中存储的确定条件来执行基于弯曲线和弯曲方向确定形状变形的类型的操作。 用于确定上述单弯、多弯和折叠的条件可以包括输出感测值的传感器的位置和数量、以及关于那些感测值的水平所预置的值。在卷起或者扭曲的情况下,用于确定形状变形的类型的条件可以包括从传感器输出的感测值的水 平之间的差和关于弯曲方向所预置的值。 另一方面,折皱可以发生在柔性装置100中。折皱指的是使柔性装置100折皱。 图4图示出被折皱的柔性装置100的形状。当发生折皱时,在柔性装置100中形成多个弯曲线,并且弯曲线的位置或方向以及弯曲方向被随机地确定。控制器130将由传感器110-1至110-n进行的感测的结果与存储在存贮器140中的折皱确定条件相比较,并且确定是否发生折皱。 根据示例性实施例,折皱确定条件可以被设置为各种值并且被存储。例如,柔性装置100的厂商或设计者多次执行折皱,并且存储在折皱状态中感测形状变形的传感器的数量,以及基于那些传感器的感测值的最大值、平均值和最小值所确定的感测值范围,作为折皱确定条件。在该情况下,当通过其感测到形状变形的传感器中的输出落入在感测值范围内的感测值的传感器的数量大于或等于预定数量时,控制器130确定发生折皱。 对于另一个示例,可以考虑由柔性装置100支持的服务来设置折皱确定条件。也就是说,柔性装置100可以被设置为当形状变形最大发生在四个位置中时支持与每个形状变形区域相对应的服务。在该情况下,当执行多弯时,从八个传感器输出最大的感测值。因此,折皱确定条件可以是确定输出感测值的传感器的数量将超过九的关于最大数量的条件。 对于又一个示例,折皱确定条件可以包括关于形成弯曲线的时间范围的条件。也就是说,当执行多弯时,因为用户按顺序弯曲角或边缘,所以按顺序形成弯曲线。因此,虽然感测到单个弯曲线的两个传感器在类似的时间输出感测值,但是感测到下一弯曲线的两个传感器稍后在预定时间输出感测值。另一方面,当发生折皱时,在短时间内形成两个或更多弯曲线。因此,当在预定时间内从超过预定数量的传感器输出感测值时,控制器130可以确定发生折皱。 此外,折皱确定条件可以包括以下中的至少一个:关于由柔性装置100的形状变形所生成的弯曲线的最大数量的条件、关于每一个弯曲线的形成方向的条件、关于每一个弯曲线的成形角的条件、以及关于弯曲线相遇的弯曲线之间的交叉点的数量的条件。 关于弯曲线的最大数量的条件指的是确定当发生折皱时所形成的弯曲线的最大数量的条件。图5通过示例的方式图示出当发生折皱时所形成的弯曲 线的视图。 当如图4中所示被折皱的柔性装置100被展开为平面时,可以如图5中所示形成多个弯曲线。控制器130把将多个传感器110-1至110-n中的以预定时间间隔输出落入在类似的范围内的感测值的两个传感器相连接的线确定为单个弯曲线。参考图5,感测到八个弯曲线(B1至B8)。当关于弯曲线的最大数量的条件被设置为五个或更多时,控制器130确定发生折皱。 关于形成方向的条件和关于成形角的条件指的是对于弯曲线所位于的方向或者弯曲线所位于的角度所定义的状态条件。关于交叉点的数量的条件指的是确定通过使弯曲线相交所形成的交叉点的数量的条件。 因为众所周知的是,通过正常形状变形而非折皱形成的弯曲线彼此没有相交,所以关于交叉点的数量的条件可以被设置为1或2或者更多点并且被存储。 另一方面,可以以与图2的图案不同的图案来布置多个传感器110-1至110-n。 图6是图示出遍及柔性装置100的整个表面布置的多个传感器110-1至110-n的视图。尽管图6图示出以由多个行和列组成的矩阵的形式布置多个传感器110-1至110-n,但也可以交替地布置或者可以在整个表面上不均匀地布置行或列。 图7图示出当发生折皱时输出感测值的传感器的示例。参考图7,黑点指示输出感测值的传感器,并且白点指示没有输出感测值的传感器。当形状变形发生时,在形状变形发生的点处的传感器输出感测值。然而,在实践中,所有传感器可能总是输出感测值,并且,当形状变形发生时,在形状变形发生的点处的传感器的感测值可能改变。然而,为了说明的方便起见,在本文即使输出改变的感测值的传感器也被描述为输出感测值的传感器。 控制器130从输出感测值的传感器中选择某一传感器,并且确定在围绕该某一传感器的附近的传感器中是否存在输出感测值的传感器。当确定存在输出感测值的附近的传感器时,控制器130将所选择的某一传感器和附近的传感器连接。通过重复这样的操作,控制器130可以确定是否形成局部弯曲线、那些弯曲线的布置方向和弯曲线之间的交叉角。 图8是图示出用于确定控制器130的弯曲线的方法的示例的视图。当如图7中所示从多个传感器输出感测值时,控制器130可以选择某一传感器, 例如第三传感器110-3。控制器130从输出感测值的多个传感器中选择作为第三传感器110-3的附近的传感器的第12传感器110-12,并且选择作为第12传感器110-12的附近的传感器的第11和第22传感器110-11和110-22。当这样连接输出感测值的所有传感器时,如图8中所示来确定局部弯曲线。 当折皱确定条件包括如上所述的关于形成方向的条件或者关于每个弯曲线的成形角的条件时,控制器130将每个弯曲线的方向或成形角与存储在存贮器140中的条件相比较,并且确定是否发生折皱。也就是说,当不与另一局部弯曲线平行的局部弯曲线的数量大于预定数量时,控制器130确定发生折皱。 当发生折皱时,控制器130根据折皱来控制屏幕生成器120改变UI屏幕。根据柔性装置100的示例性实施例可以不同地使用由屏幕生成器120改变的UI屏幕。 图9是图示出包括显示功能的柔性装置的配置的框图。参考图9,柔性装置100包括多个传感器110-1至110-n、屏幕生成器120、控制器130、存贮器140和显示器150。不对与图1的那些相同的多个传感器110-1至110-n、屏幕生成器120、控制器130和存贮器140的配置和操作进行详细描述。 在柔性装置100的整个表面或者一部分上形成显示器150,并且显示器150显示由屏幕生成器120生成的各种UI屏幕。显示器150可以包括显示面板、驱动电路和背光单元。 可以由液晶显示器(LCD)、有机发光二极管(OLED)、电泳显示器(EPD)、电化色显示器(ECD)和等离子体显示板(PDP)来实施显示面板。 驱动电路是用于驱动显示面板的电路。具体而言,驱动电路向构成显示面板的多个像素施加驱动电压,并且可以包括诸如硅薄膜晶体管(TFT)、低温多晶硅(LTPS)TFT或有机TFT(OTFT)等等的晶体管。当电信号被施加到晶体管时,晶体管可以使显示面板中的对应的像素单元发光。因此,图像可以被显示在显示面板上。背光单元包括光源,诸如以直线类型或者边缘类型布置的灯或LED,并且朝着显示面板的方向提供背光。显示器150的每个元件用包括碳的有机材料制成或者使用金属薄片薄薄地制造,并且因此具有柔性。 传感器110-1至110-n可以被嵌入在显示器150中。因此,传感器110-1至110-n可以感测形状变形。 当UI屏幕被显示在显示器150上并且发生折皱时,控制器130控制屏幕生成器120将UI屏幕的形状改变为各种形状。 图10是图示出由折皱改变的UI屏幕的示例的视图。参考图10,当一个图像1010被显示在显示器150(a)上时,柔性装置100被折皱(b)并且然后被展开(c),显示被改变以示出在先前屏幕上显示的图像1010被折皱并且被放进垃圾箱1020的UI屏幕1030。控制器130控制屏幕生成器120改变UI屏幕并且控制显示器150显示改变后的UI屏幕,如图10中所示。控制器130可以从存贮器140中删除显示在UI屏幕上的图像101(即,与UI屏幕相对应的内容)。尽管在图10中删除显示在UI屏幕上的图像内容,但是也可以通过折皱来删除诸如应用或者小组件之类的程序。例如,当执行游戏程序并且显示游戏程序的屏幕时,当发生折皱时,控制器130可以删除游戏程序。 图11图示出当执行删除操作时的UI屏幕的示例。当发生折皱时,控制器130可以控制屏幕生成器120改变UI屏幕以示出UI屏幕被折皱并且被删除,如图11中所示。 图12是图示出当发生折皱时所执行的操作的另一个示例的视图。参考图12,柔性装置100可以执行内容播放程序来播放多个内容之一。控制器130通过执行内容播放程序(a)来控制屏幕生成器120和显示器150生成并显示内容播放屏幕1200。 内容播放屏幕1200包括在其上显示关于当前播放的内容的信息和控制菜单的播放区域11以及在其上显示关于将被播放的内容的信息的播放列表区域12。 在该状态中,当柔性装置被折皱(b)并且然后被展开(c)时,控制器130执行拖曳操作来重新安排内容的播放次序。通过执行拖曳操作,可以随机地重新安排正在播放的内容以及播放列表中的内容的次序。因此,显示在内容播放屏幕1200的播放区域11和播放列表区域12上的内容发生改变。 尽管在以上示例中图示出删除操作和拖曳操作,但也可以通过折皱来执行关闭操作。具体而言,当主屏幕或者锁定屏幕被显示并且发生折皱时,控制器130移除屏幕、关掉从电力源供应的电力,并且关闭柔性装置100。 尽管图10至图12图示出包括显示器150的柔性装置100的操作,但除了显示器之外或代替显示器,柔性装置100也可以包括光束投影仪。 图13是图示出包括光束投影功能的柔性装置的操作的视图。参考图13, 柔性装置100还可以包括光束投影仪160而不是显示器150。 光束投影仪160包括光源、光波导管和透镜。光束投影仪160可以被布置在柔性装置100的一侧上。控制器130控制光束投影仪160发射光束来在由屏幕生成器120生成的UI屏幕上展示数据。当利用从光束投影仪160发射的光束来扫描墙壁或屏幕时,如图13的视图(a)中所示地显示UI屏幕10。 布置有光束投影仪160的部分可以由不是柔性的刚性材料制成。另一方面,没有布置光束投影仪160的其他部分可以由柔性材料制成。当柔性部分被折皱时,发射光束来显示示出UI屏幕10被折皱的屏幕20,如图13的视图(b)中所示。 图14是图示出与外部显示装置进行通信的柔性装置的操作的视图。参考图14,柔性装置100还可以包括通信器170。通信器170对由屏幕生成器120生成的UI屏幕数据进行编码并且向显示装置200传送UI屏幕数据。通信器170可以以诸如Wi-Fi、蓝牙和射频(RF)通信之类的各种类型的无线通信方法或者有线通信方法来与显示装置200进行通信。显示装置200基于所接收的UI屏幕数据来显示UI屏幕1410,如图14的视图(a)中所示。 在该状态中,当柔性装置100被折皱时,柔性装置100的控制器130根据折皱来控制屏幕生成器120改变UI屏幕。通信器170向显示装置200传送改变后的UI屏幕数据。如图14的视图(b)中所示,显示装置200显示根据UI屏幕数据被改变的UI屏幕1420。 尽管在图14中在柔性装置100中生成UI屏幕数据并且其被传送到显示装置200,但是柔性装置100也可以向显示装置200传送根据折皱改变UI屏幕的控制命令,并且显示装置200可以根据控制命令来生成UI屏幕。在该情况下,可以从柔性装置100中省略屏幕生成器120。控制命令可以根据诸如删除操作、关闭操作和拖曳操作之类的各种类型的操作被设置为不同的值,并且可以被存储在存贮器140中。 尽管在图14中柔性装置100与显示装置200进行通信,但柔性装置100也可以与光束投影装置进行通信并且控制光束投影装置发射与UI屏幕相对应的光束。 在以上描述的示例性实施例中,柔性装置100感测折皱并且执行与折皱相对应的操作。然而,这仅仅是示例,并且可以使用诸如向上捏或向下捅之类的局部形状变形而不是折皱来控制柔性装置100的操作。为了感测诸如向 上捏或向下捅之类的局部形状变形,可以遍及柔性装置100的整个表面来布置多个传感器110-1至110-n,如图6中所示。 图15A、图15B、图16A和图16B是图示出局部形状变形的各种示例的视图。 图15A和图15B是图示出向上捏的视图。向上捏指的是用户使用他的/她的手指或其他躯体或事物捡起柔性装置100的表面的一些区域的状态或者对应的动作。 图15A的视图图示出沿第一方向捡起柔性装置100的表面的操作。图15B的视图图示出沿与第一方向相对的第二方向捡起柔性装置100的表面的操作。在图15A中,第一方向被图示为Z+方向。在图15B中,与第一方向相对的第二方向被图示为Z-方向。如图15A和图15B中所示,可以沿柔性装置100的前表面方向或者后表面方向执行向上捏。因为向上捏的方向根据对应的区域中的传感器的感测值的水平而改变,所以可以基于感测值的水平来确定向上捏的方向。 图16A和图16B是图示出向下捅的视图。向下捅指的是用户使用他的/她的手指或其他躯体或事物按下柔性装置100的表面的一些区域的状态或者对应的动作。图16A的视图图示出用户按压柔性装置100的后表面并且使其形状变形以便柔性装置100的表面的被按压的区域沿Z+方向凸出的状态。另一方面,图16B的视图图示出用户按压柔性装置100的前表面并且使其形状变形以便柔性装置100的表面的被按压的区域沿Z-方向下陷的状态。也可以基于对应的区域中的传感器的感测值水平来确定向下捅的方向。 在图15A、图15B、图16A和图16B中,当执行向上捏或向下捅时,柔性装置100的表面以拱形形状升起或者凹陷。然而,可以根据柔性装置100的柔性来改变变形形状。当柔性装置100的柔性较小时,可以关于向上捏或向下捅的位置来形成单个弯曲线。也就是说,仅仅用户利用他的/她的两个手指所保持的部分被局部地折叠。当用户保持他的/她的三个手指时,多个弯曲线可以被局部地形成并且彼此重叠。另一方面,当柔性装置100的柔性较大时,柔性装置100的表面关于向上捏或向下捅的位置向上或者向下弯曲,如图15和图16中所示。 为了感测局部形状变形,可以遍及柔性装置100的整个表面来布置多个传感器110-1至110-n,如图6中所示。在该状态中,当发生向上捏或向下捅 时,仅仅由所有传感器当中的局部区域的传感器来感测形状变形。当确定在除柔性装置100的边缘区域外的区域中收集输出感测值的传感器时,控制器130可以确定局部形状变形发生。 图17图示出感测诸如向上捏或向下捅之类的局部形状变形的传感器。参考图17,从所有传感器110-1至110-n当中的仅仅一些传感器110-m至110-m+8输出感测值。 当如图17中所示仅仅从局部区域的传感器输出感测值时,控制器130可以确定在对应的区域中发生向上捏或向下捅。控制器130可以使用在柔性装置100中包括的触摸传感器(未示出)来在向上捏和向下捅之间进行区分。例如,因为用户应当使用至少两个手指捡起表面来执行向上捏,所以在至少两个位置中发生触摸。另一方面,因为众所周知的是,由一个手指来执行向下捅,所以在单个位置中发生触摸。用于确定向上捏的条件或者用于确定向下捅的条件可以被存储在存贮器140中。 控制器130将由传感器进行的感测的结果与由触摸传感器进行的感测的结果组合,将组合的结果与存储在存贮器140中的确定条件相比较,并且确定是向上捏还是向下捅发生。 当发生向上捏还是向下捅时,控制器130可以根据向上捏或向下捅来控制屏幕生成器120改变UI屏幕。当发生向上捏或向下捅时,控制器130可以执行与向上捏或向下捅相对应的操作。具体而言,控制器130可以执行各种操作,诸如放大或缩小在发生向上捏或向下捅的点处所显示的对象的操作、复制在对应点显示的对象的操作、在剪贴板区域上粘贴所复制的对象的操作、增加或减少在对应点处显示的数字的操作、显示关于在对应点显示的对象的详细信息的操作、显示关于在对应点显示的对象的调整菜单的操作、删除在对应点显示的对象的操作、执行与在对应点显示的对象相对应的程序的操作以及向外部装置传送与在对应点显示的对象相对应的内容的操作。屏幕生成器120可以根据由控制器130执行的操作的种类来仅仅改变其中发生向上捏或向下捅的UI屏幕的区域。 在以上描述的各个示例性实施例中,折皱、向上捏和向下捅全部被识别。然而,可以根据柔性装置100的配置或材料来仅仅感测除折皱外的局部形状变形。具体而言,根据另一个示例性实施例,柔性装置100可以包括:显示器150;遍及显示器150的整个表面所布置的多个传感器110-1至110-n;被 配置为基于由传感器110-1至110-n进行的感测的结果来确定是发生向上捏以捡起显示器150的局部区域还是向下捅以按下局部区域的控制器130;以及被配置为生成根据由控制器130进行的确定的结果所改变的UI屏幕的屏幕生成器120。可以如图17中所示来布置传感器110-1至110-n。 在该示例性实施例中,柔性装置100还可以包括额外元件,诸如被配置为存储包括用于确定向上捏或向下捅的确定条件的各种数据和程序的存贮器140。因为用于感测除折皱外的向上捏还是向下捅的柔性装置的说明和解释与在以上描述的示例性实施例中的柔性装置的那些是相同的,所以省略冗余的解释。 为了感测向上捏或向下捅,柔性装置100不需要被弯曲,并且仅仅表面可以由柔性材料制成并且因此形状变形可以仅仅发生在表面上。因此,可以使用嵌入在显示器中的触摸传感器而不是如上所述的应变计来实施传感器。 图18是图示出柔性装置的显示器150的配置的横截面视图,其中根据示例性实施例,形状变形仅仅发生在表面上。参考图18,显示器150包括第一保护层151、显示面板152、触摸传感器153和第二保护层152。 可以通过使用如上所述的各种类型的面板来实施显示面板152。 第一保护层151被堆叠在显示面板152的第一表面上。第一保护层151由柔性材料制成,并且当用户在显示面板152上执行向上捏时,其形状被局部地改变。具体而言,第一保护层151可以由透明硅或透明高分子材料制成。 第二保护层154由柔性材料制成并且堆叠在显示面板152的第二表面上。因为第二保护层154在显示屏幕的对面,所以其不需要由透明材料制成。 触摸传感器153可以被布置在显示面板152和第二保护层154之间。可以通过使用诸如电容型或者电阻型的传感器之类的各种类型的传感器来实施触摸传感器153。电容型通过使用涂敷在显示器150的表面上的介电质感测在用户的躯体的一部分触摸显示器150的表面时在用户的躯体中激励的微小电力来计算触摸坐标。电阻型包括两个电极板,并且,当用户触摸屏幕时,通过感测由于在触摸点的上下板之间的接触而流动的电流来计算触摸坐标。除此以外,红外光束、表面声波、积分应变仪和压电可以用于感测触摸操纵。 图19是图示出用于在图18中示出的配置的显示器上感测向上捏的方法的视图。 当沿第一方向——即,沿垂直于柔性装置100的表面的Z+方向——发生 向上捏时,第一保护层151在发生向上捏的点与显示面板152的第一表面分离。当沿与第一方向相对的第二方向——即,Z-方向——发生向上捏时,第二保护层154在发生向上捏的点与显示面板152的第二表面分离。 触摸传感器153感测在每个区域上第一保护层151或第二保护层154与显示面板152之间的接触和分离,并且向控制器130输出感测的结果。控制器130可以基于由触摸传感器153进行的感测的结果来确定发生向上捏的点。 在图18和图19的示例性实施例中,不是柔性的现有显示板152可以用作显示面板152。 控制器130可以根据发生向上捏和向下捅中的哪一个及其方向来执行不同的控制操作。因此,柔性装置100可以支持各种服务。例如,当人的面部图像被显示在柔性装置100上时,用户可以执行编辑操作,诸如通过捏合面部图像的一些区域并且拉动它们或者并行地捅表面来改变面部图像的一些区域的形状或色彩。而且,柔性装置100可以用于儿童的教学用具或者现实主义广告。 在以上示例中,对向上捏和向下捅进行区分,并且执行不同的操作。在下文中,将参考当发生向上捏时所执行的操作来解释改变屏幕的各种示例。 图20是图示出当沿第一方向发生向上捏时的操作的视图。如图20的视图(a)中所示,当音乐内容的播放屏幕2010被显示时,用户可以沿第一方向——即,沿柔性装置100的前表面——执行向上捏。在该情况下,可以如图20的视图(b)中所示来显示关于正被播放的音乐内容的详细信息2020。详细信息2020可以包括各种信息,诸如关于音乐内容的歌手的信息、专辑信息、标题信息以及关于相关音乐内容的信息(例如,同一专辑中的另一个音乐内容信息)。可以在发生向上捏的点处显示详细信息2020。当确定发生向上捏时,控制器130可以控制屏幕生成器120生成详细信息2020并且将其添加到播放屏幕2010,如图20的视图(b)中所示。 图21是图示出当沿第二方向发生向上捏时的操作的视图。以与图20同样的方式,当音乐内容的播放屏幕2010被显示时(图21的视图(a)),用户可以沿第二方向——即,沿柔性装置100的后表面——.执行向上捏。在该情况下,控制器130认识到输入删除正被播放的内容的命令,并且控制屏幕生成器120添加询问屏幕2030以询问用户是否想要删除内容。当用户选择“是”时,控制器130删除存储在存贮器140中的内容。 如图20和图21中所示,柔性装置100可以根据向上捏或向下捅来显示详细信息或者删除内容。尽管详细信息显示操作或内容删除操作对应于图20和图21中的单个UI屏幕,但是可以以显示在单个UI屏幕上的对象为基础执行这样的操作。 图22是图示出当沿第一方向发生向上捏时的操作的另一个示例的视图。当如图22的视图(a)中所示显示包括多个对象的UI屏幕2210并且沿第一方向在显示至少一个对象的点执行向上捏时,控制器130检测发生向上捏的点的坐标值,将坐标值和在UI屏幕上显示的每个对象的显示坐标值相比较,并且确定在向上捏的点显示的对象。控制器130从存贮器140中读出关于所确定的对象的详细信息,或者从外部源检索详细信息,并且向屏幕生成器120提供详细信息。屏幕生成器120在UI屏幕上显示详细信息2220,如图22的视图(b)中所示。 图23是图示出当沿第二方向发生向上捏时的操作的另一个示例的视图。参考图23的视图(a),当显示包括多个对象的UI屏幕2210并且沿第二方向在显示至少一个对象的点执行向上捏时,控制器130确定在发生向上捏的点处显示的对象,并且控制屏幕生成器120生成询问屏幕2230来询问用户是否想要删除所确定的对象。因此,在发生向上捏的点处显示询问屏幕2230,如图23的视图(b)中所示。用户可以通过选择“是”菜单来删除对应的对象。在图22和图23中,可以以缩略图的形式显示对象。然而,对象不局限于图像并且可以由文本或图标来表示。具体地,当在显示有多个图标的主屏幕上或者图标屏幕上的一个图标发生向上捏时,控制器130可以执行显示关于与图标相对应的程序的详细信息的操作或者删除或卸载程序的操作。 另一方面,当发生局部形状变形时,控制器130可以执行放大或缩小在形状变形的点处显示的对象的大小的操作。可以根据向上捏或向下捅的特性来不同地确定对象被放大或缩小的时间或者调整比。 图24和图25是图示出根据示例性实施例的用于在柔性装置中局部地放大或缩小屏幕的方法的视图。 当如图24的视图(a)中所示显示UI屏幕2400时,用户可以沿第一方向在屏幕中的局部区域上执行向上捏。控制器130识别发生向上捏的点并且指定其中发生向上捏的整体屏幕2400的区域。控制器130控制屏幕生成器120来将仅仅所指定的屏幕区域2410放大。 用户可以移动向上捏的位置。图24的视图(b)图示出正被移动的向上捏的位置。当向上捏的位置被移动时,沿与移动相对应的方向而改变屏幕的被放大的区域(2420)。 而且,用户可以使用他的/她的双手在多个点执行向上捏。当如图24的视图(c)中所示用户在两个点执行向上捏时,对应点的屏幕区域2420和2430被放大并且被显示。 在图24的视图(a)中,在整个UI屏幕2400上显示单个图像。然而,当如图22和图23中所示显示多个对象并且对一个对象执行向上捏时,仅仅该对象可以被放大或缩小。 当如图25的视图(a)中所示显示UI屏幕2500时,用户可以沿第二方向在屏幕中的局部区域上执行向上捏。控制器130识别发生向上捏的点并且指定其中发生向上捏的整体屏幕2500的区域。控制器130控制屏幕生成器120来将仅仅所指定的屏幕区域2510缩小。 用户可以如图25的视图(b)中所示移动向上捏的位置。随着向上捏的位置被移动,沿与移动相对应的方向而改变屏幕的被缩小的区域(2520)。 而且,用户可以使用他的/她的双手在多个点执行向上捏。当如图25的视图(c)中所示用户在两个点执行向上捏时,对应点的屏幕区域2520和2530被缩小并且被显示。 图26是图示出用于当在对象上发生向上捏时仅仅放大对象的方法的另一个示例的视图。 参考图26,柔性装置100可以显示地图2610。尽管在图26中图示出简单的地图,但也可以显示导航屏幕。 如图26的视图(a)中所示,用户可以向上捏地图2610上的特定区域。控制器130控制屏幕生成器120生成信息点(POI)2620,并且在感测到向上捏的点处显示POI。POI指的是关于发生向上捏的点的各种信息。参考图26的视图(b),如同放大镜被放置在对应点处那样表示POI 2620,并且POI 2620放大该点的对象并且显示对象。 根据又一个示例性实施例,控制器130可以根据局部形状变形来改变显示在UI屏幕上的内容,而不是改变UI屏幕的形状。 图27是图示出改变UI屏幕的内容的柔性装置的操作的示例的视图。参考图27的视图(a),柔性装置100显示包括对象2610、2620和2630的UI 屏幕2600。可以以通过其输入诸如字母或数字之类的各种字符的输入窗口的形式来显示对象2610、2620和2630。在图27中,对象2610、2620和2630为输入窗口的形式以用于分别地输入月、日和年。 用户可以向上捏对象2610、2620和2630当中的用户希望调整的一部分对象。图27的视图(b)图示出沿Z+方向被向上捏的第三对象2630。控制器130根据向上捏的程度或向上捏的保持时间来增加在向上捏的对象2630上显示的数字。在图27的视图(d)中,2001增加至2002。 另一方面,用户可以通过沿Z-方向向上捏来减少数字。也就是说,当如图27的视图(c)中所示沿Z-方向向上捏第一对象2610时,数字05减少至04,如图27的视图(e)中所示。当完成设置数字时,控制器130可以将所设置的数字存储在存贮器140中。 尽管在图27中图示出增加或减少数字的操纵,但是可以以同样的方式来改变字母。例如,当沿Z+方向在显示字母的点执行向上捏时,参考字母顺序来按顺序从A至Z改变字母。当沿Z-方向执行向上捏时,按顺序从Z至A改变字母。 在以上描述的示例性实施例中,根据局部形状变形来显示详细信息。然而,除详细信息之外,也可以显示关于对应的对象的操纵菜单。 图28是图示出根据局部形状变形来显示菜单的柔性装置的操作的视图。当如图28的视图(a)中所示显示包括多个对象2810至2860的UI屏幕2800并且用户如图28的视图(b)中所示沿Z+方向向上捏第五对象2850时,执行对应点上升的形状变形。 控制器130可以将执行向上捏的点的坐标值与UI屏幕2800中的每个对象的显示坐标相比较,并且确定第五对象2850被向上捏。控制器130从存贮器140中读出关于对于第五对象2850可以被操纵的主菜单(A、B、C和D)和子菜单(a、b和c)的信息,并且使用所读出的信息来控制屏幕生成器120生成第一圆形UI 2870和第二圆形UI 2880。 如图28的视图(c)中所示,可以以关于执行向上捏的点的圆形形状来形成第一圆形UI 2870。第五对象2850可以被显示在第一圆形UI 2870的中心区域上。围绕第一圆形UI 2870形成第二圆形UI 2880。第二圆形UI 2880可以显示属于显示在第一圆形UI 2870上的每个主菜单(A、B、C或D)的子菜单。当选择一个主菜单时,可以围绕主菜单来显示第二圆形UI 2880。例 如,当主菜单D是编辑菜单时,第二圆形UI 2880可以包括属于编辑菜单的子菜单,诸如复制菜单、删除菜单和缩放菜单。在以上描述的示例性实施例中,当选择主菜单时,显示第二圆形UI 2880。替换地,可以当发生向上捏时在显示第一圆形UI 2870的同时显示第二圆形UI 2880。 如上所述,柔性装置100可以根据诸如向上捏或向下捅之类的局部形状变形来局部地改变UI屏幕。在图20至图28中,为了方便解释起见已经描述了当发生向上捏时所执行的操作。然而,当发生向下捅时,可以执行与在图20至图28中解释的相同的操作。而且,可以根据形状变形的方向来执行操作,而不在向上捏和向下捅之间进行区分。例如,第一操作可以被映射到沿Z+方向的向上捏或向下捅,并且第二操作可以被映射到沿Z-方向的向上捏或向下捅。 图29是图示出根据示例性实施例的柔性装置的控制方法的流程图。参考图29,当输入由多个传感器进行的感测的结果(S2910)时,柔性装置100确定感测的结果是否满足预存的折皱确定条件(S2920)。当确定感测的结果满足折皱确定条件(S2920-是)时,柔性装置100确定发生折皱(S2930)并且执行与折皱相对应的操作(S2940)。如上所述,折皱确定条件可以被设置为各种值并且被存储。而且,可以根据示例性实施例来改变当发生折皱时所执行的操作。已经提供了详细描述并且省略冗余的解释。 在图29中,已经描述了用于确定折皱并且根据折皱来控制操作的方法。然而,根据另一个示例性实施例,柔性装置可以确定诸如向上捏或向下捅之类的不同于折皱的局部形状变形,并且可以控制操作。 具体而言,可以实施按顺序执行以下的控制方法:显示UI屏幕;基于由布置在显示器上的多个传感器进行的感测的结果来确定发生向上捏还是向下捅;以及当确定发生向上捏或向下捅时,执行对应的操作并且局部地改变UI屏幕。 省略关于这样的控制方法的流程图。而且,上面已经参考图20至图28描述了用于确定向上捏还是向下捅并且执行对应的操作的方法以及UI屏幕的种类,并且因此省略冗余的解释。 根据又一个示例性实施例,可以感测各种类型的形状变形,诸如普通弯曲、折皱、向上捏和向下捅。图30是图示出根据又一个示例性实施例的柔性装置的控制方法的流程图。 参考图30,当输入由多个传感器进行的感测的结果(S3010)时,柔性装置确定感测的结果是否满足折皱确定条件(S3020)。当折皱确定条件被满足时,确定发生折皱(S3030)并且执行与折皱相对应的操作(S3040)。 另一方面,当确定没有满足折皱确定条件(S3020)时,基于是否从全部区域的有限部分感测到形状变形来确定是否发生局部形状变形(S3050)。 当确定发生局部形状变形时,根据接触点的数量来确定形状变形是向上捏还是向下捅(S3060和S3080)。 当确定形状变形是向上捏时,柔性装置执行与向上捏相对应的操作(S3070)。另一方面,当确定形状变形是向下捅时,柔性装置执行与向下捅相对应的操作(S3090)。可以根据每个形状变形的方向来改变与向上捏相对应的操作和与向下捅相对应的操作。例如,当沿第一方向执行向上捏时,执行复制操作,并且当沿第二方向执行向上捏时,执行粘贴操作。而且,当沿第一方向执行向下捅时,执行放大操作,并且当沿第二方向执行向下捅时,执行缩小操作。这些操作和形状变形的类型之间的映射关系可以被预存在柔性装置中。 当确定发生局部形状变形但是局部形状变形既不是向上捏也不是向下捅时,可以确定发生角或者边缘局部地弯曲的单弯。因此,可以执行与单弯相对应的操作(S3100)。例如,可以将单独的屏幕显示在弯曲的角或边缘以及其他区域上,或者可以去激活弯曲的角或边缘。除这些之外,诸如显示剪贴板区域、暂停内容的播放和插入书签之类的各种操作可以被映射到单弯上。 而且,当在多个点发生形状变形、但是没有满足折皱确定条件并且确定形状变形不是局部形状变形时,可以确定发生多弯。因此,可以执行与多弯相对应的操作(S3110)。多弯指的是诸如上、下、左、右边缘或4个角之类的可区别的区域之一与至少一个其他区域一起弯曲的状态。当执行多弯时,柔性装置执行映射到多弯上的操作。例如,当如图9中所示柔性装置包括显示器150,并且左边缘和右边缘被弯曲使得显示器150被划分为三个相等的部分时,显示三个屏幕。而且,当左上角、右上角、左下角和右下角全部弯曲时,不同功能的UI屏幕可以被显示在每一个角上。除这些之外,各种操作可以分别地被映射到区域上,并且可以被支持。 如上所述,可以以诸如包括显示功能的柔性显示装置、包括光束投影功能的光束投影仪装置以及包括控制外部显示装置的功能的用户终端装置之类 的各种形式来实施柔性装置。 图31是图示出通过使用包括通信功能和显示功能的用户终端装置所实施的柔性装置的详细配置的示例的框。 参考图31,柔性装置100包括多个传感器110-1至110-n、屏幕生成器120、控制器130、存贮器140、显示器150、通信器170、GPS接收机181、DMB接收机182、电源183、音频处理器184、视频处理器185、扬声器186、按钮187、照相机188、麦克风189和传感器190。 屏幕生成器120如上所述显示各种类型的UI屏幕,并且,当发生折皱、向上捏或向下捅时,根据形状变形来全部地或者局部地改变UI屏幕。 显示器150显示由屏幕生成器120所生成的UI屏幕。 存贮器140存储在柔性装置100中使用的各种程序和数据。具体地,存贮器140可以存储关于映射到诸如折皱、向上捏、向下捅、普通弯曲、扭曲和震动之类的各种类型的形状变形的操作的信息,以及关于用于确定各种类型的形状变形的确定条件的信息。 以如上所述的各种形式来实施多个传感器110-1至110-n,并且多个传感器110-1至110-n感测形状变形。 控制器130使用存储在存贮器140中的各种程序和数据来控制柔性装置100的总体操作。控制器130将由多个传感器110-1to110-n进行的感测的结果与确定条件相比较、确定什么形状变形被执行,并且根据映射到形状变形的操作信息来执行操作。将在以下详细说明控制器130的详细配置和操作,以及存贮器140的配置。 传感器190包括不同于用于感测形状变形的传感器110-1至110-n的传感器。传感器190可以包括各种传感器,诸如地磁传感器191、陀螺仪传感器192、加速度传感器193、触摸传感器194和接近传感器195。可以以如上参考图18和图19所描述的嵌入在显示器150中的触摸传感器153的形式来实施触摸传感器194。当提供除如上所述的应变计或触摸传感器外的各种类型的传感器时,传感器190可以感测各种操纵,诸如柔性装置的旋转、倾斜、压迫和接近。 通信器170可以根据各种通信方法来与各种类型的外部装置进行通信。通信器170可以包括各种通信芯片,诸如Wi-Fi芯片171、蓝牙芯片172、近场通信(NFC)芯片173和无线通信芯片174。 Wi-Fi芯片171、蓝牙芯片172,和NFC芯片173分别地以Wi-Fi方法、蓝牙方法和NFC方法与外部装置进行通信。在这些中,NFC芯片173以NFC方法操作,其使用诸如135kHz、13.56MHz、433MHz、860~960MHz和2.45GHz之类的各个RF-ID频带中的13.56MHz。当使用Wi-Fi芯片171或蓝牙芯片172时,首先交换诸如SSID和会话密钥之类的各种连接信息,并且使用连接信息来建立连接,并且然后,交换各种信息。无线通信芯片174根据诸如IEEE、紫蜂、第3代(3G)、第三代合作伙伴项目(3GPP),和长期演进(LTE)之类的各种通信标准来与外部装置进行通信。 通信器170包括以上描述的各种芯片或者根据其他通信标准的芯片中的至少一个,并且使用其与外部显示装置进行通信。具体而言,通信器170可以向外部显示装置传送UI屏幕数据,如关于图14所解释的。而且,当柔性装置100执行远程控制功能时,通信器170可以在控制器130的控制下向外部装置传送各种控制命令。 GPS接收机181从GPS卫星接收GPS信号并且计算柔性装置100的当前位置。 DMB接收机182接收数字多媒体广播(DMB)信号并且对信号进行处理。 电源183向柔性装置100的元件供给电力。可以通过包括阳极集电极、阳极电极、电解液、阴极电极、阴极集电极和将前述的构件包围的壳来实施电源183。可以通过使用可充电且可放电的二次电池来实施电源183。可以以柔性形式来实施电源183,使得电源183能够与柔性装置100一起弯曲。在该情况下,集电极、电极、电解液和壳可以由柔性材料制成。 音频处理器184指的是对内容中所包括的音频数据进行处理的元件。音频处理器184执行各种处理操作,诸如关于音频数据进行解码、放大和噪声过滤。 视频处理器185对内容中所包括的视频数据进行处理。视频处理器185可以执行各种图像处理操作,诸如关于视频数据进行解码、缩放、噪声过滤、帧速率转换和分辩率转换。 当执行播放从外部源接收的内容或者存储在存贮器140中的内容的程序时,可以驱动音频处理器184和视频处理器185。例如,当执行播放多媒体内容的程序时,控制器130控制屏幕生成器120和显示器150生成并显示用 于选择内容的UI屏幕。当在UI屏幕上选择特定内容时,控制器130驱动音频处理器184和视频处理器185播放内容。 显示器150可以显示由视频处理器185生成的图像帧。扬声器186可以输出由音频处理器184生成的音频数据。 当如上所述拖曳操作被映射到折皱并且在显示内容选择或播放屏幕的同时时感测到折皱时,控制器130可以执行重新安排包括当前播放的内容的内容的播放次序的拖曳操作。 可以通过使用形成在柔性装置100的某一区域(诸如柔性装置100的主体的前表面、侧表面和底面)上的诸如机械按钮、触摸按钮和滚轮之类的各种类型的按钮来实施按钮187。 照相机188根据用户的控制来捕捉静止图像或活动图片。照相机188可以是包括前部照相机和后部照相机的多个照相机。 麦克风189接收用户的语音或其他声音,并且将语音或声音转换为音频数据。控制器130可以使用通过用于呼叫处理的麦克风189输入的用户的语音、将语音输入转换为音频数据,并且将音频数据存储在存贮器140中。 当提供照相机188和麦克风189时,控制器130可以根据通过麦克风189输入的用户的语音或者由照相机188辨别的用户的运动来执行控制操作。也就是说,可以在运动控制模式或者语音控制模式中操作柔性装置100。在运动控制模式中,控制器130激活照相机188、捕捉用户、跟踪用户的运动的改变,并且执行对应的控制操作。在语音控制模式中,控制器130可以通过分析通过麦克风189输入的用户的语音来执行语音识别并且根据所分析的用户的语音来执行控制操作。除使用诸如折皱、向上捏、向下捅、普通弯曲、多弯及其他弯曲之类的形状变形的控制操作之外,支持运动控制模式或者语音控制模式的柔性装置100可以执行根据运动操纵或者语音操纵来显示和改变UI屏幕的操作。 柔性装置100可以另外包括各种外部输入端口来将柔性装置100连接到各种外部终端,诸如USB端口、头戴式耳机、鼠标和局域网(LAN)。 可以通过存储在存贮器140中的程序来执行以上描述的控制器130的操作。存贮器140可以存储用于驱动柔性装置100的操作系统(OS)软件、各种应用、诸如小组件的程序、当执行程序时所输入或设置的各种数据、内容、形状变形和控制操作之间的映射信息,以及关于用于每个形状变形的确定条 件的信息。 控制器130可以使用存储在存贮器140中的各种程序。控制器130包括随机存取存储器(RAM)131、只读存储器(ROM)132、主CPU 133、第一至第n接口134-1~134-n以及总线135。RAM 131、ROM 132、主CPU 133和第一至第n接口134-1~134-n可以通过总线135彼此连接。 第一至第n接口134-1~134-n连接到以上描述的各种元件。这些接口之一可以是通过网络与连接到外部装置的网络接口。 主CPU 133访问存贮器140并且使用存储在存贮器140中的O/S来执行引导。主CPU 133使用存储在存贮器140中的各种程序、内容和数据来执行各种操作。 ROM 132存储引导系统的命令的集合。当输入开启命令并且供应电力时,主CPU 133根据在ROM 132中所存储的命令将存储在存贮器140中的O/S拷贝到RAM 131、实施O/S并引导系统。当引导完成时,主CPU 133将存储在存贮器140中的各种程序复制到RAM 131中、执行复制到RAM 131中的程序,并且执行各种操作。主CPU 133根据执行程序的结果来控制屏幕生成器120渲染UI屏幕。当输入由传感器110-1至110-n进行的感测的结果时,主CPU 133确定哪种形状变形被执行。当确定折皱被执行时,主CPU 133向包括屏幕生成器120的元件输出执行图10至图12中示出的操作及未图示的其他操作的控制命令。当确定发生向上捏或向下捅时,主CPU133向包括屏幕生成器120的元件输出执行图20至图28中示出的操作及未图示的其他操作的控制命令。上面已经描述了这些操作的示例并且省略冗余的解释。 图31图示出当通过使用共同地支持诸如通信功能、自动旋转功能、DMB功能和GPS接收功能之类的各种功能的终端装置来实施柔性装置时在柔性装置中可安装的各种元件。因此,可以省略或者改变图31中所图示的一些元件,并且可以添加另一元件。 如上所述,控制器130可以通过执行存储在存贮器140中的程序来执行各种操作。 图32是图示出存储在存贮器140中的软件的层级的视图。参考图32,存贮器140存储内核141、中间件142和应用模块143。 内核141充当通过其从传感器110-1至110-n或传感器190中所包括的各个传感器输入的信号或者从其他硬件元件输入的信号被传送到中间件142 的通道。 中间件142包括控制柔性装置100的操作的各个软件模块。参考图32,中间件142包括X11模块142-1、应用管理器142-2、连接管理器142-3、安全模块142-4、系统管理器142-5、多媒体构架142-6、UI构架142-7、感测模块142-8和通信模块142-9。 X11模块142-1从柔性装置100中所包括的各个硬件元件接收各种事件。在本文叙述的事件可以包括感测到触摸、弯曲或者其他用户操纵的事件、生成系统公告的事件,以及开始或结束专用程序的执行的事件。 APP管理器142-2是管理安装在存贮器140中的各个应用的执行状态的模块。当从X11模块142-1感测到输入应用执行命令的事件时,APP管理器142-2调用与事件相对应的应用并且执行应用。例如,当对显示有多个图标的图标屏幕上的一个图标执行向上捏时,APP管理器142-2调用与发生向上捏的点处的图标相对应的应用,并且执行应用。而且,当作为执行特定应用的结果的UI屏幕被显示并且折皱被执行时,APP管理器142-2可以结束执行应用。 作为执行由APP管理器142-2调用的应用的结果的UI屏幕可以被提供给UI构架142-7并且被显示在显示器150上。 连接管理器142-3是支持有线或无线网络连接的模块,并且包括Distributed.net(DNET)模块和通用即插即用(UPnP)模块。 安全模块142-4支持硬件的认证、请求的许可和安全存贮。 系统管理器142-5监视柔性装置的每个元件的状态并且向其他模块提供监视的结果。例如,当电池余量不足、错误发生或者通信被断开时,系统管理器142-5向UI构架142-7提供监视的结果并且输出通知消息或声音。 多媒体构架142-6是对存储在柔性装置100中的或者从外部源提供的多媒体内容进行播放的模块。多媒体构架142-6可以包括播放机模块、录像摄像机模块和声音处理模块。当执行这些模块时,多媒体构架142-6控制诸如音频处理器184和视频处理器185之类的硬件元件,并且通过播放多媒体内容来生成屏幕和声音,并且再现多媒体内容。 UI构架142-7是用于提供各种UI屏幕的模块。UI构架142-7可以包括配置各种图像对象的图像合成模块、计算将在何处显示图像对象的坐标的坐标组合模块、在所计算的坐标上渲染所配置的图像对象的渲染器模块以及提 供用于配置2D或3D格式的UI的工具的2D/3D UI工具包。如上所述,可以由屏幕生成器120执行UI构架142-7,并且UI构架142-7可以生成各种UI屏幕。而且,当执行诸如折皱之类的局部形状变形时,UI构架142-7可以根据形状变形来全部或局部地改变UI屏幕。 感测模块142-8对由传感器110-1至110-n和传感器190中所包括的各个传感器所进行的感测的结果,或者通过按钮、麦克风和照相机输入的输入信号进行分析。主CPU 133执行感测模块142-8并且监视传感器的感测值的改变,并且确定是否发生诸如折皱之类的局部形状变形或者其他形状变形。当根据由感测模块142-8进行的分析的结果确定发生必须改变屏幕的事件时,感测模块142-8向UI构架142-7传送事件并且进行控制以执行与事件相对应的操作。 通信模块142-9被配置为驱动图31的通信器170中所包括的各个通信装置并且与外部装置进行通信。 应用模块143包括用于支持各种功能的应用。例如,应用模块143可以包括用于提供各种服务的程序模块143-1至143-N,诸如导航程序模块、游戏模块、电子书模块、日历表模块和通知管理模块。根据示例性实施例,主CPU133可以根据以上描述的折皱、向上捏或向下捅来删除应用模块143的应用143-1至143-n。 在图32中图示出的存储在存贮器140中的程序配置仅仅是示例性的,并且可以不同地改变程序配置。例如,存贮器140包括各种程序,诸如像信使程序、短消息服务(SMS)和多媒体消息服务(MMS)程序以及电子邮件程序的消息收发模块,呼叫信息聚合器程序模块,因特网协议电话(VoIP)模块,以及web浏览器模块。 根据如上所述的各个示例性实施例,柔性装置可以感测诸如普通弯曲或多弯之类的简单类型的形状变形以及诸如折皱、向上捏或者向下捅之类的特殊类型的形状变形,并且执行对应的操作。因此,可以广泛地使用柔性装置并且用户喜欢使用柔性装置,因此用户的满意度得以提高。 根据以上描述的各个示例性实施例的柔性装置的控制方法可以被编码为软件并且被存储在非暂时型计算机可读媒介中。非暂时型计算机可读媒介可以连接到或者被安装在如上所述的各种类型的柔性装置中,并且可以支持将在装置中被执行的以上描述的显示方法。 非暂时型计算机可读媒介指的是诸如寄存器、高速缓存和存储器之类的半永久地存储数据而不是很短时间存储数据的媒介,并且可由装置读取。具体而言,以上描述的各种应用或程序可以被存储在诸如光盘(CD)、数字通用磁盘(DVD)、硬盘、蓝光磁盘、通用串行总线(USB)、存储卡,和只读存储器(ROM)之类的非暂时型计算机可读媒介中,并且可以被提供。 上述示例性实施例和优点仅仅是示例性的并且将不被看作是对本发明构思进行限制。示例性实施例能够被容易地应用于其他类型的装置。而且,示例性实施例的描述意图为说明性的,而非限制权利要求的范围,并且许多替换、修改和变化对那些本领域技术人员将是明显的。
《柔性装置及其控制方法.pdf》由会员分享,可在线阅读,更多相关《柔性装置及其控制方法.pdf(38页珍藏版)》请在专利查询网上搜索。
提供了一种柔性装置。该柔性装置包括:屏幕生成器,被配置为生成用户界面(UI)屏幕;多个传感器,被配置为感测柔性装置的变形并且输出感测的结果;存贮器,存储关于柔性装置的折皱的折皱确定条件;以及控制器,被配置为确定由多个传感器进行的感测的结果是否满足存储在存贮器中的折皱确定条件,并且响应于确定折皱确定条件被满足,执行与折皱确定条件相对应的操作。。
copyright@ 2017-2020 zhuanlichaxun.net网站版权所有经营许可证编号:粤ICP备2021068784号-1