《电子设备及其文本导读方法.pdf》由会员分享,可在线阅读,更多相关《电子设备及其文本导读方法.pdf(11页珍藏版)》请在专利查询网上搜索。
1、(10)申请公布号 CN 102411478 A(43)申请公布日 2012.04.11CN102411478A*CN102411478A*(21)申请号 201110363256.5(22)申请日 2011.11.16G06F 3/048(2006.01)G06K 9/64(2006.01)G09B 5/02(2006.01)(71)申请人鸿富锦精密工业(深圳)有限公司地址 518109 广东省深圳市宝安区龙华镇油松第十工业区东环二路2号申请人鸿海精密工业股份有限公司(72)发明人李海生 包贞望 姜至善 汤刚(54) 发明名称电子设备及其文本导读方法(57) 摘要一种文本导读方法,用于一包括。
2、显示单元及存储有姿势特征库、显示单元上的多个坐标的电子设备。姿势特征库包括至少一个用户信息,每一用户信息包括用户名、用户的多个眼睛图像特征值以及其与显示单元上多个坐标之间的一一对应关系。该方法包括:启动文本导读功能;实时采集用户眼睛部位的图像;提取用户图像的眼睛图像特征值;在姿势特征库中找到相同的眼睛图像特征值,并获取其对应的坐标;根据该坐标获取显示单元上对应该坐标所在的区域上显示的内容;根据用户预设的导读特效类型或系统预先设置的导读特效类型将该坐标所在的区域上显示的内容进行特效处理并以特效显示所述内容。本发明还提供了采用该方法的电子设备,从而方便了用户阅读。(51)Int.Cl.(19)中华。
3、人民共和国国家知识产权局(12)发明专利申请权利要求书 2 页 说明书 5 页 附图 3 页CN 102411488 A 1/2页21.一种文本导读方法,用于一包括显示单元及存储有姿势特征库、显示单元上的多个坐标以及文本文件的电子设备,所述姿势特征库包括至少一个用户信息,每一用户信息包括用户名、用户的多个眼睛图像特征值以及用户的多个眼睛图像特征值与显示单元上多个坐标之间的一一对应关系,其特征在于,该文本导读方法包括:启动文本导读功能;实时采集用户眼睛部位的图像;提取所述用户图像的眼睛图像特征值;将所述眼睛图像特征值与所述姿势特征库中存储的所述用户的眼睛图像特征值进行比对,在所述姿势特征库中找到。
4、相同的眼睛图像特征值,并获取与所述眼睛图像特征值对应的坐标;根据所述坐标获取显示单元上对应所述坐标所在的区域上显示的内容;根据用户预设的导读特效类型或系统预先设置的导读特效类型将所述坐标所在的区域上显示的内容进行特效处理并以特效显示所述内容。2.如权利要求1所述的方法,其特征在于,还包括如下步骤:判断所述坐标所在的区域上显示的内容与其左右相邻的坐标所在的区域上显示的内容是否相关联;及当所述坐标所在的区域上显示的内容与其左右相邻的坐标所在的区域上显示的内容相关联时,根据用户预设的导读特效类型或系统预先设置的导读特效类型将所述坐标所在的区域及其相邻的坐标所在的区域上显示的内容一并进行特效处理。3.。
5、如权利要求1所述的方法,其特征在于,还包括如下步骤:根据用户输入的用户名判断用户是否首次启动文本导读功能;当用户为首次启动文本导读功能时,确定用户是否选择进行眼睛图像特征值提取测试;当用户选择进行姿势特征值提取测试时,将文本文件中的测试页显示于显示单元上,同时弹出对话框提示用户跟随显示单元上的特效显示导读进行阅读;根据预设的导读特性对测试页上的内容单元按照预设的顺序进行特效处理;将进行过特效处理的内容单元按照该预设的顺序逐次显示于显示单元上,同时实时采集用户注视显示单元上每一坐标时的用户眼睛部位的测试图像;及提取用户测试图像的眼睛图像特征值,并将所提取的眼睛图像特征值一一对应其坐标存储于姿势特。
6、征库中。4.一种电子设备,包括显示单元、摄像单元和存储单元,其特征在于,所述存储单元存储有姿势特征库、显示单元上的多个坐标以及和文本文件,所述姿势特征库包括至少一个用户信息、每一用户信息包括用户名、用户的多个眼睛图像特征值以及用户的多个眼睛图像特征值与显示单元上多个坐标之间的一一对应关系,所述电子设备还包括:一用于启动文本导读功能的输入单元;一用于用于实时采集用户眼睛部位的图像的摄像单元;一用于提取所述用户图像的眼睛图像特征值的图像处理模块;一用于将所述眼睛图像特征值与所述姿势特征库中存储的所述用户的眼睛图像特征值进行比对,在所述姿势特征库中找到相同的眼睛图像特征值,并获取与所述眼睛图像特权 。
7、利 要 求 书CN 102411478 ACN 102411488 A 2/2页3征值对应的坐标的比对判断模块;一根据所述坐标获取显示单元上对应所述坐标所在的区域上显示的内容的特效控制模块;一根据用户预设的导读特效类型或系统预先设置的导读特效类型将所述坐标所在的区域上显示的内容进行特效处理的特效控制模块;及一用于将所述进行过特效处理的内容重新显示于显示单元上的显示控制模块。5.如权利要求4所述的电子设备,其特征在于,还包括:一用于判断所述坐标所在的区域上显示的内容与其左右相邻的坐标所在的区域上显示的内容是否相关联的比对判断模块;及一用于当该坐标所在的区域上显示的内容与其左右相邻的坐标所在的区域。
8、上显示的内容相关联时,根据用户预设的导读特效类型或系统预先设置的导读特效类型将所述坐标所在的区域及其相邻的坐标所在的区域上显示的内容一并进行特效处理的特效控制模块。6.如权利要求4所述的电子设备,其特征在于,还包括:一判断用户是否首次启动文本导读功能的比对判断模块;一当用户为首次启动文本导读功能时,确定用户是否选择进行眼睛图像特征值提取测试的比对判断模块;一当用户选择进行眼睛图像特征值提取测试时,用于控制将文本文件中的测试页显示于显示单元上,同时控制弹出对话框提示用户跟随显示单元上的特效显示导读进行阅读的显示控制模块;一根据预设的导读特性对测试页上的内容单元按照预设的顺序进行特效处理的特效控制。
9、模块;一用于控制将进行过特效处理的内容单元按照该预设的顺序逐次显示于显示单元上的显示控制模块;及一用于提取用户测试图像的眼睛图像特征值,并将所提取的眼睛图像特征值一一对应其坐标存储于姿势特征库中的存储单元。7.如权利要求4或6所述的电子设备,其特征在于:所述姿势特征库还包括用户预设的导读特效类型,所述导读特效类型包括:字型放大显示、彩色显示、加下划线显示及特殊字体显示。8.如权利要求7所述的电子设备,其特征在于:所述导读特效类型中的字型色彩、字号或字型样式均区别于显示单元显示的文字默认的显示状态。9.如权利要求4所述的电子设备,其特征在于:所述电子设备为一电子书阅读器。权 利 要 求 书CN 。
10、102411478 ACN 102411488 A 1/5页4电子设备及其文本导读方法技术领域0001 本发明涉及一种电子设备及其文本导读方法,尤其涉及一种具有摄像单元的电子设备及其文本导读方法。背景技术0002 现有的具有电子文档阅读功能的电子设备,如电脑、电子书阅读器、手机等,用户在阅读时,通常需要手动控制电子文档的移动、翻页等。然而,大多数文本内容都需要分为多页,并逐页显示于电子设备的显示屏幕,如果想要连续阅读,通常是操作触摸屏上显示的页码按钮或前进/后退的按钮,或者操作前进/后退的机械按键,使页面向前或向后进行翻页,这对于想要大量搜索和浏览信息的人来说,不大方便。0003 一些电子设备。
11、自动设置或允许用户设置电子文档的移动、翻页等的频率,从而在用户阅读时无需用户手动选择电子文档的显示内容。然而,其文本显示的版面在用户的阅读过程中往往都是固定不变的,通常用户用眼睛跟踪搜行阅读,这样往往引发视觉疲劳,费神费力。发明内容0004 有鉴于此,有必要提供一种用于电子设备的文本导读方法,可根据人眼视角调整文本显示界面来进行导读,以解决上述问题。0005 有鉴于此,还有必要提供一种电子设备,可根据人眼视角调整文本显示界面来进行导读,以解决上述问题。0006 一种文本导读方法,用于一包括显示单元及存储有姿势特征库、显示单元上的多个坐标以及文本文件的电子设备。所述姿势特征库包括至少一个用户信息。
12、,每一用户信息包括用户名、用户的多个眼睛图像特征值以及用户的多个眼睛图像特征值与显示单元上多个坐标之间的一一对应关系。所述文本导读方法包括:启动文本导读功能;实时采集用户眼睛部位的图像;提取所述用户图像的眼睛图像特征值;将所述眼睛图像特征值与所述姿势特征库中存储的所述用户的眼睛图像特征值进行比对,在所述姿势特征库中找到相同的眼睛图像特征值,并获取与所述眼睛图像特征值对应的坐标;根据所述坐标获取显示单元上对应所述坐标所在的区域上显示的内容;根据用户预设的导读特效类型或系统预先设置的导读特效类型将所述坐标所在的区域上显示的内容进行特效处理并以特效显示所述内容。0007 一种电子设备,包括显示单元、。
13、摄像单元和存储单元。所述存储单元存储有姿势特征库、显示单元上的多个坐标以及和文本文件。所述姿势特征库包括至少一个用户信息、每一用户信息包括用户名、用户的多个眼睛图像特征值以及用户的多个眼睛图像特征值与显示单元上多个坐标之间的一一对应关系。所述电子设备还包括:一用于启动文本导读功能的输入单元;一用于用于实时采集用户眼睛部位的图像的摄像单元;一用于提取所述用户图像的眼睛图像特征值的图像处理模块;一用于将所述眼睛图像特征值与所述姿势特征库说 明 书CN 102411478 ACN 102411488 A 2/5页5中存储的所述用户的眼睛图像特征值进行比对,在所述姿势特征库中找到相同的眼睛图像特征值,。
14、并获取与所述眼睛图像特征值对应的坐标的比对判断模块;一根据所述坐标获取显示单元上对应所述坐标所在的区域上显示的内容的特效控制模块;一根据用户预设的导读特效类型或系统预先设置的导读特效类型将所述坐标所在的区域上显示的内容进行特效处理的特效控制模块;及一用于将所述进行过特效处理的内容重新显示于显示单元上的显示控制模块。0008 相对于现有技术,上述电子设备及其文本导读方法,当用户进入文本导读界面时,根据实时拍摄的该用户眼睛部位的图像提取该用户图像的眼睛图像特征值,在姿势特征库中找到与该用户的眼睛图像特征值相同的眼睛图像特征值及其对应的坐标后,将显示单元上该坐标所在的区域显示的内容进行特效处理后显示。
15、于显示单元上该坐标所在的区域上,从而方便了用户阅读。附图说明0009 图1为本发明一实施方式的电子设备的功能模块图。0010 图2为存储于图1所示电子设备的存储单元中的姿势特征库。0011 图3为本发明中电子设备的文本导读方法的步骤流程图。0012 图4为本发明中电子设备的文本导读界面示意图。0013 主要元件符号说明电子设备100存储单元10输入单元20显示单元30摄像单元40处理单元50文本文件101姿势特征库102图像处理模块501比对判断模块502特效控制模块503显示控制模块504如下具体实施方式将结合上述附图进一步说明本发明。具体实施方式0014 请参阅图1,其为本发明的一实施方式。
16、的电子设备100的功能模组图。电子设备100可根据用户人眼视角调整文本显示界面来进行导读。在本实施方式中,电子设备100为一具有摄像单元40的电子书阅读器,在其它实施方式中,电子设备100还可以是电脑、手机等具有摄像单元的电子设备。0015 电子设备100包括一存储单元10、一输入单元20、一显示单元30、一摄像单元40和一处理单元50。0016 存储单元10存储有多个电子文本文件101,文本文件101中包括有一标准的测试页。存储单元10还用于存储一包括至少一个用户信息的姿势特征库102以及显示单元30上的多个坐标(如图2所示)。每一用户信息包括用户身份、用户的多个眼睛图像特征值,以说 明 书。
17、CN 102411478 ACN 102411488 A 3/5页6及用户的多个眼睛图像特征值与显示单元30上多个坐标之间的一一对应关系。该多个眼睛图像特征值为该用户在注视各个坐标时的眼睛图像的反映了眼睛视线方向的特征值,显然,用户在注视不同坐标时,其眼睛图像特征会不同。在其它实施方式中,该姿势特征库102还可以包括用户预设的导读特效类型。导读特效类型包括:字型放大显示、彩色显示、加下划线显示及特殊字体显示等类型。为了方便用户阅读,各导读特效类型中的字型色彩、字号或字型样式均区别于显示单元30显示的文字默认的显示状态。该姿势特征库102中的信息是用户开启电子设备100或其导读功能时,通过一导航。
18、界面对测试页进行眼睛图像特征值提取测试后存储的,每一用户均可以通过该导航界面对测试页进行眼睛图像特征值提取测试并将其测试得到的用户信息存储于姿势特征库102中。0017 输入单元20用于接收用户的操作如启动、进行及结束导读、导读以及对导读功能的设置等操作,而产生相应的操作信号。0018 摄像单元40用于实时采集用户的图像并传输至处理单元50。本实施方式中,摄像单元40为一设置于显示单元30上端的中间位置的摄像头,用于采集用户眼睛部位的图像,且当用户通过输入单元20启动导读功能时,该摄像头将被触发同步开启。在其它实施方式中,摄像头的位置可设置于显示单元30左端的中间位置或其它位置,只要能实时采集。
19、用户眼睛部位的图像即可。0019 处理单元50包括一图像处理模块501、一比对判断模块502、一特效控制模块503和一显示控制模块504。0020 图像处理模块501用于运行各种图像处理算法对采集的用户图像进行分析处理,提取用户图像的图像特征值。0021 比对判断模块502用于将图像处理模块501提取的用户图像的图像特征值与姿势特征库102中存储的该用户的眼睛图像特征值进行比对,在姿势特征库102中找到相同的眼睛图像特征值,获取存储在姿势特征库102中与该图像特征值对应的坐标,并将获取的坐标传输至特效控制模块503。在本实施方式中,如果用户预设了导读特效类型,则比对判断模块502还一并获取对应。
20、的导读特性类型及将该导读特效类型传输至特效控制模块503。0022 特效控制模块503用于根据比对判断模块502传输的坐标获取显示单元30上对应该坐标所在的区域所显示的内容,并根据用户预设的导读特效类型或系统预先设置的导读特效类型将该区域上所显示的内容进行特效处理。例如将该坐标所在的区域上显示的内容进行字型放大显示、彩色显示、加下划线显示及特殊字体显示等等。在另一实施方式中,特效控制模块503还用于判断该坐标所在的区域上显示的内容是否与其左右相邻的坐标所在的区域上显示的内容是否相关联,如是否为一个词组或是否为一个单词,且当判断该坐标所在的区域上显示的内容是否与其左右相邻的坐标所在的区域上显示的。
21、内容相关联时,根据用户预设的导读特效类型或系统预先设置的导读特效类型将该坐标及其相邻的坐标所在的区域上显示的内容一并进行特效处理。0023 显示控制模块504用于将特效控制模块503进行过特效处理的内容重新显示于显示单元30上。0024 其中,在用户使用电子设备100时,当用户通过输入单元启动导读功能时,该显示控制模块504控制该显示单元30显示一信息输入框,供用户输入用户名,该比对判断模块说 明 书CN 102411478 ACN 102411488 A 4/5页7502对用户姿势特征库102进行搜索,当比对判断模块502搜索到包括该用户名的用户信息时,则图像处理模块501、一比对判断模块5。
22、02、一特效控制模块503和一显示控制模块504执行前述的功能。0025 当比对判断模块502未搜索到包括该用户名的用户信息时,则默认为该用户信息为首次使用,显示控制模块504控制在显示单元30上弹出一对话框,提示用户是否进行眼睛图像特征值提取测试,当用户选择进行眼睛图像特征值提取测试时,显示控制模块504还控制将文本文件101中的测试页显示于显示单元30上,并控制弹出对话框提示用户跟随显示单元30上的特效显示导读进行阅读。当用户确认后(如选择对话框中的“OK”),特效控制模块503根据预设的导读特性对测试页上的内容单元按照预设的顺序进行特效处理。显示控制模块504控制将特效控制模块503进行。
23、特效处理的内容单元按照该预设的顺序逐次显示于显示单元30上。在本实施方式中,测试页上的每一内容单元对应显示单元30上一坐标。摄像单元40则在用户进行测试时,实时采集用户依次注视显示单元30上一坐标时的用户眼睛部位的测试图像,并将采集的测试图像传输至图像处理模块501。图像处理模块501还用于提取用户的测试图像的眼睛图像特征值,并将所提取的眼睛图像特征值与坐标一一对应后存储于姿势特征库102中。在导航结束后,用户即可启动导读功能。0026 请参阅图3,其为本发明的电子设备100文本导读方法的流程图,包括:步骤S30,用户启动文本导读功能,比对判断模块502判断该用户是否首次启动文本导读功能,若不。
24、是,则进入步骤S31,否则,进入步骤S39。0027 步骤S31,摄像单元40实时采集用户眼睛部位的图像。0028 步骤S32,图像处理模块501运行各种图像处理算法对采集的用户图像进行分析处理,提取该用户图像的眼睛图像特征值。0029 步骤S33,比对判断模块502将该眼睛图像特征值与姿势特征库102中存储的该用户的眼睛图像特征值进行比对,在姿势特征库102中找到相同的眼睛图像特征值,并获取与该眼睛图像特征值对应的坐标。0030 步骤S34,特效控制模块503根据该坐标获取显示单元30上对应该坐标所在的区域上显示的内容。0031 步骤S35,特效控制模块503判断该坐标所在的区域上显示的内容。
25、与其左右相邻的坐标所在的区域上显示的内容是否相关联,如果是,则进入步骤S36,否则,进入步骤S37。0032 步骤S36,特效控制模块503根据用户预设的导读特效类型或系统预先设置的导读特效类型将该坐标所在的区域及其相邻的坐标所在的区域上显示的内容一并进行特效处理。如图4所示,其中(a)-(c)中分别对不同的坐标所在的区域及其相邻坐标所在的区域显示的内容“Popular”、“OSs”及“Such as”一并进行了特效处理。0033 步骤S37,特效控制模块503根据用户预设的导读特效类型或系统预先设置的导读特效类型将该坐标值所在的区域上显示的内容进行特效处理。0034 步骤S38,显示控制模块。
26、504将该进行过特效处理的内容重新显示于显示单元30上。0035 请同时参阅图4,其为处于文本导读状态下的电子设备100的文本导读界面。其中(a)、(b)、(c)分别为根据实时提取的三种眼睛用户图像特征值后,对该三中眼睛图像特说 明 书CN 102411478 ACN 102411488 A 5/5页8征值对应的坐标所在的区域上显示的内容进行特效处理后显示于显示单元30上的导读界面。特效控制模块503对该三个坐标所在的区域及其相邻坐标所在的区域所显示的内容“Popular”、“OSs”及“Suchas”一并进行了加下划线、斜体显示及在字母的封闭区域内填充红色的特效处理。0036 步骤S39,若。
27、用户是首次启动进入文本导读,比对判断模块502则确定用户是否选择进行眼睛图像特征值提取测试,如果是,则进入步骤S40,否则,流程结束。0037 步骤S40,显示控制模块504控制将文本文件101中的测试页显示于显示单元30上,同时控制弹出对话框提示用户跟随显示单元30上的特效显示导读进行阅读。0038 步骤S41,特效控制模块503根据预设的导读特性对测试页上的内容单元按照预设的顺序进行特效处理。在本实施方式中,测试页上的每一内容单元对应显示单元30上一坐标。在其它实施方式中,电子设备100还允许用户设置测试时的导读特性类型。0039 步骤S42,显示控制模块504控制将特效控制模块503进行。
28、过特效处理的内容单元按照该预设的顺序逐次显示于显示单元30上,同时,摄像单元40实时采集用户注视显示单元30上每一坐标时的用户眼睛部位的测试图像。0040 步骤S43,图像处理模块501提取用户测试图像的眼睛图像特征值,并将所提取的眼睛图像特征值一一对应其坐标存储于姿势特征库102中,测试完毕后执行步骤S31。0041 使用上述电子设备100,当用户进入文本导读界面时,图像处理模块501提取该用户眼睛部位图像的眼睛图像特征值,比对判断模块502在姿势特征库102中找到该用户相同的眼睛图像特征值及其对应的坐标后,特效控制模块503根据该坐标将该坐标所在的区域上显示的内容进行特效处理,显示控制模块504将该进行过特效处理的内容显示于显示单元30上该坐标所在的区域上,从而方便了用户阅读。0042 本技术领域的普通技术人员应当认识到,以上的实施方式仅是用来说明本发明,而并非用作为对本发明的限定,只要在本发明的实质精神范围之内,对以上实施方式所作的适当改变和变化都落在本发明要求保护的范围之内。说 明 书CN 102411478 ACN 102411488 A 1/3页9图1图2说 明 书 附 图CN 102411478 ACN 102411488 A 2/3页10图3说 明 书 附 图CN 102411478 A。