《检测用眼疲劳度的装置、台灯及方法.pdf》由会员分享，可在线阅读，更多相关《检测用眼疲劳度的装置、台灯及方法.pdf（12页珍藏版）》请在专利查询网上搜索。
1、(10)申请公布号 CN 103426275 A(43)申请公布日 2013.12.04CN103426275A*CN103426275A*(21)申请号 201310332220.X(22)申请日 2013.08.01G08B 21/24(2006.01)G06K 9/00(2006.01)F21V 33/00(2006.01)(71)申请人步步高教育电子有限公司地址 523860 广东省东莞市长安镇乌沙步步高大道126号(72)发明人邹文高(74)专利代理机构北京品源专利代理有限公司 11332代理人马晓亚(54) 发明名称检测用眼疲劳度的装置、台灯及方法(57) 摘要本发明公开了一种检测。
2、用眼疲劳度的装置、台灯及方法，所述装置包括图像采集模块、图像处理模块和提示模块，所述图像处理模块分别与图像采集模块和提示模块相连；所述图像采集模块用于采集使用者的视频图像；所述图像处理模块用于根据所述视频图像提取人脸特征图像和人脸部各器官的特征值，并根据所述提取到的人脸部各器官的特征值进行疲劳特征检测，在检测到疲劳特征时，向提示模块发送提示信号；所述提示模块用于根据所述提示信号进行提示。本发明通过提取人脸特征图像并根据所述人脸部各器官的特征值进行疲劳特征检测，使得疲劳度判断更准确、更有针对性，提醒更及时。(51)Int.Cl.权利要求书2页 说明书6页 附图3页(19)中华人民共和国国家知识产。
3、权局(12)发明专利申请权利要求书2页 说明书6页 附图3页(10)申请公布号 CN 103426275 ACN 103426275 A1/2页21.一种检测用眼疲劳度的装置，其特征在于，包括图像采集模块、图像处理模块和提示模块，所述图像处理模块分别与图像采集模块和提示模块相连；所述图像采集模块用于采集使用者的视频图像；所述图像处理模块用于根据所述视频图像提取人脸特征图像和人脸部各器官的特征值，并根据所述提取到的人脸部各器官的特征值进行疲劳特征检测，在检测到疲劳特征时，向提示模块发送提示信号；所述提示模块用于根据所述提示信号进行提示。2.根据权利要求1所述的一种检测用眼疲劳度的装置，其特征在于。
4、，所述图像处理模块用于：从所述采集到的使用者视频图像中提取人脸特征图像；从所述提取到的人脸特征图像中提取人脸部各器官的特征值。3.根据权利要求2所述的一种检测用眼疲劳度的装置，其特征在于，所述图像处理模块用于：根据眼睛闭合时间、眨眼频率和持续时间增加、嘴巴变化中的至少一项进行疲劳特征判定。4.根据权利要求1所述的一种检测用眼疲劳度的装置，其特征在于，所述提示模块包括：显示提示单元，用于显示提示信息；声音提示单元，用于发出声音提示信息。5.根据权利要求1所述的一种检测用眼疲劳度的装置，其特征在于，所述提示模块还包括：气味散发单元，用于散发气味。6.一种检测用眼疲劳度的台灯，其特征在于，包括如权利。
5、要求1至5中任一权利要求所述的检测用眼疲劳度的装置。7.一种检测用眼疲劳度的方法，其特征在于，包括：采集使用者的视频图像；根据所述视频图像提取人脸特征图像和人脸部各器官的特征值，并根据所述提取到的人脸部各器官的特征值进行疲劳特征检测，在检测到疲劳特征时，向提示模块发送提示信号；根据所述提示信号进行提示。8.根据权利要求7所述的一种检测用眼疲劳度的方法，其特征在于，所述提取人脸特征图像和人脸部各器官的特征值包括：从所述采集到的使用者视频图像中提取人脸特征图像；从所述提取到的人脸特征图像中提取人脸部各器官的特征值。9.根据权利要求8所述的一种检测用眼疲劳度的方法，其特征在于，根据所述提取到的人脸部。
6、各器官的特征值进行疲劳状态判断包括：根据眼睛闭合时间、眨眼频率和持续时间增加、嘴巴变化中的至少一项进行疲劳特征判定。10.根据权利要求7所述的一种检测用眼疲劳度的方法，其特征在于，所述根据所述疲权 利 要 求 书CN 103426275 A2/2页3劳特征进行提示包括：显示提示信息；发出声音提示信息。11.根据权利要求7所述的一种检测用眼疲劳度的方法，其特征在于，所述根据所述疲劳特征进行提示还包括：散发气味提示信息。权 利 要 求 书CN 103426275 A1/6页4检测用眼疲劳度的装置、 台灯及方法技术领域0001 本发明涉及疲劳检测技术领域，具体涉及检测用眼疲劳度的装置、台灯及方法。背。
7、景技术0002 随着社会的发展，人们的生活节奏在逐步加快，来自多方面的压力也越来越大，很多人的疲劳感在加剧，因此，疲劳已经被公认为是一种严重的社会问题。在疲劳状态下工作的人们大多数反应迟钝、注意力分散、记忆力下降，不利于高效工作。0003 目前对用眼疲劳度的检测主要是根据用眼时间的长短来判断是否疲劳，是否需要休息，在工作量很大的情况下，根据用眼时间来判断是否疲劳，无法做到实时、准确的检测，并且不能对处于疲劳状态的使用者进行及时提醒，达不到检测效果。发明内容0004 有鉴于此，本发明实施例提供一种检测用眼疲劳度的装置、台灯及方法，来解决以上背景技术部分提到的问题。0005 一方面，本发明实施例提。
8、供了一种检测用眼疲劳度的装置，包括图像采集模块、图像处理模块和提示模块，所述图像处理模块分别与图像采集模块和提示模块相连；0006 所述图像采集模块用于采集使用者的视频图像；0007 所述图像处理模块用于根据所述视频图像提取人脸特征图像和人脸部各器官的特征值，并根据所述提取到的人脸部各器官的特征值进行疲劳特征检测，在检测到疲劳特征时，向提示模块发送提示信号；0008 所述提示模块用于根据所述提示信号进行提示。0009 其中，所述图像处理模块用于：0010 从所述采集到的使用者视频图像中提取人脸特征图像；0011 从所述提取到的人脸特征图像中提取人脸部各器官的特征值。0012 其中，所述图像处理。
9、模块用于：0013 根据眼睛闭合时间、眨眼频率和持续时间增加、嘴巴变化中的至少一项进行疲劳特征判定。0014 其中，所述提示模块包括：0015 显示提示单元，用于显示提示信息；0016 声音提示单元，用于发出声音提示信息。0017 其中，所述提示模块还包括：0018 气味散发单元，用于散发气味。0019 另一方面，本发明实施例提供了一种检测用眼疲劳度的台灯，其包括上述检测用眼疲劳度的装置。0020 对应地，本发明实施例还提供了一种检测用眼疲劳度的方法，包括以下步骤：0021 采集使用者的视频图像；说 明 书CN 103426275 A2/6页50022 根据所述视频图像提取人脸特征图像和人脸部。
10、各器官的特征值，并根据所述提取到的人脸部各器官的特征值进行疲劳特征检测，在检测到疲劳特征时，向提示模块发送提示信号；0023 根据所述提示信号进行提示。0024 其中，所述提取人脸特征图像和人脸部各器官的特征值包括：0025 从所述采集到的使用者视频图像中提取人脸特征图像；0026 从所述提取到的人脸特征图像中提取人脸部各器官的特征值。0027 其中，根据所述提取到的人脸部各器官的特征值进行疲劳状态判断包括：0028 根据眼睛闭合时间、眨眼频率和持续时间增加、嘴巴变化中的至少一项进行疲劳特征判定。0029 其中，所述根据所述疲劳特征进行提示包括：0030 显示提示提示信息；0031 发出声音提。
11、示信息。0032 其中，所述根据所述疲劳特征进行提示还包括：0033 散发气味提示信息。0034 本发明实施例提供的检测用眼疲劳度的装置、台灯及方法通过图像采集模块采集使用者的视频图像，图像处理模块根据所述视频图像提取人脸特征图像和人脸部各器官的特征值，根据所述人脸部各器官的特征值进行疲劳检测，当检测到疲劳状态时向提示模块发送提示信号，提示模块根据提示信号进行及时提醒。能够实时检测疲劳状态，且对使用者的疲劳提醒更及时、更准确。附图说明0035 下面将通过参照附图详细描述本发明的示例性实施例，使本领域的普通技术人员更清楚本发明的上述及其他特征和优点，附图中：0036 图1是本发明第一实施例的检测。
12、用眼疲劳度装置的整体结构示意图。0037 图2是本发明第二实施例的检测用眼疲劳度装置的整体结构示意图。0038 图3是本发明第三实施例的检测用眼疲劳度装置的整体结构示意图。0039 图4是本发明第四实施例的检测用眼疲劳度方法的流程图。0040 图5是本发明第四实施例的疲劳特征检测的流程图。具体实施方式0041 下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部内容。0042 在图1中示出了本发明的第一实施例。0043 图1是本发明第一实施例的检测用。
13、眼疲劳度装置的整体结构示意图。如图1所示，本实施例所述的检测用眼疲劳度的装置包括图像采集模块11、图像处理模块12和提示模块13，所述提示模块13包括显示提示单元131和声音提示单元132。0044 所述图像采集模块11用于采集使用者的视频图像。在本实施例一个优选实施方说 明 书CN 103426275 A3/6页6式中，可以采用基于通用串行总线（USB）的摄像头来捕捉使用者的视频图像，将采集到的视频图像发送到图像处理模块进行图像处理。0045 本领域技术人员可以理解，本实施例所采用的基于通用串行总线（USB）的摄像头来直接捕捉使用者的视频图像并不限制于本发明，所有现有的能够采集使用者视频图像。
14、的技术均可应用于本实施例。0046 所述图像处理模块12用于根据所述视频图像提取人脸特征图像和人脸部各器官的特征值，并根据所述提取到的人脸部各器官的特征值进行疲劳特征检测，在检测到疲劳特征时，向提示模块发送提示信号。0047 首先，图像处理模块根据所述视频图像提取人脸特征图像。具体地，图像处理模块对图像采集模块采集到的每一帧图像划分特征块，并计算帧图像之间特征块的关联度；再根据帧图像之间特征块的差异度和关联度，勾勒出动态区域，由于使用者是动态的，相对于使用者来说其所处的周围背景环境是静态的，这样处理的好处是弱化了背景元素的干扰，以提升判断的准确度；根据勾勒出的动态区域，即人物的简单轮廓特征，进。
15、行动态区域激活处理，以缩小判定区域与后续帧的重点跟踪区域，降低误判，提升算法效率；根据重点跟踪的动态区域进行人脸特征图像提取。0048 其次，从所述提取到的人脸特征图像中提取人脸部各器官的特征值。运用通用的算法从所述提取到的人脸特征图像中提取人脸部各器官的特征值，所述人脸部各器官的特征值包括眼睛闭合时间、眨眼频率和持续时间以及嘴巴的变化。在本实施例中，可以采用子空间分析法、奇异特征值法、特征脸法等方法中的其中一种从人脸特征图像中提取人脸部各器官的特征值，且能够解决人脸特征图像的动态跟踪过程中的遮挡和表情变化等因素。0049 本领域普通技术人员可以理解实现上述方法实施方式中的全部或部分步骤是可以。
16、通过程序来指令相关的硬件来完成，所述的程序可以存储于可读取存储介质中，这里所指的存储介质，如：ROM和RAM等。在本实施例中，可以通过对可编程的数字信号处理器（Digital Signal Processing，简称DSP芯片）编程来实现从采集到的使用者视频图像中提取人脸特征图像。0050 最后，图像处理模块根据提取到的人脸部各器官的特征值进行疲劳特征检测。根据眼睛闭合时间、眨眼频率和持续时间增加及嘴巴的变化中的至少一项进行疲劳特征判定。根据提取到的人脸部各器官的特征值，在检测到疲劳特征时，图像处理模块向提示模块发送提示信号。0051 例如：图像处理模块在人脸特征图像的动态跟踪中，发现眼睛闭合。
17、在持续3到5秒时间内出现缺失或异常、眨眼频率和持续时间增加（在人脸特征图像的动态跟踪过程中，检测到眨眼频率和持续时间较之前的眨眼频率和持续时间增加的趋势）及嘴巴变化（在人脸特征图像的动态跟踪过程中，检测到嘴巴特征值有较大的变化，例如：打哈欠时嘴巴大张），如果出现上述三项中的其中任意一项或者三项中的任意两项（例如：嘴巴大张并且眼睛闭合或者眨眼频率和持续时间增加并且嘴巴大张）或者三项同时出现，均可判定使用者处于疲劳状态，此时图像处理模块就会向提示模块发送提示信号。0052 所述提示模块13用于根据所述提示信号进行提示。当接收到疲劳提示信号时，提示模块的显示提示单元131显示疲劳状态的信息，可以通过。
18、检测用眼疲劳度装置上的显示装置显示提示信息，例如可以为闪烁提示；同时声音提示单元132发出声音信息进行提示，说 明 书CN 103426275 A4/6页7例如可以通过检测用眼疲劳度装置上的音响发出提示声音，提醒使用者调整疲劳状态进行休息。0053 本实施例通过图像采集模块采集使用者的视频图像，图像处理模块根据所述视频图像提取人脸特征图像和人脸部各器官的特征值，根据所述人脸部各器官的特征值进行疲劳检测，当检测到疲劳状态时向提示模块发送提示信号，提示模块根据提示信号进行及时提醒。从而更准确、更及时的提醒使用者处于疲劳状态。0054 在图2中示出了本发明的第二实施例。0055 图2是本发明第二实施。
19、例的检测用眼疲劳度装置的整体结构示意图。如图2所示，本实施例所述的检测用眼疲劳度的装置包括图像采集模块21、图像处理模块22、提示模块23，所述提示模块23包括显示提示单元231、声音提示单元232和气味散发单元233。0056 在第二实施例中，上述检测用眼疲劳度的装置所使用的图像采集模块21和图像处理模块22与第一实施例的图像采集模块11和图像处理模块12相同，在此不再赘述。0057 从图2中可以看出，与第一实施例不同的是，第二实施例中的提示模块增加了气味散发单元233。0058 这样处理的好处在于当图像处理模块检测到使用者处于疲劳状态时，向提示模块发送提示信号，提示模块的显示提示单元和声音。
20、提示单元根据所述提示信号进行疲劳状态提示，提示使用者调整状态，使用者接收提示模块的提示进行休息，例如：趴在桌子上或者离开图像采集区域，此时图像采集模块捕捉不到人脸图像。当使用者经过一段时间后结束休息重新回到图像采集区域进行工作、学习时，图像采集模块通过摄像头再次捕捉到使用者的人脸图像，此时，提示模块的气味散发单元233散发清新的味道，例如：水果味道、咖啡味道、薄荷味道以及一些提神醒脑能够愉悦身心的味道，来刺激使用者的大脑神经和嗅觉神经，从而振奋精神，继续学习、工作。0059 本实施例通过图像采集模块采集使用者的视频图像，图像处理模块根据所述视频图像提取人脸特征图像和人脸部各器官的特征值，根据所。
21、述人脸部各器官的特征值进行疲劳检测，通过提示模块进行疲劳提示，提醒使用者进行休息，当使用者结束休息重新回到学习、工作区域的时候，提示模块的气味散发单元能够散发清新的味道，刺激使用者的大脑神经和嗅觉神经，从而振奋精神，提高使用者的学习和工作效率。0060 在图3中示出了本发明的第三实施例。0061 图3是本发明第三实施例的检测用眼疲劳度装置的整体结构示意图。如图3所示，本实施例所述的检测用眼疲劳度的装置包括图像采集模块31、图像处理模块32、提示模块33、开关与亮度控制模块34和照明模块35，所述提示模块33包括声音提示单元331和气味散发单元332。0062 在第三实施例中，上述检测用眼疲劳度。
22、的装置所使用的图像采集模块31和图像处理模块32与第二实施例的图像采集模块21和图像处理模块22相同，在此不再赘述。0063 从图3中可以看出，与第二实施例不同的是，第三实施例中用照明模块35替代了第二实施例中的显示提示单元231，并增加了开关与亮度控制模块34，所述开关与亮度控制模块分别与图像处理模块和照明模块相连。0064 这样处理的好处在于当图像处理模块检测到使用者处于疲劳状态时，向提示模块发送提示信号，提示模块的声音提示单元根据所述提示信号进行疲劳状态提示，提示使用说 明 书CN 103426275 A5/6页8者调整状态进行休息。0065 当使用者接收提示模块的声音提示单元331的疲。
23、劳提示进行休息时，例如：趴在桌子上或者离开图像采集区域，图像采集模块捕捉不到人脸图像，此时开关与亮度控制模块可以直接控制照明灯的灯光变暗或者关闭照明灯。0066 当使用者经过一段时间后结束休息重新回到图像采集区域进行工作或者学习时，图像采集模块通过摄像头再次捕捉到人脸图像，提示模块的气味散发单元332散发清新的味道来刺激使用者的大脑神经和嗅觉神经，从而振奋精神，此时开关与亮度控制模块可以直接控制照明灯的灯光变亮或者打开照明灯，方便使用者继续学习或工作。0067 本实施例通过图像采集模块采集使用者的学习和工作状态，图像处理模块根据所述视频图像提取人脸特征图像和人脸部各器官的特征值，根据所述人脸部。
24、各器官的特征值进行疲劳检测，提示模块进行疲劳提示，当使用者接收提示进行休息时，开关与亮度控制模块控制照明灯的灯光变暗或者关闭照明灯，当使用者结束休息重新回到学习或者工作区域的时候，开关与亮度控制模块控制照明灯的灯光变亮或者开启照明灯，从而方便使用者使用。0068 在图4中示出了本发明的第四实施例。0069 图4是本发明第四实施例的检测用眼疲劳度方法的流程图。具体流程详述如下：0070 步骤410、采集使用者的视频图像。0071 步骤420、根据所述视频图像提取人脸特征图像和人脸部各器官的特征值，并根据所述提取到的人脸部各器官的特征值进行疲劳特征检测，在检测到疲劳特征时，向提示模块发送提示信号。。
25、0072 步骤430、根据所述提示信号进行提醒。0073 在本实施例中，步骤420中根据所述视频图像提取人脸特征图像和人脸部各器官的特征值，并根据所述提取到的人脸部各器官的特征值进行疲劳特征检测的流程如图5所示，具体流程详述如下：0074 步骤421、对采集到的每一帧图像划分特征块，并计算帧图像之间特征块的关联度。0075 步骤422、根据帧图像之间特征块的差异度和关联度，勾勒出动态区域，由于使用者是动态的，相对于使用者来说背景是静态的，这样处理的好处是弱化了背景元素的干扰，以提升判断的准确度。0076 步骤423、根据勾勒出的动态区域，即人物的简单轮廓特征，进行动态区域激活处理，以缩小判定区。
26、域与后续帧的重点跟踪区域，降低误判，提升算法效率。0077 步骤424、根据重点跟踪的动态区域进行人脸特征图像提取。0078 步骤425、从所述提取到的人脸特征图像提取人脸部各器官的特征值。运用通用的算法从所述提取到的人脸特征图像中提取人脸部各器官的特征值，所述人脸部各器官的特征值包括眼睛闭合时间、眨眼频率和持续时间以及嘴巴的变化。在本实施例中，可以采用子空间分析法、奇异特征值法、特征脸法等方法中的其中一种从人脸特征图像中提取人脸部各器官的特征值，且能够解决人脸特征图像的动态跟踪过程中的遮挡和表情变化等因素。0079 本领域技术人员可以理解，本实施例所采用的人脸特征提取算法并不限制于本发明，所。
27、有现有的人脸特征提取技术均可应用于本实施例。说 明 书CN 103426275 A6/6页90080 步骤426、根据提取到的人脸部各器官的特征值进行疲劳特征检测，判定所提取的人脸部各器官的特征值是否出现缺失或异常。根据眼睛闭合时间、眨眼频率和持续时间增加及嘴巴的变化中的至少一项进行疲劳特征判定。0081 例如：图像处理模块在人脸特征图像的动态跟踪中，发现眼睛闭合在持续3到5秒时间内出现缺失或异常、眨眼频率和持续时间增加（在人脸特征图像的动态跟踪过程中，检测到眨眼频率和持续时间较之前的眨眼频率和持续时间增加的趋势）及嘴巴变化（在人脸特征图像的动态跟踪过程中，检测到嘴巴特征值有较大的变化，例如：。
28、打哈欠时嘴巴大张），如果出现上述三项中的其中任意一项或者三项中的任意两项（例如：嘴巴大张并且眼睛闭合或者眨眼频率和持续时间增加并且嘴巴大张）或者三项同时出现，均可判定使用者处于疲劳状态，此时图像处理模块就会向提示模块发送提示信号。0082 若检测到使用者处于疲劳状态，则对使用者进行疲劳状态的提示，执行步骤427。0083 若检测到使用者不处于疲劳状态，则继续对采集到的下一帧视频图像提取人脸特征图像，执行步骤421。0084 步骤427、提示使用者处于疲劳状态。提醒使用者调整疲劳状态进行休息，避免在疲劳状态下学习或者工作。0085 本实施例通过采集使用者的视频图像，从所述视频图像提取人脸特征图像。
29、和人脸部各器官的特征值，根据所述人脸部各器官的特征值进行疲劳检测，当检测到疲劳状态时向提示模块发送提示信号，提示模块根据提示信号进行及时提醒。能够实时检测到使用者的精神状态，使得疲劳度判断更准确，提醒更及时。0086 注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。说 明 书CN 103426275 A1/3页10图1图2说 明 书 附 图CN 103426275 A10。