《基于人脸检测和眼球跟踪的手机状态切换方法及系统.pdf》由会员分享,可在线阅读,更多相关《基于人脸检测和眼球跟踪的手机状态切换方法及系统.pdf(9页珍藏版)》请在专利查询网上搜索。
1、10申请公布号CN104092822A43申请公布日20141008CN104092822A21申请号201410308405122申请日20140701H04M1/72520060171申请人惠州TCL移动通信有限公司地址516006广东省惠州市仲恺高新区和畅七路西86号72发明人陈喜玲74专利代理机构深圳市君胜知识产权代理事务所44268代理人王永文刘文求54发明名称基于人脸检测和眼球跟踪的手机状态切换方法及系统57摘要本发明所提供的基于人脸检测和眼球跟踪的手机状态切换方法及系统,使用人脸识别技术对手机屏幕的前方图像进行人脸识别,初步判断手机的使用者是否正在使用手机,若没有识别出人脸,则将。
2、手机状态切换成省电节流模式状态,若识别出了人脸,则进一步对该前方图像中人眼睛的眼球视线是否在屏幕范围内进行判断,若使用者的眼球并没有在手机的屏幕范围内,则说明使用者并没有正在使用手机,因此将手机状态切换成省电节流模式状态,从而实现根据使用者是否眼睛盯着手机屏幕来动态切换手机状态,避免出现使用者长时间不使用手机,而手机的数据流量在增加和电量在消耗的情况,合理的节约了使用者的手机资源。51INTCL权利要求书2页说明书5页附图1页19中华人民共和国国家知识产权局12发明专利申请权利要求书2页说明书5页附图1页10申请公布号CN104092822ACN104092822A1/2页21一种基于人脸检测。
3、和眼球跟踪的手机状态切换方法,其特征在于,包括A、获取手机前方的图像;B、使用人脸识别技术识别所述图像中是否存在人脸,若是则执行步骤C,否则,执行步骤D;C、使用眼球跟踪技术获取所述图像中人脸的眼球信息,根据所述眼球信息判断眼球的视线是否在手机的屏幕范围内;若是,则维持当前手机状态并在第一预定时间后返回执行步骤A,否则执行步骤D;D、将当前手机状态切换成省电节流模式状态;所述手机状态至少包括手机待机状态、手机标准使用状态和省电节流模式状态。2根据权利要求1所述基于人脸检测和眼球跟踪的手机状态切换方法,其特征在于,当手机处于待机状态时,每隔第二预定时间通过手机的前摄像头获取其前方的图像。3根据权。
4、利要求2所述基于人脸检测和眼球跟踪的手机状态切换方法,其特征在于,启用定时器对第一预定时间和第二预定时间进行计时,且同时记录在第一预定时间和第二预定时间计时前后的手机状态;所述步骤D之后还包括返回步骤A,若再次检测到眼球的视线在手机的屏幕范围内,则在步骤C中将手机状态切换为手机标准使用状态。4根据权利要求1所述基于人脸检测和眼球跟踪的手机状态切换方法,其特征在于,通过所述眼球信息中的凝视坐标是否在手机的屏幕范围内进行眼球的视线是否在手机屏幕范围内的判断。5根据权利要求1所述基于人脸检测和眼球跟踪的手机状态切换方法,其特征在于,所述省电节流模式状态为同时关闭后台应用、关闭WI、关闭蓝牙和关闭数据。
5、连接。6一种所述基于人脸检测和眼球跟踪的手机状态切换系统,其特征在于,包括图像获取模块,用于获取手机前方的图像;人脸识别模块,用于使用人脸识别技术对前方图像进行人脸识别;若识别出人脸则进行眼球追踪模块中的检测;否则进入状态切换模块中的状态切换;眼球追踪模块,用于使用眼球跟踪技术获取所述图像中人脸的眼球信息,根据所述眼球信息判断眼球的视线是否在手机的屏幕范围内;若是,则维持当前手机状态并在第一预定时间后重新进入图像获取模块获取手机前方的图像,否则进入状态切换模块中的状态切换;状态切换模块,用于当人脸识别模块中未识别出人脸或者眼球追踪模块判断眼球的视线不在手机的屏幕范围内,则将当前手机状态切换成省。
6、电节流模式状态;所述手机状态至少包括手机待机状态、手机标准使用状态和省电节流模式状态。7根据权利要求6所述基于人脸检测和眼球跟踪的手机状态切换系统,其特征在于,图像获取模块,还用于当手机处于待机状态时,每隔第二预定时间通过手机的前摄像头获取其前方的图像。8根据权利要求7所述基于人脸检测和眼球跟踪的手机状态切换系统,其特征在于,所述状态切换模块包括第一定时单元,所述图像获取模块包括第二定时单元,所述系统还包括状态恢复模块;权利要求书CN104092822A2/2页3所述第一定时单元,用于启用定时器对第一预定时间进行定时,且同时记录在第一预定时间计时前后的手机状态;所述第二定时单元,用于启用定时器。
7、对第二预定时间进行定时且同时记录在第二预定时间计时前后的手机状态;状态恢复模块,用于当省电节流模式状态的情况下,眼球追踪模块再次检测到眼球的视线在手机的屏幕范围内,则将手机状态切换为手机标准使用状态。9根据权利要求6所述基于人脸检测和眼球跟踪的手机状态切换系统,其特征在于,眼球追踪模块通过所述眼球信息中的凝视坐标是否在手机的屏幕范围内进行眼球的视线是否在手机屏幕范围内的判断。10根据权利要求6所述基于人脸检测和眼球跟踪的手机状态切换系统,其特征在于,所述省电节流模式状态为同时关闭后台应用、关闭WI、关闭蓝牙和关闭数据流量。权利要求书CN104092822A1/5页4基于人脸检测和眼球跟踪的手机。
8、状态切换方法及系统技术领域0001本发明涉及移动通信领域,尤其涉及的是一种基于人脸检测和眼球跟踪的手机状态切换方法及系统。背景技术0002随着手机的普遍使用,其功能也越来越多,现在的手机不仅仅具有语音通话、发送短信息和保存联系人信息等最基本的功能,使用智能手机还可以摄像、玩游戏、上网、GPS定位等等功能。由于智能手机上应用程序的增多,许多应用程序在手机使用者不知道的情况下在后台继续进行运行,从而不仅导致手机CPU占用率高,手机程序运行缓慢,一些与网络相连的应用程序的后台运行还直接导致数据流量的增加,电量消耗过快。0003如何节省手机在使用时的数据流量,如何节约手机的电量,成了人们关心的问题,而。
9、现有技术中还没有对该问题提出较佳的解决方案,因此现有技术有待于进一步的改进。发明内容0004鉴于上述现有技术中的不足之处,本发明的目的在于为用户提供基于人脸检测和眼球跟踪的手机状态切换方法及系统,以解决现有技术中由于不能及时切换手机使用时的状态导致手机的数据流量或者电量浪费的问题。0005本发明解决技术问题所采用的技术方案如下一种基于人脸检测和眼球跟踪的手机状态切换方法,其中,包括A、获取手机前方的图像;B、使用人脸识别技术识别所述图像中是否存在人脸,若是则执行步骤C,否则,执行步骤D;C、使用眼球跟踪技术获取所述图像中人脸的眼球信息,根据所述眼球信息判断眼球的视线是否在手机的屏幕范围内;若是。
10、,则维持当前手机状态并在第一预定时间后返回执行步骤A,否则执行步骤D;D、将当前手机状态切换成省电节流模式状态;所述手机状态至少包括手机待机状态、手机标准使用状态和省电节流模式状态。0006所述基于人脸检测和眼球跟踪的手机状态切换方法,其中,当手机处于待机状态时,每隔第二预定时间通过手机的前摄像头获取其前方的图像。0007所述基于人脸检测和眼球跟踪的手机状态切换方法,其中,启用定时器对第一预定时间和第二预定时间进行计时,且同时记录在第一预定时间和第二预定时间计时前后的手机状态;所述步骤D之后还包括返回步骤A,若再次检测到眼球的视线在手机的屏幕范围内,则在步骤C中则将手机状态切换为手机标准使用状。
11、态。0008所述基于人脸检测和眼球跟踪的手机状态切换方法,其中,通过所述眼球信息中说明书CN104092822A2/5页5的凝视坐标是否在手机的屏幕范围内进行眼球的视线是否在手机屏幕范围内的判断。0009所述基于人脸检测和眼球跟踪的手机状态切换方法,其中,所述省电节流模式状态为同时关闭后台应用、关闭WI、关闭蓝牙和关闭数据连接。0010一种所述基于人脸检测和眼球跟踪的手机状态切换系统,其中,包括图像获取模块,用于获取手机前方的图像;人脸识别模块,用于使用人脸识别技术对前方图像进行人脸识别;若识别出人脸则进行眼球追踪模块中的检测;否则进入状态切换模块中的状态切换;眼球追踪模块,用于使用眼球跟踪技。
12、术获取所述图像中人脸的眼球信息,根据所述眼球信息判断眼球的视线是否在手机的屏幕范围内;若是,则维持当前手机状态并在第一预定时间后重新进入图像获取模块获取手机前方的图像,否则进入状态切换模块中的状态切换;状态切换模块,用于当人脸识别模块中未识别出人脸或者眼球追踪模块判断眼球的视线不在手机的屏幕范围内,则将当前手机状态切换成省电节流模式状态;所述手机状态至少包括手机待机状态、手机标准使用状态和省电节流模式状态。0011所述基于人脸检测和眼球跟踪的手机状态切换系统,其中,图像获取模块,还用于当手机处于待机状态时,每隔第二预定时间通过手机的前摄像头获取其前方的图像。0012所述基于人脸检测和眼球跟踪的。
13、手机状态切换系统,其中,所述状态切换模块包括第一定时单元,所述图像获取模块包括第二定时单元,所述系统还包括状态恢复模块;所述第一定时单元,用于启用定时器对第一预定时间进行定时,且同时记录在第一预定时间计时前后的手机状态;所述第二定时单元,用于启用定时器对第二预定时间进行定时且同时记录在第二预定时间计时前后的手机状态;状态恢复模块,用于当省电节流模式状态的情况下,眼球追踪模块再次检测到眼球的视线在手机的屏幕范围内,则将手机状态切换为手机标准使用状态。0013所述基于人脸检测和眼球跟踪的手机状态切换系统,其中,眼球追踪模块通过所述眼球信息中的凝视坐标是否在手机的屏幕范围内进行眼球的视线是否在手机屏。
14、幕范围内的判断。0014所述基于人脸检测和眼球跟踪的手机状态切换系统,其中,所述省电节流模式状态为同时关闭后台应用、关闭WI、关闭蓝牙和关闭数据流量。0015有益效果,本发明所提供的基于人脸检测和眼球跟踪的手机状态切换方法及系统,使用人脸识别技术对手机屏幕的前方图像进行人脸识别,初步判断手机的使用者是否正在使用手机,若没有识别出人脸,则将手机状态切换成省电节流模式状态,若识别出了人脸,则进一步对该前方图像中人眼睛的眼球视线是否在屏幕范围内进行识别,若使用者的眼球并没有在手机的屏幕范围内,则说明使用者并没有正在使用手机,因此将手机状态切换成省电节流模式状态,从而实现根据使用者是否眼睛盯着手机屏幕。
15、来动态切换手机状态,避免出现使用者长时间不使用手机,而手机的数据流量在增加和电量在消耗的情况,合理的节约了使用者的手机资源。附图说明说明书CN104092822A3/5页60016图1是本发明一种基于人脸检测和眼球跟踪的手机状态切换方法的步骤流程图。0017图2是本发明一种基于人脸检测和眼球跟踪的手机状态切换系统的结构原理图。具体实施方式0018为使本发明的目的、技术方案及优点更加清楚、明确,以下参照附图并举实施例对本发明进一步详细说明。应当理解,此处所描述的具体实施例仅仅用于解释本发明,并不用于限定本发明。0019本发明公开了一种基于人脸检测和眼球跟踪的手机状态切换方法,如图1所示,所述方法。
16、包括以下步骤S1、获取手机前方图像。0020一般的智能手机都含有摄像功能,本步骤中通过使用手机上自身带有的摄像头对手机前方的图像进行拍摄,自动获取手机前方图像。0021S2、使用人脸识别技术对前方图像进行人脸识别;若识别出人脸则进入S3,否则进入S4;在上述步骤中使用手机摄像头获取到手机前方图像后,利用现有已经比较成熟的人脸识别技术对获取到的前方图像中是否含有人脸进行识别,当识别出人脸则说明使用者有可能正在使用手机,则需要进入更为准确的对使用者是否正在使用手机进行判断;若前方图像中没有识别出人脸则说明使用者此时并没有使用手机,则进入步骤S4对手机状态进行切换。0022S3、使用眼球跟踪技术获取。
17、前方图像中人脸的眼球信息,从所述眼球信息中判断出眼球的视线是否在手机的屏幕范围内;若是,则进入步骤S5,否则进入步骤S4。0023前方图像中存在人脸,则使用眼球跟踪技术获取所述人脸上眼球信息,具体的从所述眼球信息中获取其眼睛所对应的凝视坐标,判断其凝视坐标是否在屏幕范围内,若使用者眼球的凝视坐标在手机屏幕范围内,则说明使用者确实正在使用手机,则进入步骤S5,否则进入步骤S4。0024由于如何使用眼球跟踪技术对眼睛的凝视坐标是否在屏幕范围内属于现有技术,因此在此不再赘述。0025S4、将当前手机状态切换成省电节流模式状态。0026S5、维持当前手机状态并在第一预定时间后返回执行步骤S1。0027。
18、由于首次对使用者的眼球是否盯着手机屏幕的判断的结果并不能非常准确的判断出使用者不使用手机的状态,所以只有当检测到在一定的时间段内使用者的眼睛一直盯着手机,也即当使用者眼睛的凝视坐标一直在手机屏幕范围内,则判定用户处于使用手机的状态,维持当前手机状态并在第一预定时间后返回执行步骤S1。其中,第一预定时间可以为5秒、10秒或15秒,或者具体可以与系统设置的“屏幕自动关闭”选项设置的时间长短相适配,避免在用户无手动操作时自动关闭屏幕。0028与步骤S5不同的是,在第二预定时间之后,再次对使用者眼球的凝视坐标是否在手机屏幕上进行检测,若使用者的眼睛在预定时间前后都盯着手机屏幕,也即是凝视坐标都在手机屏。
19、幕的范围内,则说明使用者正在使用手机,则维持当前手机状态不变。若使用者的眼睛已经不再盯着手机,则说明使用者可能没有在使用手机,则将手机状态切换成省电说明书CN104092822A4/5页7节流模式状态,及时的节省数据流量和电量。0029具体的,手机状态包括很多种,在本发明中所指的所述手机状态至少包括手机待机状态、手机标准使用状态和省电节流模式状态。手机标准使用状态,则是通常意义上所说的手机使用状态,也是与本发明中所述的省电节流模式相对应的模式状态,为可以通过数据流量进行上网或者应用程序在后台运行的工作模式状态。0030为了取得较佳的省电节流效果的同时,避免给用户正常使用手机时造成不必要的困扰,。
20、比如当手机使用者只是暂时的不使用手机时,手机通过使用本发明上述的方法自动进入省电节流模式状态,因此在上述步骤S1之前,选择为当手机处于待机状态时,每隔第二预定时间通过使用手机的前摄像头获取其前方图像。0031为了更好的对预定时间进行计时,在上述方法中,启用定时器对第一预定时间和第二预定时间进行计时,为了能很好的满足用户体验性的要求,可以根据使用者的需要自动的切换到相对应的手机状态,在进行计时的前后,同时还记录在第一预定时间和第二预定时间计时前后的手机状态,若用户并非长时间未使用手机,则维持手机状态不变,或者在上述步骤S4之后,当手机处于省电节流模式后,使用眼球跟踪技术从所述前方的图像中判断出眼。
21、睛的凝视坐标在手机的屏幕范围内,则将手机恢复到省电节流模式状态之前的手机状态。其中,恢复的手机状态具体包括恢复所启动运行的应用、显示的界面等等。0032所述省电节流模式状态为同时关闭后台应用、关闭WI、关闭蓝牙和关闭数据连接。0033可以想到的是,当通过眼球追踪技术首次检测前方图像时,使用者眼睛的凝视坐标未在手机的屏幕范围内,而再次检测前方图像时,检测到使用者的眼睛凝视坐标在手机的屏幕范围内,基于上述方法可以将手机从其待机状态切换成手机标准使用状态,或者当手机处于省电节流模式时,可以将手机状态切换成手机标准使用状态,也可以将手机在进入省电节流模式前的手机使用状态进行保存,从而在判定出使用者开始。
22、使用手机的时候,将手机切换到手机进入省电节流模式状态之前的状态,这是本领域技术人员基于上述方法所公开的内容可以显而易见想到的。0034在本发明公开了上述方法的同时,基于上述方法,本发明还公开了一种所述基于人脸检测和眼球跟踪的手机状态切换系统,如图2所示,其中,包括图像获取模块10,用于获取手机前方的图像;其功能如上述步骤S1所述。0035人脸识别模块20,用于使用人脸识别技术对前方的图像进行人脸识别;若识别出人脸则进行眼球追踪模块中的检测;否则进入状态切换模块中的状态切换;其功能如上述步骤S2所述。0036眼球追踪模块30,用于使用眼球跟踪技术获取所述图像中人脸的眼球信息,根据所述眼球信息判断。
23、眼球的视线是否在手机的屏幕范围内;若是,则维持当前手机状态并在第一预定时间后重新进入图像获取模块获取手机前方的图像,否则进入状态切换模块中的状态切换。0037状态切换模块40,用于当人脸识别模块中未识别出人脸或者眼球追踪模块判断眼球的视线不在手机的屏幕范围内,则将当前手机状态切换成省电节流模式状态。0038眼球追踪模块30和状态切换模块40的功能如上述步骤S3S5所述。0039所述手机状态至少包括手机待机状态、手机标准使用状态和省电节流模式状态。说明书CN104092822A5/5页80040所述基于人脸检测和眼球跟踪的手机状态切换系统,其中,图像获取模块,还用于当手机处于待机状态时,每隔第二。
24、预定时间通过手机的前摄像头获取其前方的图像。0041所述基于人脸检测和眼球跟踪的手机状态切换系统,其中,眼球追踪模块通过所述眼球信息中的凝视坐标是否在手机的屏幕范围内进行眼球的视线是否在手机屏幕范围内的判断。0042所述基于人脸检测和眼球跟踪的手机状态切换系统,其中,所述状态切换模块包括第一定时单元,所述图像获取模块包括第二定时单元。0043所述第一定时单元,用于启用定时器对第一预定时间进行定时,且同时记录在第一预定时间计时前后的手机状态;所述第二定时单元,用于启用定时器对第二预定时间进行定时且同时记录在第二预定时间计时前后的手机状态。0044所述系统还包括状态恢复模块,所述状态恢复模块用于当。
25、手机状态处于省电节流模式状态的情况下,眼球追踪模块再次检测到眼球的视线在手机的屏幕范围内,则将手机状态切换为手机标准使用状态,为用户使用手机提供方便。0045可以想到的是,手机状态还可以包括为用户使用手机时打开的应用程序或者正在进行编辑的文字等等用户使用手机时手机处于的运行状态,当手机从手机标准使用状态进入省电节流模式后,第二定时单元将手机中正在运行的程序进行记录,当手机充省电节流模式重新进入手机标准使用模式后提示用户是否将手机状态恢复成省电节流模式之前的使用状态,手机也可以默认设置成恢复成切换成省电节流模式前的状态。0046所述基于人脸检测和眼球跟踪的手机状态切换系统,其中,所述省电节流模式。
26、状态为同时关闭后台应用、关闭WI、关闭蓝牙和关闭数据流量。0047本发明所提供的基于人脸检测和眼球跟踪的手机状态切换方法及系统,使用人脸识别技术对手机屏幕的前方图像进行人脸识别,初步判断手机的使用者是否正在使用手机,若没有识别出人脸,则将手机状态切换成省电节流模式状态,若识别出了人脸,则进一步对该前方图像中人眼睛的眼球视线是否在屏幕范围内进行识别,若使用者的眼球并没有在手机的屏幕范围内,则说明使用者并没有正在使用手机,因此将手机状态切换成省电节流模式状态,从而实现根据使用者是否眼睛盯着手机屏幕来动态切换手机状态,避免出现使用者长时间不使用手机,而手机的数据流量在增加和电量在消耗的情况,合理的节约了使用者的手机资源。0048可以理解的是,对本领域普通技术人员来说,可以根据本发明的技术方案及其发明构思加以等同替换或改变,而所有这些改变或替换都应属于本发明所附的权利要求的保护范围。说明书CN104092822A1/1页9图1图2说明书附图CN104092822A。