一种基于逐步回归分析映射模型的视线跟踪方法.pdf

上传人:a2 文档编号:4214672 上传时间:2018-09-07 格式:PDF 页数:13 大小:591.93KB
返回 下载 相关 举报
摘要
申请专利号:

CN201110406599.5

申请日:

2011.12.08

公开号:

CN102520796A

公开日:

2012.06.27

当前法律状态:

授权

有效性:

有权

法律详情:

授权|||公开

IPC分类号:

G06F3/01

主分类号:

G06F3/01

申请人:

华南理工大学

发明人:

秦华标; 严伟洪; 梁铭炬

地址:

510640 广东省广州市天河区五山路381号

优先权:

专利代理机构:

广州粤高专利商标代理有限公司 44102

代理人:

何淑珍

PDF下载: PDF下载
内容摘要

本发明公开了一种基于逐步回归分析映射模型的视线跟踪方法,该方法首先在人眼注视标定点时提取眼动特征信息;然后选择初始映射模型函数。选择初始映模型射函数后,对映射模型函数各项的显著性进行检验,剔除非显著的项,在不断的项剔除及重新建立映射模型函数的过程中,最终找到拟合精度最高的映射模型函数。最后,利用最终映射模型函数计算注视点,当人眼处于凝视状态时,采用高斯权重平均法来平滑眼动特征信息,克服眼睛抖动的问题。本发明鲁棒性好、精度高。

权利要求书

1: 一种基于逐步回归分析映射模型的视线跟踪方法, 该方法采用一个摄像头和两个红 外光源 , 两个红外光源安装在显示屏两侧, 摄像头位于屏幕下方, 其特征在于包括如下步 骤: (1) 眼睛注视屏幕上的标定点, 提取眼动特征信息 ; (2) 选择初始映射模型函数 : 利用步骤 (1) 所获取的眼动特征信息, 对候选的初始映射 模型函数进行整体的显著性检测和初始精度检测, 若通不过这两检测则更换初始映射模函 数重新进行检测, 通过这两个检测则确定为初始映射模型函数 ; (3) 确定最终映射模型函数 : 对初始映射模型函数各项的显著性进行检验, 剔除非显著 的项, 在不断地项剔除及重新建立映射模型函数的过程中, 最终找到拟合精度最高的映射 模型函数 ; (4) 计算注视点 : 提取眼动特征信息, 当人眼处于凝视状态时, 采用高斯权重平均法来 平滑眼动特征信息, 利用最终映射模型函数进行注视点计算, 实现实时的视线跟踪。
2: 根据权利要求 1 所述的跟踪方法, 其特征在于 : 所述步骤 (1) 标定点为屏幕的中点及 在屏幕上 4×4 平均分布的 16 个点, 共 17 个点。
3: 根据权利要求 1 所述的跟踪方法, 其特征在于所述步骤 (1) 眼动特征信息的提取包 括: (1.1)定位出瞳孔区域, 获得瞳孔中心坐标 (Px, Py) ; (1.2) 分别定位出两个红外光源在眼睛角膜上的反射斑点区域, 获得两个斑点中心坐 标, 得到这两个斑点中点连线的中点坐标 (Xc, Yc) , 以及两个斑点中点的欧氏距离 d ; (1.3)获 得 由 瞳 孔 中 心 指 向 两 个 反 射 斑 点 中 点 连 线 的 中 点 的 向 量 V, 以两个反 射 斑 点 中 点 的 欧 氏 距 离 d 作 为 修 正 因 子, 由 V 除 以 欧 氏 距 离 d. 获 得 眼 动 特 征 信 息 , 称为修正瞳孔 - 角膜反射向量 ; (1.4) 由于人眼在凝视标定点时眼睛也不是完全静止的, 人眼为了获取外界信息在不 断地小范围抖动, 为了获取的眼动特征信息具有更好的鲁棒性, 在人眼凝视每个标定点时 连续取五帧图像的修正瞳孔 - 角膜反射向量, 然后取平均值作为标定点对应的眼动特征信 息。
4: 根据权利要求 1 所述的跟踪方法, 其特征在于所述步骤 (2) 中包括 : (2.1) 确定初始映射模型函数以将眼动特征信息和人眼注视点对应起来, 映射模型函 数为多项映射模型函数, 以人眼注视点的坐标为依变量, 以眼动特征信息即修正瞳孔 - 角 膜反射向量的 X 轴分量和 Y 轴分量组合构成的项作为自变量 ; (2.2) 利用标定点在屏幕上的坐标信息和对应的眼动特征信息采用 F 检验法检查候 选初始映射模型函数的整体显著性, 当映射模型函数整体为非显著时更改初始映射模型函 数, 通过整体显著行检测后, 用最小二乘法确定初始映射模型函数的系数, 把用该初始映射 模型函数计算出的人眼注视点与标定点进行比较得到定位误差, 若定位误差大于设定值则 更换初始映射模型函数。
5: 根据权利要求 4 所述的跟踪方法, 其特征在于步骤 (2.2) 中, 候选初始映射模型函数 有 6 参数二次多项式、 9 参数多项式和 12 参数多项式, 首先选择 6 参数二次多项式作为待定 初始映射模型函进行整体的显著性检测和初始精度检测, 如果如果 6 参数二次多项式达通 不过检测则重新选择 9 参数多项式作为待定初始映射模型函进行整体的显著性检测和初 2 始精度检测, 若 9 参数多项式也通不过检测则选择 12 参数多项式。
6: 根据权利要求 1 所述的跟踪方法, 其特征在于所述步骤 (3) 包括 : 确定了初始映射模型函数后, 用 F 检验法对映射模型函数各项的显著性进行检验, 剔 除非显著的项, 在不断的项剔除及重新建立映射模型函数的过程中, 找到最优的函数参数 组合, 显著地提高模型函数计算效率及拟合精度。
7: 根据权利要求 1 所述的跟踪方法, 其特征在于所述步骤 (4) 包括 : (4.1) 获取每帧图像的眼动特征信息 (4.2) 根据眼动特征信息 帧的眼动特征信息 ; 变化量, 判断眼睛处于凝视状态还是非凝视状态 : 当前 比较, 如果相对变化量小于 1% 则 : 当眼睛处于凝视状态时, 采用 与前一帧的眼动特征信息 判断为眼睛处于凝视状态, 反之则处于非凝视状态 ; (4.3) 当眼睛处于凝视状态时, 平滑眼动特征信息 高斯分布为处于凝视状态时获取的连续多帧图像的眼动特征信息分配权重, 通过权重平均 来获得平滑的眼动特征信息 ; (4.4) 当人眼处于非凝视状态时直接利用该帧图像的眼动特征信息计算注视点, 当人 眼处于凝视状态时利用平滑后的眼动特征信息计算注视点。

说明书


一种基于逐步回归分析映射模型的视线跟踪方法

    【技术领域】
     本发明涉及视线跟踪技术, 具体涉及基于逐步回归分析映射模型的视线跟踪方法。 背景技术
     视线识别技术为人机交互技术的重要分支, 主要研究对人眼注视点的检测与识 别, 实现对其他功能系统控制, 其研究成果在军备开发、 无人驾驶、 航空航天、 残疾人辅助、 虚拟现实等领域有着广泛的应用前景。
     视线跟踪技术一般可以分为两类, 接触式和非接触式。 接触式的精度高, 但用户须 佩戴特殊设备, 给用户使用带来很大的不便。 非接触式不需用户佩戴任何设备, 不对用户产 生干扰。非接触式技术是目前研究的热点。在非接触式视线跟踪技术中, 瞳孔 - 角膜反射 向量法具有较高的精度, 是目前非接触式技术的主流。按照其原理瞳孔 - 角膜反射法可划 分为 3 维跟踪方法和 2 维跟踪方法。 3 维的跟踪方法存在很大的缺陷, 需要用到多个摄像机 来求得眼睛 3 维坐标, 对硬件要求高, 算法复杂耗时, 实现难度大。在现今的视线跟踪实用 系统中大多使用 2 维的跟踪方法。人眼注视点映射模型是 2 维跟踪方法中最关键的问题, 现今的映射模型函数使用固定的参数组合, 没有考虑映射模型函数整体和各个参数的显著 性, 缺乏合理性检验和拟合精度不高。由于使用者生理特征参数差异性, 如眼球半径、 眼球 椭圆系数等, 和所处的条件不同, 如头部相对与摄像头的位置等, 不同个体是有差异的, 使 用固定的模型参数组合并不完全适合所有情况, 必须对映射模型函数整体和各参数的显著 性进行检测。 并且现有绝大部分视线跟踪方法在人眼凝视时定位注视点时没有考虑眼睛抖 动的问题, 使得人眼盯着一点看时, 定位出的注视点还会不断跳动。 发明内容 本发明的目的在于克服现有 2 维映射模型缺乏合理性检验、 拟合精度不高和缺乏 考虑凝视时眼睛抖动的缺点, 提供一种基于逐步回归分析映射模型的视线跟踪方法, 根据 输入的眼动特征信息数据检测模型整体和各参数的显著性, 自适应调整模型参数的组合, 建立合理、 高精度的、 鲁棒性强的映射模型, 并且在人眼凝视时通过高斯权重平均解决眼睛 抖动的问题。 该算法对硬件要求低, 只需一个普通的摄像头和两个红外光源, 所需的计算量 不大, 提高了视线跟踪的实时性。
     本发明通过以下技术方案实现 :
     一种基于逐步回归分析映射模型的视线跟踪方法, 该方法需要一个摄像头和两个 红外光源, 包括如下步骤 :
     (1) 眼睛注视屏幕上的标定点, 提取眼动特征信息 ;
     (2) 选择初始映射模型函数 : 利用步骤 (1) 所获取的眼动特征信息, 对候选的初始 映射模型函数进行整体的显著性检测和初始精度检测, 若通不过这两检测则更换初始映射 模函数重新进行检测, 通过这两个检测则确定为初始映射模型函数 ;
     (3) 确定最终映射模型函数 : 对初始映射模型函数各项的显著性进行检验, 剔除 非显著的项, 在不断地项剔除及重新建立映射模型函数的过程中, 最终找到拟合精度最高 的映射模型函数 ;
     (4) 计算注视点 : 提取眼动特征信息, 当人眼处于凝视状态时, 采用高斯权重平均 法来平滑眼动特征信息, 利用最终映射模型函数进行注视点计算, 实现实时的视线跟踪。
     上述跟踪方法中, 步骤 (1) 的标定点为屏幕的中点及在屏幕上 4×4 平均分布的 16 个点, 共 17 个点。
     上述跟踪方法中, 所述步骤 (1) 眼动特征信息的提取包括 :
     a. 定位出瞳孔区域, 获得瞳孔中心坐标 (Px, Py) ;
     b. 分别定位出两个红外光源在眼睛角膜上的反射斑点区域, 获得两个斑点中心坐 标, 得到这两个斑点中点连线的中点坐标 (Xc, Yc), 以及两个斑点中点的欧氏距离 d ;
     c.. 获得由瞳孔中心指向两个反射斑点中点连线的中点的向量 V, 以两个反射斑 点中点的欧氏距离 d 作为修正因子, 由 V 除以 d. 获得眼动特征信息 VP-CR, 称为修正瞳孔 - 角 膜反射向量 ;
     d. 由于人眼在凝视标定点时眼睛也不是完全静止的, 人眼为了获取外界信息在不 断地小范围抖动, 为了获取的眼动特征信息具有更好的鲁棒性, 在人眼凝视每个标定点时 连续取五帧图像的修正瞳孔 - 角膜反射向量, 然后取平均值作为标定点对应的眼动特征信 息。 上述跟踪方法中, 所述步骤 (2) 包括 :
     a. 确定初始映射模型函数把眼动特征信息和人眼注视点对应起来, 映射模型函数 为多项映射模型函数, 以人眼注视点的坐标为依变量, 以眼动特征信息即修正瞳孔 - 角膜 反射向量的 X 轴分量和 Y 轴分量组合构成的项作为自变量 ;
     b. 利用标定点在屏幕上的坐标信息和对应的眼动特征信息采用 F 检验法检查候 选初始映射模型函数的整体显著性, 当映射模型函数整体为非显著时更改初始映射模型函 数, 通过整体显著行检测后, 用最小二乘法确定初始映射模型函数的系数, 把用该初始映射 模型函数计算出的人眼注视点与标定点进行比较得到定位误差, 若定位误差大于设定值则 更换初始映射模型函数。
     上述跟踪方法的步骤 b 中, 候选初始映射模型函数有 6 参数二次多项式、 9 参数多 项式和 12 参数多项式, 首先选择 6 参数二次多项式作为待定初始映射模型函进行整体的显 著性检测和初始精度检测, 如果如果 6 参数二次多项式达通不过检测则重新选择 9 参数多 项式作为待定初始映射模型函进行整体的显著性检测和初始精度检测, 若 9 参数多项式也 通不过检测则选择 12 参数多项式。
     上述跟踪方法中, 所述步骤 (3) 包括 :
     确定了初始映射模型函数后, 映射模型函数的各自变量不一定与依变量的关系都 是显著的, 非显著的自变量会影响映射模型函数的准确性和鲁棒性, 故用 F 检验法对映射 模型函数各项的显著性进行检验, 剔除非显著的项, 在不断的项剔除及重新建立映射模型 函数的过程中, 找到最优的函数参数组合, 显著地提高模型函数计算效率及拟合精度。
     上述跟踪方法中, 所述步骤 (4) 包括 :
     a. 获取每帧图像的眼动特征信息 VP-CR ;
     b. 根据眼动特征信息 VP-CR 变化量, 判断眼睛处于凝视状态还是非凝视状态 : 当前 帧的眼动特征信息 VP-CR 与前一帧的眼动特征信息 VP-CR 比较, 如果相对变化量小于 1%则判 断为眼睛处于凝视状态, 反之则处于非凝视状态 ;
     c. 当眼睛处于凝视状态时, 平滑眼动特征信息 VP-CR : 由于眼睛的抖动影响, 直接采 用每一帧图像的眼动特征信息 VP-CR 来计算眼睛注视点时, 眼睛注视点会快速跳动, 为了克 服这个困难, 当眼睛处于凝视状态时, 采用高斯分布为眼睛处于凝视状态时获取的连续多 帧图像的眼动特征信息分配权重, 通过权重平均来获得平滑的眼动特征信息 ;
     d. 当人眼处于非凝视状态时直接利用该帧图像的眼动特征信息计算注视点, 当人 眼处于凝视状态时利用平滑后的眼动特征信息计算注视点。
     与现有技术相比, 本发明的优点与积极效果在于 :
     1. 相对传统的静态的映射模型采用固定组合的多项式映射模型函数, 该方法采用 基于逐步回归分析的方法, 在构建了初始映射模型函数后, 根据眼动特征信息检查映射模 型函数的显著性, 剔除映射模型函数不显著的项, 最终找到最优的多项式映射模型函数, 显 著地提高模型函数计算效率及拟合精度。
     2. 该方法在人眼凝视时采用高斯权重平均法来解决眼睛凝视时产生的抖动现象, 当前帧的权重最大, 之前的帧的权重按高斯分布递减, 这不仅克服了眼睛的抖动现象而且 能快速的响应眼睛细微运动。
     3. 该方法对硬件要求低, 只需一个摄像头及两个光源, 计算量少, 实时性强。 附图说明
     图 1 是本发明实施方式中显示屏、 红外光源与摄像头的布置示意图。 图 2 是本发明实施方式中视线跟踪方法的流程示意图。 图 3 是本发明实施方式中标定点分布图。具体实施方式
     下面结合附图对本发明的具体实施方式作进一步说明。
     如图 1, 本发明需要红外光源及摄像头。 红外光源为安装在显示屏两个侧边中点的 LED 灯, 摄像头位于屏幕中心正下方。 摄像头实时地捕捉图像, 在两个红外光源的照射下, 瞳 孔图像会产生暗瞳效应, 且会在眼睛角膜上形成两反射斑点。 ,
     如图 2, 视线跟踪算法具体实施步骤如下 :
     步骤一 : 眼睛注视标定点, 提取眼动特征信息
     步骤二 : 选择初始映射模型函数
     步骤三 : 确定最终映射模型函数 :
     步骤四 : 注视点计算。
     其中步骤一的具体实施步骤为 :
     1. 眼睛依次注视标定点, 标定点分布图如图 3 所示, 为屏幕的中点及在屏幕上 4×4 平均分布的 16 个点, 共 17 个点 ;
     2. 在眼睛注视标定时提取眼动特征信息
     每个注视点提取连续五帧图像的修正瞳孔 - 角膜反射向量的平均值作为眼动特征信息。眼动特征信息提取的具体实施步骤为 :
     2.1 彩色图像灰度化
     摄像头采集的数字图像为具有 R, G, B 分量的彩色图片, 将彩色图像灰度化, 公式 如下 :
     V = 0.259R+0.578G+0.144B
     式中 V 表示转换后的灰度值, R, G, B 为图片的红, 绿, 蓝分量。
     2.2 定位人眼区域
     a. 采用基于模版匹配的定位算法实现快速的人眼区域。采用相关系数匹配法则, 求取样本与人眼模板之间的相关度, 有最大相关值为所要定位的区域。
     b. 在定位人眼区域后, 对人眼区域进行去噪声处理, 采用高斯滤波器对图像平滑 预处理。
     2.3 定位瞳孔获得瞳孔信息
     a. 采用 canny 边缘检测算法获取瞳孔的边缘信息
     b. 采用椭圆曲线拟合瞳孔边缘点
     以图像的左上角作为原点建立 X-Y 直角坐标系, 对所提取的瞳孔边缘点集合进行 椭圆方程的最小二乘法拟合, 然后确定瞳孔中心位置 (XC, YC), 椭圆方程取为 :
     X2+AXY+BY2+CX+DY+E = 0 利用最小二乘法求取 A、 B、 C、 D、 E 参数值, 椭圆中心坐标 (XC, YC) 计算如下 :2.4 定位斑点, 获取斑点信息
     a. 二值化眼睛区域获得斑点图像
     跟据斑点为一个高亮的块的特征, 对图像进行二值化处理, 获取二值化斑点图像, 提取斑点轮廓。
     b. 采用椭圆曲线拟合斑点轮廓。
     分别获得两个斑点中心坐标, 得到这两个斑点中点连线的中点坐标 (Xc, Yc), 以及 两个斑点中点的欧氏距离 d
     2.5. 眼动特征信息修正瞳孔 - 角膜反射向量
     获得由瞳孔中心 (Xp, Yp) 指向两个红外反射斑点中点连线的中点 (Xc, Yc) 的向量 V, 以两个反射斑点中点的欧氏距离 d 作为修正因子, 由 V 除以 d. 获得眼动特征信息 VP-CR, 公式如下 :
     其中步骤二的具体实施步骤为 : 1、 候选初始映射模型函数 6 参数二次多项式映射模型函数 :9 参数多项式映射模型函数 :
     12 参数多项式函数 :
     其中 sx 表示注视点在屏幕坐标系下的横坐标, sy 表示注视点在屏幕坐标系下的纵 坐标, x 代表眼动特征信息在图像坐标系中的 x 轴分量, y 代表眼动图像坐标系中的 y 轴分 量。a0 ~ a11, b0 ~ b11 是待标定的系数。
     2、 初始函数整体显著性检测和精度检测
     利用标定点的信息和对的眼动特征信息采用 F 检验法检查映射模型函数的整体 显著性, 当映射模型函数整体为非显著时更改初始映射模型函数, 通过整体显著行检测后, 用最小二乘法确定初始映射模型函数的系数, 把用该初始映射模型函数计算出的人眼注视 点与标定点进行比较, 判断定位误差, 若定位误差太大则更换初始映射模型函数
     首先选择 6 参数二次多项式作为初始映射模型函数, 如果 6 参数二次多项式模型 达不到要求则重新选择 9 参数多项式作为初始映射模型函数, 若 9 参数多项式也达不到要 求则选择 12 参数多项式。
     函数整体显著性检测具体方法如下 :
     初始映射模型函数可以表示为 :
     y = β0+β1*x1+β2*x2+β3*x3+… +βm*xm
     其中 y 代表多项式公式中的 (sx, sy), β0, β1,……, βm 代表初始映射模型函数 中的 a、 b 参数, 1, x1, x2, ..., xm 分别代表公式中的 a、 b 参数对应的单项。
     则在标定过程中, 由 17 组标定点和对应眼动特征数据获得的求解映射模型函数 的数据可记录如表 1 :
     表1
     由于非线性因素的不确定性, 并不能确定注视点坐标依变量 y 与眼动特征信息输 入自变量 1, x1, x2, ..., xm 之间存在必然联系, y 与 1, x1, x2, ..., xm 的联系只是假设, 在建 立了初始映射模型函数之后, 必须对其联系假设进行显著度检验, 采用 F 检验方法进行显 著度的测试及判断。
     注视点坐标的依变量 y 的总平方和 SSy 剖分为回归平方和 SSR 及离回归平方和 SSy = SSR+SSr 依变量 y 的总自由度 dfy 同样剖分为回归自由度 dfR 与离回归自由度 dfr : dfy = dfR+dfr 其中, SSy =∑ y2-( ∑ y)2/17SSr :
     SSr = SSy-SSRdfy = n-1 dfR = m dfr = n-m-1 m 为自变量映射模型函数参数的个数, n 为眼动输入数据及标定点的组数, 本实例 根据 SSR、 dfR 与 SSr、 dfr 即可计算出回归均方 MSR 与离回归均方 MSr 及统计量 F :为 17。
     由上述 F 统计量进行 F 检验以推断多元回归的视线映射模型的显著度, 及模型的 参数组合及估算是否符合注视点映射模型的要求
     其中步骤三的具体实施步骤为 :
     算法流程图如图 3 所示。在确定了初始映射模型函数后, 用 F 检验法对映射模型 函数各项的显著性进行检验, 剔除非显著的项, 在不断的项剔除及重新建立多元回归映射 模型的过程中, 找到最优的模型参数组合, 显著地提高模型计算效率及拟合精度。
     具体算法如下 :
     映射模型函数参数显著度校验原理 : 在逐步回归分析中, SSR 总是随着自变量的增 多而增加, 如果去掉一个自变量时, 回归平方和 SSR 就会减少, 同时减少的数值的大小说明 该自变量在回归中越重要, 设 SSR 为 m 个自变量 x1, x2.....xm 的回归平方和, 变量 xi 后 m-1 个自变量的回归平方和, xi 的偏回归平方和, 记为 SSβi :
     为去掉自代表回归平方和所减少的量, 称为自变量偏回归均方 MSbi 为 MSβi = SSβi/dfβi = SSβi 其中 dfβi 为偏回归自由度, 其自由度为 1 计算用于检验各偏回归映射模型系数 β0, β1,……, β11 显著度的 F 统计量 : Fβi = MSβi/MSr(i = 0、 2、 ...、 11)若存在偏回归系数经显著度检验为不显著时, 从模型中剔除不显著的偏回归系数 对应的自变量, 重新建立多元线性回归方程, 重新计算新映射模型的参数, 对各个新的偏回 归系数进行显著度检验, 直至映射模型显著及各个偏回归系数都显著为止
     其中步骤四的具体实施步骤为 :
     a.. 获取每帧图像的眼动特征信息 VP-CR
     b. 根据眼动特征信息 VP-CR 变化量, 判断眼睛处于凝视状态还是非凝视状态 : 当前 帧的眼动特征信息 VP-CR 与前一帧的眼动特征信息 VP-CR 比较, 如果相对变化量小于 1%则判 断为眼睛处于凝视状态, 反之则处于非凝视状态。
     c. 当眼睛处于凝视状态时, 平滑眼动特征信息
     由于眼睛的抖动影响, 直接采用每一帧图像的眼动特征信息 VP-CR 来计算眼睛注视 点时, 眼睛注视点会快速跳动, 为了克服这个困难, 当眼睛处于凝视状态时, 每帧图像的眼 动特征信息都经平滑处理。
     平滑算法如下 :
     当眼睛处于凝视状态时, 提取包含该帧在内的处于同一凝视状态下的相邻的共 n 帧图像的眼动特征信息。如果处于同一凝视状态下的图像帧数 N 小于等于 10, 则 n 的取值 为 N, 如果 N 大于 10, 则 n 取值为 10。用高斯分布为这连续 n 个的眼动特征信息 (VP-CR)i 分 配权重, 通过权重平均来获得平滑的眼动特征信息 :
     当前帧图像的眼动特征信息记为 (VP-CR)0, 权重记为 ω0 与之相邻的前 n-1 帧图像 的眼动特征信息和权重依次为 (VP-CR)1, (VP-CR)2… (VP-CR)n-1 和 ω1, ω2… ωn-1, 它们的权重按 高斯分布逐渐递减, 当前帧具有最大的权重, 与当前帧隔最远的帧具有最小的权重。 权重分 配公式如下 :
     其中, μ 为高斯分布的均数, 这里取 0, δ 为标准差, δ 越大权重分布越平均, δ越小则权重分布的差异越大。
     平滑眼动特征信息公式 :
     d. 当人眼处于非凝视状态是直接利用该帧图像的眼动特征信息计算注视点, 当人 眼处于凝视状态是利用平滑后的眼动特征信息计算注视点。
    

一种基于逐步回归分析映射模型的视线跟踪方法.pdf_第1页
第1页 / 共13页
一种基于逐步回归分析映射模型的视线跟踪方法.pdf_第2页
第2页 / 共13页
一种基于逐步回归分析映射模型的视线跟踪方法.pdf_第3页
第3页 / 共13页
点击查看更多>>
资源描述

《一种基于逐步回归分析映射模型的视线跟踪方法.pdf》由会员分享,可在线阅读,更多相关《一种基于逐步回归分析映射模型的视线跟踪方法.pdf(13页珍藏版)》请在专利查询网上搜索。

1、(10)申请公布号 CN 102520796 A (43)申请公布日 2012.06.27 C N 1 0 2 5 2 0 7 9 6 A *CN102520796A* (21)申请号 201110406599.5 (22)申请日 2011.12.08 G06F 3/01(2006.01) (71)申请人华南理工大学 地址 510640 广东省广州市天河区五山路 381号 (72)发明人秦华标 严伟洪 梁铭炬 (74)专利代理机构广州粤高专利商标代理有限 公司 44102 代理人何淑珍 (54) 发明名称 一种基于逐步回归分析映射模型的视线跟踪 方法 (57) 摘要 本发明公开了一种基于逐步回。

2、归分析映射模 型的视线跟踪方法,该方法首先在人眼注视标定 点时提取眼动特征信息;然后选择初始映射模型 函数。选择初始映模型射函数后,对映射模型函数 各项的显著性进行检验,剔除非显著的项,在不断 的项剔除及重新建立映射模型函数的过程中,最 终找到拟合精度最高的映射模型函数。最后,利用 最终映射模型函数计算注视点,当人眼处于凝视 状态时,采用高斯权重平均法来平滑眼动特征信 息,克服眼睛抖动的问题。本发明鲁棒性好、精度 高。 (51)Int.Cl. 权利要求书2页 说明书8页 附图2页 (19)中华人民共和国国家知识产权局 (12)发明专利申请 权利要求书 2 页 说明书 8 页 附图 2 页 1/。

3、2页 2 1.一种基于逐步回归分析映射模型的视线跟踪方法,该方法采用一个摄像头和两个红 外光源, 两个红外光源安装在显示屏两侧,摄像头位于屏幕下方,其特征在于包括如下步 骤: (1)眼睛注视屏幕上的标定点,提取眼动特征信息; (2)选择初始映射模型函数:利用步骤(1)所获取的眼动特征信息,对候选的初始映射 模型函数进行整体的显著性检测和初始精度检测,若通不过这两检测则更换初始映射模函 数重新进行检测,通过这两个检测则确定为初始映射模型函数; (3)确定最终映射模型函数:对初始映射模型函数各项的显著性进行检验,剔除非显著 的项,在不断地项剔除及重新建立映射模型函数的过程中,最终找到拟合精度最高的。

4、映射 模型函数; (4)计算注视点:提取眼动特征信息,当人眼处于凝视状态时,采用高斯权重平均法来 平滑眼动特征信息,利用最终映射模型函数进行注视点计算,实现实时的视线跟踪。 2.根据权利要求1所述的跟踪方法,其特征在于:所述步骤(1)标定点为屏幕的中点及 在屏幕上44平均分布的16个点,共17个点。 3.根据权利要求1所述的跟踪方法,其特征在于所述步骤(1)眼动特征信息的提取包 括: (1.1) 定位出瞳孔区域,获得瞳孔中心坐标(Px,Py); (1.2)分别定位出两个红外光源在眼睛角膜上的反射斑点区域,获得两个斑点中心坐 标,得到这两个斑点中点连线的中点坐标(Xc,Yc),以及两个斑点中点的。

5、欧氏距离d; (1.3)获得由瞳孔中心指向两个反射斑点中点连线的中点的向量V,以两个反 射斑点中点的欧氏距离d作为修正因子,由V除以欧氏距离d.获得眼动特征信息 ,称为修正瞳孔-角膜反射向量; (1.4)由于人眼在凝视标定点时眼睛也不是完全静止的,人眼为了获取外界信息在不 断地小范围抖动,为了获取的眼动特征信息具有更好的鲁棒性,在人眼凝视每个标定点时 连续取五帧图像的修正瞳孔-角膜反射向量,然后取平均值作为标定点对应的眼动特征信 息。 4.根据权利要求1所述的跟踪方法,其特征在于所述步骤(2)中包括: (2.1) 确定初始映射模型函数以将眼动特征信息和人眼注视点对应起来,映射模型函 数为多项映。

6、射模型函数,以人眼注视点的坐标为依变量,以眼动特征信息即修正瞳孔-角 膜反射向量的X轴分量和Y轴分量组合构成的项作为自变量; (2.2)利用标定点在屏幕上的坐标信息和对应的眼动特征信息采用F检验法检查候 选初始映射模型函数的整体显著性,当映射模型函数整体为非显著时更改初始映射模型函 数,通过整体显著行检测后,用最小二乘法确定初始映射模型函数的系数,把用该初始映射 模型函数计算出的人眼注视点与标定点进行比较得到定位误差,若定位误差大于设定值则 更换初始映射模型函数。 5.根据权利要求4所述的跟踪方法,其特征在于步骤(2.2)中,候选初始映射模型函数 有6参数二次多项式、9参数多项式和12参数多项。

7、式,首先选择6参数二次多项式作为待定 初始映射模型函进行整体的显著性检测和初始精度检测,如果如果6参数二次多项式达通 不过检测则重新选择9参数多项式作为待定初始映射模型函进行整体的显著性检测和初 权 利 要 求 书CN 102520796 A 2/2页 3 始精度检测,若9参数多项式也通不过检测则选择12参数多项式。 6.根据权利要求1所述的跟踪方法,其特征在于所述步骤(3)包括: 确定了初始映射模型函数后,用F检验法对映射模型函数各项的显著性进行检验,剔 除非显著的项,在不断的项剔除及重新建立映射模型函数的过程中,找到最优的函数参数 组合,显著地提高模型函数计算效率及拟合精度。 7.根据权利。

8、要求1所述的跟踪方法,其特征在于所述步骤(4)包括: (4.1)获取每帧图像的眼动特征信息; (4.2)根据眼动特征信息变化量,判断眼睛处于凝视状态还是非凝视状态:当前 帧的眼动特征信息与前一帧的眼动特征信息比较,如果相对变化量小于1%则 判断为眼睛处于凝视状态,反之则处于非凝视状态; (4.3)当眼睛处于凝视状态时,平滑眼动特征信息:当眼睛处于凝视状态时,采用 高斯分布为处于凝视状态时获取的连续多帧图像的眼动特征信息分配权重,通过权重平均 来获得平滑的眼动特征信息; (4.4)当人眼处于非凝视状态时直接利用该帧图像的眼动特征信息计算注视点,当人 眼处于凝视状态时利用平滑后的眼动特征信息计算注。

9、视点。 权 利 要 求 书CN 102520796 A 1/8页 4 一种基于逐步回归分析映射模型的视线跟踪方法 技术领域 0001 本发明涉及视线跟踪技术,具体涉及基于逐步回归分析映射模型的视线跟踪方 法。 背景技术 0002 视线识别技术为人机交互技术的重要分支,主要研究对人眼注视点的检测与识 别,实现对其他功能系统控制,其研究成果在军备开发、无人驾驶、航空航天、残疾人辅助、 虚拟现实等领域有着广泛的应用前景。 0003 视线跟踪技术一般可以分为两类,接触式和非接触式。接触式的精度高,但用户须 佩戴特殊设备,给用户使用带来很大的不便。非接触式不需用户佩戴任何设备,不对用户产 生干扰。非接触。

10、式技术是目前研究的热点。在非接触式视线跟踪技术中,瞳孔-角膜反射 向量法具有较高的精度,是目前非接触式技术的主流。按照其原理瞳孔-角膜反射法可划 分为3维跟踪方法和2维跟踪方法。3维的跟踪方法存在很大的缺陷,需要用到多个摄像机 来求得眼睛3维坐标,对硬件要求高,算法复杂耗时,实现难度大。在现今的视线跟踪实用 系统中大多使用2维的跟踪方法。人眼注视点映射模型是2维跟踪方法中最关键的问题, 现今的映射模型函数使用固定的参数组合,没有考虑映射模型函数整体和各个参数的显著 性,缺乏合理性检验和拟合精度不高。由于使用者生理特征参数差异性,如眼球半径、眼球 椭圆系数等,和所处的条件不同,如头部相对与摄像头。

11、的位置等,不同个体是有差异的,使 用固定的模型参数组合并不完全适合所有情况,必须对映射模型函数整体和各参数的显著 性进行检测。并且现有绝大部分视线跟踪方法在人眼凝视时定位注视点时没有考虑眼睛抖 动的问题,使得人眼盯着一点看时,定位出的注视点还会不断跳动。 发明内容 0004 本发明的目的在于克服现有2维映射模型缺乏合理性检验、拟合精度不高和缺乏 考虑凝视时眼睛抖动的缺点,提供一种基于逐步回归分析映射模型的视线跟踪方法,根据 输入的眼动特征信息数据检测模型整体和各参数的显著性,自适应调整模型参数的组合, 建立合理、高精度的、鲁棒性强的映射模型,并且在人眼凝视时通过高斯权重平均解决眼睛 抖动的问题。

12、。该算法对硬件要求低,只需一个普通的摄像头和两个红外光源,所需的计算量 不大,提高了视线跟踪的实时性。 0005 本发明通过以下技术方案实现: 0006 一种基于逐步回归分析映射模型的视线跟踪方法,该方法需要一个摄像头和两个 红外光源,包括如下步骤: 0007 (1)眼睛注视屏幕上的标定点,提取眼动特征信息; 0008 (2)选择初始映射模型函数:利用步骤(1)所获取的眼动特征信息,对候选的初始 映射模型函数进行整体的显著性检测和初始精度检测,若通不过这两检测则更换初始映射 模函数重新进行检测,通过这两个检测则确定为初始映射模型函数; 说 明 书CN 102520796 A 2/8页 5 00。

13、09 (3)确定最终映射模型函数:对初始映射模型函数各项的显著性进行检验,剔除 非显著的项,在不断地项剔除及重新建立映射模型函数的过程中,最终找到拟合精度最高 的映射模型函数; 0010 (4)计算注视点:提取眼动特征信息,当人眼处于凝视状态时,采用高斯权重平均 法来平滑眼动特征信息,利用最终映射模型函数进行注视点计算,实现实时的视线跟踪。 0011 上述跟踪方法中,步骤(1)的标定点为屏幕的中点及在屏幕上44平均分布的16 个点,共17个点。 0012 上述跟踪方法中,所述步骤(1)眼动特征信息的提取包括: 0013 a.定位出瞳孔区域,获得瞳孔中心坐标(Px,Py); 0014 b.分别定。

14、位出两个红外光源在眼睛角膜上的反射斑点区域,获得两个斑点中心坐 标,得到这两个斑点中点连线的中点坐标(Xc,Yc),以及两个斑点中点的欧氏距离d; 0015 c获得由瞳孔中心指向两个反射斑点中点连线的中点的向量V,以两个反射斑 点中点的欧氏距离d作为修正因子,由V除以d.获得眼动特征信息V P-CR ,称为修正瞳孔-角 膜反射向量; 0016 d.由于人眼在凝视标定点时眼睛也不是完全静止的,人眼为了获取外界信息在不 断地小范围抖动,为了获取的眼动特征信息具有更好的鲁棒性,在人眼凝视每个标定点时 连续取五帧图像的修正瞳孔-角膜反射向量,然后取平均值作为标定点对应的眼动特征信 息。 0017 上述。

15、跟踪方法中,所述步骤(2)包括: 0018 a.确定初始映射模型函数把眼动特征信息和人眼注视点对应起来,映射模型函数 为多项映射模型函数,以人眼注视点的坐标为依变量,以眼动特征信息即修正瞳孔-角膜 反射向量的X轴分量和Y轴分量组合构成的项作为自变量; 0019 b.利用标定点在屏幕上的坐标信息和对应的眼动特征信息采用F检验法检查候 选初始映射模型函数的整体显著性,当映射模型函数整体为非显著时更改初始映射模型函 数,通过整体显著行检测后,用最小二乘法确定初始映射模型函数的系数,把用该初始映射 模型函数计算出的人眼注视点与标定点进行比较得到定位误差,若定位误差大于设定值则 更换初始映射模型函数。 。

16、0020 上述跟踪方法的步骤b中,候选初始映射模型函数有6参数二次多项式、9参数多 项式和12参数多项式,首先选择6参数二次多项式作为待定初始映射模型函进行整体的显 著性检测和初始精度检测,如果如果6参数二次多项式达通不过检测则重新选择9参数多 项式作为待定初始映射模型函进行整体的显著性检测和初始精度检测,若9参数多项式也 通不过检测则选择12参数多项式。 0021 上述跟踪方法中,所述步骤(3)包括: 0022 确定了初始映射模型函数后,映射模型函数的各自变量不一定与依变量的关系都 是显著的,非显著的自变量会影响映射模型函数的准确性和鲁棒性,故用F检验法对映射 模型函数各项的显著性进行检验,。

17、剔除非显著的项,在不断的项剔除及重新建立映射模型 函数的过程中,找到最优的函数参数组合,显著地提高模型函数计算效率及拟合精度。 0023 上述跟踪方法中,所述步骤(4)包括: 0024 a.获取每帧图像的眼动特征信息V P-CR ; 说 明 书CN 102520796 A 3/8页 6 0025 b.根据眼动特征信息V P-CR 变化量,判断眼睛处于凝视状态还是非凝视状态:当前 帧的眼动特征信息V P-CR 与前一帧的眼动特征信息V P-CR 比较,如果相对变化量小于1则判 断为眼睛处于凝视状态,反之则处于非凝视状态; 0026 c.当眼睛处于凝视状态时,平滑眼动特征信息V P-CR :由于眼。

18、睛的抖动影响,直接采 用每一帧图像的眼动特征信息V P-CR 来计算眼睛注视点时,眼睛注视点会快速跳动,为了克 服这个困难,当眼睛处于凝视状态时,采用高斯分布为眼睛处于凝视状态时获取的连续多 帧图像的眼动特征信息分配权重,通过权重平均来获得平滑的眼动特征信息; 0027 d.当人眼处于非凝视状态时直接利用该帧图像的眼动特征信息计算注视点,当人 眼处于凝视状态时利用平滑后的眼动特征信息计算注视点。 0028 与现有技术相比,本发明的优点与积极效果在于: 0029 1.相对传统的静态的映射模型采用固定组合的多项式映射模型函数,该方法采用 基于逐步回归分析的方法,在构建了初始映射模型函数后,根据眼动。

19、特征信息检查映射模 型函数的显著性,剔除映射模型函数不显著的项,最终找到最优的多项式映射模型函数,显 著地提高模型函数计算效率及拟合精度。 0030 2.该方法在人眼凝视时采用高斯权重平均法来解决眼睛凝视时产生的抖动现象, 当前帧的权重最大,之前的帧的权重按高斯分布递减,这不仅克服了眼睛的抖动现象而且 能快速的响应眼睛细微运动。 0031 3.该方法对硬件要求低,只需一个摄像头及两个光源,计算量少,实时性强。 附图说明 0032 图1是本发明实施方式中显示屏、红外光源与摄像头的布置示意图。 0033 图2是本发明实施方式中视线跟踪方法的流程示意图。 0034 图3是本发明实施方式中标定点分布图。

20、。 具体实施方式 0035 下面结合附图对本发明的具体实施方式作进一步说明。 0036 如图1,本发明需要红外光源及摄像头。红外光源为安装在显示屏两个侧边中点的 LED灯,摄像头位于屏幕中心正下方。摄像头实时地捕捉图像,在两个红外光源的照射下,瞳 孔图像会产生暗瞳效应,且会在眼睛角膜上形成两反射斑点。, 0037 如图2,视线跟踪算法具体实施步骤如下: 0038 步骤一:眼睛注视标定点,提取眼动特征信息 0039 步骤二:选择初始映射模型函数 0040 步骤三:确定最终映射模型函数: 0041 步骤四:注视点计算。 0042 其中步骤一的具体实施步骤为: 0043 1.眼睛依次注视标定点,标定。

21、点分布图如图3所示,为屏幕的中点及在屏幕上 44平均分布的16个点,共17个点; 0044 2.在眼睛注视标定时提取眼动特征信息 0045 每个注视点提取连续五帧图像的修正瞳孔-角膜反射向量的平均值作为眼动特 说 明 书CN 102520796 A 4/8页 7 征信息。眼动特征信息提取的具体实施步骤为: 0046 2.1彩色图像灰度化 0047 摄像头采集的数字图像为具有R,G,B分量的彩色图片,将彩色图像灰度化,公式 如下: 0048 V0.259R+0.578G+0.144B 0049 式中V表示转换后的灰度值,R,G,B为图片的红,绿,蓝分量。 0050 2.2定位人眼区域 0051 。

22、a.采用基于模版匹配的定位算法实现快速的人眼区域。采用相关系数匹配法则, 求取样本与人眼模板之间的相关度,有最大相关值为所要定位的区域。 0052 b.在定位人眼区域后,对人眼区域进行去噪声处理,采用高斯滤波器对图像平滑 预处理。 0053 2.3定位瞳孔获得瞳孔信息 0054 a.采用canny边缘检测算法获取瞳孔的边缘信息 0055 b.采用椭圆曲线拟合瞳孔边缘点 0056 以图像的左上角作为原点建立X-Y直角坐标系,对所提取的瞳孔边缘点集合进行 椭圆方程的最小二乘法拟合,然后确定瞳孔中心位置(X C ,Y C ),椭圆方程取为: 0057 X 2 +AXY+BY 2 +CX+DY+E0 。

23、0058 利用最小二乘法求取A、B、C、D、E参数值, 0059 椭圆中心坐标(X C ,Y C )计算如下: 0060 0061 0062 2.4定位斑点,获取斑点信息 0063 a.二值化眼睛区域获得斑点图像 0064 跟据斑点为一个高亮的块的特征,对图像进行二值化处理,获取二值化斑点图像, 提取斑点轮廓。 0065 b.采用椭圆曲线拟合斑点轮廓。 0066 分别获得两个斑点中心坐标,得到这两个斑点中点连线的中点坐标(Xc,Yc),以及 两个斑点中点的欧氏距离d 0067 2.5.眼动特征信息修正瞳孔-角膜反射向量 0068 获得由瞳孔中心(Xp,Yp)指向两个红外反射斑点中点连线的中点(。

24、Xc,Yc)的向量 V,以两个反射斑点中点的欧氏距离d作为修正因子,由V除以d.获得眼动特征信息V P-CR , 公式如下: 0069 0070 其中步骤二的具体实施步骤为: 0071 1、候选初始映射模型函数 0072 6参数二次多项式映射模型函数: 说 明 书CN 102520796 A 5/8页 8 0073 0074 9参数多项式映射模型函数: 0075 0076 12参数多项式函数: 0077 0078 其中s x 表示注视点在屏幕坐标系下的横坐标,s y 表示注视点在屏幕坐标系下的纵 坐标,x代表眼动特征信息在图像坐标系中的x轴分量,y代表眼动图像坐标系中的y轴分 量。a 0 a 。

25、11 ,b 0 b 11 是待标定的系数。 0079 2、初始函数整体显著性检测和精度检测 0080 利用标定点的信息和对的眼动特征信息采用F检验法检查映射模型函数的整体 显著性,当映射模型函数整体为非显著时更改初始映射模型函数,通过整体显著行检测后, 用最小二乘法确定初始映射模型函数的系数,把用该初始映射模型函数计算出的人眼注视 点与标定点进行比较,判断定位误差,若定位误差太大则更换初始映射模型函数 0081 首先选择6参数二次多项式作为初始映射模型函数,如果6参数二次多项式模型 达不到要求则重新选择9参数多项式作为初始映射模型函数,若9参数多项式也达不到要 求则选择12参数多项式。 008。

26、2 函数整体显著性检测具体方法如下: 0083 初始映射模型函数可以表示为: 0084 y 0 + 1 *x 1 + 2 *x 2 + 3 *x 3 + m *x m 0085 其中y代表多项式公式中的(s x ,s y ), 0 , 1 , m 代表初始映射模型函数 中的a、b参数,1,x 1 ,x 2 ,.,x m 分别代表公式中的a、b参数对应的单项。 0086 则在标定过程中,由17组标定点和对应眼动特征数据获得的求解映射模型函数 的数据可记录如表1: 0087 表1 说 明 书CN 102520796 A 6/8页 9 0088 0089 由于非线性因素的不确定性,并不能确定注视点坐。

27、标依变量y与眼动特征信息输 入自变量1,x 1 ,x 2 ,.,x m 之间存在必然联系,y与1,x 1 ,x 2 ,.,x m 的联系只是假设,在建 立了初始映射模型函数之后,必须对其联系假设进行显著度检验,采用F检验方法进行显 著度的测试及判断。 0090 注视点坐标的依变量y的总平方和SS y 剖分为回归平方和SS R 及离回归平方和 SS r : 0091 SS y SS R +SS r 0092 依变量y的总自由度df y 同样剖分为回归自由度df R 与离回归自由度df r : 0093 df y df R +df r 0094 其中, 0095 SS y y 2 -(y) 2 /。

28、17 0096 0097 SS r SS y -SS R 0098 0099 df y n-1 0100 df R m 0101 df r n-m-1 0102 m为自变量映射模型函数参数的个数,n为眼动输入数据及标定点的组数,本实例 为17。 0103 根据SS R 、df R 与SS r 、df r 即可计算出回归均方MS R 与离回归均方MS r 及统计量F: 0104 0105 由上述F统计量进行F检验以推断多元回归的视线映射模型的显著度,及模型的 参数组合及估算是否符合注视点映射模型的要求 0106 其中步骤三的具体实施步骤为: 说 明 书CN 102520796 A 7/8页 10。

29、 0107 算法流程图如图3所示。在确定了初始映射模型函数后,用F检验法对映射模型 函数各项的显著性进行检验,剔除非显著的项,在不断的项剔除及重新建立多元回归映射 模型的过程中,找到最优的模型参数组合,显著地提高模型计算效率及拟合精度。 0108 具体算法如下: 0109 映射模型函数参数显著度校验原理:在逐步回归分析中,SS R 总是随着自变量的增 多而增加,如果去掉一个自变量时,回归平方和SS R 就会减少,同时减少的数值的大小说明 该自变量在回归中越重要,设SS R 为m个自变量x 1 ,x 2 .x m 的回归平方和,为去掉自 变量x i 后m-1个自变量的回归平方和,代表回归平方和所。

30、减少的量,称为自变量 x i 的偏回归平方和,记为SS i : 0110 0111 偏回归均方MS bi 为 0112 MS i SS i /df i SS i 0113 其中df i 为偏回归自由度,其自由度为1 0114 计算用于检验各偏回归映射模型系数 0 , 1 , 11 显著度的F统计量: 0115 F i MS i /MS r (i0、2、.、11) 0116 若存在偏回归系数经显著度检验为不显著时,从模型中剔除不显著的偏回归系数 对应的自变量,重新建立多元线性回归方程,重新计算新映射模型的参数,对各个新的偏回 归系数进行显著度检验,直至映射模型显著及各个偏回归系数都显著为止 01。

31、17 其中步骤四的具体实施步骤为: 0118 a获取每帧图像的眼动特征信息V P-CR 0119 b.根据眼动特征信息V P-CR 变化量,判断眼睛处于凝视状态还是非凝视状态:当前 帧的眼动特征信息V P-CR 与前一帧的眼动特征信息V P-CR 比较,如果相对变化量小于1则判 断为眼睛处于凝视状态,反之则处于非凝视状态。 0120 c.当眼睛处于凝视状态时,平滑眼动特征信息 0121 由于眼睛的抖动影响,直接采用每一帧图像的眼动特征信息V P-CR 来计算眼睛注视 点时,眼睛注视点会快速跳动,为了克服这个困难,当眼睛处于凝视状态时,每帧图像的眼 动特征信息都经平滑处理。 0122 平滑算法如。

32、下: 0123 当眼睛处于凝视状态时,提取包含该帧在内的处于同一凝视状态下的相邻的共n 帧图像的眼动特征信息。如果处于同一凝视状态下的图像帧数N小于等于10,则n的取值 为N,如果N大于10,则n取值为10。用高斯分布为这连续n个的眼动特征信息(V P-CR ) i 分 配权重,通过权重平均来获得平滑的眼动特征信息: 0124 当前帧图像的眼动特征信息记为(V P-CR ) 0 ,权重记为 0 与之相邻的前n-1帧图像 的眼动特征信息和权重依次为(V P-CR ) 1 ,(V P-CR ) 2 (V P-CR ) n-1 和 1 , 2 n-1 ,它们的权重按 高斯分布逐渐递减,当前帧具有最大。

33、的权重,与当前帧隔最远的帧具有最小的权重。权重分 配公式如下: 0125 0126 其中,为高斯分布的均数,这里取0,为标准差,越大权重分布越平均, 说 明 书CN 102520796 A 10 8/8页 11 越小则权重分布的差异越大。 0127 平滑眼动特征信息公式: 0128 0129 d.当人眼处于非凝视状态是直接利用该帧图像的眼动特征信息计算注视点,当人 眼处于凝视状态是利用平滑后的眼动特征信息计算注视点。 说 明 书CN 102520796 A 11 1/2页 12 图1 说 明 书 附 图CN 102520796 A 12 2/2页 13 图2 图3 说 明 书 附 图CN 102520796 A 13 。

展开阅读全文
相关资源
猜你喜欢
相关搜索

当前位置:首页 > 物理 > 计算;推算;计数


copyright@ 2017-2020 zhuanlichaxun.net网站版权所有
经营许可证编号:粤ICP备2021068784号-1