《用于基于图像的自动曝光矫正的方法.pdf》由会员分享，可在线阅读，更多相关《用于基于图像的自动曝光矫正的方法.pdf（11页珍藏版）》请在专利查询网上搜索。
1、(10)申请公布号 CN 102833489 A (43)申请公布日 2012.12.19 C N 1 0 2 8 3 3 4 8 9 A *CN102833489A* (21)申请号 201110224383.7 (22)申请日 2011.07.29 102011104198.6 2011.06.15 DE H04N 5/243(2006.01) G06K 9/00(2006.01) (71)申请人 ABB股份公司 地址德国曼海姆 (72)发明人 O比加尔克 J普拉特 C克莱恩-科萨克 (74)专利代理机构中国专利代理(香港)有限公 司 72001 代理人汤春龙 朱海煜 (54) 发明名称 。
2、用于基于图像的自动曝光矫正的方法 (57) 摘要 本发明名称为用于基于图像的自动曝光矫正 的方法，提出用于家庭通信系统的基于图像的自 动曝光矫正的方法，其具有门站和至少一个经由 总线与其连接的住宅站作为系统组件，其中，门站 摄像机拍摄在门站前逗留的人员的图像；其中， 在住宅站的显示器中显示这些图像；其中，借助 区域探测器分析由摄像机产生的模拟或数字图像 信号(BS)，其识别一个或多个相关图像范围；其 中，亮度测量值生成器在区域探测器的结果基础 上测定至少一个受关注的图像范围的曝光质量； 其中，调节单元从预给定的理论值(SW)和由亮度 测量值生成器产生与提供的实际值(IW)中测定 调节量(SG)。
3、，该调节量(SG)在拍摄图像期间迭代 地优化摄像机的曝光参数。 (30)优先权数据 (51)Int.Cl. 权利要求书1页 说明书4页 附图5页 (19)中华人民共和国国家知识产权局 (12)发明专利申请 权利要求书 1 页 说明书 4 页 附图 5 页 1/1页 2 1.用于家庭通信系统的基于图像的自动曝光矫正的方法，所述家庭通信系统具有门站 (4)和至少一个经由总线(15)与其相连接的住宅站(1)作为系统组件， 其中所述门站(4)的摄像机(5)拍摄在所述门站前逗留的人员的图像； 其中，在所述住宅站(1)的显示器(2)上显示这些图像； 其中，借助区域探测器(10)分析由所述摄像机(5)产生的。
4、模拟或数字图像信号 (BS)，所述区域探测器(10)识别一个或多个相关图像范围； 其中，亮度测量值生成器(11)在所述区域探测器(10)的结果基础上测定至少一个 受关注的图像范围的曝光质量。 其中，调节单元(8)从预给定的理论值(SW)和由亮度测量值生成器(11)产生与提 供的实际值(IW)中测定调节量(SG)，所述调节量(SG)在所述拍摄图像期间迭代地优化所 述摄像机(5)的曝光参数。 2.根据权利要求1所述的方法，其特征在于，所述调节量(SG)被直接输送给所述摄像 机(5)。 3.根据权利要求2所述的方法，其特征在于，附加的区域信息(RI)由所述区域探测器 (10)传送给所述摄像机(5)。。
5、 4.根据权利要求1所述的方法，其特征在于，所述调节量(SG)被输送给图像处理装置 (9)，所述图像处理装置(9)在输入侧接收由所述摄像机(5)产生的图像信号(BS)。 5.根据权利要求4所述的方法，其特征在于，附加的区域信息(RI)由所述区域探测器 (10)传送给所述图像处理装置(9)。 6.根据前述权利要求至少一项所述的方法，其特征在于，光分析单元(12)接收由所述 亮度测量值生成器(11)产生和提供的实际值(IW)以及所述调节单元(8)的调节量(SG) 且在这些数据的基础上控制光源(17)，以便改进照明情况。 7.根据前述权利要求至少一项所述的方法，其特征在于，在所述区域探测器(10)中。
6、将 人员识别方法、例如头肩检测或面部检测投入使用。 8.根据前述权利要求至少一项所述的方法，其特征在于，在所述区域探测器(10)中将 用于背景减除的基于图像的方法投入使用。 9.根据前述权利要求至少一项所述的方法，其特征在于，在所述区域探测器(10)中将 用于动作识别的方法投入使用，其中，从以下假设出发，即在所述门站(4)前逗留的人员具 有与背景相比独特的动作行为。 10.根据前述权利要求至少一项所述的方法，其中，在所述门站(4)外部的调节单元 (8)和/或区域探测器(10)和/或亮度测量值生成器(11)集成在至少另一系统组件内， 其特征在于，经由所述总线(15)输送至少一个输出量、例如调节量。
7、(SG)、和/或区域信息 (RI)和/或实际值(IW)。 权 利 要 求 书CN 102833489 A 1/4页 3 用于基于图像的自动曝光矫正的方法 技术领域 0001 本发明涉及一种结合家庭通信系统中提供的视频信息或者图像信号用于基于图 像的自动曝光矫正的方法。 背景技术 0002 在家庭通信系统中，结合由门站摄像机拍摄的图像到至少一个住宅站的显示器的 传送如下一般是常见的：基于整个图像上的平均亮度进行自动曝光调节，以便以此方式对 在不同的时间和天气条件下出现的亮度差异进行补偿(早上、正午太阳、少云/多云、傍晚、 夜里)。在如下基本假设下计算曝光敏感性：整个图像具有规定的平均亮度，例如亮。
8、度为 18。在通过相同的权重进行计算时，考虑到整个图像范围。 0003 在家庭通信系统的门站(外部站)的典型使用场景中未给出如下基本假设，即能 够基于整个图像范围上的平均亮度测定用于拍摄的最优化曝光调节。在这些情况下，人员 例如站在外部站前且在阴影范围中紧靠着房屋墙壁，图像背景相反被直接照亮且在图像中 明显更亮。通常也会遇见逆光情况且导致类似的效果。通过这些用于具有人员的前景和背 景的强烈不同的照明事实，一般常见的自动曝光调整在实践中会导致令人不满意的结果。 结果是在一般已知门站的传送视频图像上在图示人员时明显降低了对比度。 发明内容 0004 本发明的目的在于提出一种结合家庭通信系统中提供的。
9、视频信息用于基于图像 的自动曝光矫正的优化方法。 0005 按照本发明，该目的通过用于家庭通信系统的基于图像的自动曝光矫正的方法实 现，所述家庭通信系统具有门站和至少一个经由总线与其相连接的住宅站作为系统组件， 0006 其中，门站摄像机拍摄在门站前逗留的人员的图像； 0007 其中，在住宅站的显示器上显示这些图像； 0008 其中，借助区域探测器分析由摄像机产生的模拟或数字图像信号，所述区域探 测器识别一个或多个相关图像范围； 0009 其中，亮度测量值生成器在区域探测器的结果基础上测定至少一个受关注的图 像范围的曝光质量； 0010 其中，调节单元从预给定的理论值和由亮度测量值生成器产生与。
10、提供的实际值 中测定调节量，所述调节量在拍摄图像期间迭代地优化摄像机的曝光参数。 0011 利用本发明可获得的优点尤其是在于借助用于亮度调整的简单且轻松的方法改 进的图像质量。从通常情况下对于图像数据的数字传送所必需的MPEG编码中，例如能够借 助区域探测器轻松获取对于区域亮度调整所需的信息，而无需大量的附加计算能力。所建 议的曝光矫正方法尤其是在对于前景(包含在门站前逗留的人员)和背景的不同照明条件 下得到改进的结果，也就是说，在从门站传送到住宅站的视频图像上对人员的清晰图示。如 果例如人员处于阴影范围中，而图像背景被直接照亮，则所建议的曝光矫正方法引起人员 说 明 书CN 10283348。
11、9 A 2/4页 4 的加亮(Aufhellung)。这同样适用于逆光情况。 0012 在此，借助调节单元测定的调节量能够直接输送给摄像机，也就是说，在这种情况 下在摄像机中进行全局亮度调整。在此上下文中，按照改进方案，附加的区域信息能够由区 域探测器直接传送给摄像机，也就是说在这种情况下在摄像机中进行区域亮度调整。 0013 与此有所不同地，借助调节单元测定的调节量能够输送给图像处理装置，所述图 像处理装置在输入侧接收由摄像机产生的图像信号，也就是说，在这种情况下在图像处理 装置中进行全局亮度调整。在此上下文中，按照改进方案，附加的区域信息能够由区域探测 器传送给图像处理装置，也就是说，在这。
12、种情况下在图像处理装置中进行区域亮度调整。 0014 可选地，在所有实施形式中，光分析单元一方面能够接收由亮度测量值生成器产 生和提供的实际值且另一方面能够接收调节单元的调节量且在这些数据的基础上能够控 制光源以便改进照明情况(门站或者在此前逗留的人员的照明)。 0015 对于区域探测器，为了识别相关的图像范围能够有利的是： 0016 将人员识别方法、例如头肩检测或面部检测投入使用或者 0017 将用于背景减除的基于图像的方法投入使用或者 0018 将用于动作识别的方法投入使用，其中，从以下假设出发，即位于门站前的人员 具有与背景相比独特的动作行为，例如与背景不同的是并非完全静止。 0019 。
13、在家庭通信系统中(在所述家庭通信系统中门站外部的调节单元和/或区域探测 器和/或亮度测量值生成器集成在至少另一系统组件(住宅站)内)，有利的是，经由总线 输送至少一个输出量、例如调节量和/或区域信息和/或实际值。 附图说明 0020 以下根据附图中示出的实施例阐述本发明。其中： 0021 图1示出了家庭通信系统的系统概况； 0022 图2示出了在摄像机中具有全局亮度调整的门站的第一实施形式； 0023 图3示出了在摄像机中具有区域亮度调整的门站的第二实施形式； 0024 图4示出了在图像处理装置中具有全局亮度处理的门站的第三实施形式； 0025 图5示出了在图像处理装置中具有区域亮度调整的门站。
14、的第四实施形式。 具体实施方式 0026 图1示出了家庭通信系统的系统概况。作为系统组件可以看见的有： 0027 具有显示器2的住宅站1； 0028 具有摄像机5、扬声器6和至少一个铃按钮7的门站4。 0029 在被观察的家庭通信系统中，能够仅设置唯一的住宅站，然而也能够存在两个、三 个或更多的住宅站作为系统组件，其中，门站的铃按钮数目取决于住宅站数目。总线15用 于将门站4与住宅站1或者这些住宅站相连接。 0030 图2示出了在摄像机中具有全局亮度调整的门站的第一实施形式。图中示出了摄 像机5，所述摄像机5的模拟或数字图像信号BS被输送给图像处理装置9以及区域探测器 10。图像处理装置9在输。
15、出侧与总线接口13相连接，总线15连接在所述总线接口13上。 区域探测器10的输出信号被引入到亮度测量值生成器11。在输出侧，亮度测量值生成器 说 明 书CN 102833489 A 3/4页 5 11将实际值IW作为输出量输出到可选的光分析单元12以及调节单元8。调节单元8另一 方面具有理论值SW。在输出侧，调节单元8将调节量SG作为输出量输出到可选的光分析单 元12。可选的光分析单元12在输出侧控制可选的光源17。这些用于图2的实施方式也适 用于按照图3、4、5的其它实施方式。 0031 按照图2的实施形式的特殊性在于调节单元8附加地输出调节量SG到摄像机5 上。 0032 图3示出了在摄。
16、像机中具有区域亮度调整的门站的第二实施形式。按照图3的实 施形式的特殊性在于，一方面调节单元8附加地输出调节量SG到摄像机5上且另一方面区 域探测器10输出作为输出量的区域信息RI到摄像机5上。 0033 图4示出了在图像处理装置中具有全局亮度处理的门站的第三实施形式。按照图 4的实施形式的特殊性在于调节单元8附加地输出调节量SG到图像处理装置9上。 0034 图5示出了在图像处理装置中具有区域亮度调整的门站的第四实施形式。按照图 5的实施形式的特殊性在于，一方面调节单元8附加地输出调节量SG到图像处理装置9上 且另一方面区域探测器10输出区域信息RI到图像处理装置9上。 0035 在上文中对。
17、不同实施形式的电路技术上的共同点和不同点的描述之后紧接的是 对所建议的用于基于图像的自动曝光矫正的方法的阐述。 0036 为了改进在通过摄像机5拍摄时的图像质量，优化关于在给定的场景中受关注的 图像范围的曝光参数，尤其是通常情况下分配给在图像的前景中照明不好的人员的图像范 围。 0037 出于该目的，由区域探测器10在第一步骤中分析摄像机5的图像信号BS，区域探 测器10识别一个或多个涉及到前景中一个或多个人员的相关图像范围。亮度测量值生成 器11在区域探测器10的结果基础上测定受关注的图像范围的曝光质量。这通过应用用于 基于平均亮度的自动曝光调节的一般已知方法进行，而并不在整个图像上，如通常。
18、情况下， 而是分别在受关注的图像范围上或在第一步骤中测定的图像范围的特殊权重情况下。 0038 结果是调节单元8能够借助不同的调节量SG在图像拍摄期间迭代地优化摄像机 5的曝光参数，参见按照图2和3的实施形式，参见带有从调节单元8到摄像机5的调节量 SG的路径，或者也能够借助用于控制光源17的可选的光分析单元12改进照明情况，参见按 照图2、3、4、5的实施形式，参见带有从调节单元8到包括取决于IW/SG对比对光源17的控 制的光分析单元12的调节量SG的路径。 0039 如果装上允许区域曝光调节的摄像机5，则该方法能够拓展到通过所述过程彼此 分开地优化用于不同图像范围(前景和背景)的拍摄参数。
19、。在这种情况下，由区域探测器 10测定的区域信息RI由区域探测器10附加地传送到摄像机5上，参见按照图3带有从区 域探测器10到摄像机5的区域信息RI的路径。 0040 对于不允许或不需要曝光调节的改变的摄像机5，在将数据传递到总线接口13 前，在图像处理装置9内进行图像质量的优化。与两个上述方法类似，在这里能够有选择地 0041 进行全局优化，如其在图4中示出的，参见带有从调节单元8到图像处理装置9 的调节量SG的路径，也可 0042 进行区域优化，如其在图5中示出的，参见带有从调节单元8到图像处理装置9 的调节量SG的路径以及带有从区域探测器10到图像处理装置9的区域信息的路径。 说 明 。
20、书CN 102833489 A 4/4页 6 0043 为了借助区域探测器10识别相关的图像范围，能够应用不同的方法： 0044 -用于人员识别的方法(例如头肩探测器、面部探测器) 0045 -用于背景减除的基于图像的方法和 0046 -用于动作识别的方法。除了上面的方法之外，在已经隐含提供的动作信息基础 上，动作识别也能够在经MPEG编码的视频流中进行。这使得所述的曝光矫正方法也能够应 用在带有受限的硬件资源的嵌入式系统中且无需附加的硬件。 0047 在已知的用于运动图像(例如MPEG)的压缩方法中，为了减少数据量而使用不同 的图像类型。以有规律的间隔对全图像(I帧)进行编码，所述全图像包含。
21、完整的图像内容 的图像信息。为了相应地减少数据传输率，在全图像之间仅对差值图像(P帧或B帧)进行 编码。这些图像实质上仅包含与前的或后面的帧的差值。 0048 按照本发明，从以下出发，即人员的面部/上身在从外部通话位置到内部通话位 置的对话期间并非完全静止，且具有与背景相比独特的动作行为。这些动作信息在差值图 像中再次找到(运动流矢量)。对这些矢量的分析允许相关的图像范围的精确确定，对于所 述图像范围应该首先进行图像亮度的调整。 0049 备选地，以一种较简单的方式能够省去相关的图像范围的精确确定，其中仅从矢 量中确定中心。然后，在可定义的围绕着中心的圆形或椭圆形周围相应地调整亮度。 0050。
22、 参考标记列表 0051 1 住宅站 0052 2 显示器 0053 3 - 0054 4 门站 0055 5 摄像机 0056 6 扬声器 0057 7 铃按钮 0058 8 调节单元 0059 9 图像处理装置 0060 10 区域探测器 0061 10 亮度测量值生成器 0062 10 光分析单元 0063 10 总线接口 0064 10 - 0065 10 总线 0066 10 - 0067 10 光源 0068 BS 图像信号 0069 IW 实际值 0070 RI 区域信息 0071 SG 调节量 0072 SW 理论值 说 明 书CN 102833489 A 1/5页 7 图1 说 明 书 附 图CN 102833489 A 2/5页 8 图2 说 明 书 附 图CN 102833489 A 3/5页 9 图3 说 明 书 附 图CN 102833489 A 4/5页 10 图4 说 明 书 附 图CN 102833489 A 10 5/5页 11 图5 说 明 书 附 图CN 102833489 A 11 。