《一种用于视频监控或机器视觉领域的图像多谱段分析方法.pdf》由会员分享，可在线阅读，更多相关《一种用于视频监控或机器视觉领域的图像多谱段分析方法.pdf（12页珍藏版）》请在专利查询网上搜索。
1、10申请公布号CN104217434A43申请公布日20141217CN104217434A21申请号201410449759822申请日20140904G06T7/00200601H04N7/1820060171申请人南京杰迈视讯科技有限公司地址210014江苏省南京市白下高新技术产业园区永智路6号中国云计算创新基地B幢6层72发明人王兴国郑伟国穆科明74专利代理机构南京知识律师事务所32207代理人汪旭东54发明名称一种用于视频监控或机器视觉领域的图像多谱段分析方法57摘要本发明公开了一种用于视频监控或机器视觉领域的图像多谱段分析方法，属于图像处理、视频监控、智能交通领域，特别一种应用于视。
2、频监控与机器视觉领域的视频图像直方图谱分段方法及局部谱段扩展拉伸到整个谱空间的方法。该方法将完整的视频图像的灰度直方图谱按需要进行分段，然后将感兴趣的谱段拉伸扩展到整个谱空间。本发明只将感兴趣的灰度谱段拉伸到整个谱空间，或逐个对每个谱段拉伸到整个谱空间，扩展了相应谱段对应图像的动态范围，提高了图像细节的可见度，很好地解决宽动态范围条件下视觉信息的感知和识别问题。同时，对不感兴趣的谱段可以去除，节省数据带宽。51INTCL权利要求书1页说明书5页附图5页19中华人民共和国国家知识产权局12发明专利申请权利要求书1页说明书5页附图5页10申请公布号CN104217434ACN104217434A1。
3、/1页21一种用于视频监控或机器视觉领域的图像多谱段分析方法，其特征在于，建立灰度谱，即建立YUV格式的视频图像中Y分量的直方图；把完整的图像灰度谱按照不同的规则分割；取感兴趣的谱段并将其扩展到整个谱空间；基于此扩展拉伸了图像感兴趣部分的对比度，使得细节呈现的更清楚，便于分析与处理，具体包括如下步骤1建立视频图像灰度分量的直方图谱；设视频图像灰度分量，即Y分量的灰度等级范围，即谱空间，是0，2N1，式中N为表示图像灰度所用的比特数，第K灰度级的像素个数的函数HRKNK其中K0，1，M1是第K级灰度，NK表示图像中灰度级为RK的像素个数；2建立控制逻辑，确定谱段分割方法、每个谱段的变换函数的形式。
4、及参数；3将步骤1所得到的视频图像灰度分量的直方图谱分割成段；4建立谱段变换函数，将选择的灰度谱段采用谱段变换函数进行灰度谱扩展；5将变换后的灰度连同原来的颜色分量重新构成YUV格式，输出该谱段拉伸扩谱后的图像。2根据权利要求1所述的图像多谱段分析方法，其特征在于，步骤2控制逻辑根据视频图像特性和应用需求确定直方图谱分段方法、每个谱段变换函数的形式及参数，最简单的变换函数是分区线性函数。3根据权利要求1所述的图像多谱段分析方法，其特征在于，步骤3将视频图像灰度分量的直方图谱分割成段的方法，包括，直方图谷值划分法确定直方图谱的所有谷值，即灰度值点包括N1,N2,N3,N4,N5,N6，将直方图谱。
5、划分为区间包括N1,N2,N3,N4,N5,N6；直方图窗口扫描法根据分割需要，动态确定一个灰度级范围窗口C1,C2，窗口大小可以动态改变，窗口动态在灰度轴上移动来选择需要拉伸的灰度谱段。权利要求书CN104217434A1/5页3一种用于视频监控或机器视觉领域的图像多谱段分析方法技术领域0001本发明涉及图像处理、视频监控、智能交通领域，特别涉及一种应用于视频监控与机器视觉领域的视频图像直方图谱分段方法及局部谱段扩展拉伸到整个谱空间的方法。背景技术0002随着技术的发展和产业化的成熟，视频图像和机器视觉在从科学研究、工业生产、军工、安防到通信、娱乐等各个领域得到广泛的应用。0003真实场景光。
6、电成像信号的强度在有限的范围内分布。成像信号的强度在视频图像上表现为亮暗等级。机器视觉中图像动态范围是指视频图像中从“最暗”到“最亮“之间的信号强度范围，而人类视觉系统的动态范围体现为图像对比度的感知。真实世界中的光电信号的动态范围远超过了人类视觉感知的范围，同时也远超过一般光电传感器、图像显示设备的表示范围。人类生理视觉的自适应能力可以动态感知差异亮度级别很大的不同区域不同时空的场景。比如人眼睛无法对着太阳同时看书，是因为太阳光太亮，相对书本文字又太暗，但是只对着书看就能看清。另外，从高亮的阳光下，突然走到房间里，就会感觉到房间很黑，什么都看不到，但是到房间里一会儿就能适应房间内的光线，看清。
7、室内场景。0004大多数视觉信号采集和表现设备如摄像机和显示器都只能表示或者重现固定且有限的动态范围，而图像数据，特别是实时视频图像数据量非常巨大，一般记录与传输设备无法表示非常宽的动态范围图像，常采用动态范围压缩的方法在有限的比特数上表示实际场景中光电信息。这些技术局限导致机器视觉的应用无法满足人类对外界的视觉感知的需求，难以代替人眼睛实时监察实际场景，对人工智能、模式识别算法带来挑战。0005为了有效提取视频图像中的信息，提高对视频场景中的目标辨识度，需要对摄取的视频图像进行处理。尽管目前已提出了很多方法，如直方图均衡化、对比度拉伸等，但效果不佳，主要原因是现在的做法通常是将整个灰度谱作为。
8、整体进行处理，由图1可知，把灰度谱范围由N1,N6整体拉伸扩展到0,255,扩展范围有限，并不能真正改善视频图像的对比度效果，例如图中区域A的部分处于灰度暗区，拉伸变换后仍处于灰度暗区，对应场景仍然是细节不清、对比度小、目标辨识度低。发明内容0006本发明的目的是在视频监控与机器视觉领域的视频摄像系统中提供一种对视频图像灰度谱进行分割划分及分段扩展拉伸方法，将关注的谱段扩展到整个可用动态范围，解决视频采集设备或显示器等只能采集或重现固定且动态范围有限的图像，使获取的视频图像细节不清、对比度小、目标辨识度低，导致机器视觉的应用无法满足人类对外界的视觉感知的需求，难以代替人眼睛实时监察的问题，使所。
9、关注的场景事物所呈现的图像细节更清楚，以便对感兴趣的光电信号动态范围内的图像信息进行特殊的分析、处理、还原、传输等。0007具体地说，本发明是采用以下的技术方案来实现的一种用于视频监控或机器视说明书CN104217434A2/5页4觉领域的图像多谱段分析方法，其特征在于，建立灰度谱，即建立YUV格式的视频图像中Y分量的直方图；把完整的图像灰度谱按照不同的规则分割；取感兴趣的谱段并将其扩展到整个谱空间；基于此扩展拉伸了图像感兴趣部分的对比度，使得细节呈现的更清楚，便于分析与处理，具体包括如下步骤00081建立视频图像灰度分量的直方图谱，0009设视频图像灰度分量的灰度等级范围，即谱空间，是0，2。
10、N1，式中N为表示图像灰度所用的比特数，第K灰度级的像素个数的函数0010HRKNK0011其中K0，1，M1是第K级灰度，NK表示图像中灰度级为RK的像素个数；00122建立控制逻辑，确定谱段分割方法及每个谱段变换函数的形式及参数；00133将步骤1所得到的视频图像灰度分量的直方图谱分割成段；00144建立谱段变换函数，将选择的灰度谱段采用谱段变换函数进行灰度谱扩展；00155将变换后的灰度连同原来的颜色分量重新构成YUV格式，输出该谱段拉伸扩谱后的图像。0016上述技术方案的进一步特征在于，步骤2控制逻辑根据视频图像特性和应用需求确定直方图谱分段方法，及谱段变换函数的形式及参数，最简单的变。
11、换函数是分区线性函数。0017上述技术方案的进一步特征在于，步骤3将视频图像灰度分量的直方图谱分割成段的方法，包括，0018直方图谷值划分法0019确定直方图谱的所有谷值，即灰度值点包括N1,N2,N3,N4,N5,N6，将直方图谱划分为区间包括N1,N2,N3,N4,N5,N6；0020直方图窗口扫描法0021根据分割需要，动态确定一个灰度级范围窗口C1,C2，窗口大小可以动态改变，窗口动态在灰度轴上移动来选择需要拉伸的灰度谱段。0022本发明的有益效果如下对比度对视觉效果的影响非常关键，高对比度对于图像的清晰度、细节表现、灰度层次表现都有很大益处。本发明所提出的方法只将感兴趣的灰度谱段拉伸。
12、到整个谱段，或逐个对每个谱段拉伸到整个谱段，使每个谱段扩展的范围更大，细节可见性更高，很好地解决宽动态范围条件下视觉信息的感知和识别问题。同时，对不感兴趣的谱段可以去除，节省数据带宽。另一方面，所提方法运算复杂度很低、数据吞吐也很低，能够满足高时空分辨率的实时视频处理的要求。附图说明0023图1是图像灰度直方图分段的情况，为典型的多目标复杂场景的视频图像灰度分布直方图。以常用的8比特灰度图像表示为例，从灰度轴可以看到只有N1,N2,N3,N4,N5,N6几个区间被利用表示图像的亮度，而区间0,N1,N2,N3,N4,N5,N6,255被浪费，图像信息压缩到几段狭窄的灰度谱段中，导致的视觉效果是。
13、场景中不同物体/目标的细节非常不清晰，对比度/反差很小，目标辨识度低，严重影响视频监控和机器视觉的应用效果。说明书CN104217434A3/5页50024图2是视频图像谱段变换函数示例；0025图3是将图1中谱段B扩展拉伸到整个谱空间的示意图；0026图4是视频图像多谱段分析方法；0027图5是图像灰度直方图连续的情况；0028图6是典型摄像机交通成像图；0029图7是以牌照为目标进行多谱段分析后的图像；0030图8是综合多目标进行多谱段分析后的图像；0031图9是以司机为目标进行多谱段分析后的图像。具体实施方式0032根据人眼视觉特性的特点，针对视频采集设备或显示器等只能采集或重现固定动态。
14、范围的图像，导致机器视觉的应用无法满足人类对外界的视觉感知的需求，难以代替人眼睛实时监察的问题，本发明提供了一种视频图像直方图灰度谱进行分割划分及分段扩展方法，将完整的视频图像的灰度直方图谱按照不同应用进行分割成谱段，然后取感兴趣的谱段拉伸扩展到整个谱空间，提高感兴趣谱段图像的对比度，再进行相关分析与处理。0033例如，图1中的谱段B被扩展拉伸到整个谱空间，如图3所示。针对整个场景中不同灰度谱段的目标区域进行分析，扩谱后每个谱段都充满整个8比特谱空间。这样形成的效果是对关注区域进行动态对比度拉升。这样对关注的场景目标可以观察识别更多的细节。就如信号处理中常用的分段频谱分析方法，可以很低的采样率。
15、更精确的分析，通过移动分析窗口，可使分析覆盖整个有用的谱段。不关注的谱段不需要分析，节省带宽和分析工作。0034图4是具体实施方案；0035步骤401摄取视频图像0036视频图像格式为YUV，只对Y分量即灰度分量，也称为亮度分量，进行直方图谱划分分割和变换。0037步骤402建立视频图像灰度分量的直方图0038图像灰度等级范围，即谱空间，是0，2N1，N表示图像灰度所用的比特数，常用的比特数是8；第K灰度级的像素个数的函数0039HRKNK0040其中K0，1，M1是第K级灰度，NK表示图像中灰度级为RK的像素个数。0041图像的直方图谱有不同的分布，两种特殊的情况如图1和图5所示，图1显示的。
16、直方图谱是分段的，而图5显示的直方图谱是连续的，实际的图像谱是它们的各自组合。0042步骤403分割402步骤所得到的视频图像灰度直方图谱成段0043根据直方图特性或应用的需求，采用不用的分割方法，这里示例两种方法0044方法一，直方图谷值划分法0045确定直方图谱的所有谷值，例如图1中的N1,N2,N3,N4,N5,N6灰度值点，将直方图谱划分为区间N1,N2,N3,N4,N5,N6；0046方法二，直方图窗口扫描法0047根据分割需要，动态确定一个灰度级范围窗口C1,C2，窗口大小可以动态改变；说明书CN104217434A4/5页6窗口动态在灰度轴上移动来选择需要拉伸的灰度谱段；0048。
17、把直方图按照具体精度要求划分成数个谱段，由低到高逐个分析。0049步骤404建立谱段变换函数，将选择的灰度谱段采用谱段变换函数进行谱扩展0050根据应用的不同，变换函数可以有不同的形式。最简单的变换函数是分区线性函数，如图2所示。图2中，GX,Y表示原图像像素位置X，Y的图像灰度值，N1,N4为从原灰度谱中选取的谱段，TX，Y是变换后的图像灰度值，M1,M4为变换后的灰度谱段，如果M10，M42N1，则将原谱段变换到整个可用谱段。将变换后的灰度谱分为三个区暗区、正常区和亮区。不同区域，变换函数有不同的特性，例如线性变换的斜率不同暗区、正常区和亮区分别对应的斜率为K3，K2和K1。变换函数的数学。
18、模型例如下00510052步骤405中的控制逻辑根据视频图像特性和应用需求确定谱段分割方法，每个谱段的变换函数的形式及参数。0053步骤406将变换后的灰度连同原来的颜色分量重新构成YUV格式，输出谱段拉伸扩谱后的视频图像用于其他分析处理。0054应用方法例0055例1，后端显示分析应用0056按某一规则，选择一定动态范围谱段的场景，进行谱扩展；然后通过移动动态范围窗口的方法进行逐个谱段扩展分析；使得每一个谱段图像信息对比度拉升，重现更多的细节。0057图6是典型的交通成像图，由于实际光照非常强烈，背光严重，多目标场景亮暗对比反差巨大，导致一般的传感器和显示设备无法重现智能交通中关注的每个目标。
19、的清晰图像。图中的牌照、司机、车辆与路面整体都没有得到很好的表现。0058图7是以牌照为目标进行多谱段分析后的图像，显然牌照可以得到清晰重现，其他非关注场景受到抑制。0059图8是综合多目标进行多谱段分析后的图像，车辆与路面整体细节得到清晰重现。图9是以司机为目标进行多谱段分析后的图像，相对一般摄像机成像司机的图像得到很明显提升。0060例2，视频采集中传感器端应用0061传统传感器图像采集把整个动态范围压缩到低比特数窄动态范围图像数据中，这样导致由暗到亮的场景在图像亮度上的分布都很窄，而且还有无用谱段，最终体现为图像对比度很弱，多目标局部细节无法保证。在视频摄像时采用本发明提供的视频图像多谱。
20、段分析方法，摄像时，选择性摄取有限动态范围内的场景，比如只摄取暗区，或者亮区，在记录成数据信号时，将其扩展到整个谱段。这样效果体现的对比度非常强烈，解决常见的不同区域细节丢失或者不清楚问题。0062虽然本发明已以较佳实施例公开如上，但实施例并不是用来限定本发明的。在不说明书CN104217434A5/5页7脱离本发明之精神和范围内，所做的任何等效变化或润饰，同样属于本发明之保护范围。因此本发明的保护范围应当以本申请的权利要求所界定的内容为标准。说明书CN104217434A1/5页8图1图2说明书附图CN104217434A2/5页9图3图4说明书附图CN104217434A3/5页10图5图6说明书附图CN104217434A104/5页11图7图8说明书附图CN104217434A115/5页12图9说明书附图CN104217434A12。