图像处理装置及其影像噪声抑制方法.pdf

上传人:1*** 文档编号:663350 上传时间:2018-03-02 格式:PDF 页数:22 大小:3.51MB
返回 下载 相关 举报
摘要
申请专利号:

CN201310230932.0

申请日:

2013.06.09

公开号:

CN104125374A

公开日:

2014.10.29

当前法律状态:

授权

有效性:

有权

法律详情:

授权|||实质审查的生效IPC(主分类):H04N 5/213申请日:20130609|||公开

IPC分类号:

H04N5/213; G06T5/00

主分类号:

H04N5/213

申请人:

财团法人工业技术研究院

发明人:

蔡洛纬; 李国徵; 洪邦展

地址:

中国台湾新竹县

优先权:

2013.04.25 TW 102114831

专利代理机构:

中科专利商标代理有限责任公司 11021

代理人:

宋焰琴

PDF下载: PDF下载
内容摘要

本发明公开了一种图像处理装置及其影像噪声抑制方法。影像噪声抑制方法包括以下步骤:分别依据预设高通遮罩、第一预设遮罩及第二默认遮罩对第一影像的多个像素值进行滤波,以分别获得高通影像、第一低通影像及第二低通影像。将第一低通影像以及第二低通影像进行差值运算,以获得低通差值影像。依据高通影像以及低通差值影像进行像素权重运算,以获得对应至第一影像的像素权重遮罩。依据该第一低通影像及该第二低通影像的其中之一以及该像素权重遮罩对该第一影像进行运算,以获得噪声抑制影像。

权利要求书

1.  一种影像噪声抑制方法,包括:
依据一预设高通遮罩,对一第一影像的多个像素进行高通滤波,以获得一高通影像;
分别依据一第一预设遮罩以及一第二预设遮罩对该第一影像的所述像素进行低通滤波,以获得一第一低通影像及一第二低通影像,其中该第一预设遮罩不同于该第二预设遮罩;
将该第一低通影像及该第二低通影像进行一差值运算以获得一低通差值影像;
依据该高通影像以及该低通差值影像对所述像素进行一像素权重运算,以获得对应至该第一影像的一像素权重遮罩;以及
依据该第一低通影像及该第二低通影像的其中之一,以及该像素权重遮罩对该第一影像进行运算,以获得一噪声抑制影像。

2.
  如权利要求1所述的影像噪声抑制方法,依据该预设高通遮罩对第一影像的所述像素进行高通滤波的步骤包括:
从该第一影像获得目标像素及其多个邻接像素;以及
依据该默认高通遮罩对该目标像素及其所述邻接像素进行高通滤波,以获得该高通影像中对应该目标像素的一高通像素值。

3.
  如权利要求1所述的影像噪声抑制方法,分别依据该第一预设遮罩以及该第二预设遮罩对该第一影像的所述像素值进行低通滤波的步骤包括:
依据一第一默认遮罩对该第一影像的目标像素及其多个邻接像素值进行低通滤波,以获得该第一低通影像中对应该目标像素的一第一低通像素值;以及
依据一第二默认遮罩对该第一影像的目标像素及所述邻接像素进行低通滤波,以获得该第二低通影像中对应该目标像素的第二低通像素值。

4.
  如权利要求3所述的影像噪声抑制方法,分别依据该第一预设遮罩以及该第二预设遮罩对该第一影像的所述像素值进行低通滤波的步骤 由分别具备该第一预设遮罩以及该第二预设遮罩的两个低通滤波器对该第一影像来执行。

5.
  如权利要求3所述的影像噪声抑制方法,分别依据该第一预设遮罩以及该第二预设遮罩对该第一影像的所述像素值进行低通滤波的步骤由低通滤波器以不同的预设遮罩对该第一影像来分别执行。

6.
  如权利要求1所述的影像噪声抑制方法,将该第一低通影像以及该第二低通影像进行差值运算的步骤包括:
将对应该目标像素的第一低通像素值与对应该目标像素的第二低通像素值相减,以获得该低通差值影像中对应该目标像素的一低通差值像素值。

7.
  如权利要求1所述的影像噪声抑制方法,依据该高通影像以及该低通差值影像进行像素权重运算,以获得对应至该第一影像的该像素权重遮罩的步骤包括:
将对应该目标像素的一高通像素值乘以对应该目标像素的一低通差值像素值,并除以标准化常数,以获得该像素权重遮罩中对应该目标像素的一像素权重值。

8.
  如权利要求1所述的影像噪声抑制方法,依据该第一低通影像及该第二低通影像的其中之一以及该像素权重遮罩对该第一影像进行运算的步骤包括:
将该目标像素的像素值乘以对应该目标像素的一像素权重值,并与一默认值减去该像素权重值后再乘以对应该目标像素的一第一低通滤波像素值及一第二低通滤波像素值的其中之一的乘积相加,以获得该噪声抑制影像中对应该目标像素的一抑制像素值。

9.
  如权利要求8所述的影像噪声抑制方法,更包括:
判断该第一影像中的所有像素值是否已获得与所述像素值对应的该抑制像素值;以及
若该第一影像中尚有像素未经处理,将未经处理的该像素作为该目标像素以计算获得对应该目标像素的该抑制像素值。

10.
  如权利要求1所述的影像噪声抑制方法,其中该噪声抑制影像适用于影像压缩。

11.
  一种图像处理装置,包括:
影像获得单元,用以获得一第一影像;以及
处理器,用以执行下列步骤:
依据一默认高通遮罩对第一影像的多个像素进行高通滤波,以获得高通影像;
分别依据一第一预设遮罩以及一第二预设遮罩对该第一影像的所述像素进行低通滤波,以获得一第一低通影像及一第二低通影像,其中该第一预设遮罩不同于该第二预设遮罩;
将该第一低通影像及该第二低通影像进行差值运算以获得一低通差值影像;
依据该高通影像以及该低通差值影像对所述像素进行像素权重运算,以获得对应至该第一影像的一像素权重遮罩;以及
依据该第一低通影像及该第二低通影像的其中之一以及该像素权重遮罩对该第一影像进行运算,以获得一噪声抑制影像。

12.
  如权利要求11所述的图像处理装置,其中该处理器从该第一影像中获得目标像素及其多个邻接像素,依据该预设高通遮罩对该目标像素及其所述邻接像素进行高通滤波,以获得该高通影像中对应该目标像素的一高通像素值。

13.
  如权利要求11所述的图像处理装置,其中该处理器依据一第一预设遮罩对该第一影像的目标像素及其多个邻接像素值进行低通滤波,以获得该第一低通影像中对应该目标像素的一第一低通像素值,且依据一第二预设遮罩对该第一影像的目标像素及所述邻接像素进行低通滤波,以获得该第二低通影像中对应该目标像素的一第二低通像素值。

14.
  如权利要求11所述的图像处理装置,其中该处理器将对应该目标像素的一第一低通像素值与对应该目标像素的一第二低通像素值相减,以获得该低通差值影像中对应该目标像素的一低通差值像素值。

15.
  如权利要求11所述的图像处理装置,其中该处理器将对应该目标像素的一高通像素值乘以对应该目标像素的一低通差值像素值,并除以一标准化常数,以获得该像素权重遮罩中对应该目标像素的一像素权重值。

16.
  如权利要求11所述的图像处理装置,其中该处理器将该目标像素的像素值乘以对应该目标像素的一像素权重值,并与默认值减去该像素权重值后再乘以对应该目标像素的一第一低通滤波像素值及一第二低通滤波像素值的其中之一的乘积相加,以获得该噪声抑制影像中对应该目标像素的一抑制像素值。

17.
  一种图像处理装置,包括:
高通滤波器,接收第一影像,并依据一默认高通遮罩对该第一影像的多个像素值进行高通滤波以产生一高通影像;
第一低通滤波器,依据第一预设遮罩对该第一影像的所述像素值进行低通滤波,产生一第一低通影像;
第二低通滤波器,依据第二预设遮罩对该第一影像的所述像素值进行低通滤波,产生一第二低通影像,其中,该第一预设遮罩不同于该第二预设遮罩;
差值运算模块,对该第一低通影像以及该第二低通影像进行差值运算以产生一低通差值影像;
像素权重运算模块,依据该高通影像以及该低通差值影像进行像素权重运算,以产生对应该第一影像的一像素权重遮罩;以及
影像融合模块,依据该第一低通影像及该第二低通影像的其中之一以及该像素权重遮罩对该第一影像进行运算,以产生一噪声抑制影像。

18.
  如权利要求17所述的图像处理装置,其中该高通滤波器从该第一影像获得一目标像素及其多个邻接像素,并依据该预设高通遮罩对该目标像素及其所述邻接像素进行高通滤波,以获得该高通影像中对应该目标像素的一高通像素值。

19.
  如权利要求17所述的图像处理装置,其中该第一低通滤波器依据一第一预设遮罩对该第一影像的目标像素及其多个邻接像素值进行低通滤波,以获得该第一低通影像中对应该目标像素的一第一低通像素值,
该第二低通滤波器依据一第二预设遮罩对该第一影像的目标像素及其所述邻接像素进行低通滤波,以获得该第二低通影像中对应该目标像素的一第二低通像素值。

20.
  如权利要求17所述的图像处理装置,其中该差值运算模块将对应该目标像素的一第一低通像素值与对应该目标像素的一第二低通像素值相减,以获得该低通差值影像中对应该目标像素的一低通差值像素值。

21.
  如权利要求17所述的图像处理装置,其中该像素权重运算模块将对应该目标像素的一高通像素值乘以对应该目标像素的一低通差值像素值,并除以标准化常数,以获得该像素权重遮罩中对应该目标像素的一像素权重值。

22.
  如权利要求17所述的图像处理装置,其中该影像融合模块将该目标像素的像素值乘以对应该目标像素的一像素权重值,并与默认值减去该像素权重值后再乘以对应该目标像素的一第一低通滤波像素值及一第二低通滤波像素值的其中之一的乘积相加,以获得该噪声抑制影像中对应该目标像素的一抑制像素值。

23.
  一种图像处理装置,包括:
至少一高通滤波器,接收第一影像,并依据一默认高通遮罩对该第一影像的多个像素值进行高通滤波以产生一高通影像;
至少两个低通滤波器,依据不同的预设遮罩以对该第一影像的所述像素值进行低通滤波,以分别产生至少两个低通影像;
差值运算模块,对该至少两个低通影像进行差值运算以产生一低通差值影像;
像素权重运算模块,依据该高通影像以及该低通差值影像进行像素权重运算,以产生对应该第一影像的一像素权重遮罩;以及
影像融合模块,依据该第一低通影像及该第二低通影像的其中之一以及该像素权重遮罩对该第一影像进行运算,以产生一噪声抑制影像。

说明书

图像处理装置及其影像噪声抑制方法
技术领域
本发明涉及一种图像处理技术,且特别涉及一种图像处理装置及其影像噪声抑制方法。
背景技术
多媒体技术的日益精进使得高画质影像的需求逐渐增加。影像质量的好坏与在撷取影像、信号转换以及传输过程中所伴随产生的噪声量有相当大的关联。为了有效地去除噪声以提高影像质量,在图像处理领域中关于噪声消除的研究也越来越受到重视。噪声形成的原因例如是环境光源的变化而对影像撷取单元造成随机噪声的产生、电路本身产生的噪声,或是在图像处理过程(如白平衡、影像内插)中所产生的噪声。因此,在夜间撷取的影像通常伴随着强烈噪声。
滤波处理通常是采用滤波器来调整影像的像素值,以消除噪声。然而,如果过度调整以消除噪声,则影像的细节也会被减弱,例如导致影像不清晰。因此,在影像的细节清晰度与噪声消除之间希望能取得平衡。
目前的影像噪声抑制技术中,可动态调整滤波器的权重值来进行影像的过滤处理可获得良好的噪声抑制效果,但却有运算复杂度较高、需要额外参照影像以致耗费内存等问题,导致这些噪声抑制技术不易整合至视频编码器或数字信号处理器中。
发明内容
本发明提供一种图像处理装置及其影像噪声抑制方法,其利用预设的高通滤波器及两组低通滤波来产生可滤除噪声并且同时保留影像细节的遮罩,并利用此遮罩来调整输入影像,以在滤除噪声的同时可以大幅度地保留影像细节。据此,图像处理装置便可降低运算复杂度,并且不需要额外参照其他影像以致耗费内存。
本发明提供一种影像噪声抑制方法,包括以下步骤:依据默认高通遮罩对第一影像的多个像素值进行高通滤波,以获得高通影像;分别依据第一预设遮罩以及第二默认遮罩对第一影像的多个像素值进行低通滤波,以获得第一低通影像及第二低通影像,其中第一默认遮罩不同于第二预设遮罩;将第一低通影像以及第二低通影像进行差值运算以获得低通差值影像;依据高通影像以及低通差值影像进行像素权重运算,以获得对应至第一影像的像素权重遮罩。依据第一低通影像及第二低通影像的其中之一以及像素权重遮罩对所述第一影像进行运算,以获得噪声抑制影像。
以另一观点而言,本发明提供一种图像处理装置,其包括影像获得单元以及处理器。影像获得单元用以获得第一影像。处理器用以执行下列步骤:依据默认高通遮罩对第一影像的多个像素值进行高通滤波,以产生高通影像;分别依据第一预设遮罩以及第二默认遮罩对第一影像的多个像素值进行低通滤波,以分别获得第一低通影像及第二低通影像,其中第一默认遮罩不同于第二预设遮罩;将第一低通影像以及第二低通影像进行差值运算以获得低通差值影像;依据高通影像以及低通差值影像进行像素权重运算,以产生对应至第一影像的像素权重遮罩;依据第一低通影像及第二低通影像的其中之一以及像素权重遮罩对所述第一影像进行运算,以获得噪声抑制影像。
以再一观点而言,本发明提供一种图像处理装置,其包括高通滤波器、第一低通滤波器、第二低通滤波器、差值运算模块、像素权重运算模块以及影像融合模块。高通滤波器依据预设高通遮罩对第一影像的多个像素值进行高通滤波,产生高通影像。第一低通滤波器依据第一默认遮罩对第一影像的多个像素值进行低通滤波,产生第一低通影像。第二低通滤波器依据第二默认遮罩对第一影像的多个像素值进行低通滤波,产生第二低通影像,其中,第一预设滤波器不同于第二预设滤波器。差值运算模块对第一低通影像以及第二低通影像进行差值运算以产生低通差值影像。像素权重运算模块依据高通影像以及低通差值影像进行像素权重运算,以产生对应该第一影像的像素权重遮罩。影像融合模块依据第一低通影像及第二低通影像的其中之一以及所述像素权重遮罩对所述第一影像进行运算,以产生噪声抑制影像。
基于上述,本发明实施例利用高通滤波产生的高通影像以及通过两个低通滤波所产生的两个低通影像之间的差值影像,来产生可滤除噪声并且同时保留影像细节的遮罩,例如,此遮罩可保留输入影像中的色块边缘及色块交错部分的原始影像信息,并利用此遮罩对输入影像进行运算以及调整,以在滤除噪声的同时可以大幅度地保留影像细节而使画面清晰。此外,由于处理过程中只需要一个预设的高通滤波器及两个低通滤波器,并通过固定的算法来获得所需的像素遮罩,因此可以降低运算复杂度,并且不需要额外参照其他影像以致耗费内存。
附图说明
图1是根据本发明一实施例所示的图像处理装置的方块图;
图2是根据本发明一实施例所示的影像噪声抑制方法的流程图;
图3至图8则为本发明一实施例作为举例的各个影像;
图9是根据本发明一实施例所示的影像噪声抑制方法的细节流程图;
图10是本实施例所采用的两种预设高通遮罩;
图11是本实施例所采用的第一预设遮罩及第二预设遮罩;
图12为输入影像的举例;
图13为采用结合高频滤波以及低频滤波,但并未使用两个低频滤波的结果进行差值处理来滤除噪声的影像;
图14为符合本发明实施例所产生已滤除噪声的影像。
【符号说明】
100:图像处理装置
110:影像获得单元
120:噪声抑制单元
130:高通滤波器
140:第一低通滤波器
150:第二低通滤波器
160:差值运算模块
170:像素权重运算模块
180:影像融合模块
IM1:第一影像
HPM:高通影像
LPM1、LPM2:低通影像
LDM:低通差值影像
MK:像素权重遮罩
NM:噪声抑制影像
S210~S360:步骤
1010、1020:预设高通遮罩
1110、1120:预设遮罩
具体实施方式
在图像处理技术中,对影像中的噪声抑制大多采用滤波器对各像素进行卷积(Convolution)运算,因此滤波器内所使用遮罩的权重值便是影响画质的关键因素。滤波器可分为定值滤波器以及非定值滤波器。定值滤波器是对各像素采用相同的低通滤波遮罩进行处理,其作法简单但易使影像产生模糊现象,如均值滤波器及高斯滤波器。非定值滤波器则依各像素的区域特征来动态调整滤波器内遮罩的权重值,若像素为边界(高频)则权重值较高,像素为平滑(低频)则权重值较低,以达到抑制噪声且画面清晰效果,公知做法如双向滤波器及导向滤波器。然而,高斯滤波器以及双向滤波器在计算遮罩的权重值时皆需包含大量的指数运算,导致具备较高的运算负载。导向滤波器则需参考另一张影像来作为计算遮罩权重值的参考,导致额外耗费内存以增加实现成本。
为改善噪声滤除的运算效能,并在未增加内存需求下以获得良好的噪声滤除效果,本发明的图像处理装置利用一组默认的定值高通滤波器来获得具备输入影像的边缘特征,再结合两组定值低通滤波器以取得输入影像的纹理特征并且抑制噪声。据此,本发明的图像处理装置无需额外参照影像且使硬件能够易于平行化处理。为使本发明的目的、技术方案和优点更加清楚明白,以下结合具体实施例,并参照附图,对本发明作进一步的详细说明。
图1是根据本发明一实施例所示的图像处理装置100的方块图。本发明的图像处理装置100应用于抑制输入影像中的噪声,尤其是针对夜间输入影像的强烈噪声,因此可适用于照相机、摄影机、行动装置等电子设备,或是符合本发明实施例的图像处理程序。
图像处理装置100主要包括影像获得单元110以及噪声控制单元120。影像获得单元110用以获得第一影像IM1(或称为输入影像)。影像获得单元110可以是照相机、摄影机、影像撷取芯片甚至是用来储存影像的硬盘等。于部分实施例中,图像处理装置100也可以不需要影像获得单元110,而是直接从外部设备中直接获得第一影像IM1。
噪声控制单元120用以接收第一影像IM1,并抑制第一影像的噪声而产生噪声抑制影像NM。噪声控制单元120可以是用来执行符合本发明实施例的图像处理程序的处理器,也可以将本发明所述的功能分别以电路模块的方式来实现硬件。本发明实施例所称的「模块」可以是利用处理器执行的的软件模块,也可以是利用电路来实现的硬件或韧体模块。在产生噪声抑制影像NM之后,图像处理装置100可以将噪声抑制影像NM储存至计算机存取装置(例如,输出至网络、硬盘等)、输出至影像视频编码器或显示于屏幕上,本发明并不限制噪声抑制影像NM的应用。
噪声抑制单元120包括高通滤波器130、第一低通滤波器140、第二低通滤波器150、差值运算模块160、像素权重运算模块170以及影像融合模块180。噪声抑制单元120中各个元件的功能将与图2的噪声抑制方法相互配合说明。图2是根据本发明一实施例所示的影像噪声抑制方法的流程图,图3至图8则为本发明一实施例作为举例的各个影像。请同时参照图1及图2,并配合图3至图8的影像作为示例。于步骤S210中,高通滤波器130在接收第一影像IM1后,例如图3的第一影像IM1,便依据预设高通遮罩对第一影像IM1的多个像素值进行高通滤波,以获得高通影像HPM,例如图4的高通影像HPM。高通影像HPM会凸显出第 一影像IM1的边缘特征。本发明的高通滤波器130属于定值高通滤波器,换句话说,高通滤波器130所采用的高通遮罩为定值,而不是动态调整权重值的高通遮罩。符合本发明的部分实施例中,高通滤波也可由多个高通滤波器来共同实现,因此并不受限于以单个高通滤波器来实现上述高通滤波程序。
于步骤S220中,第一低通滤波器140以及第二低通滤波器150分别依据第一预设遮罩以及第二默认遮罩对第一影像IM1的多个像素值进行低通滤波,以分别获得第一低通影像LPM1及第二低通影像LPM2。图5揭示符合本发明实施例及图3的第一低通影像LPM1及第二低通影像LPM2。本发明的两个低通滤波器140、150也是属于低运算量的定值低通滤波器,低通滤波器140、150所采用的低通遮罩为定值,而不是动态调整权重值的低通遮罩。并且,第一低通滤波器140使用的第一预设遮罩将不同于第二低通滤波器150使用的第二预设遮罩。
于此说明的是,本实施例是以两个不同的低通滤波器140、150作为实现方式,借助上述的硬件架构可以让这两个低通滤波器140、150以及高通滤波器130同时执行步骤S210、S220的动作。也就是,步骤S220由分别具备第一预设遮罩以及第二预设遮罩的两个低通滤波器140、150对第一影像IM1来执行。若此图像处理装置100使用于静态图像处理时,也就是对于图像处理的速度要求不高时,低通滤波器140、150也可以整合为相同的硬件或是同一个处理程序,并对第一影像IM1利用两个不同的定值低通遮罩来执行两次低通滤波,以产生两个低通影像LPM1、LPM2。也就是,步骤S220由一个低通滤波器以不同的预设遮罩对该第一影像IM1来分别执行。
请继续参照图1、图2,于步骤S230中,差值运算模块160接收到第一以及第二低通影像LPM1、LPM2后,将第一低通影像LPM1以及第二低通影像LPM2进行差值运算以获得低通差值影像LDM(如图6所示)。低通差值影像LDM可以保留第一影像IM1中的边缘特征并且抑制第一影像IM1中的噪声。于其他 实施例中,应用本发明者也可利用两个以上的低通滤波器来获得两个以上低通影像,并利用这些低通影像进行差值运算或是相减而获得低通差值影像LDM,而不受限于仅利用两个低通滤波器140、150来实现低通差值影像LDM的获得。
于步骤S240中,像素权重运算模块170便依据高通影像HPM(图4)以及低通差值影像LDM(图6)进行像素权重运算,以计算第一影像IM1中每个像素的权重值,并将这些权重值设置于对应位置的遮罩中,以获得对应至第一影像IM1的像素权重遮罩MK。像素权重遮罩MK可以如图7所示。
于步骤S250中,影像融合模块180便可依据第一低通影像LPM1及第二低通影像LPM2的其中之一以及像素权重遮罩MK对第一影像IM1进行运算,以获得噪声抑制影像NM。噪声抑制影像NM可以如图8所示。
图2是以整个影像作为举例来进行本发明所述的噪声抑制方法,而下述将说明如何影像中的每个像素来进行本发明所述的噪声抑制方法,并列举本发明所采用的各种参数。图9是根据本发明一实施例所示的影像噪声抑制方法的细节流程图。
请同时参照图1及图9,影像获得单元110于步骤S310获得第一影像IM1。之后,于步骤S315,影像获得单元110从第一影像IM1获得目标像素以及相邻于目标像素的多个邻接像素。于步骤S320中,高通滤波器130从第一影像IM1获得目标像素以及相邻于目标像素的多个邻接像素之后,便利用图10中所绘示的预设高通遮罩来对这些目标像素以及邻接像素进行高通滤波,以获得高通影像HPM中对应目标像素的高通像素值Hp。图10发明本实施例所采用的两种预设高通遮罩1010、1020。预设高通遮罩1010、1020中的权重值皆为实数,预设高通遮罩1010适用于Y轴方向(也就是,垂直方向)的高通滤波,而预设高通遮罩1020则适用于X轴方向(也就是,水平方向)的高通滤波,应用本实施例者可依其需求来调整预设的定值高通遮罩中的权重值。
在此假设,高通滤波函数为fh,而此高通滤波函数fh将随着高通滤波遮罩而变动。Ip表示第一影像IM1中目标影像的像素值(如,色彩值),Hp表示高通影像HPM中对应目标像素的高通像素值,则高通滤波器130所输出的高通像素值Hp为目标影像的像素值Ip与高通滤波遮罩1010或1020内权重值W以及遮罩内每一点像素点q的卷积,如方程式(1)所示:
Hp=1kh(p)Σq∈Wfh(q)×Iq······························(1)]]>
其中,kh(p)为标准化函数。本发明所述的标准化函数是用以限制各个遮罩与像素进行相乘后的乘积不会过大,而是限制在一定程度内。因此,本发明所述的标准化函数的数值大小皆位于默认值(例如,“1”)与零之间。例如,标准化函数kh(p)可以方程式(2)来表示:
kh(p)=∑q∈Wfh(q)…………………………(2)
本发明也可以将第一影像IM1经过两次高通滤波:一次垂直方向的高通滤波,另一次则为水平方向的高通滤波,并将计算得出的、高通影像HPM中对应目标像素的高通像素值Hp相加除以2,以获得更为良好的高通影像HPM。
于步骤S325中,低通滤波器140依据第一默认遮罩对第一影像IM1的目标像素及邻接像素进行低通滤波,以获得第一低通影像LPM1中对应目标像素的第一低通像素值。第一预设遮罩如图11的遮罩1110所示。图11是本实施例所采用的第一预设遮罩1110及第二预设遮罩1120。相应地,于步骤S330,低通滤波器150依据第二默认遮罩对第一影像IM1的目标像素及邻接像素进行低通滤波,以获得第二低通影像LPM2中对应目标像素的第二低通像素值。第二预设遮罩如图11的遮罩1120所示。于本实施例中,第一及第二预设遮罩1110、1120为定值且互不相同,而皆适用于低通滤波。
于此,第一低通滤波器140以及第二低通滤波器150皆采用相同的低通滤波技术,因此下述列举一种低通滤波函数来做为实 现方式。假设低通滤波函数为fl,而此低通滤波函数fl将随着第一预设遮罩1110或第二预设遮罩1120而变动。Lp表示低通影像LPM1或LPM2中对应目标像素的第一低通像素值或第二低通像素值。因此,低通滤波器140、150所输出的低通像素值Lp为目标影像的像素值Ip与第一或第二预设遮罩1110或1120内权重值W以及遮罩内每一点像素点q的卷积,如方程式(3)所示:
Lp=1kl(p)Σq∈Wfl(q)×Iq······························(3)]]>
其中,kl(p)为标准化函数。标准化函数kl(p)可以方程式(4)来表示:
kl(p)=∑q∈Wfl(q)…………………………(4)
于步骤S335中,差值运算模块160将对应目标像素的第一低通像素值Lp1与对应目标像素的第二低通像素值Lp2相减,以获得低通差值影像LDM中对应目标像素的低通差值像素值IDoG。当使用两张不同默认遮罩的低通影像LPM1、LPM2进行差值运算模块160的差值运算时,可找出低通影像LPM1、LPM2在不同尺度空间的极值或关键结构,此一步骤称为高斯差异(Difference of Gaussian;DoG)。
假设差值运算模块160采用高斯滤波器G并给定变异数σi、σj进行低通滤波值计算,则低通差值像素值IDoG便是给定变异数σi、σj后的两个高斯滤波器Gσi、Gσj相减后再与第一影像IM1中目标影像的像素值Ip相乘后的数值,如利用方程式(5)所示:
IDoG=(Gσi-Gσj)×Ip…………………(5)
于步骤S340中,像素权重运算模块170依据高通影像HPM中对应目标像素的高通像素值Hp以及低通差值影像LDM中对应目标像素的低通差值像素值IDoG进行像素权重运算,以获得对应目标像素的像素权重遮罩的权重值。换句话说,方程式(1)所得的高通影像HPM具有第一影像IM1的重要边缘及纹理特征,方程式(5)所得的低通差值影像LDM则包含第一影像IM1的影像交界处与极值边缘,但两者同时皆包含噪声。因此,本发明实施例 便结合两者以进行运算,以取得稳定边缘并抑制噪声的遮罩MK来对第一影像IM1进行处理,得到较精细完整的影像结构。
假设像素权重遮罩MK中对应目标像素的像素权重值为Bp,则像素权重遮罩MK中的像素权重值Bp可以方程式(6)来计算得到:
Bp=1kb×IDoG(p)×Hp······························(6)]]>
Bp为标准化函数,可用方程式(7)表示:
kb=∑q∈IIDoG(p)×Hp…………………………(7)
据此,像素权重遮罩MK中对应每个目标像素的像素权重值Bp便可利用方程式(6)及(7)来获得。
于步骤S345中,影像融合模块180依据第一低通影像LPM1及第二低通影像LPM2的其中之一以及像素权重遮罩MK对该第一影像进行运算,以产生噪声抑制影像NM。详言之,影像融合模块180将第一影像IM1、像素权重遮罩MK以及任一个低通影像(如,第一低通影像LPM12及第二低通影像LPM2其中之一)结合进行运算,便可产生滤除噪声后噪声抑制影像NM中的抑制像素值Jp。抑制像素值Jp可以方程式(8)来计算得到:
Jp=Bp×Ip+(RN-Bp)×Lp1…………………………(8)
其中,Bp为对应目标像素的像素权重值,Lp1为对应目标像素的、位于第一低通影像LPM1中的第一低通像素值。RN为标准化参数中提及的默认值。于本实施例中,此默认值RN为”1”。于部分实施例中,Lp1也可以利用对应目标像素的、位于第二低通影像LPM2中的第二低通像素值Lp2来取代。换句话说,影像融合模块180会将目标像素的像素值Ip乘以对应目标像素的像素权重值Bp,并与默认值(“1”)减去像素权重值Bp后再乘以对应目标像素的第一低通滤波像素值Lp1及第二低通滤波像素值Lp2的其中之一的乘积相加,以获得噪声抑制影像NM中对应目标像素的抑制像素值Jp
于步骤S350中,图像处理装置100便会判断第一影像IM1中的所有像素值是否已获得与这些像素值对应的抑制像素值Jp。如果第一影像IM1中尚有像素未经处理,则进入步骤S355,图像处理装置100将未经处理的像素作为所述目标像素,并再次经由步骤S315~S345以计算获得对应目标像素的抑制像素值。若第一影像IM1中的像素皆以完全处理,则图像处理装置100便已经处理完噪声抑制影像NM中的每个抑制像素值Jp,并进入步骤S360以输出噪声抑制影像NM。
相较于前案,部分的噪声抑制技术虽然有结合高频滤波以及低频滤波来滤除噪声,虽然保留了影像的纹理,但也提高了噪声的产生。相对而言,本发明除了利用高频及低频的滤波搭配以外,还额外将两个低频滤波的结果进行差值处理,由此便可有效地滤除噪声。
举例而言,图12的左右两图皆为输入影像的举例,图13为采用结合高频滤波以及低频滤波,但并未使用两个低频滤波的结果进行差值处理来滤除噪声(也称为方法1)的影像。图14为符合本发明实施例所产生已滤除噪声(也称为本发明方法)的影像。透过图13及图14的比较可以明显看出,图13所采用的方法虽可保留边缘,但也会同时强化噪声。本发明实施例所产生的图14影像则可适度地保留边缘,并有效抑制噪声。
此外,本发明利用图像处理常用的两个指标,峰值信噪比PSNR以及结构相似性质量指针SSIM,来判断图13及图14的噪声程度,如下表(1)所示。
表(1)


本发明所采用的指标PSNR以及SSIM皆是数值越大越好,因此由表(1)可知,本发明方法相较于方法一为佳。
综上所述,本发明实施例利用高通滤波产生的高通影像以及通过两个低通滤波所产生的两个低通影像之间的差值影像,来产生可滤除噪声并且同时保留影像细节的遮罩,例如,此遮罩可保留输入影像中的色块边缘及色块交错部分的原始影像信息,并利用此遮罩来调整输入影像,以在滤除噪声的同时可以大幅度地保留影像细节而使画面清晰。此外,由于处理过程中只需要一个预设的高通滤波器及两个低通滤波器,并通过固定的算法来获得所需的像素遮罩,因此可以降低运算复杂度,并且不需要额外参照其他影像以致耗费内存。
以上所述的具体实施例,对本发明的目的、技术方案和有益效果进行了进一步详细说明,应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

图像处理装置及其影像噪声抑制方法.pdf_第1页
第1页 / 共22页
图像处理装置及其影像噪声抑制方法.pdf_第2页
第2页 / 共22页
图像处理装置及其影像噪声抑制方法.pdf_第3页
第3页 / 共22页
点击查看更多>>
资源描述

《图像处理装置及其影像噪声抑制方法.pdf》由会员分享,可在线阅读,更多相关《图像处理装置及其影像噪声抑制方法.pdf(22页珍藏版)》请在专利查询网上搜索。

1、10申请公布号CN104125374A43申请公布日20141029CN104125374A21申请号201310230932022申请日2013060910211483120130425TWH04N5/213200601G06T5/0020060171申请人财团法人工业技术研究院地址中国台湾新竹县72发明人蔡洛纬李国徵洪邦展74专利代理机构中科专利商标代理有限责任公司11021代理人宋焰琴54发明名称图像处理装置及其影像噪声抑制方法57摘要本发明公开了一种图像处理装置及其影像噪声抑制方法。影像噪声抑制方法包括以下步骤分别依据预设高通遮罩、第一预设遮罩及第二默认遮罩对第一影像的多个像素值进行滤。

2、波,以分别获得高通影像、第一低通影像及第二低通影像。将第一低通影像以及第二低通影像进行差值运算,以获得低通差值影像。依据高通影像以及低通差值影像进行像素权重运算,以获得对应至第一影像的像素权重遮罩。依据该第一低通影像及该第二低通影像的其中之一以及该像素权重遮罩对该第一影像进行运算,以获得噪声抑制影像。30优先权数据51INTCL权利要求书3页说明书8页附图10页19中华人民共和国国家知识产权局12发明专利申请权利要求书3页说明书8页附图10页10申请公布号CN104125374ACN104125374A1/3页21一种影像噪声抑制方法,包括依据一预设高通遮罩,对一第一影像的多个像素进行高通滤波。

3、,以获得一高通影像;分别依据一第一预设遮罩以及一第二预设遮罩对该第一影像的所述像素进行低通滤波,以获得一第一低通影像及一第二低通影像,其中该第一预设遮罩不同于该第二预设遮罩;将该第一低通影像及该第二低通影像进行一差值运算以获得一低通差值影像;依据该高通影像以及该低通差值影像对所述像素进行一像素权重运算,以获得对应至该第一影像的一像素权重遮罩;以及依据该第一低通影像及该第二低通影像的其中之一,以及该像素权重遮罩对该第一影像进行运算,以获得一噪声抑制影像。2如权利要求1所述的影像噪声抑制方法,依据该预设高通遮罩对第一影像的所述像素进行高通滤波的步骤包括从该第一影像获得目标像素及其多个邻接像素;以及。

4、依据该默认高通遮罩对该目标像素及其所述邻接像素进行高通滤波,以获得该高通影像中对应该目标像素的一高通像素值。3如权利要求1所述的影像噪声抑制方法,分别依据该第一预设遮罩以及该第二预设遮罩对该第一影像的所述像素值进行低通滤波的步骤包括依据一第一默认遮罩对该第一影像的目标像素及其多个邻接像素值进行低通滤波,以获得该第一低通影像中对应该目标像素的一第一低通像素值;以及依据一第二默认遮罩对该第一影像的目标像素及所述邻接像素进行低通滤波,以获得该第二低通影像中对应该目标像素的第二低通像素值。4如权利要求3所述的影像噪声抑制方法,分别依据该第一预设遮罩以及该第二预设遮罩对该第一影像的所述像素值进行低通滤波。

5、的步骤由分别具备该第一预设遮罩以及该第二预设遮罩的两个低通滤波器对该第一影像来执行。5如权利要求3所述的影像噪声抑制方法,分别依据该第一预设遮罩以及该第二预设遮罩对该第一影像的所述像素值进行低通滤波的步骤由低通滤波器以不同的预设遮罩对该第一影像来分别执行。6如权利要求1所述的影像噪声抑制方法,将该第一低通影像以及该第二低通影像进行差值运算的步骤包括将对应该目标像素的第一低通像素值与对应该目标像素的第二低通像素值相减,以获得该低通差值影像中对应该目标像素的一低通差值像素值。7如权利要求1所述的影像噪声抑制方法,依据该高通影像以及该低通差值影像进行像素权重运算,以获得对应至该第一影像的该像素权重遮。

6、罩的步骤包括将对应该目标像素的一高通像素值乘以对应该目标像素的一低通差值像素值,并除以标准化常数,以获得该像素权重遮罩中对应该目标像素的一像素权重值。8如权利要求1所述的影像噪声抑制方法,依据该第一低通影像及该第二低通影像的其中之一以及该像素权重遮罩对该第一影像进行运算的步骤包括将该目标像素的像素值乘以对应该目标像素的一像素权重值,并与一默认值减去该像素权重值后再乘以对应该目标像素的一第一低通滤波像素值及一第二低通滤波像素值的权利要求书CN104125374A2/3页3其中之一的乘积相加,以获得该噪声抑制影像中对应该目标像素的一抑制像素值。9如权利要求8所述的影像噪声抑制方法,更包括判断该第一。

7、影像中的所有像素值是否已获得与所述像素值对应的该抑制像素值;以及若该第一影像中尚有像素未经处理,将未经处理的该像素作为该目标像素以计算获得对应该目标像素的该抑制像素值。10如权利要求1所述的影像噪声抑制方法,其中该噪声抑制影像适用于影像压缩。11一种图像处理装置,包括影像获得单元,用以获得一第一影像;以及处理器,用以执行下列步骤依据一默认高通遮罩对第一影像的多个像素进行高通滤波,以获得高通影像;分别依据一第一预设遮罩以及一第二预设遮罩对该第一影像的所述像素进行低通滤波,以获得一第一低通影像及一第二低通影像,其中该第一预设遮罩不同于该第二预设遮罩;将该第一低通影像及该第二低通影像进行差值运算以获。

8、得一低通差值影像;依据该高通影像以及该低通差值影像对所述像素进行像素权重运算,以获得对应至该第一影像的一像素权重遮罩;以及依据该第一低通影像及该第二低通影像的其中之一以及该像素权重遮罩对该第一影像进行运算,以获得一噪声抑制影像。12如权利要求11所述的图像处理装置,其中该处理器从该第一影像中获得目标像素及其多个邻接像素,依据该预设高通遮罩对该目标像素及其所述邻接像素进行高通滤波,以获得该高通影像中对应该目标像素的一高通像素值。13如权利要求11所述的图像处理装置,其中该处理器依据一第一预设遮罩对该第一影像的目标像素及其多个邻接像素值进行低通滤波,以获得该第一低通影像中对应该目标像素的一第一低通。

9、像素值,且依据一第二预设遮罩对该第一影像的目标像素及所述邻接像素进行低通滤波,以获得该第二低通影像中对应该目标像素的一第二低通像素值。14如权利要求11所述的图像处理装置,其中该处理器将对应该目标像素的一第一低通像素值与对应该目标像素的一第二低通像素值相减,以获得该低通差值影像中对应该目标像素的一低通差值像素值。15如权利要求11所述的图像处理装置,其中该处理器将对应该目标像素的一高通像素值乘以对应该目标像素的一低通差值像素值,并除以一标准化常数,以获得该像素权重遮罩中对应该目标像素的一像素权重值。16如权利要求11所述的图像处理装置,其中该处理器将该目标像素的像素值乘以对应该目标像素的一像素。

10、权重值,并与默认值减去该像素权重值后再乘以对应该目标像素的一第一低通滤波像素值及一第二低通滤波像素值的其中之一的乘积相加,以获得该噪声抑制影像中对应该目标像素的一抑制像素值。17一种图像处理装置,包括高通滤波器,接收第一影像,并依据一默认高通遮罩对该第一影像的多个像素值进行高通滤波以产生一高通影像;第一低通滤波器,依据第一预设遮罩对该第一影像的所述像素值进行低通滤波,产生权利要求书CN104125374A3/3页4一第一低通影像;第二低通滤波器,依据第二预设遮罩对该第一影像的所述像素值进行低通滤波,产生一第二低通影像,其中,该第一预设遮罩不同于该第二预设遮罩;差值运算模块,对该第一低通影像以及。

11、该第二低通影像进行差值运算以产生一低通差值影像;像素权重运算模块,依据该高通影像以及该低通差值影像进行像素权重运算,以产生对应该第一影像的一像素权重遮罩;以及影像融合模块,依据该第一低通影像及该第二低通影像的其中之一以及该像素权重遮罩对该第一影像进行运算,以产生一噪声抑制影像。18如权利要求17所述的图像处理装置,其中该高通滤波器从该第一影像获得一目标像素及其多个邻接像素,并依据该预设高通遮罩对该目标像素及其所述邻接像素进行高通滤波,以获得该高通影像中对应该目标像素的一高通像素值。19如权利要求17所述的图像处理装置,其中该第一低通滤波器依据一第一预设遮罩对该第一影像的目标像素及其多个邻接像素。

12、值进行低通滤波,以获得该第一低通影像中对应该目标像素的一第一低通像素值,该第二低通滤波器依据一第二预设遮罩对该第一影像的目标像素及其所述邻接像素进行低通滤波,以获得该第二低通影像中对应该目标像素的一第二低通像素值。20如权利要求17所述的图像处理装置,其中该差值运算模块将对应该目标像素的一第一低通像素值与对应该目标像素的一第二低通像素值相减,以获得该低通差值影像中对应该目标像素的一低通差值像素值。21如权利要求17所述的图像处理装置,其中该像素权重运算模块将对应该目标像素的一高通像素值乘以对应该目标像素的一低通差值像素值,并除以标准化常数,以获得该像素权重遮罩中对应该目标像素的一像素权重值。2。

13、2如权利要求17所述的图像处理装置,其中该影像融合模块将该目标像素的像素值乘以对应该目标像素的一像素权重值,并与默认值减去该像素权重值后再乘以对应该目标像素的一第一低通滤波像素值及一第二低通滤波像素值的其中之一的乘积相加,以获得该噪声抑制影像中对应该目标像素的一抑制像素值。23一种图像处理装置,包括至少一高通滤波器,接收第一影像,并依据一默认高通遮罩对该第一影像的多个像素值进行高通滤波以产生一高通影像;至少两个低通滤波器,依据不同的预设遮罩以对该第一影像的所述像素值进行低通滤波,以分别产生至少两个低通影像;差值运算模块,对该至少两个低通影像进行差值运算以产生一低通差值影像;像素权重运算模块,依。

14、据该高通影像以及该低通差值影像进行像素权重运算,以产生对应该第一影像的一像素权重遮罩;以及影像融合模块,依据该第一低通影像及该第二低通影像的其中之一以及该像素权重遮罩对该第一影像进行运算,以产生一噪声抑制影像。权利要求书CN104125374A1/8页5图像处理装置及其影像噪声抑制方法技术领域0001本发明涉及一种图像处理技术,且特别涉及一种图像处理装置及其影像噪声抑制方法。背景技术0002多媒体技术的日益精进使得高画质影像的需求逐渐增加。影像质量的好坏与在撷取影像、信号转换以及传输过程中所伴随产生的噪声量有相当大的关联。为了有效地去除噪声以提高影像质量,在图像处理领域中关于噪声消除的研究也越。

15、来越受到重视。噪声形成的原因例如是环境光源的变化而对影像撷取单元造成随机噪声的产生、电路本身产生的噪声,或是在图像处理过程如白平衡、影像内插中所产生的噪声。因此,在夜间撷取的影像通常伴随着强烈噪声。0003滤波处理通常是采用滤波器来调整影像的像素值,以消除噪声。然而,如果过度调整以消除噪声,则影像的细节也会被减弱,例如导致影像不清晰。因此,在影像的细节清晰度与噪声消除之间希望能取得平衡。0004目前的影像噪声抑制技术中,可动态调整滤波器的权重值来进行影像的过滤处理可获得良好的噪声抑制效果,但却有运算复杂度较高、需要额外参照影像以致耗费内存等问题,导致这些噪声抑制技术不易整合至视频编码器或数字信。

16、号处理器中。发明内容0005本发明提供一种图像处理装置及其影像噪声抑制方法,其利用预设的高通滤波器及两组低通滤波来产生可滤除噪声并且同时保留影像细节的遮罩,并利用此遮罩来调整输入影像,以在滤除噪声的同时可以大幅度地保留影像细节。据此,图像处理装置便可降低运算复杂度,并且不需要额外参照其他影像以致耗费内存。0006本发明提供一种影像噪声抑制方法,包括以下步骤依据默认高通遮罩对第一影像的多个像素值进行高通滤波,以获得高通影像;分别依据第一预设遮罩以及第二默认遮罩对第一影像的多个像素值进行低通滤波,以获得第一低通影像及第二低通影像,其中第一默认遮罩不同于第二预设遮罩;将第一低通影像以及第二低通影像进。

17、行差值运算以获得低通差值影像;依据高通影像以及低通差值影像进行像素权重运算,以获得对应至第一影像的像素权重遮罩。依据第一低通影像及第二低通影像的其中之一以及像素权重遮罩对所述第一影像进行运算,以获得噪声抑制影像。0007以另一观点而言,本发明提供一种图像处理装置,其包括影像获得单元以及处理器。影像获得单元用以获得第一影像。处理器用以执行下列步骤依据默认高通遮罩对第一影像的多个像素值进行高通滤波,以产生高通影像;分别依据第一预设遮罩以及第二默认遮罩对第一影像的多个像素值进行低通滤波,以分别获得第一低通影像及第二低通影像,其中第一默认遮罩不同于第二预设遮罩;将第一低通影像以及第二低通影像进行差值运。

18、算以获得低通差值影像;依据高通影像以及低通差值影像进行像素权重运算,以产生对应至说明书CN104125374A2/8页6第一影像的像素权重遮罩;依据第一低通影像及第二低通影像的其中之一以及像素权重遮罩对所述第一影像进行运算,以获得噪声抑制影像。0008以再一观点而言,本发明提供一种图像处理装置,其包括高通滤波器、第一低通滤波器、第二低通滤波器、差值运算模块、像素权重运算模块以及影像融合模块。高通滤波器依据预设高通遮罩对第一影像的多个像素值进行高通滤波,产生高通影像。第一低通滤波器依据第一默认遮罩对第一影像的多个像素值进行低通滤波,产生第一低通影像。第二低通滤波器依据第二默认遮罩对第一影像的多个。

19、像素值进行低通滤波,产生第二低通影像,其中,第一预设滤波器不同于第二预设滤波器。差值运算模块对第一低通影像以及第二低通影像进行差值运算以产生低通差值影像。像素权重运算模块依据高通影像以及低通差值影像进行像素权重运算,以产生对应该第一影像的像素权重遮罩。影像融合模块依据第一低通影像及第二低通影像的其中之一以及所述像素权重遮罩对所述第一影像进行运算,以产生噪声抑制影像。0009基于上述,本发明实施例利用高通滤波产生的高通影像以及通过两个低通滤波所产生的两个低通影像之间的差值影像,来产生可滤除噪声并且同时保留影像细节的遮罩,例如,此遮罩可保留输入影像中的色块边缘及色块交错部分的原始影像信息,并利用此。

20、遮罩对输入影像进行运算以及调整,以在滤除噪声的同时可以大幅度地保留影像细节而使画面清晰。此外,由于处理过程中只需要一个预设的高通滤波器及两个低通滤波器,并通过固定的算法来获得所需的像素遮罩,因此可以降低运算复杂度,并且不需要额外参照其他影像以致耗费内存。附图说明0010图1是根据本发明一实施例所示的图像处理装置的方块图;0011图2是根据本发明一实施例所示的影像噪声抑制方法的流程图;0012图3至图8则为本发明一实施例作为举例的各个影像;0013图9是根据本发明一实施例所示的影像噪声抑制方法的细节流程图;0014图10是本实施例所采用的两种预设高通遮罩;0015图11是本实施例所采用的第一预设。

21、遮罩及第二预设遮罩;0016图12为输入影像的举例;0017图13为采用结合高频滤波以及低频滤波,但并未使用两个低频滤波的结果进行差值处理来滤除噪声的影像;0018图14为符合本发明实施例所产生已滤除噪声的影像。0019【符号说明】0020100图像处理装置0021110影像获得单元0022120噪声抑制单元0023130高通滤波器0024140第一低通滤波器0025150第二低通滤波器0026160差值运算模块说明书CN104125374A3/8页70027170像素权重运算模块0028180影像融合模块0029IM1第一影像0030HPM高通影像0031LPM1、LPM2低通影像0032L。

22、DM低通差值影像0033MK像素权重遮罩0034NM噪声抑制影像0035S210S360步骤00361010、1020预设高通遮罩00371110、1120预设遮罩具体实施方式0038在图像处理技术中,对影像中的噪声抑制大多采用滤波器对各像素进行卷积CONVOLUTION运算,因此滤波器内所使用遮罩的权重值便是影响画质的关键因素。滤波器可分为定值滤波器以及非定值滤波器。定值滤波器是对各像素采用相同的低通滤波遮罩进行处理,其作法简单但易使影像产生模糊现象,如均值滤波器及高斯滤波器。非定值滤波器则依各像素的区域特征来动态调整滤波器内遮罩的权重值,若像素为边界高频则权重值较高,像素为平滑低频则权重值。

23、较低,以达到抑制噪声且画面清晰效果,公知做法如双向滤波器及导向滤波器。然而,高斯滤波器以及双向滤波器在计算遮罩的权重值时皆需包含大量的指数运算,导致具备较高的运算负载。导向滤波器则需参考另一张影像来作为计算遮罩权重值的参考,导致额外耗费内存以增加实现成本。0039为改善噪声滤除的运算效能,并在未增加内存需求下以获得良好的噪声滤除效果,本发明的图像处理装置利用一组默认的定值高通滤波器来获得具备输入影像的边缘特征,再结合两组定值低通滤波器以取得输入影像的纹理特征并且抑制噪声。据此,本发明的图像处理装置无需额外参照影像且使硬件能够易于平行化处理。为使本发明的目的、技术方案和优点更加清楚明白,以下结合。

24、具体实施例,并参照附图,对本发明作进一步的详细说明。0040图1是根据本发明一实施例所示的图像处理装置100的方块图。本发明的图像处理装置100应用于抑制输入影像中的噪声,尤其是针对夜间输入影像的强烈噪声,因此可适用于照相机、摄影机、行动装置等电子设备,或是符合本发明实施例的图像处理程序。0041图像处理装置100主要包括影像获得单元110以及噪声控制单元120。影像获得单元110用以获得第一影像IM1或称为输入影像。影像获得单元110可以是照相机、摄影机、影像撷取芯片甚至是用来储存影像的硬盘等。于部分实施例中,图像处理装置100也可以不需要影像获得单元110,而是直接从外部设备中直接获得第一。

25、影像IM1。0042噪声控制单元120用以接收第一影像IM1,并抑制第一影像的噪声而产生噪声抑制影像NM。噪声控制单元120可以是用来执行符合本发明实施例的图像处理程序的处理器,也可以将本发明所述的功能分别以电路模块的方式来实现硬件。本发明实施例所称的模块可以是利用处理器执行的的软件模块,也可以是利用电路来实现的硬件或韧体模说明书CN104125374A4/8页8块。在产生噪声抑制影像NM之后,图像处理装置100可以将噪声抑制影像NM储存至计算机存取装置例如,输出至网络、硬盘等、输出至影像视频编码器或显示于屏幕上,本发明并不限制噪声抑制影像NM的应用。0043噪声抑制单元120包括高通滤波器1。

26、30、第一低通滤波器140、第二低通滤波器150、差值运算模块160、像素权重运算模块170以及影像融合模块180。噪声抑制单元120中各个元件的功能将与图2的噪声抑制方法相互配合说明。图2是根据本发明一实施例所示的影像噪声抑制方法的流程图,图3至图8则为本发明一实施例作为举例的各个影像。请同时参照图1及图2,并配合图3至图8的影像作为示例。于步骤S210中,高通滤波器130在接收第一影像IM1后,例如图3的第一影像IM1,便依据预设高通遮罩对第一影像IM1的多个像素值进行高通滤波,以获得高通影像HPM,例如图4的高通影像HPM。高通影像HPM会凸显出第一影像IM1的边缘特征。本发明的高通滤波。

27、器130属于定值高通滤波器,换句话说,高通滤波器130所采用的高通遮罩为定值,而不是动态调整权重值的高通遮罩。符合本发明的部分实施例中,高通滤波也可由多个高通滤波器来共同实现,因此并不受限于以单个高通滤波器来实现上述高通滤波程序。0044于步骤S220中,第一低通滤波器140以及第二低通滤波器150分别依据第一预设遮罩以及第二默认遮罩对第一影像IM1的多个像素值进行低通滤波,以分别获得第一低通影像LPM1及第二低通影像LPM2。图5揭示符合本发明实施例及图3的第一低通影像LPM1及第二低通影像LPM2。本发明的两个低通滤波器140、150也是属于低运算量的定值低通滤波器,低通滤波器140、15。

28、0所采用的低通遮罩为定值,而不是动态调整权重值的低通遮罩。并且,第一低通滤波器140使用的第一预设遮罩将不同于第二低通滤波器150使用的第二预设遮罩。0045于此说明的是,本实施例是以两个不同的低通滤波器140、150作为实现方式,借助上述的硬件架构可以让这两个低通滤波器140、150以及高通滤波器130同时执行步骤S210、S220的动作。也就是,步骤S220由分别具备第一预设遮罩以及第二预设遮罩的两个低通滤波器140、150对第一影像IM1来执行。若此图像处理装置100使用于静态图像处理时,也就是对于图像处理的速度要求不高时,低通滤波器140、150也可以整合为相同的硬件或是同一个处理程序。

29、,并对第一影像IM1利用两个不同的定值低通遮罩来执行两次低通滤波,以产生两个低通影像LPM1、LPM2。也就是,步骤S220由一个低通滤波器以不同的预设遮罩对该第一影像IM1来分别执行。0046请继续参照图1、图2,于步骤S230中,差值运算模块160接收到第一以及第二低通影像LPM1、LPM2后,将第一低通影像LPM1以及第二低通影像LPM2进行差值运算以获得低通差值影像LDM如图6所示。低通差值影像LDM可以保留第一影像IM1中的边缘特征并且抑制第一影像IM1中的噪声。于其他实施例中,应用本发明者也可利用两个以上的低通滤波器来获得两个以上低通影像,并利用这些低通影像进行差值运算或是相减而获。

30、得低通差值影像LDM,而不受限于仅利用两个低通滤波器140、150来实现低通差值影像LDM的获得。0047于步骤S240中,像素权重运算模块170便依据高通影像HPM图4以及低通差值影像LDM图6进行像素权重运算,以计算第一影像IM1中每个像素的权重值,并将这些权重值设置于对应位置的遮罩中,以获得对应至第一影像IM1的像素权重遮罩MK。像素权重说明书CN104125374A5/8页9遮罩MK可以如图7所示。0048于步骤S250中,影像融合模块180便可依据第一低通影像LPM1及第二低通影像LPM2的其中之一以及像素权重遮罩MK对第一影像IM1进行运算,以获得噪声抑制影像NM。噪声抑制影像NM。

31、可以如图8所示。0049图2是以整个影像作为举例来进行本发明所述的噪声抑制方法,而下述将说明如何影像中的每个像素来进行本发明所述的噪声抑制方法,并列举本发明所采用的各种参数。图9是根据本发明一实施例所示的影像噪声抑制方法的细节流程图。0050请同时参照图1及图9,影像获得单元110于步骤S310获得第一影像IM1。之后,于步骤S315,影像获得单元110从第一影像IM1获得目标像素以及相邻于目标像素的多个邻接像素。于步骤S320中,高通滤波器130从第一影像IM1获得目标像素以及相邻于目标像素的多个邻接像素之后,便利用图10中所绘示的预设高通遮罩来对这些目标像素以及邻接像素进行高通滤波,以获得。

32、高通影像HPM中对应目标像素的高通像素值HP。图10发明本实施例所采用的两种预设高通遮罩1010、1020。预设高通遮罩1010、1020中的权重值皆为实数,预设高通遮罩1010适用于Y轴方向也就是,垂直方向的高通滤波,而预设高通遮罩1020则适用于X轴方向也就是,水平方向的高通滤波,应用本实施例者可依其需求来调整预设的定值高通遮罩中的权重值。0051在此假设,高通滤波函数为FH,而此高通滤波函数FH将随着高通滤波遮罩而变动。IP表示第一影像IM1中目标影像的像素值如,色彩值,HP表示高通影像HPM中对应目标像素的高通像素值,则高通滤波器130所输出的高通像素值HP为目标影像的像素值IP与高通。

33、滤波遮罩1010或1020内权重值W以及遮罩内每一点像素点Q的卷积,如方程式1所示00520053其中,KHP为标准化函数。本发明所述的标准化函数是用以限制各个遮罩与像素进行相乘后的乘积不会过大,而是限制在一定程度内。因此,本发明所述的标准化函数的数值大小皆位于默认值例如,“1”与零之间。例如,标准化函数KHP可以方程式2来表示0054KHPQWFHQ20055本发明也可以将第一影像IM1经过两次高通滤波一次垂直方向的高通滤波,另一次则为水平方向的高通滤波,并将计算得出的、高通影像HPM中对应目标像素的高通像素值HP相加除以2,以获得更为良好的高通影像HPM。0056于步骤S325中,低通滤波。

34、器140依据第一默认遮罩对第一影像IM1的目标像素及邻接像素进行低通滤波,以获得第一低通影像LPM1中对应目标像素的第一低通像素值。第一预设遮罩如图11的遮罩1110所示。图11是本实施例所采用的第一预设遮罩1110及第二预设遮罩1120。相应地,于步骤S330,低通滤波器150依据第二默认遮罩对第一影像IM1的目标像素及邻接像素进行低通滤波,以获得第二低通影像LPM2中对应目标像素的第二低通像素值。第二预设遮罩如图11的遮罩1120所示。于本实施例中,第一及第二预设遮罩1110、1120为定值且互不相同,而皆适用于低通滤波。0057于此,第一低通滤波器140以及第二低通滤波器150皆采用相同。

35、的低通滤波技术,说明书CN104125374A6/8页10因此下述列举一种低通滤波函数来做为实现方式。假设低通滤波函数为FL,而此低通滤波函数FL将随着第一预设遮罩1110或第二预设遮罩1120而变动。LP表示低通影像LPM1或LPM2中对应目标像素的第一低通像素值或第二低通像素值。因此,低通滤波器140、150所输出的低通像素值LP为目标影像的像素值IP与第一或第二预设遮罩1110或1120内权重值W以及遮罩内每一点像素点Q的卷积,如方程式3所示00580059其中,KLP为标准化函数。标准化函数KLP可以方程式4来表示0060KLPQWFLQ40061于步骤S335中,差值运算模块160将。

36、对应目标像素的第一低通像素值LP1与对应目标像素的第二低通像素值LP2相减,以获得低通差值影像LDM中对应目标像素的低通差值像素值IDOG。当使用两张不同默认遮罩的低通影像LPM1、LPM2进行差值运算模块160的差值运算时,可找出低通影像LPM1、LPM2在不同尺度空间的极值或关键结构,此一步骤称为高斯差异DIFFERENCEOFGAUSSIAN;DOG。0062假设差值运算模块160采用高斯滤波器G并给定变异数I、J进行低通滤波值计算,则低通差值像素值IDOG便是给定变异数I、J后的两个高斯滤波器GI、GJ相减后再与第一影像IM1中目标影像的像素值IP相乘后的数值,如利用方程式5所示006。

37、3IDOGGIGJIP50064于步骤S340中,像素权重运算模块170依据高通影像HPM中对应目标像素的高通像素值HP以及低通差值影像LDM中对应目标像素的低通差值像素值IDOG进行像素权重运算,以获得对应目标像素的像素权重遮罩的权重值。换句话说,方程式1所得的高通影像HPM具有第一影像IM1的重要边缘及纹理特征,方程式5所得的低通差值影像LDM则包含第一影像IM1的影像交界处与极值边缘,但两者同时皆包含噪声。因此,本发明实施例便结合两者以进行运算,以取得稳定边缘并抑制噪声的遮罩MK来对第一影像IM1进行处理,得到较精细完整的影像结构。0065假设像素权重遮罩MK中对应目标像素的像素权重值为。

38、BP,则像素权重遮罩MK中的像素权重值BP可以方程式6来计算得到00660067BP为标准化函数,可用方程式7表示0068KBQIIDOGPHP70069据此,像素权重遮罩MK中对应每个目标像素的像素权重值BP便可利用方程式6及7来获得。0070于步骤S345中,影像融合模块180依据第一低通影像LPM1及第二低通影像LPM2的其中之一以及像素权重遮罩MK对该第一影像进行运算,以产生噪声抑制影像NM。详言之,影像融合模块180将第一影像IM1、像素权重遮罩MK以及任一个低通影像如,第一低通影像LPM12及第二低通影像LPM2其中之一结合进行运算,便可产生滤除噪声后噪声抑制影像NM中的抑制像素值。

39、JP。抑制像素值JP可以方程式8来计算得到0071JPBPIPRNBPLP18说明书CN104125374A107/8页110072其中,BP为对应目标像素的像素权重值,LP1为对应目标像素的、位于第一低通影像LPM1中的第一低通像素值。RN为标准化参数中提及的默认值。于本实施例中,此默认值RN为”1”。于部分实施例中,LP1也可以利用对应目标像素的、位于第二低通影像LPM2中的第二低通像素值LP2来取代。换句话说,影像融合模块180会将目标像素的像素值IP乘以对应目标像素的像素权重值BP,并与默认值“1”减去像素权重值BP后再乘以对应目标像素的第一低通滤波像素值LP1及第二低通滤波像素值LP。

40、2的其中之一的乘积相加,以获得噪声抑制影像NM中对应目标像素的抑制像素值JP。0073于步骤S350中,图像处理装置100便会判断第一影像IM1中的所有像素值是否已获得与这些像素值对应的抑制像素值JP。如果第一影像IM1中尚有像素未经处理,则进入步骤S355,图像处理装置100将未经处理的像素作为所述目标像素,并再次经由步骤S315S345以计算获得对应目标像素的抑制像素值。若第一影像IM1中的像素皆以完全处理,则图像处理装置100便已经处理完噪声抑制影像NM中的每个抑制像素值JP,并进入步骤S360以输出噪声抑制影像NM。0074相较于前案,部分的噪声抑制技术虽然有结合高频滤波以及低频滤波来。

41、滤除噪声,虽然保留了影像的纹理,但也提高了噪声的产生。相对而言,本发明除了利用高频及低频的滤波搭配以外,还额外将两个低频滤波的结果进行差值处理,由此便可有效地滤除噪声。0075举例而言,图12的左右两图皆为输入影像的举例,图13为采用结合高频滤波以及低频滤波,但并未使用两个低频滤波的结果进行差值处理来滤除噪声也称为方法1的影像。图14为符合本发明实施例所产生已滤除噪声也称为本发明方法的影像。透过图13及图14的比较可以明显看出,图13所采用的方法虽可保留边缘,但也会同时强化噪声。本发明实施例所产生的图14影像则可适度地保留边缘,并有效抑制噪声。0076此外,本发明利用图像处理常用的两个指标,峰。

42、值信噪比PSNR以及结构相似性质量指针SSIM,来判断图13及图14的噪声程度,如下表1所示。0077表1007800790080本发明所采用的指标PSNR以及SSIM皆是数值越大越好,因此由表1可知,本发明方法相较于方法一为佳。0081综上所述,本发明实施例利用高通滤波产生的高通影像以及通过两个低通滤波所说明书CN104125374A118/8页12产生的两个低通影像之间的差值影像,来产生可滤除噪声并且同时保留影像细节的遮罩,例如,此遮罩可保留输入影像中的色块边缘及色块交错部分的原始影像信息,并利用此遮罩来调整输入影像,以在滤除噪声的同时可以大幅度地保留影像细节而使画面清晰。此外,由于处理过。

43、程中只需要一个预设的高通滤波器及两个低通滤波器,并通过固定的算法来获得所需的像素遮罩,因此可以降低运算复杂度,并且不需要额外参照其他影像以致耗费内存。0082以上所述的具体实施例,对本发明的目的、技术方案和有益效果进行了进一步详细说明,应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。说明书CN104125374A121/10页13图1说明书附图CN104125374A132/10页14图2说明书附图CN104125374A143/10页15图3图4说明书附图CN104125374A154/10页16图5A图5B说明书附图CN104125374A165/10页17图6图7说明书附图CN104125374A176/10页18图8说明书附图CN104125374A187/10页19图9说明书附图CN104125374A198/10页20图10图11说明书附图CN104125374A209/10页21图12图13说明书附图CN104125374A2110/10页22图14说明书附图CN104125374A22。

展开阅读全文
相关资源
猜你喜欢
相关搜索

当前位置:首页 > 电学 > 电通信技术


copyright@ 2017-2020 zhuanlichaxun.net网站版权所有
经营许可证编号:粤ICP备2021068784号-1