信号处理装置和静止图像生成方法.pdf

上传人:000****221 文档编号:4490752 上传时间:2018-10-17 格式:PDF 页数:15 大小:1.99MB
返回 下载 相关 举报
摘要
申请专利号:

CN201180028311.3

申请日:

2011.06.06

公开号:

CN102934422A

公开日:

2013.02.13

当前法律状态:

授权

有效性:

有权

法律详情:

专利权的转移IPC(主分类):H04N 5/232登记生效日:20151112变更事项:专利权人变更前权利人:奥林巴斯医疗株式会社变更后权利人:奥林巴斯株式会社变更事项:地址变更前权利人:日本东京都变更后权利人:日本东京都|||授权|||实质审查的生效IPC(主分类):H04N 5/232申请日:20110606|||公开

IPC分类号:

H04N5/232; A61B1/04; G03B5/00; G06T5/00; H04N5/225

主分类号:

H04N5/232

申请人:

奥林巴斯医疗株式会社

发明人:

铃木达彦

地址:

日本东京都

优先权:

2010.06.07 JP 2010-130157

专利代理机构:

北京林达刘知识产权代理事务所(普通合伙) 11277

代理人:

刘新宇

PDF下载: PDF下载
内容摘要

信号处理装置具备:第一图像存储器,其存储多个画面的输入运动图像;模糊量计算部,其计算上述输入运动图像的各个画面的模糊量;模糊量保持部,其将由上述模糊量计算部计算出的上述模糊量与上述输入运动图像的各个画面相对应地保持;图像切换部,其选择上述输入运动图像和上述第一图像存储器的输出中的一方的图像并进行输出;降噪部,其输出使用来自上述图像切换部的多个画面的图像去除噪声后得到的图像;第二图像存储器,其至少存储一个画面的来自上述降噪部的图像;以及定格控制部,在产生定格指示时,该定格控制部根据保持在上述模糊量保持部中的上述模糊量,从上述第一图像存储器读出包括模糊量最小的画面的、为了在上述降噪部中去除噪声所需的两个画面以上的图像而从上述图像切换部输出,并且控制上述第二图像存储器连续地输出上述模糊量最小的画面的图像。

权利要求书

权利要求书一种信号处理装置,其特征在于,具备:
第一图像存储器,其存储多个画面的输入运动图像;
模糊量计算部,其计算上述输入运动图像的各个画面的模糊量;
模糊量保持部,其将由上述模糊量计算部计算出的上述模糊量与上述输入运动图像的各个画面相对应地进行保持;
图像切换部,其选择上述输入运动图像和上述第一图像存储器的输出中的一方的图像进行输出;
降噪部,其输出使用来自上述图像切换部的多个画面的图像去除噪声而得到的图像;
第二图像存储器,其至少存储一个画面的来自上述降噪部的图像;以及
定格控制部,当产生定格指示时,该定格控制部根据保持在上述模糊量保持部中的上述模糊量,使得从上述第一图像存储器读出包括模糊量最小的画面的、为了在上述降噪部中去除噪声所需的两个画面以上的图像来从上述图像切换部输出,并且控制上述第二图像存储器连续地输出上述模糊量最小的画面的图像。
根据权利要求1所述的信号处理装置,其特征在于,
上述定格控制部使得从上述第一图像存储器读出时间上在上述模糊量最小的画面之前的、存储在上述第一图像存储器中的画面的图像,并从上述图像切换部输出。
根据权利要求1所述的信号处理装置,其特征在于,
上述定格控制部使得从上述第一图像存储器读出时间上在上述模糊量最小的画面之后的、存储在上述第一图像存储器中的画面的图像,并从上述图像切换部输出。
根据权利要求1至3中的任一项所述的信号处理装置,其特征在于,
上述定格控制部控制上述第二图像存储器,使得在上述定格指示后上述降噪部进行噪声去除处理所需的期间,使从上述降噪部输出的图像从上述第二图像存储器输出。
根据权利要求1至3中的任一项所述的信号处理装置,其特征在于,
上述定格控制部控制上述第二图像存储器,使得在上述定格指示后上述降噪部进行噪声去除处理所需的期间,使存储在上述第二图像存储器中的同一画面的图像连续地输出。
根据权利要求1至3中的任一项所述的信号处理装置,其特征在于,
上述模糊量计算部将在上述输入运动图像的前后画面间沿水平方向相邻的像素之间的像素值的增减一致的相邻像素的数量按画面进行累积,并根据累积结果求出模糊量。
一种信号处理装置,其特征在于,具备:
第一图像存储器,其存储多个画面的输入运动图像;
降噪部,其输出使用多个画面的图像去除噪声后得到的图像;
图像切换部,其选择上述输入运动图像和上述第一图像存储器的输出中的一方的图像并进行输出;
Y/C分离部,其将来自上述图像切换部的图像分离成亮度信号和颜色信号,并将分离得到的亮度信号和颜色信号提供给上述降噪部;
第二图像存储器,其至少存储一个画面的来自上述降噪部的图像;
模糊量计算部,其根据由上述Y/C分离部分离得到的亮度信号来计算上述输入运动图像的各画面的模糊量;
模糊量保持部,其将由上述模糊量计算部计算出的上述模糊量与上述输入运动图像的各个画面相对应地保持;以及
定格控制部,在产生定格指示时,该定格控制部根据保持在上述模糊量保持部中的上述模糊量,使得从上述第一图像存储器读出包括模糊量最小的画面的、为了在上述降噪部中去除噪声所需的两个画面以上的图像来从上述图像切换部输出,并且控制上述第二图像存储器连续地输出上述模糊量最小的画面的图像。
一种静止图像生成方法,其特征在于,具备以下步骤:
第一图像存储器存储多个画面的输入运动图像;
模糊量计算部计算上述输入运动图像的各个画面的模糊量;
模糊量保持部将计算出的上述模糊量与上述输入运动图像的各个画面相对应地保持;
图像切换部选择上述输入运动图像和上述第一图像存储器的输出中的一方的图像并进行输出;
降噪部输出使用来自上述图像切换部的多个画面的图像去除噪声后得到的图像;
第二图像存储器至少存储一个画面的去除了噪声的图像;以及
在产生定格指示时,定格控制部根据上述模糊量,使得从上述第一图像存储器读出包括模糊量最小的画面的、为了在上述降噪部中去除噪声所需的两个画面以上的图像来从上述图像切换部输出,并且控制上述第二图像存储器连续地输出上述模糊量最小的画面的图像。

说明书

说明书信号处理装置和静止图像生成方法
技术领域
本发明涉及能够生成不模糊的静止图像的信号处理装置和静止图像生成方法。
背景技术
以往,开发了利用固体摄像元件对被摄体图像进行电子拍摄的各种装置。例如使用了CCD(电荷耦合元件)的摄像装置也能够应用于电子内窥镜装置等。电子内窥镜能够在彩色监视器上实时地显示运动图像,减少操作内窥镜的手术操作者的疲劳,因此被广泛应用。
电子内窥镜具有将拍摄被摄体而得到的图像进行存储的图像存储器。通过使用该图像存储器不仅能够显示运动图像还能够显示静止图像。当手术操作者为了观察静止图像而按下观测器的操作部的定格开关时,中断向图像存储器的写入,并在监视器上显示静止图像。
在进行电子拍摄的摄像元件的输出中包含随机噪声。由这种随机噪声引起的图像质量劣化在运动图像中不明显,但是在静止图像中明显。因此,有时采用利用时间轴方向的相关性来去除噪声的例如循环型的降噪电路(例如,日本特开2007‑312832号公报)。
另外,作为利用电子内窥镜装置获取彩色图像的方法,实际应用了在电子摄像设备的前表面插入彩色马赛克滤波器的同时方式以及在用于对被摄体进行照明的光源装置的灯前表面依次插入R、G、B滤波器,并使用黑白CCD对R、G、B的光学图像进行拍摄的面顺序方式。
面顺序方式的内窥镜具有颜色再现性良好、能够实现摄像元件小型化等优点,但是存在以下缺点:在为了按照时间序列取入R、G、B的图像而被摄体与摄像元件的相对位置关系改变的情况下产生颜色偏差。
特别是在内窥镜图像的静止图像显示中颜色偏差明显的情况下,严重妨碍进行准确诊断。因此,以往,在日本特开2007‑252635号公报中提出了一种获得没有颜色偏差的静止图像的方法。
然而,基于与面顺序方式下产生颜色偏差相同的原因,即使是同时方式的摄像装置,由于被摄体与摄像元件的相对位置关系发生变化也会产生模糊。以往存在以下问题:没有开发一种装置来去除这种模糊,并且利用时间轴方向的相关性通过去除噪声从而获得将噪声充分降低的静止图像。
本发明是鉴于上述问题而完成的,其目的在于提供一种能够通过去除模糊和噪声来获得高质量的静止图像的信号处理装置和静止图像生成方法。
发明内容
发明要解决的问题
本发明的一个方式所涉及的信号处理装置具备:第一图像存储器,其存储多个画面的输入运动图像;模糊量计算部,其计算上述输入运动图像的各个画面的模糊量;模糊量保持部,其将由上述模糊量计算部计算出的上述模糊量与上述输入运动图像的各个画面相对应地进行保持;图像切换部,其选择上述输入运动图像和上述第一图像存储器的输出中的一方的图像进行输出;降噪部(Noise reduction),其输出使用来自上述图像切换部的多个画面的图像去除噪声而得到的图像;第二图像存储器,其至少存储一个画面的来自上述降噪部的图像;以及定格控制部,当产生定格指示时,该定格控制部根据保持在上述模糊量保持部中的上述模糊量,使得从上述第一图像存储器读出包括模糊量最小的画面的、为了在上述降噪部中去除噪声所需的两个画面以上的图像来从上述图像切换部输出,并且控制上述第二图像存储器连续地输出上述模糊量最小的画面的图像。
本发明的一个方式所涉及的静止图像生成方法,具备以下步骤:第一图像存储器存储多个画面的输入运动图像;模糊量计算部计算上述输入运动图像的各个画面的模糊量;模糊量保持部将计算出的上述模糊量与上述输入运动图像的各个画面相对应地保持;图像切换部选择上述输入运动图像和上述第一图像存储器的输出中的一方的图像并进行输出;降噪部输出使用来自上述图像切换部的多个画面的图像去除噪声后得到的图像;第二图像存储器至少存储一个画面的去除了噪声的图像;以及在产生定格指示时,定格控制部根据上述模糊量,使得从上述第一图像存储器读出包括模糊量最小的画面的、为了在上述降噪部中去除噪声所需的两个画面以上的图像来从上述图像切换部输出,并且控制上述第二图像存储器连续地输出上述模糊量最小的画面的图像。
附图说明
图1是表示本发明的第一实施方式所涉及的信号处理装置的框图。
图2是表示图1中的循环型NR 24的具体结构的一例的电路图。
图3是用于说明第一实施方式的动作的时序图。
图4是用于说明本发明的第二实施方式的时序图。
图5是表示本发明的第三实施方式的框图。
具体实施方式
下面,参照附图详细地说明本发明的实施方式。
(第一实施方式)
图1是表示本发明的第一实施方式所涉及的信号处理装置的框图。
对本实施方式适用于内窥镜装置的例子进行说明。
在图1中,内窥镜11在细长的插入部的前端设置有固体摄像元件12。作为固体摄像元件12例如采用CCD等,固体摄像元件12拍摄被摄体并输出摄像信号。来自固体摄像元件12的摄像信号提供给构成信号处理装置21的预处理部22。
预处理部22将所输入的摄像信号转换为数字的图像信号,并输出到图像切换部23、图像存储器27以及模糊量计算部28。图像存储器27具有能够存储规定帧数的图像信号的容量,通过后述的定格控制部30来控制写入和读出,并以帧为单位依次存储来自预处理部22的图像信号,并且将所存储的图像信号以帧为单位输出到图像切换部23。
图像切换部23由定格控制部30控制,在来自预处理部22的图像信号和来自图像存储器27的图像信号之间进行切换,并输入到循环型NR(降噪电路)24。
图2是表示图1中的循环型NR 24的具体结构的一例的电路图。
输入到循环型NR 24的以帧为单位的图像信号被提供给乘法器41。从阈值存储器45对乘法器41提供乘法系数(1‑k),乘法器41将所输入的图像信号与乘法系数(1‑k)相乘之后输出到加法器42。加法器42的输出在通过帧存储器44延迟一帧之后被提供给乘法器43。从阈值存储器45对乘法器43提供乘法系数k,乘法器43将所输入的图像信号与乘法系数K相乘之后输出到加法器42。
通过加法器42对各帧的图像信号依次进行加法处理。在该加法处理中,对输入侧的图像信号施加系数(1‑k),对加法运算后输出的图像信号施加系数k。当假设系数k为0.5时,输入图像信号与作为加法结果的图像信号以1:1的比例来混合,图像信号中包含的随机噪声由于被平均化而得以抑制。通过反复进行该加法处理,能够逐渐降低随机噪声。
当乘法系数k大于0.5时,加法器42的输出中相加的比例变高,降噪效果提高。在所输入的图像是静止图像的情况下,通过将k变大,能够获得充分降低噪声的图像信号。但是,在所输入的图像是运动图像的情况下,帧间相关性变得比较小,因此通过将k变小来防止由加法处理导致噪声增加。
阈值存储器45根据所输入的图像信号是基于静止图像的信号还是基于运动图像的信号来改变乘法系数k。由此,不管输入图像是静止图像还是运动图像,都能最佳地去除噪声。
此外,在本实施方式中,对采用循环型NR 24的例子进行说明,但如果是使用多帧的图像进行降噪的电路,则也可以采用除循环型以外的降噪电路。
循环型NR 24的输出提供给输出图像存储器25。输出图像存储器25例如具有能够存储一帧的图像信号的容量,由定格控制部30来控制写入和读出,并存储来自循环型NR 24的图像信号,并且将所存储的图像信号以帧为单位输出到影像信号处理电路26。
影像信号处理电路26在对所输入的图像信号实施了规定的影像信号处理之后,将该信号输出到观察监视器35。影像信号处理电路26例如进行白平衡调整、γ校正等影像信号处理。观察监视器35将基于所输入的图像信号的图像显示在显示画面上。
在本实施方式中,设置有对从预处理部22输出的图像的模糊量进行检测的模糊量检测部28。来自预处理部22的图像信号提供到模糊量检测部28,模糊量检测部28算出每一帧的模糊量。例如,模糊量检测部28能够检测在同一帧中的前后场间像素的变化来作为模糊量。例如,模糊量检测部28可以对在前后场的水平方向上相邻的像素之间的像素值的增减进行调查,将在前后场中增减一致的相邻像素数累积一个画面,根据该累积值来算出模糊量。认为累积值越大图像的模糊越小。此外,模糊量检测部28的模糊量的计算方法并不限于此,例如模糊量检测部28也可以通过像素值的差的累积值来求出模糊量。
模糊量检测部28按每一帧求出的模糊量被提供给模糊量保持部29。模糊量保持部29将每帧的模糊量与各帧相对应地进行存储。
在本实施方式中,定格控制部30根据来自定格指示部31的定格信号来控制各部。例如基于对设置于内窥镜11的定格按钮13进行的操作来将操作信号提供给定格指示部31,而从定格指示部31产生定格信号。
在产生定格信号之前,定格控制部30使图像切换部23选择来自预处理部22的图像信号并提供给循环型NR 24。由此,对循环型NR 24依次提供基于由内窥镜11拍摄到的图像的运动图像信号,循环型NR 24去除运动图像信号的噪声并进行输出。
另一方面,当产生定格信号时,定格控制部30根据由模糊量保持部29保持的各帧的模糊量从图像存储器27读出模糊量小的图像,并控制图像切换部23来将图像提供给循环型NR 24。
例如,定格控制部30在产生定格信号的时刻,从保持在图像存储器27中的各帧的图像(帧图像)中选择模糊量最小的帧(以下称为最小模糊图像)的图像信号并输出到图像切换部23。在这种情况下,定格控制部30可以在考虑图像存储器27中保持的帧数和循环型NR 24在降噪时所使用的帧数,来确定选择最小模糊图像的期间的范围。例如,也可以从保持于图像存储器27的帧图像中的产生定格信号之前的规定期间的帧图像中选择最小模糊量的帧图像。另外,也可以确定选择最小模糊图像的期间的范围,以使作为最小模糊图像而选择的图像的帧与定格指示时的输入帧的时间差在规定的阈值以内。
输出图像存储器25通过依次取入循环型NR 24的输出并进行输出,能够输出运动图像,并且通过不取入循环型NR 24的输出而连续地输出所存储的图像,能够输出静止图像。
在循环型NR 24的降噪处理中,需要基于降噪所用帧数的时间。因此,定格控制部30在降噪处理期间控制输出图像存储器25的写入和读出,从而确定要输出的图像。
接着,参照图3的时序图来说明以这种方式构成的实施方式的动作。图3的(a)表示来自预处理部22的输入图像(运动图像),图3的(b)表示图像切换部23的输出图像,图3的(c)表示循环型NR 24的输出图像,图3的(d)表示输出图像存储器25的输出图像。图3用各框来表示帧图像D,用后缀表示帧号,后缀的序号越小,表示时间越靠前的帧。在图3中,具有相同序号的后缀的帧图像D表示基于相同帧的图像。此外,图3中的’表示通过降噪处理使帧图像发生了变化的情况。
来自内窥镜11的摄像信号提供给预处理部22。预处理部22将摄像信号转换为数字图像信号。来自预处理部22的各帧的图像信号提供给图像切换部23、图像存储器27以及模糊量计算部28。
现在设为输出基于来自内窥镜的运动图像的图像信号的运动图像模式。在这种情况下,定格控制部30控制图像切换部23,将来自预处理部22的运动图像信号提供给循环型NR 24。从预处理部22以帧为单位依次输出图像信号。在图3中,设为不考虑各部的处理延迟。如图3的(a)~(d)所示,在运动图像模式下,经由图像切换部23、循环型NR 24以及输出图像存储器25依次输出预处理部22的输出(图3的(a))。
在本实施方式中,预处理部22的输出提供给图像存储器27,并且还提供给模糊量计算部28。模糊量计算部28根据依次输入的各帧的图像信号算出各帧图像的模糊量。由模糊量计算部28算出的模糊量提供给模糊量保持部29,并与各帧相对应地进行存储。
在此,例如设为通过操作内窥镜11的定格按钮13来显示静止图像。例如设为在图3的定格指示的时刻通过操作定格按钮13而从定格指示部31对定格控制部30提供定格信号。
在图像存储器27中记录有规定帧数的帧图像,定格控制部30根据存储在模糊量保持部29的模糊量从存储在图像存储器27中的帧图像中选择模糊量小的帧图像。例如,定格控制部30从图像存储器27存储的帧图像中的、开头帧到利用循环型NR 24进行降噪处理所需的帧数以后的帧图像中选择模糊量最小的帧图像,来作为最小模糊图像。
例如,在图像存储器27中存储有图3的(a)的帧图像D0之后的帧图像的情况下,当利用循环型NR 24进行降噪处理所需的帧数为4时,从帧图像D4之后的帧图像中选择最小模糊图像。
图3的例子示出了在利用循环型NR 24进行降噪处理所需的帧数为4的情况下,定格控制部30选择帧图像D 10来作为最小模糊图像的例子。
当产生定格指示时,定格控制部30将最小模糊图像及其之前的帧的图像依次读出在循环型NR 24进行降噪处理所需的帧数量。在循环型NR 24的降噪处理所需的期间,定格控制部30使图像切换部23选择来自图像存储器27的图像信号,将最小模糊图像及用于其降噪的帧图像按照帧顺序依次读出,并经由图像切换部23提供给循环型NR 24。
在图3的例子中,从帧图像D7起依次进行读出,并经由图像切换部23将各图像依次提供给循环型NR 24。循环型NR 24对依次输入的帧图像实施循环型降噪处理。循环型NR 24的输出经由输出图像存储器25被输出。这样,如图3的(c)所示,在定格指示之后,从循环型NR 24依次输出帧图像D7及其之后的图像。在从循环型NR 24输出最小模糊图像(图3中的帧图像D10)的时刻,能够充分降低最小模糊图像的噪声。
当通过循环型NR 24的降噪处理输出充分降低噪声后得到的最小模糊图像时,之后将该最小模糊图像保持在输出图像存储器25中,并从输出图像存储器25连续地输出最小模糊图像。这样,将最小模糊图像作为静止图像进行输出(图3的(d))。
来自输出图像存储器25的图像信号在影像信号处理电路26中进行了影像信号处理之后,被提供给观察监视器35并进行显示。在图3的例子中,即使在输入帧图像D12的时刻产生了定格指示的情况下,也选择模糊量小的帧图像D10来作为最小模糊图像,该帧图像D10在通过循环型NR 24进行降噪之后输出。
这样,在本实施方式中能够获得去除了模糊和噪声的高质量的静止图像。
此外,在上述实施方式中对显示去除了模糊和噪声而得到的静止图像的例子进行了说明,但也可以对所获得的静止图像进行记录处理。另外,在图3中,对降噪中使用四个帧图像的例子进行了说明,但是能够适当设定用于降噪的帧数。
作为用于降噪的帧图像,优选使用时间上接近最小模糊图像的帧图像。此外,对于降噪的结果,只要最终输出最小模糊图像即可,可以构成为使用时间上在最小模糊图像之后的帧图像来进行降噪。
(第二实施方式)
图4是用于说明本发明的第二实施方式的时序图。本实施方式的硬件结构与第一实施方式相同,只是本实施方式的定格控制部30的控制与第一实施方式不同。
图4是基于与图3相同的标记方法的时序图,图4的(a)表示来自预处理部22的输入图像(运动图像),图4的(b)表示图像切换部23的输出图像,图4的(c)表示循环型NR 24的输出图像,图4的(d)表示输出图像存储器25的输出图像。
本实施方式仅在利用定格控制部30控制输出图像存储器25上与第一实施方式不同。
在第一实施方式中,不管是否产生了定格指示,输出图像存储器25均依次输出定格指示前的帧图像。即、在定格指示之后也输出运动图像。与此相对地,本实施方式在定格指示之后显示静止图像。
在这种情况下,在使用多个图像的降噪处理中,需要基于降噪处理所用的帧数量的处理时间。因此,在本实施方式中,在产生定格指示时将保持在输出图像存储器25中的帧图像连续地输出,直到通过降噪处理输出最小模糊图像为止。
在图4中示出了在输入帧图像D12时产生了定格指示的情况。在图4中,与图3同样地示出了选择D10作为最小模糊图像,在降噪处理中使用4帧的帧图像的例子。即、在产生定格指示之后,如图4的(b)所示,从图像存储器27读出帧图像D7并提供给循环型NR 24。循环型NR 24进行降噪处理并输出帧图像D7、D8…、D10。输出图像存储器25由定格控制部30控制,在通过循环型NR 24进行最小图像D10的降噪处理结束之前,不存储循环型NR 24的输出,而是连续地输出已经保持的帧图像D12。当从循环型NR 24输出最小模糊图像D10时,之后输出图像存储器25连续地输出最小模糊图像D10。
这样,在本实施方式中也能够获得与第一实施方式相同的效果。另外,在本实施方式中,通过产生定格指示来输出静止图像,能够防止输出不期望的运动图像,从而能够实现没有不适感的操作。
此外,在本实施方式中,对在紧接定格指示之后连续地输出保持在图像存储器25中的最新的帧图像的例子进行了说明,但是也可以连续地输出其它帧图像。例如,在输出图像存储器25具有多个帧的存储容量的情况下,能够将任意的帧图像作为静止图像进行输出,还能够从定格指示之后起输出最小模糊图像,并且按每次降噪处理逐次输出被去除了噪声的最小模糊图像。
(第三实施方式)
图5是表示本发明的第三实施方式的框图。在图5中对与图1相同的构成要素附加相同的标记并省略说明。
本实施方式是适用于对所输入的图像信号以Y/C分离的方式进行处理的信号处理装置的例子。有时对信号处理装置50输入来自同时方式的摄像装置的图像信号。在这种情况下,需要进行将所输出的图像信号分离为亮度信号和颜色信号的Y/C分离处理。本实施方式适用于该情况。
本实施方式的信号处理装置50与图1的信号处理装置21的不同点在于:采用Y/C分离部60和OB钳位部61,并且代替循环型NR 24、输出图像存储器25、影像信号处理电路26、模糊量计算部28以及模糊量保持部29,而采用循环型NR 54、图像存储器55、影像信号处理电路56、模糊量计算部58以及模糊量保持部59。
作为固体摄像元件12例如有时采用使用了拜尔阵列等滤色器的摄像元件。将来自预处理部22的图像信号经由图像切换部23提供给Y/C分离部60,Y/C分离部60将其分离为亮度信号(Y)和颜色信号(C)。
来自Y/C分离部60的亮度信号和颜色信号提供给OB钳位部61。OB钳位部61对亮度信号和颜色信号实施OB钳位处理。来自OB钳位部61的亮度信号和颜色信号提供给循环型NR 54。另外,来自OB钳位部61的亮度信号还提供给模糊量计算部58。
循环型NR 54、图像存储器55以及影像信号处理电路56与循环型NR 24、输出图像存储器25、影像信号处理电路26的结构相同,仅在对亮度信号和颜色信号进行处理这一点存在差异。
在本实施方式中,模糊量计算部58利用来自OB钳位部61的亮度信号算出图像的模糊量。模糊量计算部58的输出提供给模糊量保持部59来保持。模糊量计算部58和模糊量保持部59的其它结构与模糊量计算部28和模糊量保持部29相同。
在以这种方式构成的实施方式中,除了在Y/C分离部60之后的电路中分别处理亮度信号和颜色信号以及模糊量计算部根据来自OB钳位部61的亮度信号算出模糊量这两点以外,其它方面与第一实施方式的作用相同。
在本实施方式中,也进行与图3或者图4相同的动作。即、从在定格指示之前图像存储器27保持的图像中的规定期间的帧图像中选择由模糊量计算部58算出的模糊量最小的图像,来作为最小模糊图像,将包括该最小模糊图像的规定帧数的图像提供给循环型NR 54,来去除最小模糊图像的噪声。
另外,在本实施方式中,图像存储器27保持Y/C分离前的图像信号。由此,能够使用小容量的存储器获得降低了模糊和噪声的静止图像。
此外,在上述各实施方式中,说明了以作为一个画面的帧为单位进行模糊量计算以及降噪的例子,但是也可以是以作为一个画面的场为单位进行这些处理。
本申请主张2010年6月7日在日本申请的特愿2010‑130157号的优先权,以此为基础提出本申请,本申请说明书、权利要求书以及附图引用了上述公开内容。

信号处理装置和静止图像生成方法.pdf_第1页
第1页 / 共15页
信号处理装置和静止图像生成方法.pdf_第2页
第2页 / 共15页
信号处理装置和静止图像生成方法.pdf_第3页
第3页 / 共15页
点击查看更多>>
资源描述

《信号处理装置和静止图像生成方法.pdf》由会员分享,可在线阅读,更多相关《信号处理装置和静止图像生成方法.pdf(15页珍藏版)》请在专利查询网上搜索。

1、(10)申请公布号 CN 102934422 A (43)申请公布日 2013.02.13 CN 102934422 A *CN102934422A* (21)申请号 201180028311.3 (22)申请日 2011.06.06 2010-130157 2010.06.07 JP H04N 5/232(2006.01) A61B 1/04(2006.01) G03B 5/00(2006.01) G06T 5/00(2006.01) H04N 5/225(2006.01) (71)申请人 奥林巴斯医疗株式会社 地址 日本东京都 (72)发明人 铃木达彦 (74)专利代理机构 北京林达刘知识。

2、产权代理事 务所 ( 普通合伙 ) 11277 代理人 刘新宇 (54) 发明名称 信号处理装置和静止图像生成方法 (57) 摘要 信号处理装置具备 : 第一图像存储器, 其存储 多个画面的输入运动图像 ; 模糊量计算部, 其计 算上述输入运动图像的各个画面的模糊量 ; 模糊 量保持部, 其将由上述模糊量计算部计算出的上 述模糊量与上述输入运动图像的各个画面相对应 地保持 ; 图像切换部, 其选择上述输入运动图像 和上述第一图像存储器的输出中的一方的图像并 进行输出 ; 降噪部, 其输出使用来自上述图像切 换部的多个画面的图像去除噪声后得到的图像 ; 第二图像存储器, 其至少存储一个画面的来自。

3、上 述降噪部的图像 ; 以及定格控制部, 在产生定格 指示时, 该定格控制部根据保持在上述模糊量保 持部中的上述模糊量, 从上述第一图像存储器读 出包括模糊量最小的画面的、 为了在上述降噪部 中去除噪声所需的两个画面以上的图像而从上述 图像切换部输出, 并且控制上述第二图像存储器 连续地输出上述模糊量最小的画面的图像。 (30)优先权数据 (85)PCT申请进入国家阶段日 2012.12.07 (86)PCT申请的申请数据 PCT/JP2011/062904 2011.06.06 (87)PCT申请的公布数据 WO2011/155429 JA 2011.12.15 (51)Int.Cl. 权利。

4、要求书 2 页 说明书 7 页 附图 5 页 (19)中华人民共和国国家知识产权局 (12)发明专利申请 权利要求书 2 页 说明书 7 页 附图 5 页 1/2 页 2 1. 一种信号处理装置, 其特征在于, 具备 : 第一图像存储器, 其存储多个画面的输入运动图像 ; 模糊量计算部, 其计算上述输入运动图像的各个画面的模糊量 ; 模糊量保持部, 其将由上述模糊量计算部计算出的上述模糊量与上述输入运动图像的 各个画面相对应地进行保持 ; 图像切换部, 其选择上述输入运动图像和上述第一图像存储器的输出中的一方的图像 进行输出 ; 降噪部, 其输出使用来自上述图像切换部的多个画面的图像去除噪声而。

5、得到的图像 ; 第二图像存储器, 其至少存储一个画面的来自上述降噪部的图像 ; 以及 定格控制部, 当产生定格指示时, 该定格控制部根据保持在上述模糊量保持部中的上 述模糊量, 使得从上述第一图像存储器读出包括模糊量最小的画面的、 为了在上述降噪部 中去除噪声所需的两个画面以上的图像来从上述图像切换部输出, 并且控制上述第二图像 存储器连续地输出上述模糊量最小的画面的图像。 2. 根据权利要求 1 所述的信号处理装置, 其特征在于, 上述定格控制部使得从上述第一图像存储器读出时间上在上述模糊量最小的画面之 前的、 存储在上述第一图像存储器中的画面的图像, 并从上述图像切换部输出。 3. 根据权。

6、利要求 1 所述的信号处理装置, 其特征在于, 上述定格控制部使得从上述第一图像存储器读出时间上在上述模糊量最小的画面之 后的、 存储在上述第一图像存储器中的画面的图像, 并从上述图像切换部输出。 4. 根据权利要求 1 至 3 中的任一项所述的信号处理装置, 其特征在于, 上述定格控制部控制上述第二图像存储器, 使得在上述定格指示后上述降噪部进行噪 声去除处理所需的期间, 使从上述降噪部输出的图像从上述第二图像存储器输出。 5. 根据权利要求 1 至 3 中的任一项所述的信号处理装置, 其特征在于, 上述定格控制部控制上述第二图像存储器, 使得在上述定格指示后上述降噪部进行噪 声去除处理所需。

7、的期间, 使存储在上述第二图像存储器中的同一画面的图像连续地输出。 6. 根据权利要求 1 至 3 中的任一项所述的信号处理装置, 其特征在于, 上述模糊量计算部将在上述输入运动图像的前后画面间沿水平方向相邻的像素之间 的像素值的增减一致的相邻像素的数量按画面进行累积, 并根据累积结果求出模糊量。 7. 一种信号处理装置, 其特征在于, 具备 : 第一图像存储器, 其存储多个画面的输入运动图像 ; 降噪部, 其输出使用多个画面的图像去除噪声后得到的图像 ; 图像切换部, 其选择上述输入运动图像和上述第一图像存储器的输出中的一方的图像 并进行输出 ; Y/C 分离部, 其将来自上述图像切换部的图。

8、像分离成亮度信号和颜色信号, 并将分离得 到的亮度信号和颜色信号提供给上述降噪部 ; 第二图像存储器, 其至少存储一个画面的来自上述降噪部的图像 ; 模糊量计算部, 其根据由上述 Y/C 分离部分离得到的亮度信号来计算上述输入运动图 像的各画面的模糊量 ; 模糊量保持部, 其将由上述模糊量计算部计算出的上述模糊量与上述输入运动图像的 权 利 要 求 书 CN 102934422 A 2 2/2 页 3 各个画面相对应地保持 ; 以及 定格控制部, 在产生定格指示时, 该定格控制部根据保持在上述模糊量保持部中的上 述模糊量, 使得从上述第一图像存储器读出包括模糊量最小的画面的、 为了在上述降噪部。

9、 中去除噪声所需的两个画面以上的图像来从上述图像切换部输出, 并且控制上述第二图像 存储器连续地输出上述模糊量最小的画面的图像。 8. 一种静止图像生成方法, 其特征在于, 具备以下步骤 : 第一图像存储器存储多个画面的输入运动图像 ; 模糊量计算部计算上述输入运动图像的各个画面的模糊量 ; 模糊量保持部将计算出的上述模糊量与上述输入运动图像的各个画面相对应地保 持 ; 图像切换部选择上述输入运动图像和上述第一图像存储器的输出中的一方的图像并 进行输出 ; 降噪部输出使用来自上述图像切换部的多个画面的图像去除噪声后得到的图像 ; 第二图像存储器至少存储一个画面的去除了噪声的图像 ; 以及 在产。

10、生定格指示时, 定格控制部根据上述模糊量, 使得从上述第一图像存储器读出包 括模糊量最小的画面的、 为了在上述降噪部中去除噪声所需的两个画面以上的图像来从上 述图像切换部输出, 并且控制上述第二图像存储器连续地输出上述模糊量最小的画面的图 像。 权 利 要 求 书 CN 102934422 A 3 1/7 页 4 信号处理装置和静止图像生成方法 技术领域 0001 本发明涉及能够生成不模糊的静止图像的信号处理装置和静止图像生成方法。 背景技术 0002 以往, 开发了利用固体摄像元件对被摄体图像进行电子拍摄的各种装置。例如使 用了 CCD( 电荷耦合元件 ) 的摄像装置也能够应用于电子内窥镜装。

11、置等。电子内窥镜能够 在彩色监视器上实时地显示运动图像, 减少操作内窥镜的手术操作者的疲劳, 因此被广泛 应用。 0003 电子内窥镜具有将拍摄被摄体而得到的图像进行存储的图像存储器。 通过使用该 图像存储器不仅能够显示运动图像还能够显示静止图像。 当手术操作者为了观察静止图像 而按下观测器的操作部的定格开关时, 中断向图像存储器的写入, 并在监视器上显示静止 图像。 0004 在进行电子拍摄的摄像元件的输出中包含随机噪声。 由这种随机噪声引起的图像 质量劣化在运动图像中不明显, 但是在静止图像中明显。 因此, 有时采用利用时间轴方向的 相关性来去除噪声的例如循环型的降噪电路 ( 例如, 日本。

12、特开 2007-312832 号公报 )。 0005 另外, 作为利用电子内窥镜装置获取彩色图像的方法, 实际应用了在电子摄像设 备的前表面插入彩色马赛克滤波器的同时方式以及在用于对被摄体进行照明的光源装置 的灯前表面依次插入 R、 G、 B 滤波器, 并使用黑白 CCD 对 R、 G、 B 的光学图像进行拍摄的面顺 序方式。 0006 面顺序方式的内窥镜具有颜色再现性良好、 能够实现摄像元件小型化等优点, 但 是存在以下缺点 : 在为了按照时间序列取入 R、 G、 B 的图像而被摄体与摄像元件的相对位置 关系改变的情况下产生颜色偏差。 0007 特别是在内窥镜图像的静止图像显示中颜色偏差明显。

13、的情况下, 严重妨碍进行准 确诊断。因此, 以往, 在日本特开 2007-252635 号公报中提出了一种获得没有颜色偏差的静 止图像的方法。 0008 然而, 基于与面顺序方式下产生颜色偏差相同的原因, 即使是同时方式的摄像装 置, 由于被摄体与摄像元件的相对位置关系发生变化也会产生模糊。 以往存在以下问题 : 没 有开发一种装置来去除这种模糊, 并且利用时间轴方向的相关性通过去除噪声从而获得将 噪声充分降低的静止图像。 0009 本发明是鉴于上述问题而完成的, 其目的在于提供一种能够通过去除模糊和噪声 来获得高质量的静止图像的信号处理装置和静止图像生成方法。 发明内容 0010 发明要解决。

14、的问题 0011 本发明的一个方式所涉及的信号处理装置具备 : 第一图像存储器, 其存储多个画 面的输入运动图像 ; 模糊量计算部, 其计算上述输入运动图像的各个画面的模糊量 ; 模糊 说 明 书 CN 102934422 A 4 2/7 页 5 量保持部, 其将由上述模糊量计算部计算出的上述模糊量与上述输入运动图像的各个画面 相对应地进行保持 ; 图像切换部, 其选择上述输入运动图像和上述第一图像存储器的输出 中的一方的图像进行输出 ; 降噪部(Noise reduction), 其输出使用来自上述图像切换部的 多个画面的图像去除噪声而得到的图像 ; 第二图像存储器, 其至少存储一个画面的来。

15、自上 述降噪部的图像 ; 以及定格控制部, 当产生定格指示时, 该定格控制部根据保持在上述模糊 量保持部中的上述模糊量, 使得从上述第一图像存储器读出包括模糊量最小的画面的、 为 了在上述降噪部中去除噪声所需的两个画面以上的图像来从上述图像切换部输出, 并且控 制上述第二图像存储器连续地输出上述模糊量最小的画面的图像。 0012 本发明的一个方式所涉及的静止图像生成方法, 具备以下步骤 : 第一图像存储器 存储多个画面的输入运动图像 ; 模糊量计算部计算上述输入运动图像的各个画面的模糊 量 ; 模糊量保持部将计算出的上述模糊量与上述输入运动图像的各个画面相对应地保持 ; 图像切换部选择上述输入。

16、运动图像和上述第一图像存储器的输出中的一方的图像并进行 输出 ; 降噪部输出使用来自上述图像切换部的多个画面的图像去除噪声后得到的图像 ; 第 二图像存储器至少存储一个画面的去除了噪声的图像 ; 以及在产生定格指示时, 定格控制 部根据上述模糊量, 使得从上述第一图像存储器读出包括模糊量最小的画面的、 为了在上 述降噪部中去除噪声所需的两个画面以上的图像来从上述图像切换部输出, 并且控制上述 第二图像存储器连续地输出上述模糊量最小的画面的图像。 附图说明 0013 图 1 是表示本发明的第一实施方式所涉及的信号处理装置的框图。 0014 图 2 是表示图 1 中的循环型 NR 24 的具体结构。

17、的一例的电路图。 0015 图 3 是用于说明第一实施方式的动作的时序图。 0016 图 4 是用于说明本发明的第二实施方式的时序图。 0017 图 5 是表示本发明的第三实施方式的框图。 具体实施方式 0018 下面, 参照附图详细地说明本发明的实施方式。 0019 ( 第一实施方式 ) 0020 图 1 是表示本发明的第一实施方式所涉及的信号处理装置的框图。 0021 对本实施方式适用于内窥镜装置的例子进行说明。 0022 在图1中, 内窥镜11在细长的插入部的前端设置有固体摄像元件12。 作为固体摄 像元件 12 例如采用 CCD 等, 固体摄像元件 12 拍摄被摄体并输出摄像信号。来自。

18、固体摄像 元件 12 的摄像信号提供给构成信号处理装置 21 的预处理部 22。 0023 预处理部 22 将所输入的摄像信号转换为数字的图像信号, 并输出到图像切换部 23、 图像存储器 27 以及模糊量计算部 28。图像存储器 27 具有能够存储规定帧数的图像信 号的容量, 通过后述的定格控制部 30 来控制写入和读出, 并以帧为单位依次存储来自预处 理部 22 的图像信号, 并且将所存储的图像信号以帧为单位输出到图像切换部 23。 0024 图像切换部 23 由定格控制部 30 控制, 在来自预处理部 22 的图像信号和来自图像 存储器 27 的图像信号之间进行切换, 并输入到循环型 N。

19、R( 降噪电路 )24。 说 明 书 CN 102934422 A 5 3/7 页 6 0025 图 2 是表示图 1 中的循环型 NR 24 的具体结构的一例的电路图。 0026 输入到循环型NR 24的以帧为单位的图像信号被提供给乘法器41。 从阈值存储器 45 对乘法器 41 提供乘法系数 (1-k), 乘法器 41 将所输入的图像信号与乘法系数 (1-k) 相 乘之后输出到加法器42。 加法器42的输出在通过帧存储器44延迟一帧之后被提供给乘法 器 43。从阈值存储器 45 对乘法器 43 提供乘法系数 k, 乘法器 43 将所输入的图像信号与乘 法系数 K 相乘之后输出到加法器 42。

20、。 0027 通过加法器 42 对各帧的图像信号依次进行加法处理。在该加法处理中, 对输入侧 的图像信号施加系数 (1-k), 对加法运算后输出的图像信号施加系数 k。当假设系数 k 为 0.5 时, 输入图像信号与作为加法结果的图像信号以 1 : 1 的比例来混合, 图像信号中包含的 随机噪声由于被平均化而得以抑制。通过反复进行该加法处理, 能够逐渐降低随机噪声。 0028 当乘法系数k大于0.5时, 加法器42的输出中相加的比例变高, 降噪效果提高。 在 所输入的图像是静止图像的情况下, 通过将 k 变大, 能够获得充分降低噪声的图像信号。但 是, 在所输入的图像是运动图像的情况下, 帧间。

21、相关性变得比较小, 因此通过将 k 变小来防 止由加法处理导致噪声增加。 0029 阈值存储器 45 根据所输入的图像信号是基于静止图像的信号还是基于运动图像 的信号来改变乘法系数 k。由此, 不管输入图像是静止图像还是运动图像, 都能最佳地去除 噪声。 0030 此外, 在本实施方式中, 对采用循环型 NR 24 的例子进行说明, 但如果是使用多帧 的图像进行降噪的电路, 则也可以采用除循环型以外的降噪电路。 0031 循环型 NR 24 的输出提供给输出图像存储器 25。输出图像存储器 25 例如具有能 够存储一帧的图像信号的容量, 由定格控制部 30 来控制写入和读出, 并存储来自循环型。

22、 NR 24 的图像信号, 并且将所存储的图像信号以帧为单位输出到影像信号处理电路 26。 0032 影像信号处理电路 26 在对所输入的图像信号实施了规定的影像信号处理之后, 将该信号输出到观察监视器 35。影像信号处理电路 26 例如进行白平衡调整、 校正等影 像信号处理。观察监视器 35 将基于所输入的图像信号的图像显示在显示画面上。 0033 在本实施方式中, 设置有对从预处理部 22 输出的图像的模糊量进行检测的模糊 量检测部 28。来自预处理部 22 的图像信号提供到模糊量检测部 28, 模糊量检测部 28 算出 每一帧的模糊量。例如, 模糊量检测部 28 能够检测在同一帧中的前后。

23、场间像素的变化来作 为模糊量。例如, 模糊量检测部 28 可以对在前后场的水平方向上相邻的像素之间的像素值 的增减进行调查, 将在前后场中增减一致的相邻像素数累积一个画面, 根据该累积值来算 出模糊量。认为累积值越大图像的模糊越小。此外, 模糊量检测部 28 的模糊量的计算方法 并不限于此, 例如模糊量检测部 28 也可以通过像素值的差的累积值来求出模糊量。 0034 模糊量检测部 28 按每一帧求出的模糊量被提供给模糊量保持部 29。模糊量保持 部 29 将每帧的模糊量与各帧相对应地进行存储。 0035 在本实施方式中, 定格控制部30根据来自定格指示部31的定格信号来控制各部。 例如基于对。

24、设置于内窥镜 11 的定格按钮 13 进行的操作来将操作信号提供给定格指示部 31, 而从定格指示部 31 产生定格信号。 0036 在产生定格信号之前, 定格控制部 30 使图像切换部 23 选择来自预处理部 22 的图 像信号并提供给循环型 NR 24。由此, 对循环型 NR 24 依次提供基于由内窥镜 11 拍摄到的 说 明 书 CN 102934422 A 6 4/7 页 7 图像的运动图像信号, 循环型 NR 24 去除运动图像信号的噪声并进行输出。 0037 另一方面, 当产生定格信号时, 定格控制部30根据由模糊量保持部29保持的各帧 的模糊量从图像存储器 27 读出模糊量小的图。

25、像, 并控制图像切换部 23 来将图像提供给循 环型 NR 24。 0038 例如, 定格控制部30在产生定格信号的时刻, 从保持在图像存储器27中的各帧的 图像 ( 帧图像 ) 中选择模糊量最小的帧 ( 以下称为最小模糊图像 ) 的图像信号并输出到图 像切换部 23。在这种情况下, 定格控制部 30 可以在考虑图像存储器 27 中保持的帧数和循 环型 NR 24 在降噪时所使用的帧数, 来确定选择最小模糊图像的期间的范围。例如, 也可以 从保持于图像存储器 27 的帧图像中的产生定格信号之前的规定期间的帧图像中选择最小 模糊量的帧图像。 另外, 也可以确定选择最小模糊图像的期间的范围, 以使。

26、作为最小模糊图 像而选择的图像的帧与定格指示时的输入帧的时间差在规定的阈值以内。 0039 输出图像存储器25通过依次取入循环型NR 24的输出并进行输出, 能够输出运动 图像, 并且通过不取入循环型 NR 24 的输出而连续地输出所存储的图像, 能够输出静止图 像。 0040 在循环型 NR 24 的降噪处理中, 需要基于降噪所用帧数的时间。因此, 定格控制部 30 在降噪处理期间控制输出图像存储器 25 的写入和读出, 从而确定要输出的图像。 0041 接着, 参照图 3 的时序图来说明以这种方式构成的实施方式的动作。图 3 的 (a) 表示来自预处理部 22 的输入图像 ( 运动图像 )。

27、, 图 3 的 (b) 表示图像切换部 23 的输出图 像, 图 3 的 (c) 表示循环型 NR 24 的输出图像, 图 3 的 (d) 表示输出图像存储器 25 的输出 图像。图 3 用各框来表示帧图像 D, 用后缀表示帧号, 后缀的序号越小, 表示时间越靠前的 帧。在图 3 中, 具有相同序号的后缀的帧图像 D 表示基于相同帧的图像。此外, 图 3 中的 表示通过降噪处理使帧图像发生了变化的情况。 0042 来自内窥镜11的摄像信号提供给预处理部22。 预处理部22将摄像信号转换为数 字图像信号。来自预处理部 22 的各帧的图像信号提供给图像切换部 23、 图像存储器 27 以 及模糊量。

28、计算部 28。 0043 现在设为输出基于来自内窥镜的运动图像的图像信号的运动图像模式。 在这种情 况下, 定格控制部30控制图像切换部23, 将来自预处理部22的运动图像信号提供给循环型 NR 24。从预处理部 22 以帧为单位依次输出图像信号。在图 3 中, 设为不考虑各部的处理 延迟。如图 3 的 (a)(d) 所示, 在运动图像模式下, 经由图像切换部 23、 循环型 NR 24 以及 输出图像存储器 25 依次输出预处理部 22 的输出 ( 图 3 的 (a)。 0044 在本实施方式中, 预处理部 22 的输出提供给图像存储器 27, 并且还提供给模糊量 计算部 28。模糊量计算部。

29、 28 根据依次输入的各帧的图像信号算出各帧图像的模糊量。由 模糊量计算部 28 算出的模糊量提供给模糊量保持部 29, 并与各帧相对应地进行存储。 0045 在此, 例如设为通过操作内窥镜 11 的定格按钮 13 来显示静止图像。例如设为在 图 3 的定格指示的时刻通过操作定格按钮 13 而从定格指示部 31 对定格控制部 30 提供定 格信号。 0046 在图像存储器 27 中记录有规定帧数的帧图像, 定格控制部 30 根据存储在模糊量 保持部 29 的模糊量从存储在图像存储器 27 中的帧图像中选择模糊量小的帧图像。例如, 定格控制部 30 从图像存储器 27 存储的帧图像中的、 开头帧。

30、到利用循环型 NR 24 进行降噪 说 明 书 CN 102934422 A 7 5/7 页 8 处理所需的帧数以后的帧图像中选择模糊量最小的帧图像, 来作为最小模糊图像。 0047 例如, 在图像存储器 27 中存储有图 3 的 (a) 的帧图像 D0 之后的帧图像的情况下, 当利用循环型 NR 24 进行降噪处理所需的帧数为 4 时, 从帧图像 D4 之后的帧图像中选择最 小模糊图像。 0048 图 3 的例子示出了在利用循环型 NR 24 进行降噪处理所需的帧数为 4 的情况下, 定格控制部 30 选择帧图像 D 10 来作为最小模糊图像的例子。 0049 当产生定格指示时, 定格控制部。

31、 30 将最小模糊图像及其之前的帧的图像依次读 出在循环型 NR 24 进行降噪处理所需的帧数量。在循环型 NR 24 的降噪处理所需的期间, 定格控制部 30 使图像切换部 23 选择来自图像存储器 27 的图像信号, 将最小模糊图像及用 于其降噪的帧图像按照帧顺序依次读出, 并经由图像切换部 23 提供给循环型 NR 24。 0050 在图 3 的例子中, 从帧图像 D7 起依次进行读出, 并经由图像切换部 23 将各图像依 次提供给循环型 NR 24。循环型 NR 24 对依次输入的帧图像实施循环型降噪处理。循环型 NR 24 的输出经由输出图像存储器 25 被输出。这样, 如图 3 的。

32、 (c) 所示, 在定格指示之后, 从循环型 NR 24 依次输出帧图像 D7 及其之后的图像。在从循环型 NR 24 输出最小模糊图 像 ( 图 3 中的帧图像 D10) 的时刻, 能够充分降低最小模糊图像的噪声。 0051 当通过循环型 NR 24 的降噪处理输出充分降低噪声后得到的最小模糊图像时, 之 后将该最小模糊图像保持在输出图像存储器 25 中, 并从输出图像存储器 25 连续地输出最 小模糊图像。这样, 将最小模糊图像作为静止图像进行输出 ( 图 3 的 (d)。 0052 来自输出图像存储器25的图像信号在影像信号处理电路26中进行了影像信号处 理之后, 被提供给观察监视器 3。

33、5 并进行显示。在图 3 的例子中, 即使在输入帧图像 D12 的 时刻产生了定格指示的情况下, 也选择模糊量小的帧图像 D10 来作为最小模糊图像, 该帧 图像 D10 在通过循环型 NR 24 进行降噪之后输出。 0053 这样, 在本实施方式中能够获得去除了模糊和噪声的高质量的静止图像。 0054 此外, 在上述实施方式中对显示去除了模糊和噪声而得到的静止图像的例子进行 了说明, 但也可以对所获得的静止图像进行记录处理。另外, 在图 3 中, 对降噪中使用四个 帧图像的例子进行了说明, 但是能够适当设定用于降噪的帧数。 0055 作为用于降噪的帧图像, 优选使用时间上接近最小模糊图像的帧。

34、图像。 此外, 对于 降噪的结果, 只要最终输出最小模糊图像即可, 可以构成为使用时间上在最小模糊图像之 后的帧图像来进行降噪。 0056 ( 第二实施方式 ) 0057 图 4 是用于说明本发明的第二实施方式的时序图。本实施方式的硬件结构与第一 实施方式相同, 只是本实施方式的定格控制部 30 的控制与第一实施方式不同。 0058 图 4 是基于与图 3 相同的标记方法的时序图, 图 4 的 (a) 表示来自预处理部 22 的 输入图像 ( 运动图像 ), 图 4 的 (b) 表示图像切换部 23 的输出图像, 图 4 的 (c) 表示循环型 NR 24 的输出图像, 图 4 的 (d) 表。

35、示输出图像存储器 25 的输出图像。 0059 本实施方式仅在利用定格控制部30控制输出图像存储器25上与第一实施方式不 同。 0060 在第一实施方式中, 不管是否产生了定格指示, 输出图像存储器 25 均依次输出定 格指示前的帧图像。即、 在定格指示之后也输出运动图像。与此相对地, 本实施方式在定格 说 明 书 CN 102934422 A 8 6/7 页 9 指示之后显示静止图像。 0061 在这种情况下, 在使用多个图像的降噪处理中, 需要基于降噪处理所用的帧数量 的处理时间。因此, 在本实施方式中, 在产生定格指示时将保持在输出图像存储器 25 中的 帧图像连续地输出, 直到通过降噪。

36、处理输出最小模糊图像为止。 0062 在图 4 中示出了在输入帧图像 D12 时产生了定格指示的情况。在图 4 中, 与图 3 同样地示出了选择 D10 作为最小模糊图像, 在降噪处理中使用 4 帧的帧图像的例子。即、 在 产生定格指示之后, 如图4的(b)所示, 从图像存储器27读出帧图像D7并提供给循环型NR 24。循环型 NR 24 进行降噪处理并输出帧图像 D7、 D8、 D10。输出图像存储器 25 由定格 控制部 30 控制, 在通过循环型 NR 24 进行最小图像 D10 的降噪处理结束之前, 不存储循环 型NR 24的输出, 而是连续地输出已经保持的帧图像D12。 当从循环型N。

37、R 24输出最小模糊 图像 D10 时, 之后输出图像存储器 25 连续地输出最小模糊图像 D10。 0063 这样, 在本实施方式中也能够获得与第一实施方式相同的效果。 另外, 在本实施方 式中, 通过产生定格指示来输出静止图像, 能够防止输出不期望的运动图像, 从而能够实现 没有不适感的操作。 0064 此外, 在本实施方式中, 对在紧接定格指示之后连续地输出保持在图像存储器 25 中的最新的帧图像的例子进行了说明, 但是也可以连续地输出其它帧图像。 例如, 在输出图 像存储器 25 具有多个帧的存储容量的情况下, 能够将任意的帧图像作为静止图像进行输 出, 还能够从定格指示之后起输出最小。

38、模糊图像, 并且按每次降噪处理逐次输出被去除了 噪声的最小模糊图像。 0065 ( 第三实施方式 ) 0066 图 5 是表示本发明的第三实施方式的框图。在图 5 中对与图 1 相同的构成要素附 加相同的标记并省略说明。 0067 本实施方式是适用于对所输入的图像信号以 Y/C 分离的方式进行处理的信号处 理装置的例子。有时对信号处理装置 50 输入来自同时方式的摄像装置的图像信号。在这 种情况下, 需要进行将所输出的图像信号分离为亮度信号和颜色信号的 Y/C 分离处理。本 实施方式适用于该情况。 0068 本实施方式的信号处理装置 50 与图 1 的信号处理装置 21 的不同点在于 : 采用。

39、 Y/ C 分离部 60 和 OB 钳位部 61, 并且代替循环型 NR 24、 输出图像存储器 25、 影像信号处理电 路 26、 模糊量计算部 28 以及模糊量保持部 29, 而采用循环型 NR 54、 图像存储器 55、 影像信 号处理电路 56、 模糊量计算部 58 以及模糊量保持部 59。 0069 作为固体摄像元件 12 例如有时采用使用了拜尔阵列等滤色器的摄像元件。将来 自预处理部 22 的图像信号经由图像切换部 23 提供给 Y/C 分离部 60, Y/C 分离部 60 将其分 离为亮度信号 (Y) 和颜色信号 (C)。 0070 来自 Y/C 分离部 60 的亮度信号和颜色信。

40、号提供给 OB 钳位部 61。OB 钳位部 61 对 亮度信号和颜色信号实施 OB 钳位处理。来自 OB 钳位部 61 的亮度信号和颜色信号提供给 循环型 NR 54。另外, 来自 OB 钳位部 61 的亮度信号还提供给模糊量计算部 58。 0071 循环型 NR 54、 图像存储器 55 以及影像信号处理电路 56 与循环型 NR 24、 输出图 像存储器 25、 影像信号处理电路 26 的结构相同, 仅在对亮度信号和颜色信号进行处理这一 点存在差异。 说 明 书 CN 102934422 A 9 7/7 页 10 0072 在本实施方式中, 模糊量计算部 58 利用来自 OB 钳位部 61。

41、 的亮度信号算出图像的 模糊量。模糊量计算部 58 的输出提供给模糊量保持部 59 来保持。模糊量计算部 58 和模 糊量保持部 59 的其它结构与模糊量计算部 28 和模糊量保持部 29 相同。 0073 在以这种方式构成的实施方式中, 除了在Y/C分离部60之后的电路中分别处理亮 度信号和颜色信号以及模糊量计算部根据来自OB钳位部61的亮度信号算出模糊量这两点 以外, 其它方面与第一实施方式的作用相同。 0074 在本实施方式中, 也进行与图 3 或者图 4 相同的动作。即、 从在定格指示之前图像 存储器27保持的图像中的规定期间的帧图像中选择由模糊量计算部58算出的模糊量最小 的图像, 。

42、来作为最小模糊图像, 将包括该最小模糊图像的规定帧数的图像提供给循环型 NR 54, 来去除最小模糊图像的噪声。 0075 另外, 在本实施方式中, 图像存储器 27 保持 Y/C 分离前的图像信号。由此, 能够使 用小容量的存储器获得降低了模糊和噪声的静止图像。 0076 此外, 在上述各实施方式中, 说明了以作为一个画面的帧为单位进行模糊量计算 以及降噪的例子, 但是也可以是以作为一个画面的场为单位进行这些处理。 0077 本申请主张 2010 年 6 月 7 日在日本申请的特愿 2010-130157 号的优先权, 以此为 基础提出本申请, 本申请说明书、 权利要求书以及附图引用了上述公开内容。 说 明 书 CN 102934422 A 10 1/5 页 11 图 1 说 明 书 附 图 CN 102934422 A 11 2/5 页 12 图 2 说 明 书 附 图 CN 102934422 A 12 3/5 页 13 图 3 说 明 书 附 图 CN 102934422 A 13 4/5 页 14 图 4 说 明 书 附 图 CN 102934422 A 14 5/5 页 15 图 5 说 明 书 附 图 CN 102934422 A 15 。

展开阅读全文
相关资源
猜你喜欢
相关搜索

当前位置:首页 > 电学 > 电通信技术


copyright@ 2017-2020 zhuanlichaxun.net网站版权所有
经营许可证编号:粤ICP备2021068784号-1