内窥镜装置.pdf

内窥镜装置具有：照明单元，其在规定时间内进行第1频带的照明光的照明，并且进行2次以上的第1次数的第2频带的照明光的照明；摄像单元，其对由所述照明单元照明的被摄体进行摄像，输出基于所述第1频带的照明光的照明的第1摄像图像和基于所述第2频带的照明光的照明的第2摄像图像；明亮度计算单元，其通过使用了基于所述第1频带的照明光的照明的第1摄像信号和基于所述第1次数中的第1规定次的照明的第2摄像信号的颜色转换矩阵处理，计算第1明亮度，通过使用了基于所述第1频带的照明光的照明的第1摄像信号和基于所述第1次数中的所述第1规定次以外的照明的第2摄像信号的颜色转换矩阵处理，计算第2明亮度；以及合成单元，其在作为所述第2明亮度的基础的所述第1和第2摄像信号乘以基于所述第1明亮度和目标明亮度的差分与所述第2明亮度之比的系数后，与作为所述第1明亮度的基础的所述第1和第2摄像信号进行合成。

权利要求书
1.  一种内窥镜装置，其特征在于，具有：
照明单元，其在规定时间内进行第1频带的照明光的照明，并且进行2次以上的第1次数的第2频带的照明光的照明；
摄像单元，其对由所述照明单元照明的被摄体进行摄像，输出基于所述第1频带的照明光的照明的第1摄像图像和基于所述第2频带的照明光的照明的第2摄像图像；
明亮度计算单元，其通过使用了基于所述第1频带的照明光的照明的第1摄像信号和基于所述第1次数中的第1规定次的照明的第2摄像信号的颜色转换矩阵处理，计算第1明亮度，通过使用了基于所述第1频带的照明光的照明的第1摄像信号和基于所述第1次数中的所述第1规定次以外的照明的第2摄像信号的颜色转换矩阵处理，计算第2明亮度；以及
合成单元，其在作为所述第2明亮度的基础的所述第1摄像信号和所述第2摄像信号乘以基于所述第1明亮度和目标明亮度的差分与所述第2明亮度之比的系数后，与作为所述第1明亮度的基础的所述第1摄像信号和所述第2摄像信号进行合成。

2.  根据权利要求1所述的内窥镜装置，其特征在于，
所述内窥镜装置具有调光控制单元，该调光控制单元根据由所述明亮度计算单元计算出的明亮度对所述照明单元进行调光控制，
所述合成单元根据由所述明亮度计算单元计算出的所述第1明亮度和所述第2明亮度，在第1模式与第2模式之间切换乘以所述第2摄像信号的系数；
所述明亮度计算单元和所述调光控制单元通过以像素为单位或以块为单位对所述摄像单元的输出和阈值进行比较，将所述摄像单元的输出分类为高亮度或低亮度，利用分类结果求出基于所述第1频带的照明光和所述第2频带的照明光的摄像图像的每个画面的明亮度，使用所求出的每个所述画面的明亮度求出所述合成摄像图像的明亮度，其中，所述阈值在所述第1模式与所述第2模式之间变化。

3.  根据权利要求2所述的内窥镜装置，其特征在于，
所述明亮度计算单元和所述调光控制单元按照每个画面输入来自所述摄像单元的所述第1摄像图像和所述第2摄像图像，将画面内分割为多个块，按照分割后的每 个块求出明亮度，根据所求出的每个块的明亮度求出画面内的高亮度检波值和低亮度检波值，通过对所述高亮度检波值和低亮度检波值进行加权相加，求出每个所述画面的明亮度，其中，根据所述分类结果取得所述加权相加中使用的权重。

4.  根据权利要求3所述的内窥镜装置，其特征在于，
所述明亮度计算单元和所述调光控制单元通过设定用于检测高亮度像素的值作为所述阈值，取得与所述高亮度检波值相乘的权重。

5.  根据权利要求3所述的内窥镜装置，其特征在于，
所述第1次数是2次，
所述明亮度计算单元通过使用了所述第1摄像信号和基于所述第1次数中的第1次的照明的第2摄像信号的颜色转换矩阵处理来计算所述第1明亮度，通过使用了所述第1摄像信号和基于所述第1次数中的第2次的照明的第2摄像信号的颜色转换矩阵处理来计算所述第2明亮度。

6.  根据权利要求5所述的内窥镜装置，其特征在于，
所述内窥镜装置具有矩阵处理部，该矩阵处理部进行与显示系统的输入对应的颜色转换处理，该显示系统进行基于所述第1摄像信号和所述第2摄像信号的显示，
在所述矩阵处理部的前级或后级进行所述合成单元的合成，或者与所述矩阵处理部的颜色转换处理同时进行所述合成单元的合成。

7.  根据权利要求6所述的内窥镜装置，其特征在于，
所述第1频带是绿色的频带，所述第2频带是蓝色的频带。

8.  根据权利要求2所述的内窥镜装置，其特征在于，
所述内窥镜装置具有：
颜色平衡调整单元，其进行与所述第1模式对应的第1颜色平衡调整和与所述第2模式对应的第2颜色平衡调整；以及
所述颜色平衡值取得单元，其在取得所述第1颜色平衡调整中使用的第1颜色平衡调整值时，根据所述第1模式时的所述系数对所述照明单元的所述第1频带的照明光的光量和所述第2频带的照明光的光量进行调整，在取得所述第2颜色平衡调整中使用的第2颜色平衡调整值时，根据所述第2模式时的所述系数对所述照明单元的所述第1频带的照明光的光量和所述第2频带的照明光的光量进行调整。

9.  根据权利要求1所述的内窥镜装置，其特征在于，
所述内窥镜装置具有调光控制单元，该调光控制单元根据由所述明亮度计算单元计算出的明亮度对所述照明单元进行调光控制，
所述明亮度计算单元和所述调光控制单元通过以像素为单位或以块为单位对所述摄像单元的输出和阈值进行比较，将所述摄像单元的输出分类为高亮度或低亮度，利用分类结果求出基于所述第1频带的照明光和所述第2频带的照明光的摄像图像的每个画面的明亮度，使用所求出的每个所述画面的明亮度求出所述合成摄像图像的明亮度，其中，所述阈值根据用于进行所述合成的系数而变化。

10.  根据权利要求1所述的内窥镜装置，其特征在于，
所述内窥镜装置具有：
调光控制单元，其根据由所述明亮度计算单元计算出的明亮度对所述照明单元进行调光控制；以及
AGC电路，其根据所述摄像单元的输出对所述第1摄像图像和所述第2摄像图像赋予增益，
所述明亮度计算单元和所述调光控制单元通过以像素为单位或以块为单位对所述摄像单元的输出和阈值进行比较，将所述摄像单元的输出分类为高亮度或低亮度，利用分类结果求出基于所述第1频带的照明光和所述第2频带的照明光的摄像图像的每个画面的明亮度，使用所求出的每个所述画面的明亮度求出所述合成摄像图像的明亮度，其中，所述阈值根据所述AGC电路的增益而变化。

说明书内窥镜装置
技术领域
本发明涉及适于窄带光观察的内窥镜装置。
背景技术
由于医疗用内窥镜的观察对象部位为活体内部，所以，需要对体内进行照明的光源装置。光源装置产生的照明光经由贯穿插入内窥镜的插入部的光导而从摄像部所处的前端部照射到观察对象组织。
作为内窥镜的观察，广泛进行使用可视光的通常光观察（白色光观察：White Light Imaging：WLI）。在面顺次式的内窥镜装置中，通过使白色光的光源透射过旋转滤镜，依次对体腔内的组织照射R、G、B这3种颜色的照明光。然后，以时间分割的方式取得与R、G、B这3种颜色的照明光对应的反射光图像，根据各反射光图像生成用于进行通常光观察的彩色图像。
并且，以往还进行利用了照射光的波长特性的各种特殊光观察。例如，在WO2010/131620号公报（以下为文献1）中，公开了用于进行窄带光观察（Narrow Band Imaging：NBI）作为特殊光观察的面顺次方式的摄像装置。在窄带光观察中，为了以高对比度观察血管，着眼于兼有被血液强力吸收且在粘膜表层强力反射/散射的特性的光的利用，通过依次对活体组织照射蓝色窄带光和绿色窄带光，对粘膜表层的毛细血管和深部的粗血管的对比度进行强调显示。
在文献1的发明中，构成为能够依次照射绿色的窄带光G和蓝色的2个窄带光B1、B2。在文献1的摄像装置中，使用根据与窄带光G、B1、B2对应的反射光图像（窄带图像）生成的窄带光观察图像进行窄带光观察。
但是，在文献1的发明中，根据摄像图像的平均明亮度来决定合成比率。摄像图像的平均明亮度不一定与人感觉到的明亮度相同，在文献1的发明中，存在无法结合手术医生的感觉来进行调光控制的问题。并且，窄带光B1、B2在时间上错开照射到活体组织。因此，当对基于窄带光B1、B2的图像进行合成时，存在在合成图像中产 生模糊的问题。
本发明的目的在于，提供能够抑制画质劣化、并且能够进行与手术医生的感觉对应的调光控制的内窥镜装置。
发明内容
用于解决课题的手段
本发明的一个方式的内窥镜装置具有：照明单元，其在规定时间内进行第1频带的照明光的照明，并且进行2次以上的第1次数的第2频带的照明光的照明；摄像单元，其对由所述照明单元照明的被摄体进行摄像，输出基于所述第1频带的照明光的照明的第1摄像图像和基于所述第2频带的照明光的照明的第2摄像图像；明亮度计算单元，其通过使用了基于所述第1频带的照明光的照明的第1摄像信号和基于所述第1次数中的第1规定次的照明的第2摄像信号的颜色转换矩阵处理，计算第1明亮度，通过使用了基于所述第1频带的照明光的照明的第1摄像信号和基于所述第1次数中的所述第1规定次以外的照明的第2摄像信号的颜色转换矩阵处理，计算第2明亮度；以及合成单元，其在作为所述第2明亮度的基础的所述第1和第2摄像信号乘以基于所述第1明亮度和目标明亮度的差分与所述第2明亮度之比的系数后，与作为所述第1明亮度的基础的所述第1和第2摄像信号进行合成。
附图说明
图1是示出本发明的一个实施方式的内窥镜装置的框图。
图2是示出旋转滤镜33的一例的说明图。
图3是示出明亮度计算处理部44的具体结构的框图。
图4是示出本发明的第2实施方式的框图。
图5是示出本发明的第1实施方式的内窥镜装置的框图。
图6是用于说明图1中的明亮度计算处理部44中的基于各照明光的摄像图像的明亮度检测处理的说明图。
图7是用于说明图1中的明亮度计算处理部44中的基于各照明光的摄像图像的明亮度检测处理的说明图。
图8是用于说明根据模式而变化的权重的曲线图。
图9是用于说明根据模式而变化的权重的曲线图。
图10是示出本发明的第2实施方式的框图。
图11是示出进行白平衡调整的一般电路的框图。
图12是示出从隔行转换为逐行的状况的时序图。
图13是用于说明中间值滤镜的作用的说明图。
具体实施方式
下面，参照附图对本发明的实施方式进行详细说明。
（第1实施方式）
图1是示出本发明的第1实施方式的内窥镜装置的框图。
如图1所示，内窥镜装置1具有用于对作为被检体的活体的内部进行观察的内窥镜2、为了进行活体内部的观察而照射窄带的照明光的光源装置3、对在窄带的照明光下进行摄像而得到的摄像信号进行信号处理的图像处理装置4。由图像处理装置4生成的窄带图像被供给到监视器5。作为监视器5，可以采用通常的彩色监视器。即，监视器5具有RGB输入端子（省略图示），对RGB输入端子供给R图像、G图像和B图像的信号来进行彩色显示。
内窥镜2具备具有能够插入体腔内的程度的外径的挠性的插入部21，在插入部21的内部贯穿插入有用于引导从光源装置3照射的光的由石英纤维等构成的光纤26。光纤26的一端与连接器27连接，该连接器27以装卸自如的方式与光源装置3连接。光纤26的另一端配置在设于插入部21的前端的前端部22上的照明透镜23的附近。另外，连接器27与光源装置3连接，并且还与后述图像处理装置4连接。
来自光源装置3的照明光由光纤26引导到插入部21的前端部22，通过照明透镜23扩散对被检体进行照射。并且，在前端部22中设有用于根据来自被检体的返回光形成被检体的光学像的物镜24、以及配置在其成像位置的作为摄像元件的CCD（电荷耦合元件）25。构成摄像单元的CCD25由设于图像处理装置4中的未图示的CCD驱动电路驱动（省略图示），对被检体进行摄像，将摄像得到的被检体的光学像转换为视频信号，输出到图像处理装置4。
光源装置3具有由氙气灯等构成的光源31。光源31发出接近白色光的波段的光。在光源31的照射光路上配设有窄带滤镜32、旋转滤镜33和光圈34。
窄带滤镜32使从光源31发出的光的频带成为窄带而射出到旋转滤镜33。旋转滤镜33将穿过窄带滤镜32的光的波段限制为窄带光观察所需要的波段。光圈34通过对穿过旋转滤镜33的光的光量进行限制，对光量进行调整。光圈34通过后述调光控制部49控制光圈量。
图2是示出旋转滤镜33的一例的说明图。
旋转滤镜33为圆板形状，在周方向上以相等的角度设置有3个开口，在3个开口中分别安装有滤镜33G、33B1、33B2。滤镜33G将绿色（G）的波段作为透射波段，滤镜33B1、33B2将蓝色（B）的波段作为透射波段。
通过窄带滤镜32和旋转滤镜33，从滤镜33G透射例如以540nm为中心的530-550nm的窄带的G照明光，从滤镜33B1透射例如以415nm为中心的400-430nm的窄带的B照明光（以下称为B1照明光），与滤镜33B1同样，从滤镜33B2透射例如以415nm为中心的400-430nm的窄带的B照明光（以下称为B2照明光）。这样，透射过滤镜33B1、33B2的窄带的B1照明光、B2照明光为相同波段。
该旋转滤镜33的中心安装在未图示的旋转用马达的旋转轴上，被旋转驱动。在旋转用马达的旋转轴等上安装有未图示的编码器，能够通过编码器来检测旋转用马达的旋转、即旋转滤镜33的旋转。后述图像处理装置4对旋转用马达的旋转进行控制，使得旋转滤镜33的旋转速度恒定（省略图示）。
这样，在本实施方式中，使用来自光源装置3的窄带的照明光对被检体进行摄像。因此，与利用通常广泛使用的宽带的照明光的情况相比，照明光量容易不足。特别是在光纤26的光学传送特性方面，存在短波长B侧的传送损失进一步增大的倾向，从前端部22的照明透镜23作为照明光射出的情况下的B照明光的射出光量容易变小。
因此，在本实施方式中，在旋转滤镜33的周方向上配置2个相同透射特性的滤镜33B1、33B2，使用这2个滤镜33B1、33B2，每当旋转滤镜33旋转一次时，对作为观察对象的被检体的相同部位照射2次B照明光，通过其返回光进行基于B照明光的2次的摄像。例如，在1.5帧期间内使旋转滤镜33旋转一次，进行2次基于B照明光的摄像。然后，通过对2次的摄像进行合成，提高基于B照明光的摄像图像（B摄像图像）的明亮度。
另外，说明了在1.5帧期间内进行1次基于G照明光的摄像、进行2次基于B照明光的摄像的例子，但是，进行基于各颜色的窄带光的摄像的周期和次数能够适当 设定。
但是，基于窄带的B1照明光的返回光的B1摄像图像和基于B2照明光的返回光的B2摄像图像是在时间上错开的图像，通过对这些图像进行合成，画质可能劣化。因此，在本实施方式中，在仅通过窄带的B1照明光、B2照明光中的一个光得到充分明亮度的摄像图像的情况下，不进行合成。并且，在仅通过窄带的B1照明光、B2照明光中的一个光无法得到充分明亮度的摄像图像的情况下，根据明亮度对基于另一个B照明光的摄像图像进行合成，由此能够抑制画质劣化并得到充分明亮度的摄像图像。
该情况下，在本实施方式中，图像处理装置4通过颜色转换矩阵处理求出摄像图像的明亮度，由此，进行与手术医生的感觉对应的明亮度控制。
图像处理装置4具有模拟处理部41。模拟处理部41对来自内窥镜2的视频信号实施放大处理等规定模拟信号处理，并输出到A/D转换器42。A/D转换器42将模拟处理部41的输出转换为数字信号后，输出到数字处理部43。
内窥镜2的CCD25输出基于G照明光的返回光的G摄像图像作为G信号，输出基于B1照明光的返回光的B1摄像图像作为B1信号，输出基于B2照明光的返回光的B2摄像图像作为B2信号。来自内窥镜2的视频信号包含这些G信号、B1信号和B2信号。同时化控制部40将这些G信号、B1信号和B2信号存储在用于存储R图像、G图像和B图像的同时化存储器40a中。另外，在同时化存储器40a中，例如分别存储有30帧的G信号、B1信号和B2信号。而且，以颜色偏差最小的方式从同时化存储器40a中读出G、B1、B2的信号。
在记录于同时化存储器40a中之前，明亮度计算处理部44根据G信号、B1信号和B2信号，每0.5帧依次计算摄像图像的明亮度。在本实施方式中，为了以在监视器5中实际显示的情况下的明亮度来评价摄像图像的明亮度，实施与在监视器5中显示时进行的矩阵处理相同的矩阵处理，求出明亮度。进而，在本实施方式中，将基于G照明光和B1照明光的照明作为摄像必须使用的主照明，将基于G照明光和B2照明光的照明作为在图像的明亮度较暗的情况下辅助使用的辅照明。为了求出基于主照明的摄像图像的明亮度，明亮度计算处理部44根据G信号和B1信号，利用矩阵处理部52的矩阵处理，求出基于主照明的亮度Y1。并且，为了求出基于辅照明的摄像图像的明亮度，明亮度计算处理部44根据G信号和B2信号，利用矩阵处理部52的 矩阵处理，求出基于辅照明的亮度Y2。
图3是示出明亮度计算处理部44的具体结构的框图。平均值计算部50计算与R图像、G图像、B像素相当的信号的平均值即/B1信号、/G信号、/B2信号。R图像明亮度计算部51R、G图像明亮度计算部51G、B图像明亮度计算部51B通过/B1信号、/G信号、/B2信号，分别求出明亮度。另外，在本实施方式中，使用B1信号作为R图像的信号，使用G信号作为G图像的信号，使用B2信号作为B图像的信号。明亮度计算部51R、51G、51B保持/B1信号、/G信号、/B2信号后，作为Rf、Gf、Bf输出到矩阵处理部52。
矩阵处理部52通过下述（1）式的矩阵运算，进行所输入的R、G、B图像的信号的颜色转换。该情况下，矩阵处理部52通过下述（1）式的矩阵运算，分别对主照明和辅照明进行矩阵处理。另外，（1）式的α、β、γ是矩阵系数。从矩阵处理部52向亮度计算部53供给通过针对主照明的矩阵处理或针对辅照明的矩阵处理而得到的输出Rm、Gm、Bm。另外，在本实施方式中，向亮度计算部53供给G信号作为输出Rm，向亮度计算部53供给B信号作为输出Gm，向亮度计算部53供给B信号作为输出Bm。
RmGmBm=0α000β00γRfGfBf...(1)]]>
亮度计算部53通过针对所输入的信号Rm（G信号）、信号Gm（B信号）和信号Bm（B信号）的运算来求出亮度。即，亮度计算部53例如通过下述（2）式的运算而得到基于主照明的亮度Y1。
Y1=0.3Rm+0.59Gm+0.11Bm
=0.3（α·/G）+0.59（β·/B1）+0.11（γ·/B1）…（2）
并且，亮度计算部53将输入到亮度计算部53的B2信号的电平设为B2，例如通过下述（3）式的运算而得到基于辅照明的亮度Y2。
Y2=0.3Rm+0.59Gm+0.11Bm
=0.3（α·/G）+0.59（β·/B2）+0.11（γ·/B2）…（3）
这里，上述（2）式和（3）式的G是G=Rm=αGf。α与后述（6）式的α相同。根据后述（5）式，Gt=（1+a）G，在a=1时，Gt=2G。因此，α考虑1/2是很重要的。
明亮度计算处理部44将所求出的亮度Y1、Y2和ΔY1作为明亮度的信息，输出 到调光控制部49。调光控制部49求出作为目标的明亮度（亮度）Ys与亮度Y1之差（Ys-Y1）=ΔY1。在ΔY1≦0的情况下，由于仅通过主照明就能够得到作为目标的明亮度，所以，调光控制部49将基于辅照明的摄像图像的合成比率（系数）a设为0。并且，在ΔY1>0的情况下，调光控制部49通过下述（4）式求出合成比率a。调光控制部49将所求出的合成比率a输出到合成处理部45。
ΔY1=Y2×a a=ΔY1/Y2     …（4）
在窄带光观察中，使用基于窄带的G照明光和B照明光的各返回光的摄像图像。后述矩阵处理部46根据使用了窄带光的摄像而得到的G摄像图像和B摄像图像，通过矩阵处理（颜色转换矩阵处理）生成RGB图像的信号成分。
明亮度计算处理部44的矩阵处理部52中的矩阵处理是与矩阵处理部46中的矩阵处理相同的处理。即，明亮度计算处理部44的矩阵运算用于得到与监视器5的R、G、B输入对应的信号，由明亮度计算处理部44得到的亮度对应于监视器上显示的图像的亮度，对应于手术医生观察监视器5的情况下感觉到的图像的明亮度。
另外，显而易见，能够根据监视器5中显示的窄带光观察图像所希望的色调，来变更明亮度计算处理部44中的上述（2）式和（3）式的系数。
并且，调光控制部49根据所输入的明亮度的信息对光圈34进行控制，以得到作为目标的明亮度。例如，在摄像图像的明亮度为目标值以上的情况下，调光控制部49输出用于缩小光圈34的开口量的调光信号，在摄像图像的明亮度小于目标值的情况下，调光控制部49输出用于打开光圈34的调光信号。
在本实施方式中，合成处理部45根据合成比率a对基于主照明的摄像图像和基于辅照明的摄像图像进行合成。即，在合成比率a为0的情况下，合成处理部45从数字处理部43向矩阵处理部46输出基于主照明的摄像图像、即仅使用了G信号和B1信号的信号。并且，在合成比率a不是0的情况下，合成处理部45将基于辅照明的摄像图像、即通过G信号和B2信号以及合成比率a得到的信号与基于主照明的摄像图像的信号进行合成。
并且，例如，通过使G照明光的明亮度远远大于B照明光，在合成比率a成为1时，不会以电气方式进行多余的相乘，抑制了噪声的增加。下述（5）式表示基于a的合成信号。另外，（5）式的Rin、Gin、Bin分别表示R图像、G图像、B图像的输入，在本实施方式的窄带光观察中，分别为B2、G、B1。并且，（5）式的Rt、 Gt、Bt表示合成信号的R图像、G图像、B图像的输出。另外，在（5）式中，R图像的输出为B2，但是，通过后述矩阵处理而供给到监视器5的R图像的输出大致为0。
RtGtBt=10001+a0a01RinGinBin=10001+a0a01B2GB1=B2(1+a)Ga·B2+B1...(5)]]>
合成处理部45例如通过（5）式的运算来求出合成信号，将所求出的合成信号输出到矩阵处理部46。矩阵处理部46通过矩阵处理得到与监视器5的RGB输入对应的信号。下述（6）式表示矩阵处理部46的矩阵处理的一例。另外，（6）式的α、β、γ是矩阵系数，Rout、Gout、Bout表示矩阵处理后的R图像、G图像、B图像的输出。
α、β、γ能够根据窄带光观察所希望的色调来变更。例如，在0.7～1.5的范围内求出α、β、γ，并从多个候选中进行选择，使得它们不会过大或过小。当超过该范围时，噪声增加，容易饱和。在该条件下，仅α考虑上述（5）式的（1+a），决定在0.35～0.75的范围内。当然，由于具有该考虑，所以，虽然没有噪声增加或饱和增加，但是，需要以不丢失动态范围的方式扩张位宽。
RoutGoutBout=0α000β00γRtGtBt...(6)]]>
在上述（6）式中，对Rt乘以0。因此，在上述（5）式中示出Rt=B2，但是，也可以是Rt=0。
D/A转换器47将矩阵处理部46的输出转换为模拟信号并输出到监视器5。即，（6）式的Rout、Gout、Bout作为RGB输入而提供给监视器5。监视器5根据所输入的RGB输入对摄像图像进行彩色显示。这样，能够在监视器5的显示画面上进行窄带光观察。
接着，对这样构成的实施方式的动作进行说明。
手术医生在使用内窥镜装置1时，如图1所示，使内窥镜2的连接器27与光源装置3和图像处理装置4连接。由此，得到图1所示的连接状态。手术医生操作未图示的电源开关，使光源装置3、图像处理装置4、监视器5分别成为动作状态，进行 窄带光观察用的操作。
从光源31照射的光通过窄带滤镜32和旋转滤镜33被转换为窄带的G照明光、B1照明光和B2照明光，通过光圈34调整明亮度后，供给到内窥镜2。各照明光经由光纤26，例如在1/20秒的周期内依次且大致连续地从照明透镜23照射到被检体侧。
在对被检体的同一部位照射G照明光、B1照明光和B2照明光的各个定时，CCD25对基于来自该部位的返回光的光学像进行摄像。通过CCD25的光电转换，得到与G照明光、B1照明光和B2照明光的各个返回光对应的G信号、B1信号和B2信号。包含G信号、B1信号和B2信号的视频信号从内窥镜2提供给图像处理装置4。
另外，B1信号、B2信号是使用相同波段的照明光以相同露光量进行摄像而得到的信号，除了在1帧内具有较短的定时偏差以外，以大致相同的条件得到B1信号、B2信号。
输入到图像处理装置4的视频信号通过模拟处理部41实施了规定模拟处理后，通过A/D转换器42转换为数字信号。来自A/D转换器42的数字视频信号在数字处理部43中被分离为G信号、B1信号和B2信号，并存储在同时化存储器40a中。
明亮度计算处理部44被提供从同时化存储器40a读出的G信号、B1信号和B2信号，利用矩阵处理部52的矩阵处理计算基于主照明的亮度Y1和基于辅照明的亮度Y2。接着，调光控制部49求出目标亮度Ys与亮度Y1的差分ΔY1，求出合成比率a。如上所述，利用矩阵处理计算亮度Y1、Y2，示出与监视器5中显示的情况下的明亮度相同的明亮度。
合成比率a被供给到合成处理部45，合成处理部45在基于主照明的摄像图像中，以基于合成比率a的比例合成基于辅照明的摄像图像。例如，合成处理部45使用上述（5）式得到合成信号。在（5）式中，在合成比率a为0、即亮度Y1为目标亮度Ys以上的情况下，不进行基于辅照明的摄像图像的合成。因此，该情况下，在基于合成信号的合成图像中不会产生模糊，不会产生画质劣化。并且，在对基于辅照明的摄像图像进行合成的情况下，以与合成比率a对应的比例进行合成，进行得到必要明亮度所需要的最低限度的合成，能够抑制合成图像的画质的劣化。
来自合成处理部45的合成信号被提供给矩阵处理部46进行矩阵处理，得到显示系统中的R图像、G图像和B图像的信号。矩阵处理部46的输出通过D/A转换器47返回模拟信号后，被供给到监视器5。这样，在监视器5的显示画面上，显示充分 明亮度且抑制了画质劣化的窄带光观察图像。
这样，根据本实施方式，在1帧期间等规定期间内，通过对作为观察对象的同一部位照射多次相同的窄带照明光并进行合成，提高窄带光观察中的图像的明亮度。该情况下，通过利用矩阵处理求出图像的明亮度，能够进行与监视器中实际显示的图像的明亮度对应的明亮度检测，能够进行手术医生希望的明亮度的观察。并且，使用与检测到的图像的明亮度对应的合成比率对基于相同的窄带照明光的摄像图像的合成进行控制，进行用于得到所设定的明亮度的最低限度的合成处理，能够抑制画质的劣化。
另外，在上述实施方式中，说明了由合成处理部45进行合成处理并由矩阵处理部46进行矩阵处理的例子，但是，也可以通过1次的矩阵处理而集中进行合成处理和矩阵处理。并且，还可以在矩阵处理后进行合成处理。
（第2实施方式）
图4是示出本发明的第2实施方式的框图。在图4中，对与图1相同的结构要素标注相同标号并省略说明。
在第1实施方式中，说明了采用窄带观察用的旋转滤镜33的例子，但是，本发明不仅能够应用于窄带观察，还能够应用于荧光观察等特殊光观察。本实施方式根据各种观察模式和用于实现这些观察模式的光源装置的结构等对合成比率a进行控制。要想根据光源装置的结构，需要考虑通过与光源装置之间的通信来进行判断。
本实施方式的内窥镜装置100与第1实施方式的不同之处在于，代替图像处理装置4而采用具有控制部105的图像处理装置104，并且，代替光源装置3而采用具有光源控制部106和旋转滤镜113的光源装置103。
作为旋转滤镜113，不仅能够采用第1实施方式的旋转滤镜33，还能够采用荧光观察等特殊观察用的旋转滤镜。例如，作为旋转滤镜113，能够采用设有1个或2个激励光用的滤镜的旋转滤镜，并且，能够采用设有1个或2个窄带观察用的滤镜的旋转滤镜。
光源控制部106保持与光源装置103有关的各种信息、例如与旋转滤镜113的结构有关的信息，并且，与控制部105之间收发所保持的信息。并且，光源控制部106由控制部105控制，进行光源31的点亮控制和旋转滤镜113的旋转控制。例如，在采用设有2个窄带观察用滤镜或激励光用滤镜的旋转滤镜作为旋转滤镜113的情况 下，光源控制部106进行与第1实施方式相同的控制，在采用仅设有1个窄带观察用滤镜或激励光用滤镜的旋转滤镜作为旋转滤镜113的情况下，光源控制部106对光源31和旋转滤镜113进行控制，使得在取入2个通道的摄像信号的定时射出这些滤镜的透射光。
控制部105根据与光源装置103有关的各种信息和与通过操作者的操作而指定的观察模式有关的信息，对合成处理部45和调光控制部49进行控制。并且，控制部105根据观察模式对光源控制部106进行控制。
接着，对这样构成的实施方式的作用进行说明。
例如，在采用第1实施方式的旋转滤镜33作为旋转滤镜113的情况下，控制部105对各部进行控制，以进行与第1实施方式相同的动作。另外，在合成比率a为0≦a<1的情况下，控制部105也可以对调光控制部49进行控制，使得调光控制部49根据亮度Y1与目标亮度Ys的比较进行调光控制。
并且，在采用用于照射荧光观察用的激励光的滤镜作为旋转滤镜113的情况下，控制部105根据来自光源控制部106的信息，根据旋转滤镜113的结构对各部进行控制。例如，在旋转滤镜113具有2个激励光用的滤镜的情况下，与明亮度计算处理部44的输出无关，控制部105将合成处理部45的合成比率a设为1。并且，该情况下，控制部105也可以对调光控制部49进行控制，使得调光控制部49根据亮度（Y1+Y2）与目标亮度Ys的比较进行调光控制。
并且，例如，在采用仅设有1个激励光用滤镜的滤镜作为旋转滤镜113的情况下，考虑到无法得到充分的明亮度，控制部105对图像处理装置104的各部进行控制，使荧光观察模式的动作停止。该情况下，控制部105也可以在监视器5上显示表示禁止所指定的观察模式下的动作的消息。
并且，例如，在采用仅设有1个窄带观察用滤镜的滤镜作为旋转滤镜113的情况下，控制部105将合成比率a设为0。同样，在采用仅设有1个特殊光观察用滤镜的滤镜作为旋转滤镜113的情况下，控制部105将合成比率a设为0。
另外，控制部105也可以根据操作者的设定来设定合成比率和调光控制。
这样，在本实施方式中，根据光源装置的种类、观察模式等对合成比率进行控制，不仅能够得到与第1实施方式相同的效果，还能够进行与光源装置和观察模式对应的最佳的明亮度控制。
（第3实施方式）
图5是示出本发明的第1实施方式的内窥镜装置的框图。在图5中，对与图1相同的结构要素标注相同标号并省略说明。
本实施方式与第1实施方式的不同之处在于，代替明亮度计算处理部44而采用明亮度计算处理部244。明亮度计算处理部244与明亮度计算处理部44同样，将所求出的明亮度输出到调光控制部49。在本实施方式中，调光控制部49也求出由明亮度计算处理部244得到的亮度Y1与作为目标的明亮度（亮度）Ys之差（Ys-Y1）=ΔY1。在ΔY1≦0的情况下，由于仅通过主照明就能够得到作为目标的明亮度，所以，调光控制部49将基于辅照明的摄像图像的合成比率（系数）a设为0。并且，在ΔY1>0的情况下，调光控制部49决定规定合成比率a（0<a≦1）。调光控制部49将合成比率a输出到合成处理部45。
例如，也可以在合成比率a为0≦a<1的情况下，调光控制部49根据亮度Y1与目标亮度Ys的比较进行调光控制，在合成比率a为1的情况下，调光控制部49根据亮度Y1+Y2与目标亮度Ys的比较进行调光控制。
在本实施方式中，合成处理部45也根据合成比率a对基于主照明的摄像图像和基于辅照明的摄像图像进行合成，并输出合成摄像图像（合成信号）。即，合成处理部45将基于辅照明的摄像图像、即通过G信号和B2信号以及合成比率a得到的信号与基于主照明的摄像图像的信号进行合成。另外，在合成比率a为0的情况下，合成处理部45从数字处理部43向矩阵处理部46输出基于主照明的摄像图像、即仅使用了G信号和B1信号的信号。
本实施方式的内窥镜装置1具有合成比率a例如为0的第1模式、合成比率a例如为1的第2模式、在基于辅照明的摄像图像中乘以合成比率a（0<a<1）并与基于主照明的摄像图像进行合成的第3模式。另外，说明了在第1、第2模式中合成比率a为0或1的情况，但是，在第1、第2模式中，也可以将合成比率a设定为0或1以外的值。并且，说明了具有第1模式～第3模式这3个模式的例子，但是，作为合成比率a，也可以设定3种以上的固定的合成比率，以4个以上的模式进行动作。
但是，考虑如下情况：第1模式中的合成比率a为0，第2模式中的合成比率a为1，调光控制部49对光圈量的控制在第1模式和第2模式中显著不同。即，该情况下，在第1模式和第2模式中，射出光量显著不同，CCD25的输出电平显著不同。 因此，在明亮度计算处理部244中，在第1模式和第2模式中，在基于各照明光的摄像图像的明亮度检测处理相同的情况下，认为得到不与实际的明亮度对应的检测结果。
并且，调光控制部49根据摄像图像的明亮度进行调光控制，与此相对，监视器5中显示的观察图像的明亮度基于合成信号。因此，在判定为在调光控制用的明亮度检测中不会产生光晕的情况下，也可能在监视器5上的观察图像中产生光晕。并且，根据与明亮度计算处理部244的明亮度计算无关地进行动作的AGC电路48的增益量，也可能产生同样的问题。
因此，在本实施方式中，使基于各照明光的摄像图像的明亮度检测处理中使用的阈值在第1模式与第2模式之间变化，使得在CCD25的输出电平显著不同的情况下，也能够可靠地进行明亮度检测。
并且，在本实施方式中，使基于各照明光的摄像图像的明亮度检测处理中使用的阈值根据合成比率a、AGC电路48的增益的值而变化，使得与合成比率a的大小无关、或与AGC电路48的增益的大小无关，能够可靠地进行与显示对应的明亮度检测。
图6和图7是用于说明图5中的明亮度计算处理部244中的基于各照明光的摄像图像的明亮度检测处理的说明图。明亮度计算处理部244例如将1个画面分割为规定像素数的块，求出画面的明亮度。另外，明亮度计算处理部244按照基于各照明光的每个摄像信号求出画面的明亮度。
图6示出通过明亮度计算处理部244将有效像素区域251分割为10×10的块252。在各块252中，在水平和垂直方向上包含有规定像素数的像素。明亮度计算处理部244按照各块求出明亮度。例如，明亮度计算处理部244将各块中包含的像素的像素值的平均设为各块的明亮度（块明亮度）。现在，将1个画面中包含的100个块设为块B1～B100，将各块B1～B100的明亮度设为Bs1～Bs100。
图7（a）示出按照块顺序排列由明亮度计算处理部244检测到的各块B1～B100的明亮度Bs1～Bs100。如图7（b）所示，明亮度计算处理部244按照值的大小的顺序排列明亮度Bs1～Bs100。在图7（b）的例子中，块B10的明亮度Bs10最亮，接着，Bs20、Bs9、…明亮度变暗，块B91是最暗的明亮度Bs91的块。
接着，明亮度计算处理部244选择图7（c）的粗虚线包围的区域、即明亮度顺序中第2～第5个明亮度以及明亮度顺序中第94～第97个明亮度。然后，明亮度计 算处理部244将明亮度顺序中第2～第5个明亮度的平均值设为画面内较亮区域的代表值（以下称为高亮度检波值）Ash，将明亮度顺序中第94～第97个明亮度的平均值设为画面内较暗区域的代表值（以下称为低亮度检波值）Asd。另外，为了求出高亮度检波值和低亮度检波值，能够适当设定选择上位的明亮度还是下位的明亮度。
明亮度计算处理部244通过对高亮度检波值和低亮度检波值中的至少一方赋予根据模式而变化的权重并进行相加，求出画面的明亮度。图8和图9是用于说明根据模式而变化的权重的曲线图。在图8中，横轴取比例，纵轴取权重，示出权重的变化。并且，在图9中，横轴取模式（合成比率），纵轴取阈值，示出阈值相对于模式和合成比率的变化。另外，图8和图9用于说明对高亮度检波值赋予的权重。
还对明亮度计算处理部244赋予各画面的全部像素的像素值。明亮度计算处理部244求出全部像素中的像素值为阈值以上的像素的比例。例如，作为阈值，设定是否在像素中产生光晕的光晕判定所使用的值。该情况下，明亮度计算处理部244求出全部像素中的产生光晕的像素的比例。在图8的例子中，明亮度计算处理部244如产生光晕的情况那样，像素值为阈值以上的像素（以下称为高亮度像素）的比例越高，权重越大。
明亮度计算处理部244将高亮度检波值乘以图8的权重后与低亮度检波值相加而得到的值设为画面的明亮度。因此，如产生光晕的情况那样，像素值为阈值以上的高亮度像素的比例越高，在高亮度检波值中乘以越大的权重，得到表示是更加明亮的画面的检测结果。
在本实施方式中，使用于求出高亮度像素的比例的阈值根据模式、合成比率和AGC电路48的增益而变化。另外，在图8中，仅示出阈值相对于模式和合成比率的变化。例如，在图8中，当设合成比率a为0的第1模式时的阈值为T时，设合成比率a为1的第2模式时的阈值为T/2。并且，设合成比率a为0<a<1的第3模式时的阈值T’为T’=T/（1+a）。
在第1模式中，例如只能得到基于主照明的摄像图像。因此，调光控制部49减小光圈量，增大光源装置3的射出光量。因此，该情况下，CCD25的输出成为高电平。另一方面，在第2模式中，对基于主照明和辅照明的摄像图像进行合成。因此，由于得到比较明亮的（合成）摄像图像，所以，调光控制部49增大光圈量，减少光源装置3的射出光量。因此，该情况下，CCD25的输出成为较低电平。
因此，在第2模式时，考虑对基于B1、B2照明光的摄像图像进行合成，与第1模式时相比，将用于求出高亮度像素的比例的阈值设定为较低。由此，明亮度计算处理部244与模式无关地适当判定高亮度像素的比例，能够进行准确的明亮度检测。
并且，在第3模式时，合成比率a越大，阈值T’越低。由此，在第3模式时，明亮度计算处理部244也与合成比率a无关地适当判定高亮度像素的比例，能够进行准确的明亮度检测。
并且，在第3模式时，也可以设AGC电路48的增益为g，通过T’=T/g来控制阈值T’。该情况下，AGC电路48的增益g越大，阈值T’越小。由此，在第3模式时，明亮度计算处理部244也与AGC电路48的增益g无关地适当判定高亮度像素的比例，能够进行准确的明亮度检测。
明亮度计算处理部244这样按照各画面求出基于各照明光的摄像图像的明亮度后，通过上述（1）式的矩阵运算和（2）、（3）式的运算，计算亮度Y1、Y2。
另外，说明了对高亮度检波值赋予权重的例子，但是，也可以求出与低亮度检波值相乘的权重。该情况下，例如，明亮度计算处理部244求出全部像素中的像素值为阈值以下的像素（以下称为低亮度像素）的比例。然后，明亮度计算处理部244只要根据模式使用于求出低亮度像素的比例的阈值变化即可。
接着，对这样构成的实施方式的动作进行说明。
手术医生在使用内窥镜装置1时，如图5所示，使内窥镜2的连接器27与光源装置3和图像处理装置204连接。由此，得到图5所示的连接状态。手术医生操作未图示的电源开关，使光源装置3、图像处理装置204、监视器5分别成为动作状态，进行窄带光观察用的操作。
从光源31照射的光通过窄带滤镜32和旋转滤镜33被转换为窄带的G照明光、B1照明光和B2照明光，通过光圈34调整明亮度后，供给到内窥镜2。各照明光经由光纤26，例如在1/20秒的周期内依次且大致连续地从照明透镜23照射到被检体侧。
在对被检体的同一部位照射G照明光、B1照明光和B2照明光的各个定时，CCD25对基于来自该部位的返回光的光学像进行摄像。通过CCD25的光电转换，得到与G照明光、B1照明光和B2照明光的各个返回光对应的G信号、B1信号和B2信号。包含G信号、B1信号和B2信号的视频信号从内窥镜2提供给图像处理装置204。
另外，B1信号、B2信号是使用相同波段的照明光以相同露光量进行摄像而得到 的信号，除了在1帧内具有较短的定时偏差以外，以大致相同的条件得到B1信号、B2信号。
输入到图像处理装置204的视频信号通过模拟处理部41实施了规定模拟处理后，通过A/D转换器42转换为数字信号。来自A/D转换器42的数字视频信号在数字处理部43中被分离为G信号、B1信号和B2信号，存储在同时化存储器40a中。
明亮度计算处理部244被提供从同时化存储器40a读出的G信号、B1信号和B2信号，按照各画面求出基于各照明光的摄像图像的明亮度。明亮度计算处理部244针对基于各照明光的摄像图像的各画面，求出每个块的明亮度。明亮度计算处理部244求出块明亮度较亮、明亮度为上位的块明亮度的平均，设为高亮度检波值，求出块明亮度较暗、明亮度为下位的块明亮度的平均，设为低亮度检波值。明亮度计算处理部244通过在高亮度检波值和低亮度检波值中的至少一方中乘以根据模式、合成比率a或AGC电路48的增益而求出的权重并进行相加，针对基于各照明光的摄像图像求出各画面的明亮度。
现在，设为仅使用了基于主照明的摄像图像的第1模式。该情况下，明亮度计算处理部244例如使用比较高的值作为用于求出高亮度像素的比例的阈值。由此，能够高精度地检测高亮度像素。高亮度像素的比例越高，明亮度计算处理部244越增大与高亮度检波值相乘的权重。明亮度计算处理部244在高亮度检波值中乘以所求出的权重后，将其与低亮度检波值相加，求出画面的明亮度。
另一方面，在以合成比率a=1对基于主照明和辅照明的摄像图像进行合成的第2模式的情况下，明亮度计算处理部244例如使用比较低的值作为用于求出高亮度像素的比例的阈值。由此，能够高精度地检测高亮度像素。高亮度像素的比例越高，明亮度计算处理部244越增大与高亮度检波值相乘的权重。明亮度计算处理部244在高亮度检波值中乘以所求出的权重后，将其与低亮度检波值相加，求出画面的明亮度。
并且，在合成比率a为0<a<1的范围的第3模式的情况下，根据合成比率a而使阈值变化。由此，能够高精度地检测高亮度像素。高亮度像素的比例越高，明亮度计算处理部244越增大与高亮度检波值相乘的权重。明亮度计算处理部244在高亮度检波值中乘以所求出的权重后，将其与低亮度检波值相加，求出画面的明亮度。
并且，明亮度计算处理部244也可以根据AGC电路48的增益而使阈值变化。该情况下，也能够高精度地检测高亮度像素。高亮度像素的比例越高，明亮度计算处理 部244越增大与高亮度检波值相乘的权重。明亮度计算处理部244在高亮度检波值中乘以所求出的权重后，将其与低亮度检波值相加，求出画面的明亮度。
这样，由于用于求出高亮度像素的比例的阈值根据模式、合成比率a或AGC电路48的增益而变化，所以，与模式无关，能够高精度地求出画面的明亮度。
明亮度计算处理部244针对基于各照明光的摄像图像，使用按照各画面求出的明亮度，例如通过基于上述（1）式的矩阵运算和上述（2）、（3）式，计算基于主照明的亮度Y1和基于辅照明的亮度Y2。如上所述，利用矩阵处理计算亮度Y1、Y2，示出与监视器5中显示的情况下的明亮度相同的明亮度。接着，调光控制部49求出目标亮度Ys与亮度Y1的差分ΔY1，决定合成比率a。
合成比率a被供给到合成处理部45，合成处理部45在基于主照明的摄像图像中，以基于合成比率a的比例合成基于辅照明的摄像图像。例如，合成处理部45使用上述（5）式得到合成信号。在（5）式中，在合成比率a为0、即亮度Y1为目标亮度Ys以上的情况下，不进行基于辅照明的摄像图像的合成。因此，该情况下，在基于合成信号的合成图像中不会产生模糊，不会产生画质劣化。
来自合成处理部45的合成信号被提供给矩阵处理部46进行矩阵处理，得到显示系统中的R图像、G图像和B图像的信号。矩阵处理部46的输出通过D/A转换器47返回模拟信号后，被供给到监视器5。这样，在监视器5的显示画面上，显示充分明亮度且抑制了画质劣化的窄带光观察图像。
这样，根据本实施方式，在1帧期间等规定期间内，通过针对作为观察对象的同一部位照射多次相同的窄带照明光进行合成，提高窄带光观察中的图像的明亮度。该情况下，使用与模式、合成比率或AGC增益对应的阈值求出画面的明亮度，能够高精度地求出画面的明亮度。进而，通过利用矩阵处理求出基于各照明光的摄像图像的图像的明亮度，能够进行与监视器中实际显示的图像的明亮度对应的明亮度检测，能够进行手术医生希望的明亮度的观察。并且，在图像的明亮度充分明亮的情况下，由于不进行基于相同的窄带照明光的摄像图像的合成，所以，能够抑制画质的劣化。
另外，在上述实施方式中，说明了由合成处理部45进行合成处理并由矩阵处理部46进行矩阵处理的例子，但是，也可以通过1次矩阵处理而集中进行合成处理和矩阵处理。并且，还可以在矩阵处理后进行合成处理。
并且，在上述实施方式中，说明了使用于求出高亮度像素的比例的阈值根据模式 等而变化的例子，但是，也可以使用于求出画面的明亮度的各种阈值根据模式、合成比率或AGC增益而变化。
例如，在上述实施方式中，说明了如下例子：将画面分割为多个块，按照各块求出明亮度，在对多个块明亮度的代表值赋予权重的情况下，使用与模式等对应的阈值计算权重，但是，在求解多个块明亮度的代表值的情况下，如针对去除了与模式等对应的阈值以下的明亮度的块明亮度后的多个块明亮度求出代表值的情况那样，能够使用于决定块明亮度的代表值的阈值根据模式、合成比率或AGC增益而变化。
即，由于摄像元件的输出电平根据模式等而变化，所以，在求解画面的明亮度的情况下，在需要设定与摄像元件的输出电平有关的阈值、即用于判别在像素单位或块单位中是高亮度还是低亮度的阈值时，使阈值根据模式、合成比率或AGC增益而变化即可。
另外，在上述实施方式中，说明了窄带光观察的例子，但是，本发明同样能够应用于荧光观察，在使用了具有2个用于进行荧光观察的激励光用滤镜的旋转滤镜的情况下，能够进行与上述实施方式相同的合成处理和明亮度计算处理。
（第4实施方式）
图10是示出本发明的第4实施方式的框图。在图10中，对与图5相同的结构要素标注相同标号并省略说明。
在用于进行窄带光观察的内窥镜装置中，与进行通常光观察的内窥镜装置同样，为了使监视器中显示的色度成为期望状态，需要进行白平衡调整。例如，在上述第3实施方式中，根据模式或根据合成比率a，光圈量显著变化。这样，根据光圈量的变化，来自光源装置3的射出光的颜色变化。因此，需要进行与模式、合成比率a对应的白平衡调整。
图11是示出进行白平衡调整的一般电路的框图。R图像的信号Rch、G图像的信号Gch、B图像的信号Bch分别被提供给R图像检波部71R、G图像检波部71G、B图像检波部71B进行检波。另外，在本实施方式的窄带观察中，作为R、G、B图像的信号，使用B信号、G信号、B信号。
在图11的电路中，例如，考虑G照明光的明亮度远远大于B照明光的情况，在乘法器72中，在G信号中乘以规定系数例如1/2。来自R图像检波部71R的B信号、来自乘法器72的G信号和来自B图像检波部71B的B信号被提供给白平衡调整部 73，乘以规定增益进行白平衡调整。
另外，示出窄带光观察中的白平衡调整，但是，在荧光观察中，也能够使用与图11相同的电路进行同样的颜色平衡调整。例如，在采用具有激励光用的2个滤镜的旋转滤镜的情况下，在得到R图像的信号的定时照射G光，在得到G图像的信号的定时照射第1激励光，在得到B图像的信号的定时照射第2激励光。针对基于G光的照射的G信号使检波结果为1/2，针对基于第1、第2激励光的第1、第2荧光信号直接使用检波结果，进行颜色平衡调整。
但是，对应于图11的电路，当采用仅通过对基于各窄带照明光的摄像信号的信号增益的调整来取得白平衡调整值的方法时，根据窄带滤镜32的特性，有时G照明光的光量远远大于从光源装置3射出的B照明光。该情况下，例如，需要使B1、B2信号的增益远远大于G信号的增益。这样，B1、B2信号的有效电平范围变窄，动态范围变窄。
因此，在本实施方式中，在取得白平衡调整值时，通过根据模式对各频带的射出光量进行控制，防止动态范围变窄。
本实施方式与第3实施方式的不同之处在于，代替图像处理装置204而采用图像处理装置260。图像处理装置260与第3实施方式的图像处理装置204的不同之处在于，代替调光控制部49而采用调光控制部61，并且附加了调整值存储器62和白平衡处理部63。
调光控制部61具有与第3实施方式的调光控制部49相同的功能，并且具有对白平衡调整值的取得处理进行控制的功能。在第1模式和第2模式中，合成比率a不同。例如，设第1模式中的合成比率a为0，第2模式中的合成比率a为1。该情况下，在第1模式中，得到基于G照明光和B1照明光的摄像图像。根据窄带滤镜32的特性等，在G照明光的光量容易大于B1照明光的光量的情况下，调光控制部61在取得与第1模式对应的白平衡调整值时，在来自光源31的光穿过旋转滤镜33的滤镜33G的定时，增大光圈34的光圈量，在来自光源31的光穿过旋转滤镜33的滤镜33B1的定时，减小光圈34的光圈量。
并且，在第2模式中，对基于G照明光、B1照明光和B2照明光的摄像图像进行合成。因此，由于考虑基于B照明光的摄像图像相对于G摄像图像也得到充分的电平，所以，调光控制部61在取得与第2模式对应的白平衡调整值时，在来自光源 31的光穿过旋转滤镜33的滤镜33G的定时和穿过滤镜33B1、33B2的定时，例如使光圈34的光圈量相同。
白平衡处理部63在取得白平衡调整值时，根据A/D转换器42的输出而求出第1和第2模式用的各白平衡调整值，并将其存储在调整值存储器62中。调光控制部61根据取得与第1和第2模式对应的白平衡调整值时的光圈量，对第1和第2模式用的各白平衡调整值进行校正，并将其存储在调整值存储器62中。
另外，只要根据基于G照明光的摄像图像的电平和基于B照明光的摄像图像的电平来决定取得白平衡调整值时的光圈量的控制即可。基于B照明光的摄像图像是根据合成比率a对基于B1照明光的摄像图像和基于B2照明光的摄像图像进行合成而得到的。因此，只要根据第1和第2模式时的合成比率a来设定取得与第1和第2模式对应的白平衡调整值时的光圈量即可。
另外，调光控制部61通过控制光圈量来调整光量，但是，也可以对光源31的射出光量进行调整。
在这样构成的实施方式中，按照每个模式决定白平衡调整值。在取得与第1模式对应的白平衡调整值时，调光控制部61以基于第1模式中设定的合成比率a的光圈量来限制G照明光和B照明光的光量。白平衡处理部63计算白平衡调整值，并输出到调整值存储器62。调光控制部61读出调整值存储器62中存储的第1模式用的白平衡调整值，根据光圈量进行校正后，将其存储在调整值存储器62中。
并且，在取得与第2模式对应的白平衡调整值时，调光控制部61以基于第2模式中设定的合成比率a的光圈量来限制G照明光和B照明光的光量。白平衡处理部63计算白平衡调整值，并输出到调整值存储器62。调光控制部61读出调整值存储器62中存储的第2模式用的白平衡调整值，根据光圈量进行校正后，将其存储在调整值存储器62中。
在实际使用时，白平衡处理部63根据模式而读出调整值存储器62中存储的第1或第2模式用的白平衡调整值，对摄像信号进行放大。其他作用与第3实施方式相同。
这样，在本实施方式中，能够进行与各模式对应的白平衡调整，并且，在取得白平衡调整值时，对应于各模式的合成比率来限制各频带的照明光的光量，确保动态范围，并取得各模式的白平衡调整值。
另外，在上述说明中，说明了第1、第2模式，但是，显而易见，也可以按照第 3模式的合成比率a，通过上述方法来计算白平衡调整值。
并且，说明了窄带光观察的例子，但是，显而易见，也同样能够应用于荧光观察的颜色平衡调整。
另外，在内窥镜中设有常规（custom）开关，能够利用1个开关来切换测光、对比度的写入（toggle）、对焦等。即，在前面面板或键盘等上设有各种操作开关，存在能够分配任意功能的常规开关。以往，在光学放大功能的镜体中，仅通过专用的操作杆进行光学放大操作，但是，通过分配给常规开关，能够提高操作方法的自由度。在不使用操作杆的双焦点切换的镜体中，也将双焦点切换分配给常规开关。另外，关于光学放大和双焦点切换，可以在操作后显示成为某种状态。例如，在双焦点中，为了表示接近（Near）和通常（Far），可以在画面上显示Near或Far。此时，为了与患者名等显示进行明确区分，通过使白和黑反转，或者成为较大字体，能够提高识别性。
并且，在各个功能中，有时通过写入来切换多个模式和电平。此时，通过从多个模式和电平中选择至少一个以上的模式和电平，能够利用常规开关容易地切换测光和对比度。例如，测光具有平均、峰值、自动这3个模式，如果事先在菜单中设定峰值和自动，则能够利用常规开关随时切换峰值和自动。同样，关于对比度，如果在伽马校正表中从标准、高、低、无校正这样的种类中设定标准和高，则容易切换。并且，也可以在设定中进行高和低二择其一，以使对比度=标准必定成为1个候选。此时，进行标准和特殊的切换操作，从高和低中设定特殊。这些不限于常规开关，在对功能进行操作的测光和对比度等各种功能开关中也可以实施。此时，在前面面板示出测光的3个模式，使能够切换的2个模式依次发光，并且，不能切换的模式不发光。并且，为了与不能切换的模式进行识别，使得清楚能够切换的2个模式，也可以在发光方式上下工夫。使选择中的模式发出强光，使能够选择的另1个模式发出弱光，使不能切换的模式熄灭。
并且，也可以根据观察模式，在1个常规开关或1个功能开关中改变要实现的功能和图像处理。例如，在色彩这样的功能开关中，成为如下操作：如果是通常观察模式，则对色彩强调的电平进行变更，如果是NBI观察模式，则对色调模式进行变更。
在镜体ID中存储有镜体的种类和NBI色调模式的编号。如果镜体的种类为大肠内窥镜或NBI色调模式为3，则从NBI用的矩阵中读出与NBI色调模式=3对应的参 数。也可以按照镜体ID的通信方式，根据镜体的种类进行实施，或者根据NBI色调模式进行实施。在前者的情况下，根据镜体的种类而使NBI色调模式的编号自动对应。并且，在没有镜体ID的情况下，通过使NBI色调模式=2，能够实现大肠和食道中均能够应用的色调。
并且，通过可以改变NBI色调模式的可变开关，能够使NBI色调模式从3变更为1，或者从1变更为2。由此，在食道中设NBI色调模式为1，在胃中能够变更为2。能够对应于用户的喜好。并且，也可以不进行基于镜体ID的NBI色调模式的设定，而使用用户预先设定的NBI色调模式。例如，在用户使NBI色调模式成为2后，断开系统并再次接通时，调出上次使用的2即可。利用菜单设定是否使用镜体ID即可。
能够在处理器中组合多种光源。举出能够对应的观察模式根据光源而不同的情况。由于与处理器之间的通信部根据光源的种类而不同，所以，处理器具有与各个光源对应的通信部即可。在处理器中利用1个连接器对应2个通信部即可。更具体而言，可以区分使用连接器内的多个销，也可以包含能够共用的销。对应于光源来改变处理器的通信部并改变信号规格即可。例如，举出使同步信号成为复合同步信号还是垂直同步信号的情况。
利用缆线使镜体与处理器电连接，或者经由光源后利用缆线进行电连接。此时，在接通处理器的电源后，可能重新安装或更换镜体。该情况下，在从镜体未连接的状态转移到镜体连接的状态时，光源的彩色滤镜的旋转位置从不适当到适当需要花费时间。该情况下，观察画面紊乱。因此，在镜体未连接的情况下，通过保持未连接之前的彩色滤镜的旋转位置，始终能够进行适当的观察。这里所示的彩色滤镜的旋转位置是广义的，是指针对CCD的曝光定时。即，如果与彩色滤镜组合的开口调整器和彩色滤镜在旋转方向上的相对位置适当，则针对CCD的曝光定时正确，所以，包含这些情况来保持位置是很重要的。
通过按压设于前面面板的开关，能够对白平衡进行操作。关于白平衡，必须分别对通常观察模式和NBI观察模式执行，例如，通过持续按压开关4秒左右，能够依次分别针对通常观察模式和NBI观察模式取得白平衡。但是，由于持续按压开关很麻烦，所以，也可以通过设定而不持续按压开关。具体而言，进行“白平衡开关保持=接通/断开”这样的设定。如果断开设定，则通过按压开关1秒左右，开始取得通常 观察模式的白平衡，如果进行表示该情况的报知，则用户即使停止保持开关也不会中断白平衡，能够自动取得NBI观察模式的白平衡。在接通设定的情况下，如果在白平衡全部完成之前用户停止保持开关，则无法正确完成白平衡，无法取得白平衡值。
至此，叙述了通过设定来保持白平衡开关的情况，但是，也可以根据要使用的内窥镜的种类而自动切换。可以通过镜体ID来检测内窥镜的种类，在得知是外科用的镜体时，进行动作以断开白平衡开关保持。这是因为，在外科的领域中，在操作开关的用户和保持内窥镜的用户不同的情况下，操作开关的定时出现偏差，有时很难保持。并且，在内窥镜上搭载CCD并以示出该CCD的种类的方式搭载有电阻元件等的情况下，可以在根据电阻值判定CCD的种类后，根据CCD的种类进行动作以断开白平衡开关保持。并且，也可以使用设定和镜体ID来实现。在镜体ID表示外科、进而设定为“白平衡开关保持=断开”的情况下，可以进行动作以断开白平衡开关保持。另外，在面顺次式内窥镜的情况下，白平衡具有吸收光源装置的颜色滤镜的制造偏差并使颜色再现性优良的作用。而且，具有在内窥镜的CCD进行4线读出时吸收各通道的偏差并防止通道间偏差的作用。在考虑这两个方面的白平衡中，举出3+4-1=6这样的白平衡系数，以对应于RGB的3种颜色和CCD的4个通道。在设通道为1～4时，需要R1～R4、G1～G4、B1～B4的系数。
作为视频输出，具有SDI、DVI、DV等多种连接器。这些视频输出具有已定的格式，存在有各自所需要的电路块。在向SDI输出隔行信号、向DVI输出逐行信号的情况下，作为DVI用的电路块，需要IP转换（隔行-逐行转换）。一边对HD-SDI输出水平1920点、垂直1080行的隔行的HDTV，一边对其进行IP转换，成为WUXGA的1920×1200的逐行后输出到DVI。正因为成为逐行，所以1080和1200存在差，因此利用黑色空余进行嵌入。并且，也可以按照SXGA的1280×1024进行切出。并且，通过在IP转换时使用中间值滤镜，在显示文字时实现画质改善。
利用图12的时序图对从隔行转换为逐行的状况进行说明。图12（a）示出针对场存储器的输入帧率<输出帧率的情况，图12（b）示出针对场存储器的输入帧率>输出帧率的情况。图12的圆数字1表示对A场的图像和前一个B场的图像进行合成处理后输出的期间，图12的圆数字2表示对B场的图像和前一个A场的图像进行合成处理后输出的期间。
在逐行的输出图像的频率高于隔行时，P5和P6所示的图像完全相同。即，在 P2、P6等中，通过使相同场出现2次，吸收频率偏差。另一方面，在逐行的输出图像的频率低于隔行时，如P1、P2间那样设置不输出的隔行图像，吸收频率偏差。
接着，利用图13的说明图对中间值滤镜的作用进行说明。作为输出帧，当前的输入场直接按照每1行进行输出。关于输出帧的p1、p3、…，使用中间值滤镜的输出。在a0、b0、a1这3个输出帧中，探寻信号电平第2大的输出帧，作为p1进行输出。如果是静止的图像，则b0最适合作为p1，如果是运动的图像，则a0、a1中的任意一方最为合适。采用着眼于此的方法。中间值滤镜按照RGB的每个颜色进行，按照每个像素进行。以图13的斜线部的像素为例时，如果是R图像，则在R图像的（a1、x）、（b1、x）、（a2、x）的3个输出帧中，探寻信号电平第2大的输出帧，得到输出。
在NBI观察中很难确保光量。因此，存在增加驱动灯的电流来增加光量的方案。另一方面，在通常光观察中，已经能够确保充分光量的情况较多，仅在如经鼻镜体那样较细的内窥镜的情况下，存在希望增加光量的情况。因此，通过在镜体ID中设置标志，可以进行增加光量的动作，或者不进行增加光量的动作。关于这种动作，为了增加自由度而进行设定，当在“电流限制=接通/断开”这样的项目中例如断开时，所述标志无效，增加光量，当接通时进行动作，使得如果所述标志为“1”则增加光量，如果为“0”则不增加光量。
在内窥镜不缺少CCD时，内窥镜的种类多种多样，存在驱动CCD的电路设置在内窥镜中的内窥镜以及设置在视频处理器中的内窥镜。在利用内窥镜内的电路驱动CCD的情况下，从视频处理器提供该电路所需要的内容。它们主要是电源、时钟、地线。并且，CCD也存在多个种类，这些电源的电压、时钟的频率要求适当的电压和频率。为了将CCD的种类传递到视频处理器，在内窥镜中设置电阻值，通过利用电阻值对电压进行识别，实现CCD判别。在这种内窥镜与视频处理器的连接中，需要一定的考虑。例如，关于负责连接的触点销的长度，当延长电源、时钟、地线、CCD判别用电阻部并缩短其他信号时，在视频处理器通电的期间内，也能够进行适当的连接。不限于此，也可以延长用于知晓内窥镜种类的信号。作为它们的效果，在取下内窥镜时，当电源、时钟、地线同时取下时，能够使同时需要它们的CCD用驱动器电路、A/D、AFE这样的电路稳定化。并且，在连接内窥镜时，当电源和电阻部同时连接时，能够准备适当的时钟频率并发送到内窥镜。
在冻结内窥镜图像并显示静态图像的期间内，也能够对备注栏等输入文字。此时，患者ID无法进行输入和变更。并且，与是否冻结无关，为了改变内窥镜图像的颜色，也可以在监视器画面上显示GUI作为菜单，使红色和蓝色变更一定量。
本申请以2011年8月26日在日本申请的日本特愿2011-185127号和日本特愿2011-185128号为优先权主张的基础进行申请，上述公开内容被引用到本申请说明书、权利要求书和附图中。