《损伤评估信息生成器及其方法.pdf》由会员分享,可在线阅读,更多相关《损伤评估信息生成器及其方法.pdf(23页珍藏版)》请在专利查询网上搜索。
1、10申请公布号CN104116485A43申请公布日20141029CN104116485A21申请号201410168802322申请日20140424201309473020130426JPA61B1/0520060171申请人HOYA株式会社地址日本东京都新宿区中落合二丁目7番5号申请人国立大学法人京都大学72发明人池本洋祐仲濑裕志松浦稔吉野琢哉樋口浩和74专利代理机构北京戈程知识产权代理有限公司11314代理人程伟王锦阳54发明名称损伤评估信息生成器及其方法57摘要本发明涉及损伤评估信息生成器及其方法。一种损伤评估信息生成器,包括颜色信息确定器,其基于取得的内窥镜彩色图像数据,确定内窥。
2、镜图像的每个像素的色相值和饱和度值,相关值确定器,其对于内窥镜图像的至少一部分像素,基于每个单独像素的色相值与参考颜色数据的参考色相值之间色相相关值,和每个单独像素的饱和度值与参考颜色数据的参考饱和度值之间的饱和度相关值,确定每个单独像素的颜色信息与参考颜色数据之间的相关值,和评估值生成器,其通过整合每个单独像素的相关值,生成评估内窥镜图像中损伤的严重度的评估值。30优先权数据51INTCL权利要求书3页说明书10页附图9页19中华人民共和国国家知识产权局12发明专利申请权利要求书3页说明书10页附图9页10申请公布号CN104116485ACN104116485A1/3页21一种损伤评估信息。
3、生成器,包括图像数据取得器,所述图像数据取得器被配置为,取得内窥镜彩色图像数据,所述内窥镜彩色图像数据表示显示损伤的内窥镜图像;颜色信息确定器,所述颜色信息确定器被配置为,基于所述取得的内窥镜彩色图像数据,确定包括于所述内窥镜图像的每个像素的色相值和饱和度值;相关值确定器,所述相关值确定器被配置为,对于所述内窥镜图像的至少一部分像素,确定相关值,所述相关值表示每个单独像素的颜色信息与参考颜色数据之间的相关,基于色相相关值,所述色相相关值表示每个单独像素的所述的确定的色相值与所述参考颜色数据的参考色相值之间的相关;和饱和度相关值,所述饱和度相关值表示每个单独像素的所述的确定的饱和度值与所述参考颜。
4、色数据的参考饱和度值之间的相关;和评估值生成器,所述评估值生成器被配置为,通过从整合对于每个单独像素确定的所述相关值得到所述相关值的总和,生成评估所述内窥镜图像中损伤的严重度的评估值。2根据权利要求1所述的损伤评估信息生成器,其中所述相关值确定器进一步被配置为在由色相值坐标轴和饱和度值坐标轴定义的二维坐标上,基于每个单独像素的所述的确定的色相值与所述参考颜色数据的所述参考色相值之间的色相距离,确定色相相关值;在由色相值坐标轴和饱和度值坐标轴定义的二维坐标上,基于每个单独像素的所述的确定的饱和度值与所述参考颜色数据的所述参考饱和度值之间的饱和度距离,确定饱和度相关值;和基于所述的确定的色相相关值。
5、和所述的确定的饱和度相关值,确定每个单独像素的颜色信息与所述参考颜色数据之间的相关值。3根据权利要求2所述的损伤评估信息生成器,其中所述相关值确定器进一步被配置为,通过将所述的确定的色相相关值乘以所述的确定的饱和度相关值,确定每个单独像素的颜色信息与所述参考颜色数据之间的相关值。4根据权利要求3所述的损伤评估信息生成器,其中所述色相相关值为在从0到1的范围内的标准化值,其中,当所述色相距离的绝对值大于预先设定的距离值时,所述色相相关值等于0,而且其中,当所述色相距离的绝对值小于等于所述的预先设定的距离值时,所述色相距离的所述绝对值越小,所述色相相关值越接近1。5根据权利要求3或4所述的损伤评估。
6、信息生成器,其中所述饱和度相关值为在从0到1的范围内的标准化值,其中,当所述的确定的饱和度值小于所述参考颜色数据的所述参考饱和度值,且所述饱和度距离小于预先设定的饱和度值时,所述饱和度相关值等于0,其中,当所述的确定的饱和度值小于所述参考颜色数据的所述参考饱和度值,且所述饱和度距离的绝对值小于等于所述的预先设定的饱和度值时,所述饱和度距离的所述绝对值越小,所述饱和度相关值越接近1,而且权利要求书CN104116485A2/3页3其中,当所述的确定的饱和度值大于等于所述参考颜色数据的所述参考饱和度值时,不管所述饱和度距离的所述绝对值,所述饱和度相关值等于1。6根据权利要求1所述的损伤评估信息生成。
7、器,其中所述颜色信息确定器进一步被配置为,通过转化所述的取得的内窥镜彩色图像数据的颜色空间为HSI颜色空间和HSV颜色空间中的一个,确定每个单独像素的所述色相值和所述饱和度值。7根据权利要求1或6所述的损伤评估信息生成器,其中所述颜色信息确定器进一步被配置为,基于所述的取得的内窥镜彩色图像数据,以及所述色相值和所述饱和度值,确定包括于所述内窥镜图像的每个单独像素的亮度值,其中所述相关值确定器包括饱和度值修正器,所述饱和度值修正器被配置为利用所述的确定的亮度值修正所述饱和度值,而且其中所述相关值确定器进一步被配置为,利用所述已修正的饱和度值,确定每个单独像素的所述颜色信息与所述参考颜色数据之间的。
8、相关值。8根据权利要求7所述的损伤评估信息生成器,其中所述饱和度值修正器进一步被配置为,基于下面的表达式,修正所述饱和度值,其中INT和SAT分别表示所述亮度值和所述饱和度值,REFER_INT和REFER_SAT分别表示参考亮度值和所述参考颜色数据的所述参考饱和度值,表示对应于所述参考亮度值与所述参考颜色数据的所述参考饱和度值之间的相关系数的角度,而且INT_CORRECTION和SAT_CORRECTION分别表示已修正的亮度值和所述已修正的饱和度值。9根据权利要求1或8所述的损伤评估信息生成器,其中所述参考颜色数据为血液颜色数据。10根据权利要求1或2所述的损伤评估信息生成器,其中所述颜。
9、色信息确定器包含损伤像素确定器,所述损伤像素确定器被配置为,确定每个单独像素是否为将至少一部分损伤成像的损伤像素,而且其中所述相关值确定器进一步被配置为,只为被确定为损伤像素的每个像素确定所述的相关值。11根据权利要求1或2所述的损伤评估信息生成器,还包含被配置为显示所述的生成的评估信息的显示器。12根据权利要求11所述的损伤评估信息生成器,还包含颜色信息替换器,所述颜色信息替换器被配置为,替换每个单独像素的所述颜色信息为与为每个单独像素确定的所述相关值相联系的替换的颜色信息,其中,所述显示器进一步被配置为,显示其中的每个单独像素具有所述与所述相关值相联系的替换的颜色信息的图像。13一种被配置。
10、为由处理器实施的方法,所述处理器与图像数据取得器结合,所述图像数据取得器被配置为取得内窥镜彩色图像数据,所述内窥镜彩色图像数据表示显示损伤的权利要求书CN104116485A3/3页4内窥镜图像,所述方法包括,基于所述取得的内窥镜彩色图像数据,确定包括于所述内窥镜图像的每个像素的色相值和饱和度值;对于所述内窥镜图像的至少一部分像素,确定相关值,所述相关值表示每个单独像素的颜色信息与参考颜色数据之间的相关,基于色相相关值,所述色相相关值表示每个单独像素的所述的确定的色相值与所述参考颜色数据的参考色相值之间的相关;和饱和度相关值,所述饱和度相关值表示每个单独像素的所述的确定的饱和度值与所述参考颜色。
11、数据的参考饱和度值之间的相关;和通过从整合为每个单独像素确定的所述相关值得到所述相关值的总和,生成评估所述内窥镜图像中损伤的严重度的评估值。权利要求书CN104116485A1/10页5损伤评估信息生成器及其方法技术领域0001本发明涉及用于评估患者的损伤严重度的设备的方法,特别是,用于生成评估信息的损伤评估信息生成器的方法,此评估信息用以基于内窥镜彩色图像的颜色信息评估损伤严重度。背景技术0002一般而言,损伤具有不同于正常粘膜组织颜色的颜色。随着彩色内窥镜设备性能的提高,识别其颜色与正常组织颜色稍微不同的损伤正成为可能。然而,为了获得基于内窥镜图像上如此微小的颜色差异来从正常组织区分出损伤。
12、的能力,彩色内窥镜设备的操作员需要由熟练人员长时间训练。另外,甚至对熟练的操作员来说,基于如此微小的颜色差异来从正常组织区分出损伤也不容易,并且这需要仔细的操作。鉴于此问题,电子内窥镜设备已被提出,其被配置为,进行颜色转化过程,此过程突出用白光捕捉的内窥镜图像数据中的颜色差异,以便更容易地识别损伤例如,参见日本专利临时公布NO2009106424,其在下文中被称为424。发明内容0003由424公开的电子内窥镜设备所生成的图像使得,相对于通常的内窥镜图像,从正常组织区分损伤更容易。但是,损伤根据其损伤严重度显示出细微的颜色变化。因此,尽管无经验的操作员可以使用如同424中公开的方法从正常组织中。
13、区分损伤,但对于无经验的操作员来说,很难精确地评估损伤严重度。另外,甚至对于熟练的操作员来说,做出客观且可重复的评估是不可能的不取决于操作员的技能水平。这是因为,通常,损伤严重度是否被恰当地评估取决于基于操作员个人的经验和知识的图像阅读技能。0004本发明的各方面有益于提出一个或多个对于损伤评估信息生成器的改进方法,这些方法使得进行损伤严重度的客观且可重复的评估成为可能。0005根据本发明的各方面,提供了损伤评估信息生成器,其包括图像数据取得器,其被配置为取得内窥镜彩色图像数据,此数据表示显示损伤的内窥镜图像;颜色信息确定器,其被配置为,基于取得的内窥镜彩色图像数据,确定包括在内窥镜图像中的每。
14、个像素的色相值和饱和度值;相关值确定器,其被配置为对于内窥镜图像的至少一部分像素确定相关值,此相关值表示每个单独像素的颜色信息与参考颜色数据之间的相关,其基于色相相关值,此相关值表示每个单独像素的已确定的色相值与参考颜色数据的参考色相值之间的相关,以及饱和度相关值,此相关值表示每个单独像素的已确定的饱和度值与参考颜色数据的参考饱和度值之间的相关;和评估值生成器,其被配置为,通过得到相关值的总和,生成评估内窥镜图像中损伤严重度的评估值,此相关值的总和从整合为每个单独像素确定的相关值得到。0006根据本发明的各方面,还提供了被配置为由与图像数据取得器结合的处理器实现的方法,其中的图像数据取得器被配。
15、置为,取得内窥镜彩色图像数据,此数据表示显示损伤说明书CN104116485A2/10页6的内窥镜图像。此方法包括,基于取得的内窥镜彩色图像数据,确定包括在内窥镜图像中的每个像素的色相值和饱和度值;对于内窥镜图像的至少一部分像素确定相关值,此相关值表示每个单独像素的颜色信息与参考颜色数据之间的相关,其基于色相相关值,此相关值表示每个单独像素的已确定的色相值与参考颜色数据的参考色相值之间的相关,以及饱和度相关值,此相关值表示每个单独像素的已确定的饱和度值与参考颜色数据的参考饱和度值之间的相关;以及,通过得到相关值的总和,生成评估内窥镜图像中损伤严重度的评估值,此相关值的总和从整合为每个单独像素确。
16、定的相关值得到。附图说明0007图1为框图,图示了根据本发明各方面的实施方式中的电子内窥镜设备的配置。0008图2为流程图,图示了根据本发明各方面的实施方式中的、由电子内窥镜设备的处理器执行的、损伤评估信息生成过程的程序。0009图3为流程图,图示了根据本发明各方面的实施方式中的、作为损伤评估信息生成过程的子程序的图2所示的S11探测损伤像素的程序。0010图4为根据本发明各方面的实施方式中的、通过绘制生物组织图像的像素数据而得到的散点图,其中的生物组织图像提取自大量炎症性肠病IBD患者的内窥镜图像数据。0011图5为流程图,图示了根据本发明各方面的实施方式中的、作为损伤评估信息生成过程的子程。
17、序的图2所示的S13确定每个损伤像素的分值的程序。0012图6A为根据本发明各方面的实施方式中的、取自大量IBD病例的血液样品数据的散点图,其中饱和度值未被修正。0013图6B为根据本发明各方面的实施方式中的、取自大量IBD病例的血液样品数据的散点图,其中饱和度值已被修正。0014图7A为根据本发明各方面的实施方式中的、血液样品数据以及内窥镜图像中损伤区域和正常区域的像素数据的散点图分布图,其中饱和度值未被修正。0015图7B为根据本发明各方面的实施方式中的、血液样品数据以及内窥镜图像中损伤区域和正常区域的像素数据的散点图分布图,其中饱和度值已被修正。0016图8A为图示了根据本发明各方面的实。
18、施方式中的、对于每个损伤像素的色相距离和饱和度距离如何被定义的示意图。0017图8B为根据本发明各方面的实施方式中的、定义色相距离和色相相关值之间关系的色相相关表。0018图8C为根据本发明各方面的实施方式中的、定义饱和度距离和饱和度相关值之间关系的饱和度相关表。0019图9为根据本发明各方面的实施方式中的显示颜色表的概念图,此显示颜色表中相关值与预先设定的显示颜色相联系。0020图10举例说明根据本发明各方面的实施方式中的、显示在显示器屏幕上的评估图像。具体实施方式说明书CN104116485A3/10页70021应当注意,下文的描述中,元件之间提出了多样的连接。应当注意,除非特别说明,一般。
19、而言这些连接可能是直接的或间接的,而且此种特殊说明无意就此成为限制性的。本发明的各方面可以实现于电路例如专用集成电路或作为计算机可读媒体上的可存储程序的计算机软件,计算机可读媒体包括但不限于RAM,ROM,闪存,EEPROM,CD媒体,DVD媒体,临时存储,硬盘驱动器,软盘驱动器,永久存储器,等等。0022在下文中,根据本发明的各方面的实施方式会参照说明书附图描述。0023图1为框图,图示了实施方式中的电子内窥镜设备1的配置。如图1所示,电子内窥镜设备1包括电子镜100,处理器200,显示器300,打印机400。0024处理器200包括系统控制器202和时序控制器206。系统控制器202被配置。
20、为执行存储于内存204的处理器可执行程序,并且整体上控制电子内窥镜设备1。另外,系统控制器202被配置为,根据用户例如操作员或助手通过操作面板208输入的指令,更新电子内窥镜设备1的多种设置。时序控制器206被配置为,向电子内窥镜设备1中的电路发送时钟脉冲,该时钟脉冲用以调整包括在电子内窥镜设备1中的单独元件的处理/操作的时序。0025处理器200包括光源230,其被配置为提供照明光至电子镜100。光源230包括灯232、灯电源234、凸透镜236和光量调整器240。灯232为高亮灯,其被配置为,灯电源234提供驱动电能时,发射白色照明光。例如,灯232的例子可以包括但不限于氙气灯、金属卤化物。
21、灯、水银灯和卤钨灯。灯232发射的照明光被凸透镜236聚焦,然后通过光量调整器240,被投射到电子镜100的LCB光导束102的入射端面。0026光量调整器240被配置为,在系统控制器202的控制下,调整入射到LCB102入射端面的照明光的量。光量调整器240包括快门242、马达243和驱动器244。驱动器244被配置为,产生驱动电流以驱动马达243,并向马达243提供驱动电流。快门242被配置为,当被马达243驱动时,改变可变的开口并且调整从开口发送的照明光的量。0027通过入射端面射入LCB102的照射光,通过LCB102发送并在LCB102的出射端面发射,出射端面置于电子镜100的远端部。
22、分。然后,通过配光透镜104,照明光被投射到物体上。物体的反射光通过物镜106发送,以在固态图像传感器108的光接收表面形成光学图像。0028固态图像传感器108是单色CCD电子耦合器件图像传感器,包括多种滤光片,例如IR红外截止滤光片108A和BAYER阵列彩色滤光片108B,其被置于传感器108的光接收表面上。固态图像传感器108被配置为,根据光接收表面上形成的光学图像,生成原色信号R红、G绿、B蓝。0029电子镜100还包括驱动器信号处理电路112,其被置于电子镜100的连接部分内。驱动器信号处理电路112被配置为,对于接收自固态图像传感器108的原色信号进行预先设定的信号处理例如颜色插。
23、值,矩阵运算,和Y/C分离,以生成图像信号例如照度信号Y,色差信号CB和CR,并发送生成的图像信号至处理器200的图像处理单元220。驱动器信号处理电路112被配置为,访问内存114以读取电子镜100的特定信息。电子镜100的特定信息包括,例如,像素个数、感光度、有效帧率和固态图像传感器108的型号。驱动器信号处理电路112还被配置为,发送从内存114读取的特定信息至系统控制器202。0030系统控制器202被配置为,基于电子镜100的特定信息,进行多种数学运算,并生说明书CN104116485A4/10页8成控制信号。另外,系统控制器202被配置为,利用生成的控制信号,控制处理器200中的电。
24、路的运算和时序,以执行适合于当前与处理器200连接的电子镜100的过程。0031时序控制器206被配置为,根据系统控制器202的时序控制,向驱动器信号处理电路112和图像处理单元220提供时钟脉冲。驱动器信号处理电路112被配置为,根据时序控制器206提供的时钟脉冲,以与处理器200处理的图像帧率同步的时序,驱动并控制固态图像传感器108。0032图像处理单元220被配置为,在系统控制器202的控制下,基于从驱动器信号处理电路112接收到的图像信号,生成视频信号以在显示器300的屏幕上显示图像例如内窥镜图像,并且发送生成的视频信号至显示器300。从而,通过显示在显示器300屏幕上的内窥镜图像,。
25、操作员可以做出例如,在胃肠道内的组织的诊断。0033处理器200经过NIC网卡210和网络500与服务器600连接。处理器200被配置为,从服务器600下载内窥镜检查的信息例如患者电子病例的信息和操作员的信息。下载的信息可以显示于,例如,显示器300的屏幕或操作面板208。另外,处理器200被配置为,向服务器600上传内窥镜检查的结果例如内窥镜图像数据,内窥镜检查条件,图像分析结果,以及临床所见和操作员观点,以保存内窥镜检查的结果。0034损伤评估信息生成过程0035图2为流程图,图示了由处理器200执行的损伤评估信息生成过程的程序。下述的损伤评估信息生成过程是在电子镜100成像的视野内进行炎。
26、症性肠病IBD损伤例如脊液血色症损伤,包括水肿和出血损伤严重度的客观评估的过程。在损伤评估信息生成过程中,一般而言,例如,按照位于光接收表面左上角的像素的预先设定的像素地址的顺序,对于内窥镜彩色图像数据中包含的每个单独的像素,确定被检查像素是否是成像为局部损伤的像素下文中称为损伤像素。然后确定分值,此分值表示由确定为损伤像素的、将局部损伤严重度成像的像素。对每个损伤像素确定分值后,基于全部确定的分值,确定评估损伤严重度的评估值评估信息。评估值是通过执行图2中所示的损伤评估信息生成过程所确定的可重复的数值数据。因此,通过取得评估值,操作员可以做出损伤严重度的客观评估。0036图2中的S11探测损。
27、伤像素0037损伤评估信息生成过程见图2的S11中,处理器200确定被检查像素X,Y是否为损伤像素。通过执行S11以探测损伤像素,下列步骤中被检查像素限于被探测的损伤像素。从而,减少损伤评估信息生成过程中被执行的运算的总数量是可能的。图3为流程图,图示了作为损伤评估信息生成过程的子程序的S11的程序。0038图3中的S11A0039S11A中见图3,对于被检查像素X,Y,处理器200转化从驱动器信号处理电路112接收的图像信号照度信号Y,色差信号CB和CR为具有预先设定的矩阵系数的原色信号R、G和B。0040图3中的S11B0041S11B中,处理器200将由三原色R、G和B定义的RGB颜色空。
28、间中的像素值RX,Y,GX,Y,BX,Y转化为由三个因子色相、饱和度和亮度定义的HSI色相饱和度亮度颜色空间中的像素值HX,Y,SX,Y,IX,Y。已转化的像素值说明书CN104116485A5/10页9HX,Y,SX,Y,IX,Y存储于图像处理单元220中的内存220A。应当注意,RGB颜色空间中的像素值RX,Y,GX,Y,BX,Y可以被转化为由三个因子色相、饱和度和明度定义的HSV色相饱和度明度颜色空间中的像素值HX,Y,SX,Y,VX,Y,而不是HSI颜色空间中的像素值HX,Y,SX,Y,IX,Y。0042图3中的S11C0043S11C中,基于HX,Y即,像素X,Y的色相和SX,Y即,。
29、像素X,Y的饱和度,处理器200确定被检查像素X,Y是否是损伤像素。图4图示了,作为S11C使用的参考数据的,通过绘制生物组织图像的像素数据即,HX,Y和SX,Y的数据对得到的散点图,其中生物组织图像的像素数据从大量IBD患者的内窥镜图像数据中提取。图4所示的散点图被分割为由长短虚线所围的区域A和不同于区域A的区域B。区域A包括,由熟练掌握诊断性内窥镜检查的医生确定的、将IBD发炎点成像的像素中大多数像素数据。区域B包括,由熟练掌握诊断性内窥镜检查的医生确定的、将正常点成像的像素中大多数像素数据。这样,区域A和B是基于发明人的经验和知识被定义的,并被视作发明人的研究成果可交付成果。0044S1。
30、1C中,处理器200确定被检查像素X,Y的像素数据HX,Y,SX,Y是否被绘制于区域A。特别地,当确定下面的表达式1和2被满足时S11C是,处理器200确定被检查像素X,Y的像素数据HX,Y,SX,Y被绘制于区域A。同时,当确定表达式1和2中至少一个不被满足时S11C否,处理器200确定被检查像素X,Y的像素数据HX,Y,SX,Y不被绘制于区域A。应当注意,表达式1和2中,H1、S1和S2为可由操作员设定的修正值。操作员可以根据需要通过改变修正值H1、S1和S2来调整S11C中的确定的严密性灵敏度。0045130H1HX,Y表达式1004660S1SX,Y100S2表达式20047图3中的S1。
31、1D0048将被绘制于区域A的具有像素数据HX,Y,SX,Y的像素X,Y被确定为将IBD发炎点成像的像素即,损伤像素S11C是。内存220A存储了标志表,其包含标志FX,Y,标志FX,Y对应包括在内窥镜彩色图像数据内的每个像素X,Y。S11D中,处理器200将已确定为损伤像素的像素X,Y对应的标志FX,Y设定为值“1”。0049图3中的S11E0050同时,将被绘制于区域B的具有像素数据HX,Y,SX,Y的像素X,Y被确定为将正常组织成像的像素S11C否。S11E中,处理器200将已确定为将正常组织成像的像素X,Y对应的标志FX,Y设定为值“0”。0051图2中的S12确定标志值0052S12。
32、中见图2,处理器200确定S11D或S11E中设定的标志FX,Y的值是否等于“1”。当确定设定的FX,Y的值等于“1”S12是,处理器200转到S13,其中处理器200确定计算对于被检查像素X,Y的发炎点的分值。同时,当确定设定的FX,Y的值等于“0”S12否,处理器200转到S16而不执行S13至S15,因为处理器200不需要确定被检查像素的分值。0053图2中的S13确定每个损伤像素的分值说明书CN104116485A6/10页100054S13中,处理器200确定计算被检查像素X,Y的发炎点的分值。图5为流程图,图示了作为损伤评估信息生成过程的子程序的S13的程序。0055图5中的S13。
33、A0056S13A见图5中,处理器200从内存220A中读取被检查的损伤像素X,Y的像素数据HX,Y,SX,Y,IX,Y。0057图5中的S13B0058照明物体的照明光的照度在视野中并不小的角度内是不均匀的。而且,已知的是,IBD的炎症伴随着血管的扩张和血浆组分从血管中的泄露,以及发炎点上的表面上的正常粘膜随着IBD症状的进展而更多地掉落。因此,同样已知的是,随着IBD症状的进展,发炎点的颜色变得更接近于血液颜色。而且,已知的是,血液颜色的饱和度和亮度具有互相之间的负相关。从这些事实,发明人获得了下列发现和知识。由于照明光照度的不均匀,发炎点的亮度包含潜在误差,而且亮度的误差对发炎点的饱和度。
34、有影响,其中发炎点的颜色接近于血液颜色就是说,由于照明光照度的不均匀,发炎点的饱和度具有误差。这样,S13B中,处理器200基于亮度值IX,Y修正被检查的损伤像素X,Y的饱和度值SX,Y。特别地,在S13B中,饱和度值SX,Y基于表达式3被修正。0059表达式30060表达式3中,INT和SAT分别表示被检查的损伤像素X,Y的亮度值IX,Y和饱和度值SX,Y。REFER_INT和REFER_SAT分别表示作为参考值的血液样本数据的亮度值和饱和度值。表示对应于血液样本数据的亮度值与饱和度值之间的相关系数的角度。INT_CORRECTION和SAT_CORRECTION分别表示被检查的损伤像素X,。
35、Y的已修正的亮度值和已修正的饱和度值。应当注意,发明人发现,血液样本数据的亮度值与饱和度值之间的相关系数被确定为08614932。0061这样,通过使用亮度值IX,Y修正饱和度值SX,Y,修正由照明光照度的不均匀引起的饱和度值SX,Y的误差是可能的。0062图6A和6B为从大量IBD病例中取得的血液样本数据的散点图。图6A和6B中,纵轴表示饱和度值S,横轴表示亮度值I。图6A为散点图,其中,饱和度值S没有使用表达式3修正。图6B为散点图,其中,饱和度值S使用表达式3修正。如图6A所示,血液样本数据具有广泛变化的饱和度值S。同时,如图6B所示,使用了表达式3的修正抑制血液样本数据的饱和度值S的变。
36、化。就是说,血液样本数据的饱和度值S大体上为常数,而不管其亮度值I。0063图7A和7B为血液样本数据和内窥镜图像中区域R1、R2和R3的像素数据的散点图分布图。另外,图7A图示了内窥镜图像,以视觉化可识别的方式展示内窥镜图像与区域R1、R2和R3之间的对应关系。区域R1和R2为包括损伤像素的损伤区域。区域R3为包括将正常组织成像的像素的正常区域。图7A和7B中,纵轴表示色相值HX,Y,横轴表示饱和度值SX,Y。图7A为分布图,其中,饱和度值SX,Y没有使用表达式3修正,而且在血液样本数据的单独个体间广泛变化。图7B为分布图,其中,饱和度值SX,Y使用表达式3修正,以抑制血液样本数据的饱和度值。
37、SX,Y的变化。说明书CN104116485A107/10页110064如上所述,发炎点上的表面上的正常粘膜随着IBD症状的进展而更多地掉落,使得发炎点的颜色变成更亮的红色有更高饱和度的红色,以更接近血液颜色。同时,随着IBD症状减轻,发炎点上的表面的正常粘膜的更厚的层在保持,使得发炎点的颜色变成更暗的红色有更低饱和度的红色。因此,更严重的发炎点具有与血液颜色更高的相关。在图7A和7B所示的例子中,损伤区域R1的IBD症状比损伤区域R2的IBD症状严重。如图7A所示,未被修正的饱和度值SX,Y中,损伤区域R1和损伤区域R2间有微小的差异,原因是照明光照度的不均匀导致的饱和度值SX,Y的变化。然。
38、而,可以识别出,相对于损伤区域R2的饱和度值,损伤区域R1的饱和度值更接近于血液样品数据的饱和度值。同时,如图7B所示,已被修正的饱和度值SX,Y中,损伤区域R1和损伤区域R2间有更多的确定的差异,因为照明光照度的不均匀导致的饱和度值SX,Y的变化被抑制了。另外,可以清晰地识别出,损伤区域R1的饱和度值更接近于血液样品数据的饱和度值。这样,相对于未修正的饱和度值SX,Y,修正的饱和度值SX,Y更准确地反应发炎点的严重度。因此,通过修正饱和度值SX,Y,改善评估炎症严重度的准确性是可能的。0065图5中的S13C0066S13见图2中,处理器200基于一般规则确定计算相关值分值,此规则为,图7B。
39、所示的分布图上数据点彼此更接近地分布,则数据点互相之间更接近地相关。图8A提供关于确定相关值的过程的补充解释。图8A中,饱和度值SX,Y已被修正,损伤像素的色相值HX,Y与血液样本数据的重心C的中心的色相值HXC,YC间的距离被定义为色相距离D_HUE。另外,损伤像素的已修正的饱和度值SX,Y与血液样本数据的重心C的中心的已修正的饱和度值SXC,YC间的距离被定义为饱和度距离D_SAT。0067图8B为色相相关表,定义了色相距离D_HUE与色相相关值HCV之间的关系。例如,色相相关值HCV可以是标准化的值从00到10。色相相关表存储于内存220A。图8B中,当损伤像素的色相距离D_HUE等于0。
40、时,损伤像素的色相值HX,Y与血液样本数据的重心C的中心的色相值HXC,YC一致。当损伤像素的色相距离D_HUE小于0时即,当其具有负值时,损伤像素的色相值HX,Y小于血液样本数据的重心C的中心的色相值HXC,YC。当损伤像素的色相距离D_HUE大于0时即,当其具有正值时,损伤像素的色相值HX,Y大于血液样本数据的重心C的中心的色相值HXC,YC。当损伤像素的色相距离D_HUE在30度到30度的范围下文中称为“色相估计范围R11”内时,对应于损伤像素的发炎点具有与血管的红色相同或接近的颜色。因此,如图8B所示,在色相估计范围R11中,色相距离D_HUE的绝对值越小,色相相关值HCV越大即,色相。
41、相关值HCV越接近于1。同时,当损伤像素的色相距离D_HUE在色相估计范围R11之外下文中称为“超越色相估计范围R12”时,对应于损伤像素的发炎点具有不再与血管的红色接近的颜色。因此,如图8B所示,在超越色相估计范围R12中,色相相关值HCV均匀地等于0。0068S13C中,处理器200确定被检查的损伤像素X,Y的色相距离D_HUE是否在色相估计范围R11内。0069图5中的S13D0070当确定被检查的损伤像素X,Y的色相距离D_HUE在色相估计范围R11内时S13C是,处理器200,根据色相距离D_HUE,依照色相相关表,向被检查的损伤像素X,Y提供色相相关值HCVS13D。说明书CN10。
42、4116485A118/10页120071图5中的S13E0072当确定被检查的损伤像素X,Y的色相距离D_HUE在超越色相估计范围R12内时S13C否,处理器200,依照色相相关表,向被检查的损伤像素X,Y提供等于1的色相相关值HCVS13E。0073图5中的S13F0074图8C为饱和度相关表,定义了饱和度距离D_SAT与饱和度相关值SCV之间的关系。例如,饱和度相关值SCV可以是标准化的值从00到10。饱和度相关表存储于内存220A。图8C中,当损伤像素的饱和度距离D_SAT等于0时,损伤像素的饱和度值SX,Y与血液样本数据的重心C的中心的饱和度值SXC,YC一致。当损伤像素的饱和度距离。
43、D_SAT小于0时即,当其具有负值时,损伤像素的饱和度值SX,Y小于血液样本数据的重心C的中心的饱和度值SXC,YC。当损伤像素的饱和度距离D_SAT大于0时即,当其具有正值时,损伤像素的饱和度值SX,Y大于血液样本数据的重心C的中心的饱和度值SXC,YC。当损伤像素的饱和度距离D_SAT在大于等于0的范围下文中称为“饱和度一致范围R21”内时,对应于损伤像素的发炎点处于严重发炎状态,此时,正常粘膜掉落,而且发炎点具有与血液的亮红色非常接近的颜色。因此,如图8C所示,在饱和度一致范围R21,饱和度相关值SCV均匀地等于0。另外,当损伤像素的饱和度距离D_SAT在小于0且大于等于预先设定值PV的。
44、范围下文中称为“饱和度估计范围R22”内时,对应于损伤像素的发炎点处于严重发炎状态但是,其严重度不如饱和度一致范围R21严重,此时,正常粘膜掉落,而且发炎点具有与血液的亮红色接近的颜色。因此,如图8C所示,在饱和度估计范围R22中,饱和度距离D_SAT的绝对值越小,饱和度相关值SCV越大即,饱和度相关值SCV越接近于1。这是因为,饱和度距离D_SAT的绝对值越小,发炎点的颜色越接近于血液的亮红色。另外,当损伤像素的饱和度距离D_SAT在小于预先设定值PV的范围下文中称为“超越饱和度估计范围R23”内时,对应于损伤像素的发炎点具有正常粘膜的厚的层,并因此具有暗红色。所以,如图8C所示,在超越饱和。
45、度估计范围R23中,饱和度相关值SCV均匀地等于0。0075S13F中,处理器200确定被检查的损伤像素X,Y的饱和度距离D_SAT在饱和度一致范围R21、饱和度估计范围R22、超越饱和度估计范围R23中的哪一个范围内。0076图5中的S13G0077当确定被检查的损伤像素X,Y的饱和度距离D_SAT在饱和度一致范围R21内时S13FR21,处理器200,依照饱和度相关表,向被检查的损伤像素X,Y提供等于1的饱和度相关值SCVS13G。0078图5中的S13H0079当确定被检查的损伤像素X,Y的饱和度距离D_SAT在饱和度估计范围R22内时S13FR22,处理器200,根据饱和度距离D_SA。
46、T,依照饱和度相关表,向被检查的损伤像素X,Y提供饱和度相关值SCVS13H。0080图5中的S13I0081当确定被检查的损伤像素X,Y的饱和度距离D_SAT在超越饱和度估计范围R23内时S13FR23,处理器200,依照饱和度相关表,向被检查的损伤像素X,Y提供等于0的饱和度相关值SCVS13I。0082图5中的S13J说明书CN104116485A129/10页130083S13J中,通过将提供给被检查的损伤像素的色相相关值HCV乘以饱和度相关值SCV,处理器200取得被检查的损伤像素X,Y与血液样本数据间的相关值CV从00到10。这样,通过计算基于色相值和饱和度值的二维信息的、被检查的。
47、损伤像素X,Y与血液样本数据间的相关值,取得准确地表示发炎点严重度的信息是可能的。0084图2中的S14整合相关值CV0085S14中见图2,处理器200将S13确定的被检查的损伤像素X,Y的相关值CV,加到所有对于单独损伤像素确定的相关值CV的总和。这样,通过整合单独损伤像素的相关值CV,取得客观且可重复的评估值即,不取决于操作员技能水平的评估信息,以量化炎症的严重度是可能的。0086图2中的S15颜色替换过程0087内存220A存储显示颜色表,其中相关值CV与预先设定的显示颜色相联系。图9为显示颜色表的概念图。如图9所示,显示颜色表有11阶,每一个与一预先设定的显示颜色相联系,相关值CV从。
48、00到10在其中归类。S15中,处理器200,依照显示颜色表,将被检查像素X,Y的颜色信息替换为,与为被检查像素X,Y确定的相关值CV相联系的显示颜色的颜色信息。例如,随着为被检查像素X,Y确定的相关值CV更接近0,被检查像素X,Y的颜色信息可以被替换为更冷的颜色的颜色信息。同时,随着为被检查像素X,Y确定的相关值CV更接近1,被检查像素X,Y的颜色信息可以被替换为更暖的颜色的颜色信息。0088图2中的S16确定完成全部像素的评估0089S16中,处理器200确定S11至S15的评估是否对全部像素完整地进行了。当确定评估没有对全部像素完整进行时即,存在没有进行评估的剩下的像素S16否,处理器2。
49、00回到S11。0090图2中的S17已评估的图像的显示0091当确定评估已对全部像素完整地进行时S16是,处理器200转到S17,此时处理器200在显示器300的屏幕上显示评估图像。图10举例说明评估图像。如图10所示,评估图像包含内窥镜图像,其中每个损伤像素的颜色信息在S15中已被替换见图2。如图10所示,内窥镜图像为灰阶图像,其中,根据对应于每一个像素的发炎点的严重度,每一个像素具有11阶颜色中的一个。因此,操作员可以无困难地视觉化地识别视野中的位置和每个单独发炎点的严重度。0092另外,评估图像中,从整合全部损伤像素的相关值CV而得到的总和被显示为炎症的评估信息即,从0到相当于像素个数的值的范围内的评估值。在图10所示的例子中,显示“SCORE1917”。这样,根据实施方式,炎症的严重度被评估,并被显示为客观且可重复的值。因此,操作员可以客观地领会炎症的严重度。0093目前,IBD炎症的严重度根据医学评估分为四个水平,医学评估例如利用MAYO分值。同时,最近,获知的是,粘膜治疗的成果与缓解期之间存在相关。因此,IBD疗法对相当于MAYO0或MAYO1的IBD温和病例做具体的评估被认为是有效的。实施方式中,炎症的严重度被显示为从0到相当于像素个数的值的范围内的数值,使得操作员可以进行炎症严重度的更具体的评估。相应的,实施方式中,对相当于M。