图像处理装置和图像处理方法.pdf

《图像处理装置和图像处理方法.pdf》由会员分享，可在线阅读，更多相关《图像处理装置和图像处理方法.pdf（21页珍藏版）》请在专利查询网上搜索。

1、(10)申请公布号 CN 102843509 A (43)申请公布日 2012.12.26 C N 1 0 2 8 4 3 5 0 9 A *CN102843509A* (21)申请号 201210194924.0 (22)申请日 2012.06.13 2011-132134 2011.06.14 JP H04N 5/232(2006.01) H04N 5/262(2006.01) (71)申请人宾得理光映像有限公司 地址日本东京都板桥区前野町二丁目35番 7号 (72)发明人上原広靖 (74)专利代理机构北京戈程知识产权代理有限 公司 11314 代理人程伟 王锦阳 (54) 发明名称 图像。

2、处理装置和图像处理方法 (57) 摘要 本发明涉及图像处理装置和图像处理方法。 本发明提供一种图像处理装置，其包括主图像指 定器和图像处理器。主图像指定器指定图像中的 主体。图像处理器对图像进行图像处理，所述图像 处理取决于至主体的距离。 (30)优先权数据 (51)Int.Cl. 权利要求书1页 说明书8页 附图11页 (19)中华人民共和国国家知识产权局 (12)发明专利申请 权利要求书 1 页 说明书 8 页 附图 11 页 1/1页 2 1.一种图像处理装置，包括： 主图像指定器，该主图像指定器指定图像中的主体；以及 图像处理器，该图像处理器对图像进行图像处理，所述图像处理取决于至所述。

3、主体的 距离。 2.根据权利要求1所述的图像处理装置，其中所述图像处理包括模糊处理。 3.根据权利要求2所述的图像处理装置，其中当至所述主体的距离大于预定距离时， 仅仅对比所述主体远的图像对象进行模糊处理。 4.根据权利要求2所述的图像处理装置，其中当至所述主体的距离小于预定距离时， 所述模糊处理增加主体周围的景深。 5.根据权利要求2所述的图像处理装置，还包括对在所述模糊处理中所执行的模糊程 度进行设定的模糊设定处理器。 6.根据权利要求2所述的图像处理装置，其中用于改变所述模糊处理的至所述主体的 阈值距离根据在捕捉图像时所使用的f值而变化。 7.根据权利要求1所述的图像处理装置，其中参考距。

4、离映射数据来确定至所述主体的 距离，所述距离映射数据包括捕捉在划分图像的每一个区域中的对象的距离信息。 8.一种数字照相机，包括： 主图像指定器，该主图像指定器指定图像中的主体；以及 图像处理器，该图像处理器对图像进行图像处理，所述图像处理取决于至所述主体的 距离。 9.根据权利要求8所述的数字照相机，还包括为划分图像的每一个区域中的图像对象 检测距离信息的距离信息检测器。 10.一种图像处理方法，包括： 从图像中指定主体； 对图像进行图像处理，并且 所述图像处理取决于至所述主体的距离。 11.一种包含用于控制计算机以执行一种方法的指令的计算机可读介质，所述方法包 括： 指定图像中的主体； 对。

5、图像进行图像处理，并且 所述图像处理取决于至所述主体的距离。 权 利 要 求 书CN 102843509 A 1/8页 3 图像处理装置和图像处理方法 技术领域 0001 本发明涉及通过镜头系统来电子捕捉图像的成像装置。 背景技术 0002 在照相术中，利用景深效应的散景技术或模糊技术通常用来使背景和/或前景景 象变模糊，所述背景和/或前景景象不包含被对焦的主体。然而，当焦距减小时景深加深， 因此在具有相对较小的图像传感器的小型数字照相机中散景效应无效，因为这种照相机要 求短焦距。 0003 对于以上问题，提出了以下方法：确定被捕捉图像的对焦区域和离焦区域，以便通 过对离焦区域内的图像施加模糊。

6、处理来形成人工散景效应。在该方法中，将被捕捉图像划 分成多个区域，并且通过估计每一个区域中的空间频率来确定对焦区域和离焦区域。即，将 空间频率高的区域确定为对焦区域，并且将空间频率低的区域确定为离焦区域。该确定基 于以下事实，即对焦区域通常具有高反差（参考美国专利7,454,134）。 发明内容 0004 然而，图像的空间频率还取决于主体的结构，因此图像的空间频率高并不总意味 着图像焦点对准。例如，森林、瓦屋顶等的图像原本就具有高频率。另一方面，当考虑诸如 人的皮肤的主体时，即使图像对焦，空间频率可能仍低于离焦区域的空间频率。因此，为了 获得适当的人工散景效应，优选地，可以基于在构成图像的各个。

7、区域中在光学方向上照相 机镜头至对象的距离来执行模糊处理。 0005 因此，本发明的一方面提供依赖于至主体的距离的图像处理效果。 0006 根据本发明，提供一种图像处理装置，其包括主图像指定器和图像处理器。 0007 所述主图像指定器指定图像中的主体。对所述图像进行图像处理，所述图像处理 取决于从照相机或照相机镜头开始的主体的拍摄距离，并且由所述图像处理器执行。 0008 此外，提供了包括所述主图像指定器和所述图像处理器的数字照相机。 0009 此外，提供了图像处理方法，其包括：指定图像中的主体；以及执行图像处理，所 述图像处理取决于至图像主体的距离。 0010 此外，提供了包含用于控制计算机。

8、以执行上述图像处理方法的指令的计算机可读 介质。 附图说明 0011 参考附图，根据以下描述来更好地理解本发明的目的和优点，其中： 0012 图1是示出第一实施例的数字照相机的结构的框图； 0013 图2是在散景控制模式下重复执行的中断处理的流程图； 0014 图3A和图3B是距离映射制备处理的流程图； 0015 图4a-图4e示意性示出了创建反差映射的方式； 说 明 书CN 102843509 A 2/8页 4 0016 图5示意性示出了从反差映射搜索反差值的方式； 0017 图6示意性示出了反差映射码与反差值之间的关系； 0018 图7是概念上的示意性距离映射的示例； 0019 图8是第一。

9、实施例中的掩模制备处理的流程图； 0020 图9是在将图7中的反差映射码“8”指定为主体时的掩模示例； 0021 图10是在将图7中的反差映射码“13”指定为主体时的掩模示例； 0022 图11是在将图7中的反差映射码“20”指定为主体时的示例； 0023 图12是替代实施例中在散景控制模式下执行的中断处理的流程图； 0024 图13示意性示出了表示分配给每一个距离的块的频率的直方图的示例； 0025 图14示出了在近距离模式下散景控制处理的模糊强度的变化； 0026 图15示出了在远距离模式下散景控制处理的模糊强度的变化； 0027 图16示意性示出了在近距离模式下直方图与散景控制处理之间的。

10、关系； 0028 图17示意性示出了在近距离模式下所捕捉的图像的示例； 0029 图18示意性示出了在远距离模式下直方图与散景控制处理之间的关系； 0030 图19示意性示出了在远距离模式下所捕捉的图像的示例；以及 0031 图20是第二实施例中的掩模制备处理的流程图。 具体实施方式 0032 下面，参考图中所示的实施例来描述本发明。 0033 图1是示意性示出应用了本发明的第一实施例的数字照相机的总体结构的框图。 第一实施例以小型照相机作为示例进行说明，但该数字照相机还应用于在包括小型照相 机、便携式电话等各种小型电子装置中所实现的照相机单元。 0034 在数字照相机10中，图像传感器12捕。

11、捉由拍摄镜头11生成的对象图像。图像传 感器12由图像传感器驱动器13驱动，根据来自控制器14的指令对所述图像传感器驱动器 13进行控制。将由图像传感器12捕捉的图像供给控制器14，并且进行各种数字图像处理， 然后暂时存储在图像存储器15中。当用户需要时，存储在图像存储器15中的图像还可以 进一步记录在记录介质16中。由图像传感器12捕捉的图像或存储在图像存储器15或记 录介质16中的图像可以显示在监视器17上，如LCD等上。 0035 拍摄镜头11由镜头驱动器18驱动，并且可变光阑（iris）19由可变光阑驱动器 20驱动。采用反差检测自动聚焦装置，以使控制器14参考由图像传感器12捕捉的图。

12、像的 反差来控制镜头驱动器18，并且根据光度值来控制可变光阑驱动器20。此外，数字照相机 10设置有开关组21，包括释放开关、光度开关、用于选择功能或模式的拨盘开关、四路控制 器开关，等等，其中每一个开关均连接至控制器14。 0036 将参考图1以及图2的流程图来说明第一实施例的散景或模糊控制处理。图2的 流程图表示当选择散景控制模式时由控制器14重复执行的中断处理。注意，散景控制模式 通过用户操作预定的开关来选择。 0037 在步骤S100中，判断释放按钮（未示出）是否半压下，以及光度开关S1是否处于开 （ON）状态。当判断出光度开关S1未处于开状态时，换句话说，释放按钮没有半压下时，立即 。

13、结束中断处理，并且在执行完其它处理之后重新执行中断处理。然而，当在步骤S100中判 说 明 书CN 102843509 A 3/8页 5 断出光度开关S1处于开位置时，镜头驱动器18驱动拍摄镜头11并且通过预定数量的步骤 将对焦距离从最近距离移动至最远距离（如，无限远），以便将镜头设置在多个位置处。在每 一个位置处捕捉一个图像，以将Np（Np：位置数量）个镜后测光（through-the-lens）图像 （副图像）存储在图像存储器15中。注意，步骤S102中的处理在短时间内执行，以便该处理 期间内捕捉的Np个图像可以被记录为以相同的方向和相同的视角但在不同的距离上聚焦 的从相同位置获取的同一对。

14、象的拍摄。 0038 在步骤S104中，利用已知的反差检测自动聚焦装置，通过镜头驱动器18将拍摄镜 头11移动至对焦位置。在步骤S106中，判断光度开关是否处于开状态，即释放按钮（未示 出）是否保持在半压下位置。如果判断出释放按钮没有保持在半压下位置，则结束中断处 理，并且在执行完其它处理之后重复中断处理。 0039 当光度开关S1保持开状态时，在步骤S108中判断释放开关S2是否处于开状态。 如果释放开关S2没有打开，则该方法返回步骤106并且重复相同的判断。另一方面，当释 放开关S2处于开状态时，在步骤S110中图像传感器12执行图像捕捉操作以捕捉记录图像 （主图像），即待记录的图像。此外。

15、，在步骤S112中，对记录图像的RAW数据施加显影处理。 注意，在步骤S110中捕捉的记录图像也被认为是与在步骤S102中捕捉的Np个图像一样 的，以相同方向和相同视角从相同位置拍摄的同一对象的图像。 0040 在步骤S114中，执行距离映射制备处理，该距离映射制备处理使用在步骤S102中 存储在图像存储器15中的镜后测光图像（副图像）。该距离映射是为构成记录图像（或镜后 测光图像）的每一个区域（块）中的对象分配距离信息的数据的映射。映射制备处理的细节 将在后文中描述。 0041 在步骤S116中，参考在步骤S114中制备的距离映射执行掩模制备处理（将在后文 中详细描述），所述掩模制备处理制备。

16、掩模以便对记录图像（主图像）中除主体区域以外的 所有区域施加模糊控制处理。在步骤S118中，对已经被遮掩的记录图像施加散景控制处 理，以便生成新合成记录图像（新合成主图像）。在步骤S120中，将新合成记录图像记录在 记录介质16中，这将结束该散景控制模式下的中断处理。 0042 注意，记录图像（主图像）可以在不进行散景控制处理的情形下来记录，并且可以 构造成与对应的距离映射一起记录在记录介质16中，以便之后可以参考距离映射执行散 景控制处理或其它图像处理。在该情形下，记录图像（主图像）数据和距离映射数据可以存 储在分开的文件中或者一起保存在相同的文件中。当它们存储在分开的文件中时，可以使 用记。

17、录在头文件中的文件名或信息进行分开的文件之间的对应。 0043 图3A和图3B是发生在图2的步骤S114中的距离映射制备处理的流程图。此外， 图5至图8表示在图3和图4a-图4e中执行的处理。将参考图3到图8说明第一实施例 的距离映射制备处理。 0044 在距离映射制备处理中，在步骤S200中通过将可能包括高通滤波器和差分滤波 器的边缘轮廓提取处理施加至存储在图像存储器15中的每一个镜后测光图像（副图像）（在 图2的步骤S 102中存储的图像）来提取或增强外形或边缘轮廓分量。此处，图4a表示尚 未提取外形（边缘轮廓）分量的镜后测光图像的示例。图4b表示对图4a所示的图像施加边 缘轮廓提取处理之。

18、后的镜后测光图像的示例。 0045 在步骤S202中，如图4c中的示例所示，将已经提取过外形（边缘轮廓）分量的图像 说 明 书CN 102843509 A 4/8页 6 （图4b）划分成M*N个块（区域）。此处，N表示竖直方向上块的数量，进而比镜后测光图像 （副图像）在竖直方向上的像素数量少。此外，M表示水平方向上块的数量，进而比镜后测光 图像在水平方向上的像素数量少。注意，在第一实施例中，单个像素也可以构成块。 0046 在步骤S204中，为每一个块计算外形（边缘轮廓）分量的和。即，计算每一个块内 的像素值和，作为已经提取过外形分量的图像（图4b）的反差值（用于估计反差度的值）。在 步骤S2。

19、06中，将针对每一块计算出的反差值存储在大小为M*N的缓冲存储器（未示出）中， 作为每一个镜后测光图像（副图像）的反差映射（用于估计反差度的映射）。图4d示意性示 出了与图4c所示块对应的反差映射的示例。在图4d中，块越亮表示反差值越高。 0047 在步骤S208中，判断上述处理（S200至S206）是否已经施加至所有的Np个镜后 测光图像（副图像），所述所有的Np个镜后测光图像（副图像）存储在图像存储器15中。当 判断出没有对所有的镜后测光图像执行上述处理时，该方法返回至步骤S200并且对没有 被处理的镜后测光图像执行步骤S200至步骤S206的处理。 0048 另一方面，当在步骤S208中。

20、判断出已经对存储在图像存储器15中的所有Np个镜 后测光图像执行了步骤S200至S206的处理时，该方法转入步骤S210，并且将Np个镜后测 光图像的Np个反差映射存储在缓冲存储器中，如图4e所示。 0049 如图5示意性所示，对于每一个块，参考Np个反差映射的每一个来获取距离映射。 在步骤S210中，在存储器中预留M*N个块的阵列，以保存距离映射。在步骤S212中，在M*N 个块中设定将接受距离检测处理的初始目标块。 0050 例如，当Np个反差映射中的每一个反差映射中的M*N个块的位置由坐标（i，j）标 识时，其中以图5中的映射的左上方位置作为原点，“i”表示第i行并且“j”表示第j列， 。

21、距离检测处理从坐标为i=1和j1的块开始。注意，在该过程中，目标块首先沿同一行从 左移动至右，接着移动至下一行，等等，直到它到达最末块。 0051 在步骤S214中，对所有的Np个反差映射中的每一个相应目标块（i，j）的反差值 进行搜索，并且识别出具有每一个特定（i，j）目标块的最大反差值的反差映射，以便能够获 取反差映射的标识码。例如，如图6所示，当存在23个反差映射（Np=23），并且目标块（i，j） 的反差值随反差映射而变化时，在标识码为“20”的反差映射上检测出目标块（i，j）的最大 反差值。 0052 在步骤S218中，将在步骤S216中检测到的反差映射的标识码存储在步骤S210所 。

22、预留的阵列的与距离映射的相同目标块（i，j）对应的单元中。在步骤S220中，判断是否对 所有的M*N个块执行了距离信息检测处理。即，判断所有的M*N个块的标识码是否被检测 出并且保存在每一个对应的阵列单元中，所述标识码指明哪一个反差映射具有特定目标块 （i，j）的最大反差值。当上述所有的M*N个块的检测和保存没有被完成时，在步骤S222中 将目标移动至下一块，并且重复从步骤S214开始的处理。此外，当判断出所有的M*N个块 的检测和保存已完成时，结束距离映射制备处理。 0053 一旦距离映射制备处理完成，则将具有特定块的最大反差值的那个反差映射的标 识码保存在距离映射中的每一个相应块的阵列单元。

23、内。即，分配给每一个块的码表示特定 块区的对焦镜头位置，并且分配给每一个块的码也可以与光学方向上从镜头至在图像的特 定块中捕捉的对象的距离对应。在图7所示的距离映射的示例中，随着反差映射码的增加， 到主体的距离也增加，并且参考图4a，反差映射码为“8”的块对应于人，即主体。此外，反差 说 明 书CN 102843509 A 5/8页 7 映射码为“20”的块与远景，诸如遥远的背景对应，而反差映射码为“13”的块与存在于主体 与背景之间的对象对应，例如就在作为主体的人的后面的树。 0054 将参考图8的流程图以及图9至图11来说明第一实施例的掩模制备处理，该掩模 制备处理在图2的步骤S116中执。

24、行。 0055 当掩模制备处理开始时，在步骤S300中选择主体。主体可以在图像捕捉期间由用 于AF操作的焦点指定，或者可以通过使用适当输入装置的用户从图像中指定。主体也可以 通过采用人脸检测技术所检测的位置来指定。例如，对于任意的块，只要其反差映射码与 包含预定主体的块的反差映射码（或位置）之差（或之间的距离）小于或等于某一范围（或距 离），则该任意块就可以被确定为主体的一部分。 0056 在步骤S302中，生成将被确认的主体块排除在散景控制处理以外的掩模，并且在 图2的步骤S110中对所捕捉的图像进行掩模处理。注意，立即根据每一个图像的像素数量 来识别镜后测光图像（副图像）和记录图像（主图像。

25、）中的相应块。 0057 图9示出了当图7中反差映射标识码为“8”的块（人）被指定为主体时的掩模示 例。此外，图10示出了当将反差映射标识码为“13”（其与中间距离对应）的块指定为主体 时的掩模示例，并且图11是将反差映射标识码为“20”（其与远景对应）的块指定为主体时 的掩模示例。 0058 注意，在第一实施例中，alpha合成技术可以用在掩模处理中，以对图9至图11中 较亮的块进行较弱的模糊，并且对较暗的块进行较强的模糊。 0059 如上所述，根据第一实施例，即使在使用景深不能获得充足的散景效应的情形下， 仍可以对除主体以外的区域施加适当的散景。此外，在本实施例中，使用边缘轮廓提取处理 来。

26、估计反差，以便促进并且优化对焦估计。此外，通过将图像划分成多个块（除包含单个像 素的块以外），来提高处理速度。在本实施例中，制备距离映射时使用多个镜后测光图像（副 图像），以使处理速度能够进一步提高。 0060 此外，与通过仅仅捕捉多个图像来执行散景控制处理以获取距离映射的情形相 比，由于本实施例使用镜后测光图像，因此用户可能察觉不到散景控制处理或者不受散景 控制处理干扰。 0061 顺便说一句，尽管本实施例以小型照相机作为示例进行说明，但图12中仍示出了 可应用于替代实施例的流程图，所述替代实施例包括设置在便携式电话中的照相机单元。 此处，图12与第一实施例中图2的流程图对应。该替代实施例与。

27、第一实施例之间的本质差 别在于，该照相机单元没有光度开关S1。即，仅仅当释放按钮完全压下时，换句话说当释放 开关开启时才启动光度操作、自动对焦操作和图像捕捉操作。因此，替代实施例的流程图没 有与图2的步骤S106和S108对应的步骤，并且用判断释放开关S2是否处于开状态的步骤 S400来替换步骤S100。注意，步骤S402和S404分别与步骤S102和S104对应，并且步骤 S406至步骤S416分别与步骤S110至步骤S120对应。 0062 如上所述，对于安装在便携式电话上的照相机单元等等，可以获取与第一实施例 相同的效果或优点，在所述便携式电话等中仅仅当释放按钮完全压下时光度开关才开启。。

28、 0063 将参考图13至图20来说明第二实施例的数字照相机。在第二实施例中，除掩模 方法（图5中的步骤S116）以外，数字照相机的特征与第一实施例的特征相同。在第二实施 例中，掩模方法根据光学方向上从镜头至主体的距离而变化。因此，在以下描述中仅仅说明 说 明 书CN 102843509 A 6/8页 8 与第一实施例的不同的特征，该特征与图2的步骤S116对应。 0064 当至拍摄对象的距离增加时景深加深，并且当该距离增加时AF操作的一步驱动 运动（最小位移）中的分辨率减小。因此，在第二实施例中，散景控制处理根据光学方向上从 镜头至主体的距离而变化。在本实施例中，当主体相对较近（近距离模式）。

29、时，选择对由深 度引起的细微差别进行模仿或增强的散景控制处理。另一方面，当主体相对较远（远距离模 式）时，选择仅仅使主体的背景模糊以增强主体与背景之间的反差的散景处理。 0065 图13示意性示出了直方图的示例，图中水平轴线表示至对象的距离并且竖直轴 线表示分配给每一个距离的块的频率。在本实施例中，根据主体是否比预定距离“D o ”更近 来选择上述近距离模式或远距离模式。即，当至主体的距离为“D o ”或更小时，选择近距离 模式，反之则采用远距离模式。 0066 注意，景深还取决于f值，从而距离“D o ”可以根据f值而变化。例如，当f值减小 时景深变得相对较浅，以便在f值减小时距离“D o 。

30、”可以设定为较大的值，并且在f值增加 时设定为较小的值。 0067 图14示出了在近距离模式下散景控制处理的模糊强度的变化。即，图14的曲线 定义了近距离模式下的掩模密度。在近距离模式下，与主体的距离对应的块没有被模糊或 者进行最小程度的模糊。对于与前景景象或背景景象对应的块，当块的距离相对于主体的 距离“D o ”增加时，模糊强度逐渐增强。例如，模糊强度逐渐增加至最大值（100%），直到块的 距离在前景景象中达到距离“D f ”或者在背景景象中达到“D b ”。 0068 图15示出了在远距离模式下散景控制处理的模糊强度的变化。即，图15中的曲 线定义了远距离模式下的掩模密度。在远距离模式下。

31、，如上所述，仅仅对背景景象中的块区 进行模糊，以增强主体与背景景象之间的反差，从而在主体的距离“D o ”作为阈值的情形下 以阶跃函数的方式来实现模糊。即，与比主体（距离“D o ”）更近的距离对应的块没有被模糊， 而对与比主体（距离“D o ”）更远的距离对应的所有块进行最大程度的模糊（100%）。 0069 在本实施例中，各个模式下限定的掩模密度曲线可以通过操作图1的开关组21中 的四路控制器开关或电子拨盘开关被控制。例如，在近距离模式下景深可以是可控制的。 即，图14中位置“Df”和“Db”可以通过AF操作中的一步单元来改变。此外，在远距离模式 下，模糊强度可以是可变的。 0070 图1。

32、6示意性示出了在近距离模式下直方图（基于距离/频率（块的数量）与散景控 制处理之间的关系的示例。在图16中，虚线表示深度的分辨率随距离的变化。此外，图17 示意性示出了在近距离模式下所捕捉的图像示例。假定人S0为主体，在人S0前方和后方 的人S1至S3根据其离人S0的深度方向上的距离而在不同的程度上进行模糊。即，在本实 施例中，当对象离主体的距离增加时模糊程度增加，从而与原始图像相比，使深度上细微差 别增强并且使连续性增加。 0071 另一方面，图18示意性示出了远距离模式下直方图（基于距离/频率（块的数量） 与散景控制处理之间的关系的示例。类似于图16，虚线表示深度的分辨率随距离的变化。 此。

33、外，图19示意性示出了在远距离模式下所捕捉的图像的示例。在图19中，没有在距离被 确定为等于或小于至主体（人S0）的距离的块上执行模糊处理，而是对距离被确定为比人 S0的距离大的块施加均匀强度的模糊。由此，获得仅仅主体，即人S0保持清晰而景象的其 它部分模糊的图像。 说 明 书CN 102843509 A 7/8页 9 0072 图20是第二实施例的掩模制备处理的流程图，该掩模制备处理与图2的步骤S116 对应。将参考该流程图来说明第二实施例中的掩模制备处理。 0073 在步骤S500中，类似于第一实施例中图8的步骤S300，指定主体。在步骤S502 中，获取包含主体的块的反差映射码（其与距离。

34、对应）。在步骤S504中，根据主体的距离信 息（反差映射码）判断主体是否处于近距离。例如，判断与主体对应的反差映射码或距离是 否小于或等于预定值。 0074 当在步骤S504中判断出主体存在于近距离中时，在步骤S506中选择用于近距离 模式的掩模密度曲线（其示出在图14中），并且在步骤S508中计算目标块离主体图像的深 度方向上的距离（差）。 0075 另一方面，当判断出主体没有在近距离中而在远距离中时，在步骤S516中选择图 15中所示的用于远距离模式的掩模密度曲线，并且在步骤S508中计算目标块离主体图像 的距离（差值）。 0076 在步骤S510中，引用步骤S508中计算出的当前目标块的。

35、差值和步骤S506或S516 中选择的掩模密度曲线，以便能够确定应用于当前目标块的掩模密度值。此外，在步骤S512 中，将用于产生掩模的被指定的掩模密度存储在阵列的与当前块对应的单元中。 0077 在步骤S514中，判断是否对所有的M*N个块执行上述处理，即是否为所有的M*N 个块指定掩模密度。当判断出已经对所有的M*N个块执行了处理时，结束该掩模制备处理。 否则，在步骤S518中，将目标变为下一块，并且重复从步骤S508开始的处理。注意，以与图 3B和图5中搜索目标块相同的方式来执行目标块的转移。 0078 如上所述，根据第二实施例，根据在光学方向上至主体的距离来控制散景或模糊 效应，以便能。

36、够实现散景效应的增强。 0079 顺便说一句，尽管在本实施例中采用镜后测光图像来获取距离信息，但用于获取 距离信息的副图像不限于镜后测光图像。在短时期内，在多个不同的焦点位置处获取的连 续图像也可以用于获取距离信息。此外，在本实施例中，反差映射码用作表示距离信息的示 例。然而，可以利用表示距离信息的任何变量，并且该变量没必要与实际距离成比例，除非 它与距离有一对一的关系。此外，模糊处理同样不限于本实施例。 0080 本发明在小型照相机中可具有显著优点，但不限于此，本发明的实施例还可以应 用于常规数字单反照相机等。 0081 此外，尽管本实施例使用边缘轮廓提取来提高对每一个区域（块）内的反差进行。

37、估 计的精确度，但在捕捉图像时，如果对于镜头的位置来说可利用用于估计每一个区域（块） 中的聚焦状态的适当方法，则也可以不使用边缘轮廓提取来估计反差。 0082 本实施例的掩模制备处理、图像合成处理和图像存储处理（步骤S116至S120和步 骤S412至S416）也可以用于除数字照相机以外的装置，诸如个人计算机等。在该情形下， 参考可以在数字照相机中产生的上述距离映射（距离信息），或者参考由替代方法获取的对 象的距离信息来执行这些处理。例如，当使用个人计算机时，这些处理可以作为存储在记录 介质中的软件程序来提供。即，图像数据可以从记录介质或由外部通信获取，并且参考从记 录介质或由外部通信所获取的。

38、距离信息来进行图像处理，诸如散景控制处理。所获得的图 像可以记录在记录介质中或者传送至外部装置。 0083 在本实施例中，将对象的距离信息应用于模糊处理，然而，距离信息可以应用于除 说 明 书CN 102843509 A 8/8页 10 模糊处理以外的图像处理。例如，它可以应用于以下图像处理，包括艺术水彩效果的处理、 插图效果的处理和将特征（包括图、符号、字母和图案）覆盖在图像上的处理。对于艺术水彩 效果的处理，可以基于至主体的距离来控制颜色和色调，并且/或者用于控制颜色和色调 的方法可以根据上述距离而变化。在覆盖特征时，可以基于至主体的距离来控制覆盖区域 的尺寸和特征的尺寸，并且/或者用于控。

39、制上述尺寸的方法可以根据上述距离而变化。 0084 此外，从制备距离映射至应用距离信息的图像处理的处理可以作为设置有镜头驱 动机构和图像传感器的成像装置的控制程序来运用。 0085 在第二实施例中，根据至主体的距离是否比预定距离（阈值）“D o ”更近或更远来将 散景控制模式分为两种模式。然而，散景控制模式还可以是由多个阈值划分的多个模式（多 于三个模式）。此外，掩模密度曲线可以作为至主体的距离的函数来给出，在该情形下密度 将随着距离连续地变化。 0086 尽管文中已经参考附图描述了本发明的实施例，显然，在不脱离本发明范围的情 形下本领域的技术人员可以进行很多修改和变型。 说 明 书CN 10。

40、2843509 A 10 1/11页 11 图1 说 明 书 附 图CN 102843509 A 11 2/11页 12 图2 说 明 书 附 图CN 102843509 A 12 3/11页 13 图3A 说 明 书 附 图CN 102843509 A 13 4/11页 14 图3B 图4a图4b 图4c 说 明 书 附 图CN 102843509 A 14 5/11页 15 图4d 图4e 图5 图6 图7 图8 说 明 书 附 图CN 102843509 A 15 6/11页 16 图9图10图11 图12 说 明 书 附 图CN 102843509 A 16 7/11页 17 图13 图14 说 明 书 附 图CN 102843509 A 17 8/11页 18 图15 图16 说 明 书 附 图CN 102843509 A 18 9/11页 19 图17 图18 说 明 书 附 图CN 102843509 A 19 10/11页 20 图19 说 明 书 附 图CN 102843509 A 20 11/11页 21 图20 说 明 书 附 图CN 102843509 A 21 。