《三维影像再现方法和三维影像再现装置.pdf》由会员分享，可在线阅读，更多相关《三维影像再现方法和三维影像再现装置.pdf（27页珍藏版）》请在专利查询网上搜索。
1、(10)申请公布号 CN 102918859 A (43)申请公布日 2013.02.06 C N 1 0 2 9 1 8 8 5 9 A *CN102918859A* (21)申请号 201080066278.9 (22)申请日 2010.11.01 2010-097325 2010.04.20 JP H04N 13/04(2006.01) G09G 5/36(2006.01) G09G 5/391(2006.01) G09G 3/20(2006.01) G09G 5/00(2006.01) (71)申请人索尼电脑娱乐公司 地址日本东京都 (72)发明人武中康一 (74)专利代理机构北京市柳。
2、沈律师事务所 11105 代理人胡金珑 (54) 发明名称 三维影像再现方法和三维影像再现装置 (57) 摘要 当再现对象影像是包含从不同视点观察三维 空间的目标时的第一视差图像和第二视差图像的 三维影像时，影像属性判定部（26）判定该影像的 帧率是否在该影像可能发生闪烁的预定帧率范围 内。当所述三维影像的帧率在可能发生闪烁的预 定帧率范围内时，帧率变换部（22）提高所述三维 影像的帧率直到超出所述预定帧率范围。 (30)优先权数据 (85)PCT申请进入国家阶段日 2012.10.18 (86)PCT申请的申请数据 PCT/JP2010/006432 2010.11.01 (87)PCT申请。
3、的公布数据 WO2011/132242 JA 2011.10.27 (51)Int.Cl. 权利要求书1页 说明书11页 附图13页 按照条约第19条修改的权利要求书1页 (19)中华人民共和国国家知识产权局 (12)发明专利申请 权利要求书 1 页 说明书 11 页 附图 13 页 按照条约第19条修改的权利要求书 1 页 1/1页 2 1.一种三维影像再现方法，其特征在于： 当再现对象影像是包含从不同视点观察三维空间的目标时的第一视差图像和第二视 差图像的三维影像时，判定该影像的帧率是否在该影像可能发生闪烁的预定帧率范围内， 当所述三维影像的帧率在可能发生闪烁的预定帧率范围内时，提高所述三。
4、维影像的帧率直 到超出所述预定帧率范围，来进行再现。 2.根据权利要求1所述的三维影像再现方法，其特征在于： 当因提高所述三维影像的帧率，处理所述三维影像的电路的处理能力不足时，在提高 所述三维影像的帧率的同时降低所述三维影像的分辨率，直至达到所述电路的处理能力的 范围。 3.根据权利要求1或2所述的三维影像再现方法，其特征在于： 当所述三维影像的帧率在可能发生闪烁的预定帧率范围内时，向用户可选择地提示是 否提高帧率，当用户选择应提高帧率时，提高所述三维影像的帧率地进行再现。 4.一种三维影像再现装置，其特征在于，包括： 影像属性判定部，当再现对象影像是包含从不同视点观察三维空间的目标时的第一。
5、视 差图像和第二视差图像的三维影像时，判定该影像的帧率是否在该影像可能发生闪烁的预 定帧率范围内；以及 帧率变换部，当上述三维影像的帧率在可能发生闪烁的预定帧率范围内时，提高所述 三维影像的帧率直到超出所述预定帧率范围。 5.根据权利要求4所述的三维影像再现装置，其特征在于，还包括： 输出条件确认部，当所述三维影像的帧率在可能发生闪烁的预定帧率范围内时，从显 示所述三维影像的显示设备取得包含是否提高帧率的指示的信号； 当所述输出条件确认部从显示所述三维影像的显示设备取得应提高帧率的指示时，所 述帧率变换部提高所述三维影像的帧率。 权 利 要 求 书CN 102918859 A 1/11页 3 。
6、三维影像再现方法和三维影像再现装置 技术领域 0001 本发明涉及三维影像再现方法及三维影像再现装置。 背景技术 0002 近年，随着民用电视机的高性能化，可显示具有纵深的立体图像的三维电视机正 在普及中。与以往的显示二维图像的电视机不同，三维电视机所显示的图像是在前后方具 有纵深的立体图像。 发明内容 0003 发明所要解决的课题 0004 虽然有各种用于显示立体影像的技术，但与以往的显示二维影像的情况相比较， 民用三维电视机中采用的方式主要由于处理电路性能不足的原因，有时难以提高影像的 帧率。在影像的帧率较低的情况下，会在影像上产生细小的闪烁，即出现了所谓“闪烁 （flicker）”的现象。
7、，成为视听者感觉不太好的原因。 0005 本发明是鉴于上述情况而研发的，其目的在于提供一种降低在三维电视机上可能 发生的闪烁的技术。 0006 用于解决课题的技术手段 0007 为了解决上述课题，本发明的一种方案是一种三维影像再现方法。该方法当再现 对象影像是包含从不同视点观察三维空间的目标时的第一视差图像和第二视差图像的三 维影像时，判定该影像的帧率是否在该影像可能发生闪烁的预定帧率范围内，当所述三维 影像的帧率在可能发生闪烁的预定帧率范围内时，提高所述三维影像的帧率直到超出所述 预定帧率范围，来进行再现。 0008 本发明的另一方式是一种三维影像再现装置。该装置包括：影像属性判定部，当再 。
8、现对象影像是包含从不同视点观察三维空间的目标时的第一视差图像和第二视差图像的 三维影像时，判定该影像的帧率是否在该影像可能发生闪烁的预定帧率范围内；帧率变换 部，当上述三维影像的帧率在可能发生闪烁的预定帧率范围内时，提高所述三维影像的帧 率直到超出所述预定帧率范围。 0009 此外，将上述构成要素的任意组合、本发明的表现形式在方法、装置、记录介质、计 算机程序等之间进行变换的方式，也作为本发明的方案也是有效的。 0010 发明效果 0011 通过本发明，能提供一种降低在三维电视机中可能产生的闪烁的技术。 附图说明 0012 图1是表示三维空间中的物体与其视差图像的关系的图。 0013 图2是表。
9、示利用视差图像的快门式三维影像显示系统的概观的图。 0014 图3是表示快门式眼镜的快门定时和三维电视机中视差图像的显示定时的关系 说 明 书CN 102918859 A 2/11页 4 的图。 0015 图4是示意性表示三维电视机的电路结构的图。 0016 图5是说明三维液晶电视机的图像显示方式的图。 0017 图6是说明三维液晶电视机的图像显示的另一方式的图。 0018 图7的（a）是表示HDMI标准中的帧封装（Frame packing）格式的图。图7的（b） 是表示HDMI标准中的并排（side by side）格式的图。图7的（c）是表示HDMI标准中的上 下（top and bot。
10、tom）格式的图。 0019 图8是表示HDMI的三维影像相关的必需的标准的图。 0020 图9是说明帧率的变换方式的图。 0021 图10是说明帧率的其他变换方式的图。 0022 图11是示意性表示实施方式的三维影像显示系统中使用的设备结构的图。 0023 图12是示意性表示实施方式的三维影像再现装置的电路结构的图。 0024 图13是示意性表示实施方式的三维影像再现装置的功能结构的图。 0025 图14是敦促选择有无帧率变换的显示例。 0026 图15是表示实施方式的三维影像显示的处理步骤的流程图。 0027 图16是示意性表示实施方式的三维影像显示系统中使用的设备的另一结构的 图。 00。
11、28 图17是示意性表示实施方式的放大器的电路结构的图。 0029 图18是敦促选择三维电视机是否变换帧率的显示例。 具体实施方式 0030 使用视差图像的三维影像 0031 图1是表示三维空间中物体与其视差图像的关系的图。在三维空间中，被总称为 目标200的目标200a、目标200b以及目标200c的这三个目标200由被总称为照相机202 的、从左侧对目标200进行拍摄的左眼用照相机202a和从右侧对目标200进行拍摄的右眼 用照相机202b进行拍摄。图1中，由左眼用照相机202a拍摄的目标200的影像和由右眼 用照相机202b拍摄的目标200的影像分别在被总称为二维用监视器204的监视器2。
12、04a和 监视器204b上显示。 0032 左眼用照相机202a和右眼用照相机202b由于从不同位置拍摄目标200，因此投映 在监视器204a上的影像和投映在监视器204b上的影像成为目标200的朝向不同的影像。 像这样，将从不同视点观察三维空间中目标200时的图像称为“视差图像”。由于人的左右 眼离开6cm的程度，因此在从左眼观察的影像和从右眼观察的影像上产生视差。人的大脑 是利用左右眼感知到的视差图像来识别物体的纵深。因此，当左眼感知到的视差图像和右 眼感知到的视差图像分别投影到各眼时，人就识别为具有纵深的影像。 0033 虽然利用视差图像让人们观看具有纵深的影像的三维电视机有各种方式，但。
13、是在 本实施方式中，针对时分地交替显示左眼用视差图像和右眼用视差图像的快门式三维电视 机进行说明。图2是表示利用视差图像的快门式三维影像显示系统300的概观的图。三维 影像显示系统300包括：投影视差图像的三维电视机206、为观看视差图像而使用的快门式 眼镜210、以及获取三维电视机206和快门式眼镜210的同步的眼镜驱动信号发送部208。 说 明 书CN 102918859 A 3/11页 5 0034 三维电视机206时分地交替显示左眼用视差图像和右眼用视差图像。眼镜驱动信 号发送部208将三维电视机206的视差图像的显示定时作为红外线的同步信号而发送。快 门式眼镜210具备用于接收从眼镜。
14、驱动信号发送部208发送来的同步信号的接收部（未图 示），并根据接收到的同步信号而对左右透镜施加快门。快门例如能够通过使用已知的液晶 快门技术来实现。 0035 具体而言，三维电视机206显示左眼用视差图像时，快门式眼镜210从眼镜驱动信 号发送部208接收表示应关闭右眼透镜的快门的信号。快门式眼镜210根据接收到的信号 而关闭右眼透镜的快门，由此遮蔽映入右眼的影像。因而，在三维电视机206显示左眼用视 差图像的情况下，仅向用户的左眼投影左眼用视差图像。相反，在三维电视机206显示右眼 用视差图像的情况下，通过快门式眼镜210关闭左眼透镜的快门，由此仅向右眼投影右眼 用视差图像。 0036 图。
15、3是表示快门式眼镜210的快门定时和三维电视机206中的视差图像的显示定 时的关系的图。以预定的间隔t（例如1/120秒的间隔）交替显示被总称为左眼用视差图像 212的左眼用视差图像212a、左眼用视差图像212b、以及左眼用视差图像212c，和被总称为 右眼用视差图像214的右眼用视差图像214a、右眼用视差图像214b、右眼用视差图像214c。 0037 在显示左眼用视差图像212a时，快门式眼镜210的左眼快门打开，右眼用快门关 闭。图3中，将快门式眼镜210的快门为开状态时用“”记号表示，将闭状态时用“”记 号来表示。如图3所示，通过使三维电视机206的视差图像的显示与快门式眼镜210。
16、快门 的开闭同步地向用户的左眼投影左眼用视差图像212、向右眼投影右眼用视差图像214，能 够向用户显示具有纵深感的三维影像。 0038 三维电视机 0039 图4是示意性表示三维电视机206的电路结构的图。HDMI（High-Definition Multimedia Interface：高清晰度多媒体接口）端子216是输入包含影像和声音、数字控制 信号的基于HDMI标准的信号的端子。HDMI接收部218接收通过HDMI端子216而接收到 的HDMI Rx、HDMI的信号，并分离影像、声音、以及被称为信息帧（Info Frame）的控制信号 等各信号的包。 0040 天线输入端子220从未图。
17、示的天线接收地面数字的电视广播等。数字调谐器222 从介由天线输入端子220而从天线取得的广播波的信号中，取出所广播的传输数据。分离 电路224从广播的传输数据中分离影像、声音等的流。 0041 声音译码器226在声音数据的流不是Linear PCM（Pulse Code Modulation，线性 脉冲编码调制），而是例如MPEG2AAC、Dolby Digital（商标）等的情况下，将这些数据解码， 变换成Linear PCM。对变换后的Linear PCM信号进行改换排列声音通道等处理。声音信 号处理电路228进行音质校正等声音信号处理。 0042 为了向后述的扬声器232输出声音，声音。
18、放大电路230进行D/A（Digital Analog）转换，或者根据所设定的音量而放大模拟信号。扬声器232将声音放大电路230输 出的模拟声音信号作为声波进行输出。 0043 影像译码器234通过对影像数据的流进行解码，来生成构成动图像的各帧的影像 数据。影像信号处理电路236进行影像的画质改善、分辨率变换、IP变换（Interlace Progressive变换：逐行交错变换）等处理。图形生成电路238将三维电视机206的菜单及 说 明 书CN 102918859 A 4/11页 6 用于提示各种信息的显示重叠在从影像信号处理电路236输出的影像上。下面，在本说明 书中，影像和动图像作为。
19、相同意思来使用。另外，帧和图像也以相同意思来使用。 0044 屏驱动电路240生成屏驱动信号，该屏驱动信号是用于在三维电视机206的显示 屏242上显示从图形生成电路238输出的影像的触发。由于屏驱动电路240具有与显示屏 242显示影像的定时（timing）有关的定时信息，因此向后述的背光灯驱动电路244和眼镜 驱动信号发送部246输出定时信息。 0045 背光灯驱动电路244在背光灯为LED（Light Emitting Diode：发光二极管）背光 灯方式的情况下，根据从屏驱动电路240取得的定时信息，控制背光灯的点亮定时。背光灯 驱动电路244有时针对显示屏242内的各个区域，以不同的。
20、定时或亮度使背光灯点亮。 0046 眼镜驱动信号发送部246根据从屏驱动电路240取得的定时信息，发送用于驱动 上述快门式眼镜210的定时信号。此外，快门式眼镜210依照从眼镜驱动信号发送部246 接收到的定时信号来开闭快门式眼镜210的左右透镜。 0047 非易失性存储器254中保存有用于控制三维电视机206的系统程序等。CPU （Central Processing Unit）250经总线252从非易失性存储器254读入系统程序。CPU250 将主存储器256作为工作存储器而执行系统程序，由此整体地控制三维电视机206。 0048 CPU250介由遥控器接收机248接收来自用户对三维电视机。
21、206的指示，并介由总 线252向上述各电路发送控制命令。上述各电路主要根据从CPU250取得的控制命令进行 动作。 0049 作为三维电视机206的显示屏242，有利用等离子的PDP（lasma Display Panel： 等离子显示器）方式和利用液晶的LCD（Liquid Crystal Display：液晶显示器）方式等各 种方式。在本实施方式中以LCD方式为中心进行说明。 0050 在LCD方式的显示屏242中，一般边逐行扫描边更新影像的显示。例如，从显示屏 242最上面的一行开始更新，直到显示屏242最下面的一行，在垂直方向上扫描的同时，更 新像素的状态。因此，在逐张地交替更新左右。
22、视差图像时，在更新的过程中左右视差图像发 生混合。另外，由于液晶的响应需要时间，因此从接收应更新像素的信号起至实际像素更新 为止，产生时间差。 0051 因此，在LCD方式的显示屏242中，进行两张两张地显示左右视差图像的“二次描 绘（2度書）”，或者进行在左右视差图像之间显示全黑等单一色的帧的“插黑（黑插入）”。 0052 图5是说明三维液晶电视机的图像显示方式的图。图5表示上述的“二次描绘”。 图5中，用标号258总称应显示的视差图像。用L（Left的首字母）表示左眼用视差图像， 用R（Righ t的首字母）表示右眼用视差图像。另外，用标号262总称在显示屏242上实际 显示的视差图像。以。
23、下在附图中，用倾斜细实线表示左眼用视差图像，用竖直细实线表示右 眼用视差图像。 0053 左眼用视差图像258a被二次描绘在显示屏242上。图5中，L1a表示左眼用视差 图像258a的第1次描绘，L1b表示第2次描绘。同样地，R1a表示右眼用视差图像258b的 第1次描绘，R1b表示第2次描绘。以下，L2a、L2b、R2a、R2b也同样如此。 0054 如前所述，图像的更新是在逐行扫描的同时进行的，因此，在开始描绘R1a的时 刻，L1b的图像还留在显示屏242上。图像262b表示此时的显示屏242上的显示图像。另 外，如前所述，由于液晶的响应需要时间，因此从接收到应更新像素的信号起至像素实际更。
24、 说 明 书CN 102918859 A 5/11页 7 新为止，产生了时间差。因此，即使在全部接收到R1a的描绘信号的时刻，显示屏242上还 未完全结束R1的显示。图像262c表示此时的显示屏242上的显示画像。 0055 如图像262d所示，在描绘R1b的过程中液晶的响应时间就已经过，因此在图像 262c中尚未描绘完成的图像下部的描绘结束，在显示屏242上全部显示R1。因此，快门式眼 镜210在显示屏242上全部显示R1的期间，关闭左眼快门而打开右眼快门。图5中是用标 号260b表示的期间。同样的理由，在标号260a和标号260b表示的期间，关闭右眼快门而 打开左眼快门。另外，在标号260。
25、b表示的期间关闭左眼快门而打开右眼快门。在标号260 表示的期间以外的期间，快门式眼镜210关闭双眼的快门。 0056 如以上那样，“二次描绘”的方式是：通过两张两张地显示左右的视差图像而设置 在显示屏242上显示左右任一视差图像整体的期间，使该期间与快门式眼镜210开闭的定 时同步，由此对人眼投影恰当的视差图像。 0057 图6是说明三维液晶电视机的图像显示的另一方式的图。图6表示上述的“插 黑”。如前所述，由于在LCD方式的显示屏242上扫描的同时进行描绘，以及由于液晶的响 应时间，会在视差图像258的更新过程中混合前一个视差图像258。因此，在左眼用视差图 像258a和右眼用视差图像25。
26、8b之间插入黑图像。虽然视差图像258和黑图像会混合，但 即使两者混合也只是视差图像258的整体亮度下降这种程度，故能确保作为视差图像的构 造。 0058 图5所示的“二次描绘”方式和图6所示的“插黑”方式的任一方式都是为了显示 左右视差图像而分别需要各两次地驱动显示屏242。因此，例如为了显示帧率为nHz的三 维影像，如下式所示，需要按4倍的帧率驱动显示屏242。 0059 nHz2（二次描绘或插黑）2（左右的视差图像）4nHz 0060 HDMI v1.4a标准 0061 图7是表示HDMI v1.4a中与三维影像相关联的一组格式标准的图。 0062 图7的（a）表示帧封装（Frame p。
27、acking）格式的图。帧封装是用于将全尺寸的左 眼用视差图像L和右眼用视差图像R作为一帧来传输的格式。具体而言，在左眼用视差图像 L的下部夹着空白部262地配置右眼用视差图像R。因此，描绘时使用的水平同步信号264 与描绘一张视差图像258的情况相同，但垂直同步信号266成为在两张视差图像258的量 的基础上加入空白部262后的长度。 0063 图7的（b）表示并排（Side-by-Side）格式的图。并排格式是用于将左眼用视差 图像L和右眼用视差图像R分别占据纵向宽度的一半而结合，作为与全尺寸的一张视差图 像258相同尺寸来传输的格式。表示格式为并排格式的信号被作为HDMI控制信号的一部 。
28、分进行传输。 0064 图7的（c）是表示上下（Top-and-Bottom）格式的图。上下格式是用于将左眼用视 差图像L和右眼用视差图像R分别占据横向宽度的一半而结合，作为与全尺寸的一张视差 图像258相同尺寸来传输的格式。表示格式为上下格式的信号被作为HDMI控制信号的一 部分进行传输。 0065 图8是HDMI v1.4a标准中与三维影像相关的必需的影像格式的一览。在HDMI v1.4a标准中，接收设备（sink device）（HDMI接收机、电视机等）被预定义务能够接收帧封 装格式、并排格式、上下格式的图8中记载的分辨率/帧率的影像格式。另外，除此之外，也 说 明 书CN 10291。
29、8859 A 6/11页 8 可以支持可选择的格式、分辨率、帧率。源设备（HDMI发送机、蓝光播放器、游戏机等）也被允 许经由HDMI确认接收设备支持的格式、分辨率、帧率，仅输出所支持的格式、分辨率、帧率。 0066 闪烁和帧率的变换 0067 然而，影像的帧率被包含在一定范围内时，会发生被称为“闪烁”的现象。“闪烁” 是指影像的改写频度低到人眼能够识别的程度时，所识别到画面上细微的闪烁的现象。一 般，影像的帧率为10Hz50Hz程度的范围时，人们会说识别到闪烁。 0068 如图8所示，电影内容（contents）中三维影像的帧率常使用24Hz。因此，按内 容的帧率显示影像时，根据用户的不同，。
30、有可能会在意“闪烁”。因此，在用三维电视机206 显示电影内容中的三维影像时，进行帧率变换地再现三维影像。 0069 例如，如果能对帧插值而生成新的帧，使原来的帧三倍增加，以超出10Hz 50Hz的范围的72Hz的帧率显示三维影像，则能抑制闪烁。如前所述，在用LCD方式的 显示屏242显示72Hz的三维影像时，就需要以72Hz4=288Hz来驱动显示屏242。 但是，288Hz是较高的帧率，以288Hz驱动显示屏242多数较困难。因此，将24Hz的 帧率变换成60Hz来再现三维影像的情况较多。 0070 图9是说明帧率的变换方式的图。图9是说明被称为“2-3变换”的帧率变换方式 的图。在“2-。
31、3变换”中，以左眼用视差图像L和右眼用视差图像R的组为单位，在将某组连 续2次显示后，将接下来的组连续3次进行显示。图9中，左眼用视差图像L1和右眼用视 差图像R1分别各显示两次L1-1、L1-2、以及R1-1、R1-2。而左眼用视差图像L2和右眼用视 差图像R2分别各显示三次L2-1、L2-2、L2-3以及R2-1、R2-2、R2-3。图9中，用虚线箭头表 示两次显示的组，用实线箭头表示三次显示的组。 0071 这样，通过将帧的显示次数两次、三次这样一边切换一边显示，将24Hz的三维 影像实质上变换成2.5倍的60Hz的帧率。 0072 图10是说明帧率变换的另一方式的图。图10是说明使用帧。
32、插值技术将2帧变换 成5帧的方式的图。如图10所示，使用左眼用视差图像L1和左眼用视差图像L2的2帧， 通过运动预测等方法生成L1、L1a、L1b、L1c、L1d的5帧。同样地，使用右眼用视差图像R1 和右眼用视差图像R2的2帧，生成R1、R1a、R1b、R1c、R1d的5帧。图9中，表示了位于箭 头起点的帧被用于箭头所指的帧的插值的情况。例如，L1a是基于L1和L2而生成的。 0073 另外，在L1d的生成中使用L3，但作为整体来看，是由2帧生成5帧的。由此， 24Hz的三维影像被变换成60Hz的帧率。 0074 三维影像再现装置 0075 图11是示意性地表示实施方式的三维影像显示系统30。
33、0中所使用的设备结构的 图。三维影像显示系统300中所使用的设备包括三维影像再现装置100和三维电视机206。 三维影像再现装置100包括后述的HDMI发送部286（HDMI Tx），介由HDMI电缆268与三维 电视机206的HDMI接收部218（HDMI Tx）进行通信。 0076 图12是示意性地表示实施方式的三维影像再现装置100的电路结构的图。 0077 BDDVD驱动器270（Blu-ray Disc（商标）：蓝光盘；Digital Versatile Disc： 数字通用光盘）从光学介质读取数据。解码电路272解读AACS（Advanced Access Content Syst。
34、em：高级内容访问系统）和CSS（Content Scramble System：内容扰乱系统）等密码， 将数据变换成没有加密的状态的明文。 说 明 书CN 102918859 A 7/11页 9 0078 分离电路274从自光学介质读出的数据（多路复用后的声音或影像等数据）中，取 出MPEG（Moving Picture Experts Group：运动图像专家组）、AVC（Advanced Video Coding： 高级影像编码）、MVC（Multi-View Coding：多视点影像编码）等影像，Linear PCM（线性脉 冲编码调制）、Dolby Digital（杜比数字技术）、D。
35、TS（Digital Theater System：数字化影 院系统）（商标）等声音，以及这之外的字幕等的流。 0079 在声音数据的流不是Linear PCM而是例如Dolby Digital（商标）、DTS（商标）的 情况下，声音译码器276对这些进行解码，变换成Linear PCM。变换后的Linear PCM信号 进行改换排列声音通道等处理。声音信号处理电路228进行音质校正等声音信号处理。 0080 声音信号处理电路278进行主声、副声、以及按键声等互动音频的音频混合、混音 （down-mix）、采样率的变换等声音信号处理。 0081 影像译码器280对MPEG、AVC、MVC、VC。
36、-1等的影像流进行译码，生成影像各帧的 图像。影像信号处理电路282对从影像译码器280取得的帧进行画质校正、图像尺寸及分 辨率的变换、色彩空间的变换、主影像与副影像的合成等。另外，还进行OSD（On Screen Display：屏幕视控系统）影像的重合。影像信号处理电路282还包括3D影像生成部284， 在输出三维影像时，3D影像生成部284将从影像解码器280取得的图像数据变换成三维的 输出格式。 0082 HDMI发送部286（HDMI Tx）将声音信号处理电路278和影像信号处理电路282生 成的信号作为HDMI的发送送号，经由HDMI端子288进行发送。 0083 非易失性存储器2。
37、90中保存有用于控制三维影像再现装置100的系统程序等。 CPU292经由总线294从非易失性存储器290读入系统程序。CPU292将主存储器296作为 工作存储器而执行系统程序，由此统括地控制三维影像再现装置100。例如，驱动器IF （Interface：接口）198经由总线294从CPU292取得表示应控制BDDVD驱动器270的指 示，控制BDDVD驱动器270。 0084 CPU292介由遥控器接收部298接收来自用户的针对三维影像再现装置100的指 示，并经由总线294向上述各电路发出控制命令。上述各电路根据从CPU292取得的控制命 令进行动作。由CPU292等进行包含HDMI发送。
38、部286应发送的影像的格式和控制信号等的 包内容、输出定时、分辨率切换等的处理。 0085 图13是示意性表示实施方式的三维影像再现装置100的功能结构的图。三维影 像再现装置100包括接收部10、影像再现部12、影像变换部14、影像输出部16、以及是否变 换决定部18。 0086 接收部10接收来自用户的针对三维影像再现装置100的指示。接收部10主要由 图12中的遥控器接收部298和CPU292来实现。影像再现部12再现保存在Blu-ray Disc （商标）等中的影像。影像再现部12主要由图12中的BDDVD驱动器270、解码电路272、 分离电路274、以及影像译码器280来实现。 0。
39、087 是否变换决定部18取得影像再现部12要再现的影像的属性，决定是否应变换该 影像的帧率。为此，是否变换决定部18包括影像属性判定部26和输出条件确认部28。 0088 在影像再现部12要再现的影像是包含从不同视点观察三维空间的目标时的左眼 用视差图像和右眼用视差图像的三维影像的情况下，影像属性判定部26判定该三维影像 的帧率是否在可能发生闪烁的预定帧率范围内。预定帧率范围例如是从10Hz到50Hz 说 明 书CN 102918859 A 8/11页 10 的范围。 0089 当影像属性判定部26判定为影像再现部12要再现的影像在可能发生闪烁的预定 帧率范围内时，输出条件确认部28向后述的。
40、影像变换部14输出表示应提高该影像的帧率 的指示。是否变换决定部18通过由CPU250读出并执行保存在图12的非易失性存储器254 中的用于决定是否变换的程序来实现。 0090 影像变换部14根据来自输出条件确认部28的指示，进行影像再现部12要再现的 影像的分辨率变换和帧率变换等影像信号处理。因此，影像变换部14包括分辨率变换部 20、帧率变换部22、以及变换控制部24。影像变换部14主要由图12中的影像信号处理电 路282来实现。 0091 变换控制部24从输出条件确认部28取得针对影像再现部12要再现的影像是否 进行影像信号处理的指示。当从变换控制部24取得表示应变换影像再现部12要再现。
41、的影 像分辨率的指示时，分辨率变换部20变换该影像的分辨率。当影像再现部12要再现的影 像帧率在可能发生闪烁的预定帧率范围内时，帧率变换部22提高该影像的帧率直到超出 了预定帧率范围。具体而言，将影像的帧率变换到60Hz或其之上。帧率的变换例如通过 使用前述的2-3变换或插值技术来实现。 0092 如前所述，帧率越高越不容易出现闪烁。因此，帧率变换部22提高影像再现 部12要再现的影像的帧率。然而，产生HDMI传输中的TMDS（TransistionMinimized Differential Signaling：转换最小差分信号）时钟的IC（Integrated Circuit：集成电 路）。
42、多数是以按60Hz传输有效扫描线为1080的二维影像为前提设计的。因此，虽然可以 进行图8所示的影像信号的传输，但有时难以按60Hz输入输出有效扫描线为1080条的 三维影像。 0093 因此，变换控制部24判断是否会因帧率变换部22提高影像再现部12要再现的三 维影像的帧率，而使得处理三维影像的电路的处理能力不足。当处理三维影像的电路处理 能力不足时，向分辨率变换部20发出应降低三维影像的分辨率内容直到在该电路的处理 能力范围内的指示。 0094 影像输出部16将从影像变换部14取得的影像输出到三维电视机206等显示设 备。影像输出部16由图12中的HDMI发送部286和HDMI端子288来。
43、实现。 0095 根据用户的不同，有时即使发生闪烁也希望以高分辨率来视听三维影像。因此，输 出条件确认部28也可以介由影像输出部16向显示设备输出敦促选择有无帧率变换的显 示，并接受来自用户的选择。图14是敦促选择有无帧率变换的显示例。可以通过将图14 所示的显示作为OSD输出到显示设备，来接受用户的选择。输出条件确认部28将所取得的 来自用户的指示输出给变换控制部24。 0096 图13表示了用于实现实施方式1的三维影像再现装置100的功能结构，而省略了 其他的结构。图13中，作为进行各种处理的功能块而记载的各要素在硬件上能用CPU、主存 储器、其他LSI来构成，软件上由被载入到主存储器中的。
44、程序等来实现。因此，本领域技术 人员应当理解这些功能块能够仅由硬件、仅由软件、或者通过它们的组合以各种形式来实 现，并非限定于某一种。 0097 图15是表示实施方式的三维影像显示的处理步骤的流程图，是实施方式的三维 影像再现装置100中的影像显示的处理步骤的流程图。在以下的流程图中，通过表示步骤 说 明 书CN 102918859 A 10 9/11页 11 的S（Step的首字母）和数字的组合来表示各部的处理步骤。另外，在由S和数字的组合 来表示的处理中执行某个判断处理，当其判断结果为肯定时，附加Y（Yes的首字母），例如 表示为（S18的Y），相反，在其判断结果为否定的情况下，附加N（N。
45、o的首字母），例如表示为 （S18的N）。本流程图中的处理在影像再现部12再现立体影像时开始。 0098 影像再现部12再现蓝光盘（Blu-ray Disk商标）等中存储的三维影像（S10）。影 像属性判定部26从影像再现部12取得影像再现部12要再现的三维影像的帧率和分辨率 （S12）。输出条件确认部28根据从影像属性判定部26取得的帧率和分辨率，判定是否应变 换影像的帧率（S14）。输出条件确认部28将判定结果提示给用户，并接受来自用户的选择 （S 16）。 0099 当需要进行影像变换时（S18的Y），分辨率变换部20降低影像的分辨率，帧率变换 部22通过提高分辨率变换部20输出的影像的。
46、帧率来对影像进行变换（S20）。当不需要进 行影像变换时（S18的N），分辨率变换部20和帧率变换部22不进行特别的处理。影像输出 部16将从影像变换部14取得的影像输出到显示设备（S22）。影像输出部16输出影像时， 本流程中的处理结束。 0100 上述结构的动作如下。在实施方式的三维影像再现装置100中，用户事先在系统 设定中选择是否进行影像帧率等的变换。另外，还可以在影像再现过程中的OSD中进行选 择。在想要视听有效扫描线为1080条且帧率为24Hz的三维影像时，是否变换决定部18 取得在系统设定中设定的信息。在选择了表示要进行变换时，影像变换部14提高影像的帧 率。 0101 如上所述。
47、，根据实施方式，通过提高有可能识别为发生闪烁的影像的帧率，能抑制 闪烁的发生。另外，在为提高帧率而需要降低分辨率的情况下，向用户提示该意思，从而能 实现符合用户喜好的影像变换。 0102 以上基于实施方式说明了本发明。本领域技术人员应当理解该实施方式仅是例 示，其各构成要素和处理过程可以有各种变形例，并且这些变形例也包含在本发明的范围 内。 0103 实施方式的变形例 0104 图16是示意性表示实施方式的三维影像显示系统300中所使用的设备的另一结 构的图。本例的三维影像显示系统300中使用的设备包括三维影像再现装置100、放大器 196、以及三维电视机206。三维影像再现装置100包括HD。
48、MI发送部286（HDMI Tx），介由 HDMI电缆268a与放大器196进行通信。另外，三维电视机206也介由HDMI电缆268b与放 大器196进行通信。 0105 在图11所示的例子中，从三维影像再现装置100输出的影像和声音等的信号直接 被输入到三维电视机206，而在本例中，从三维影像再现装置100输出的影像和声音等的信 号在被输入三维电视机206之前，在放大器196中进行信号处理。比起在三维影像再现装 置100或三维电视机206内进行处理，具有能进行更高度的声音信号处理这样的效果。 0106 图17是示意性地表示实施方式的放大器196的电路结构的图。 0107 HDMI接收部168（HDMI Rx）从介由HDMI输入端子166取得的HDMI信号中分离出 影像、声音、控制信号等各信号的包。 0108 在声音数据的流不是Linear PCM而是例如Dolby Digital（商标）、DTS（商标）等 说 明 书CN 102918859 A 11 10/11页 12 的情况下，声音译码器170将它们解码，变换成Linear PCM。变换后的Linear PCM信号进 行改换排列声音通道等的处理。声音信号处理电路228进行音质校正等声音信号处理。 0109 声音信号处理电路172进行主声、副声、以及按键声等互动音频的音频混合、混音 （down-mix）、采样率的变换等音。