《三维立体成像方法及装置.pdf》由会员分享，可在线阅读，更多相关《三维立体成像方法及装置.pdf（14页珍藏版）》请在专利查询网上搜索。
1、(10)申请公布号 CN 103969838 A (43)申请公布日 2014.08.06 C N 1 0 3 9 6 9 8 3 8 A (21)申请号 201410228866.8 (22)申请日 2014.05.27 G02B 27/22(2006.01) (71)申请人清华大学 地址 100084 北京市海淀区100084-82信箱 (72)发明人廖洪恩 赵栋 (74)专利代理机构北京清亦华知识产权代理事 务所(普通合伙) 11201 代理人张大威 (54) 发明名称 三维立体成像方法及装置 (57) 摘要 本发明提供一种三维立体成像方法及装置， 其中装置包括：显示源，用于显示多个二维。
2、图像， 多个二维图像相关联；三维影像生成装置，用于 对多个二维图像进行处理，以生成多个三维影像； 包括多个半透半反镜片的半透半反光学器件，多 个半透半反镜片与三维影像生成装置所在平面形 成预设角度，多个半透半反镜片一一对应地将多 个三维影像在空间进行翻转和拼接以在多个视角 得到裸眼观察到的三维立体成像，三维立体图像 在多个观察视角呈现连续、无缝的整体三维影像。 根据本发明实施例的装置，通过将经处理的多个 二维图像生成多个三维影像，并对该多个三维影 像进行翻转得到360全视角裸眼观察到连续、 无缝的三维立体成像，从而方便用户体验。 (51)Int.Cl. 权利要求书1页 说明书6页 附图6页 (。
3、19)中华人民共和国国家知识产权局 (12)发明专利申请 权利要求书1页 说明书6页 附图6页 (10)申请公布号 CN 103969838 A CN 103969838 A 1/1页 2 1.一种三维立体成像装置，其特征在于，包括： 显示源，用于显示经图像算法处理的多个二维图像，所述多个二维图像相关联； 三维影像生成装置，所述三维影像生成模块用于利用立体全像技术对所述多个二维图 像进行处理，以生成多个三维影像；以及 半透半反光学器件，所述半透半反光学器件包括多个半透半反镜片，所述多个半透半 反镜片与所述三维影像生成装置所在平面形成预设角度，所述多个半透半反镜片一一对应 地将所述多个三维影像在。
4、空间进行翻转和拼接以在多个视角得到裸眼观察到的三维立体 成像，所述三维立体图像在多个观察视角为观察者呈现连续、无缝的整体三维影像。 2.如权利要求1所述的三维立体成像装置，其特征在于，还包括： 图像增强装置，所述图像增强装置安装于所述三维影像生成装置的上方，用于消除所 述多个三维影像的摩尔纹或对所述多个三维影像进行光学滤波。 3.如权利要求1所述的三维立体成像装置，其特征在于，所述预设角度为45。 4.如权利要求1所述的三维立体成像装置，其特征在于，所述半透半反光学器件分别 对所述多个三维影像的至少一部分多个三维影像进行拼接或融合以在360全视角得到连 续、无缝裸眼观察到的三维立体成像。 5.。
5、如权利要求1所述的三维立体成像装置，其特征在于，所述多个半透半反镜片进行 有规律地拼接以构成多面体的半透半反光学器件。 6.一种三维立体成像方法，其特征在于，包括以下步骤： 显示步骤，显示经图像算法处理的多个二维图像，所述多个二维图像相关联； 生成步骤，通过立体全像技术对所述多个二维图像进行处理，以生成多个三维影像；以 及 三维立体成像步骤，根据与平面以预设角度布置的多个半透半反镜片将所述多个三维 影像在空间进行翻转以在多个角度得到连续、无缝裸眼观察到的三维立体成像。 7.如权利要求6所述的三维立体成像方法，其特征在于，还包括： 消除所述多个三维影像的摩尔纹或对所述多个三维影像进行光学滤波。 。
6、8.如权利要求6所述的三维立体成像方法，其特征在于，所述预设角度为45。 9.如权利要求6所述的三维立体成像方法，其特征在于，在所述三维立体成像步骤中， 分别对所述多个三维影像的至少一部分多个三维影像进行拼接或融合以在360全视角得 到连续、无缝的三维立体成像。 权 利 要 求 书CN 103969838 A 1/6页 3 三维立体成像方法及装置 技术领域 0001 本发明涉及三维立体技术领域，特别涉及一种三维立体成像方法及装置。 背景技术 0002 现有的平面显示器只能显示二维信息，不能提供视觉深度感知。而通过三维显示， 可以直接观察到具有物理景深的三维图像，使得所显示的场景和物体具有深度感。
7、。 0003 目前的裸眼三维显示主要有柱镜式、栅栏式和微透镜阵列式。柱镜式、栅栏式可 以提供水平视差，目前市场上裸眼3D显示器基本上多属于这两种方式。微透镜阵列式裸 眼三维显示，又称立体全像三维显示技术(integral photography，integral imaging， integral videography,IP,II,IV)，简称立体全像技术。 0004 现有的裸眼三维显示无法实现360全视角观看，只能在预定角度或有限范围内 观测到，这使得用户不方便观看，影响观看效果。 发明内容 0005 本发明的目的旨在至少解决裸眼三维显示“跳变”现象和无法360全视角连续、 无缝观看的缺陷。
8、，本发明一方面提供一种三维立体成像装置。 0006 本发明的另一方面提出一种三维立体成像方法。 0007 有鉴于此，本发明一方面的实施例提出一种三维立体成像装置，包括：显示源，用 于显示经图像算法处理的多个二维图像，所述多个二维图像相关联；三维影像生成装置，所 述三维影像生成模块用于利用立体全像技术对所述多个二维图像进行处理，以生成多个三 维影像；以及半透半反光学器件，所述半透半反光学器件包括多个半透半反镜片，所述多 个半透半反镜片与所述三维影像生成装置所在平面形成预设角度，所述多个半透半反镜片 一一对应地将所述多个三维影像在空间进行翻转和拼接以在多个视角得到裸眼观察到的 三维立体成像，所述三。
9、维立体图像在多个观察视角为观察者呈现连续、无缝的整体三维影 像。 0008 根据本发明实施例的装置，通过将经处理的多个二维图像生成多个三维影像，并 对该多个三维影像进行翻转得到360全视角裸眼观察到连续、无缝的三维立体成像，从而 方便用户体验。 0009 在本发明的一个实施例中，还包括：图像增强装置，所述图像增强装置安装于所述 三维影像生成装置的上方，用于消除所述多个三维影像的摩尔纹或对所述多个三维影像进 行光学滤波。 0010 在本发明的一个实施例中，所述预设角度为45。 0011 在本发明的一个实施例中，所述半透半反光学器件分别对所述多个三维影像的至 少一部分多个三维影像进行拼接或融合以在。
10、360全视角得到连续、无缝裸眼观察到的三 维立体成像。半透半反镜片的反射与折射比例不固定为各占50。 0012 在本发明的一个实施例中，所述多个半透半反镜片进行有规律地拼接以构成多面 说 明 书CN 103969838 A 2/6页 4 体的半透半反光学器件。多面体侧面的个数不限定，当个数趋于无穷多时，可构成圆锥面。 0013 本发明另一方面的实施例提出了一种三维立体成像方法，包括以下步骤：显示步 骤，显示经图像算法处理的多个二维图像，所述多个二维图像相关联；生成步骤，通过立体 全像技术对所述多个二维图像进行处理，以生成多个三维影像；以及三维立体成像步骤，根 据与平面以预设角度布置的多个半透半。
11、反镜片将所述多个三维影像在空间进行翻转以在 多个角度得到连续、无缝裸眼观察到的三维立体成像。其中，半透半反镜片的个数与三维图 像的个数相等，具体数量不限定。 0014 根据本发明实施例的方法，通过将经处理的多个二维图像生成多个三维影像，并 对该多个三维影像进行翻转得到360全视角裸眼观察到连续、无缝的三维立体成像，从而 方便用户体验。 0015 在本发明的一个实施例中，还包括：消除所述多个三维影像的摩尔纹或对所述多 个三维影像进行光学滤波。 0016 在本发明的一个实施例中，所述预设角度为45。 0017 在本发明的一个实施例中，在所述三维立体成像步骤中，分别对所述多个三维影 像的至少一部分多。
12、个三维影像进行拼接或融合以在360全视角得到连续、无缝的三维立 体成像。 0018 本发明附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变 得明显，或通过本发明的实践了解到。 附图说明 0019 本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变 得明显和容易理解，其中， 0020 图1为根据本发明一个实施例的三维立体成像装置的结构框图； 0021 图2为根据本发明一个实施例的三维立体成像装置的结构示意图； 0022 图3为根据本发明一个实施例的设备连接示意图； 0023 图4为根据本发明一个实施例的三维立体成像的原理图； 0024 图5为根据本发明一个实施例。
13、的半透半反光学器件对三维影像进行翻转的原理 示意图； 0025 图6为根据本发明一个实施例的八面锥体的视角分析示意图 0026 图7为根据本发明一个实施例的半透半反光学器件的结构图； 0027 图8为根据本发明一个实施例渲染生成用于拼接融合的二维图像； 0028 图9为根据本发明的三维立体影像的排布示意图； 0029 图10为根据本发明另一个实施例的半透半反光学器件的结构图； 0030 图11为根据本发明另一个实施例的半透半反光学器件对应的三维立体影像的排 布示意图；以及 0031 图12为根据本发明一个实施例的三维立体成像方法的流程图。 具体实施方式 0032 下面详细描述本发明的实施例，实。
14、施例的示例在附图中示出，其中自始至终相同 说 明 书CN 103969838 A 3/6页 5 或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描 述的实施例是示例性的，仅用于解释本发明，而不能理解为对本发明的限制。 0033 在本发明的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、“上”、“下”、“前”、 “后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于 附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所 指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理。
15、解为对本发 明的限制。此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要 性。 0034 在本发明的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“相 连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可 以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是 两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本 发明中的具体含义。 0035 图1为根据本发明一个实施例的三维立体成像装置的结构框图。如图1所示，根 据本发明实施例的三维立体成像装置包括：显示源100、三维。
16、影像生成装置200和半透半反 光学器件300。 0036 具体地，显示源100用于显示经图像算法处理的多个二维图像，多个二维图像相 关联。该二维图像可通过多相机拍摄、光线追踪或其他图形学方法获取，比如光线追踪算 法、多视点计算机图形算法等。也可以采用shade，3DMAX等三维建模软件虚拟拍摄。图中 各个图像需要满足的如下关系：(1)各个图像围绕中心圆周排列；(2)每个图像均围绕显示 场景中心轴旋转。旋转和排列的角度等于360/N，其中N是半透半反器件中半透半反镜片 的个数。例如，当N8时，该角度即为45。各个子图之间45旋转位置关系。三维影 像生成装置200用于利用立体全像技术对多个二维图像。
17、进行光学转换，以生成多个三维影 像。半透半反光学器件300包括多个半透半反镜片，多个半透半反镜片以三维影像生成装 置200所在平面形成预设角度，多个半透半反镜片一一对应地将多个三维影像在空间进行 翻转和拼接以在多个视角得到裸眼观察到的三维立体成像，三维立体图像在多个观察视角 为观察者呈现连续、无缝整体三维影像。 0037 在本发明的一个实施例中，半透半反光学器件300的每个半透半反光学镜片与三 维影像生成装置200所形成的预设角度为45，半透半反光学器件300通过对多个三维影 像的全部或一部分多个三维影像进行拼接或融合以在360全视角得到连续、无缝三维立 体成像。通过将多个半透半反镜片进行拼接。
18、以构成多面体或圆锥体的半透半反光学器件 300，镜面和每个半透半反镜片的水平面夹角为45，且各个半透半反镜片均匀排列。该三 维影像生成装置可以为但不限于微透镜、柱透镜、光栅或全息装置，并利用相应的算法即可 形成裸眼可得到连续、无缝的裸眼可观察的三维影像。 0038 图2为根据本发明另一个实施例的三维立体成像装置的结构示意图。图3为根据 本发明一个实施例的设备连接示意图。如图2和图3所示，根据本发明实施例的三维立体 成像装置包括：显示源100、三维影像生成装置200、半透半反光学器件300和图像增强装置 400。 0039 具体而言，显示源100用于显示经图像算法处理的多个二维图像，多个二维图像。
19、 说 明 书CN 103969838 A 4/6页 6 相关联。三维影像生成装置200用于利用立体全像技术对多个二维图像进行光学变换，以 生成多个三维影像。图像增强装置400用于消除多个三维影像的摩尔纹或对多个三维影像 进行光学滤波。半透半反光学器件300包括多个半透半反镜片，多个半透半反镜片与三维 影像生成装置200所在平面形成预设角度，多个半透半反镜片一一对应地将图像增强装置 400光学变换后生成的多个三维影像在空间进行翻转以得到连续、无缝裸眼观察到的三维 立体成像。该图像增强装置可以为但不限于散射版或滤波板，通过散射版可以提高三维影 像的分辨率，或者通过滤波板可以提高三维影像的清晰度。 。
20、0040 在本发明的一个实施例中，显示源100可以为二维显示器显示图像处理算法处理 的多个二维图像，该多个二维图像相互关联。其显示效果与二维显示器的像素密度相关，像 素密度越高越清晰。三维影像生成装置200可通过采用微透镜阵列全像立体显示，或者全 息显示等裸眼三维显示技术生成多个三维影像。半透半反器件300对多个三维影像进行翻 转和位置转移以在多个角度得到连续、无缝裸眼观察到的三维立体成像。半透半反光学器 件300的多个半透半反镜片根据每个角度的不同需求对多个三维影像中至少一部分多个 三维影像进行拼接或融合以在360全视角得到三维立体成像。该多个半透半反光镜片数 量n与三维显示可视角度thet。
21、a满足如下关系，该关系可表示为theta(360/n)。因此， 半透半反光镜片的数量越多可视角度就越小，即可为用户在任意一个角度提供高质量的三 维立体成像。 0041 图4为根据本发明一个实施例的三维立体成像的原理图。如图4所示，立体全像 技术可以生成全视差的裸眼立体显示。微透镜阵列相当于一组有序排列的相机镜头。多个 相机镜头对空间场景进行拍摄，得到一副图像。拍摄的逆过程是显示，将拍摄的图像经过微 透镜阵列，可以还原显示出三维场景。观察者一侧的空间三维物体(体数据)上一点发出 光线，通过所有的微透镜的中心，在微透镜后方形成像点。高清晰平板显示发出的光线经过 微透镜阵列，在空间中其发出点交汇，以。
22、形成了空间的一个立体显示点，多个点构成一幅立 体显示画面。 0042 图5为根据本发明一个实施例的半透半反光学器件对三维影像进行翻转的原理 示意图。如图5所示，镜面对物体进行成像。微透镜阵列上生成的三维影像，该三维影像通 过半透半反光学器件会形成对应的像。多个半透半反器件对多个物体进行镜面成像，形成 多个像。多个像在空间可以合并形成一个完整的三维物体。根据平面镜成像原理，物体和 像关于镜面对称，因此，显示器表面的三维影像经过镜面成像后，三维影像和其像关于镜面 对称，从而实现了对三维影像的位置转移，实现立体图像的空间显示功能。 0043 在本发明的一个实施例中，由于使用平板显示器对物体所能显示的。
23、视角有限。在 视角范围内，图像可保持显示的空间几何形体的准确性，可以看到具有立体视差的三维图 像。本设计使用45镜面将多个影像图像拼接起来，以将多个影像图像融合为一个连续、无 缝的三维立体影像以扩张显示范围，即将多个影像的视角合并起来，来扩大视角，从一个面 移到另一个面的过程中不会出现跳变现象。 0044 在对影像的翻转过程中使用45半透半反镜片进行翻转，因此在LCD上距离中心 越远，其垂直高度会越高。所以离LCD屏幕越远，则像点离观察者越近。通过平面LCD显 示影像，将成像物体的一半位于屏幕里面，另一半位于屏幕外面，因此将成像物体的中间面 (一般也是最大截面)放在0深度位置。由此，可使1/2。
24、的物体信息通过3D呈现出来。 说 明 书CN 103969838 A 5/6页 7 0045 图6为根据本发明一个实施例的八面锥体的视角分析示意图。如图6所示，假设 物体宽度为L1，物体深度为L2时，L1L2，且锥体多边形每个边对应的圆心角， 45。如果锥体多边形的边长为d，观察距离为D时，可在距离中心为D的圆周以外环绕观 看。当L1R则无法做到在如何角 度均可以看到成像物体的立体影像。假设L1L250mm,D600mm,d130mm，则影像 所需的视角大小 0046 对于八面锥体的半透半反光学器件而言，为了在空间合并形成连续过渡的裸眼 三维显示，且在环绕观看时不出现跳跃，因此对360内半透半。
25、反镜片的拼接个数(n)有 要求。为了360全视差显示以从任意方向观看，需要使每个半透半反镜片的角度至少为 2theta角度。影像显示的视角为theta，则要求多面体的面数N即半透半反镜片数量N满 足，N360/theta。由此保证在面与面的拼接处，不会出现跳跃。对于八面锥体的半透 半反光学器件，相邻两个面显示的影像的夹角为45。因此要求影像的角度为45，而 对于16面体，需要22.5。所以视角在面与面的拼接处移动时，可以实现360三维影像 进行平滑过渡。综上所述，对于n面体的半透半反光学器件，相邻影像显示夹角为360 / n，影像的可视角度为360/n。 0047 图7为根据本发明一个实施例的。
26、半透半反光学器件的结构图。如图7所示，半透 半反器件300是由多个等腰三角形半透半反镜片以等腰三角形的等边为连接边相连而成。 半透半反镜片与底面的夹角为45，由此可以保证将三维影像进行90翻转。因此，面数 越多，等腰三角形的顶角越小。通过图像算法处理、图像排列以及半透半反光学器件的拼接 融合可以得到如图8所示的空间连续的三维显示。如图8所示，对于六边形排列的微透镜 阵列的图像，经过MLA透镜光学转换以后，形成裸眼三维图像。本发明的一个实施例中采用 立体全像技术渲染生成三维影像，影像距中心的距离等于浮动图像显示的高度。各个影像 的夹角为45。每个相邻影像之间绕其自身旋转轴旋转45。该示例的图像是。
27、根据CT扫 描得到的体数据生成的，相邻图像相差360 /n。影像围绕金字塔圆心排列。图像距离中 心的距离等于浮动图像显示的高度。各个子图夹角为45。每个相邻影像之间绕其自身旋 转轴旋转45。 0048 图9为根据本发明的三维立体影像的排布示意图。如图9所示，作为本发明的一 个示例采用八个侧面的多面体(锥体)和六边形排列的微透镜阵列，生成对应的八幅三维 影像。每个相邻三维影像之间绕其自身旋转轴旋转45。影像围绕中心排列，每个三维影 像的夹角为45。该八幅三维影像的任意一个影像通过如下公式表示，I 2 R z ()R (x) () I 1 ，其中，I 1 表示一个三维影像，I 2 表示三维影像I 。
28、1 处理后的三维影像，R (x) ()表示绕数 据源中心线旋转，R z ()表示绕图像中心线旋转。其中， 说 明 书CN 103969838 A 6/6页 8 0049 将I 1 旋转后得到I 2 。对于n个侧面的多面体，相邻图像相差360 /n。根 据本发明实施例的装置，通过将经处理的多个二维图像生成多个三维影像，并对该多个三 维影像进行翻转得到360全视角裸眼观察到连续、无缝的三维立体成像，从而方便用户体 验。 0050 多个半透半反镜片进行有规律地拼接以构成多面体的半透半反光学器件。多面体 侧面的个数不限定，当个数趋于无穷多时，可构成圆锥面。图10为根据本发明另一个实施 例的半透半反光学。
29、器件的结构图。如图10所示，半透半反器件300是由无数多个等腰三角 形半透半反镜片以等腰三角形的等边为连接边相连而成，无穷多个三角形连接逼近为圆锥 面。半透半反镜片构成的锥面与底面的夹角为45，由此可以保证将三维影像进行90翻 转。本发明的这个实施例中采用立体全像技术渲染生成三维影像。通过图像算法处理、图 像排列以及半透半反光学器件的拼接融合可以得到空间连续的三维显示。图11为根据本 实例的三维影像的排布示意图，生成图像过程中对图像进行曲面变形，渲染生成二维图像 经三维影像生成装置以后形成三维显示，再经过半透半反光学器件对多个三维影像的至少 一部分多个三维影像进行拼接或融合以在360全视角得到。
30、连续、无缝裸眼观察到的三维 立体成像。根据本发明实施例的装置，通过将经处理的多个二维图像生成多个三维影像，并 对该多个三维影像进行翻转得到360全视角裸眼观察到连续、无缝的三维立体成像，从而 方便用户体验。 0051 图12为根据本发明一个实施例的三维立体成像方法的流程图。如图12所示，根据 本发明实施例的三维立体成像方法包括以下步骤：显示经图像算法处理的多个二维图像， 多个二维图像相关联(步骤101)。通过立体全像技术对多个二维图像进行处理，以生成多 个三维影像(步骤103)。根据与平面以预设角度布置的多个半透半反镜片将多个三维影像 在空间进行翻转以在多个角度得到连续、无缝裸眼观察到的三维立。
31、体成像(步骤105)。 0052 在本发明的一个实施例中，经过与显示源100(例如二维显示器)表面成45的半 透半反器件300进行光学转换，成像垂直于二维显示器的面上的三维立体影像。锥形排列 的半透半反器件300的多个半透半反镜片分别对多个三维子图像进行成像，并将该多个子 图像在锥体中心聚集拼接，以形成可以360连续可视裸眼真三维立体影像，半透半反光学 器件300覆盖0到360任意角度。该半透半反光学器件300可以为金字塔式多面体、圆 锥体或其它形状。 0053 根据本发明实施例的方法，通过将经处理的多个二维图像生成多个三维影像，并 对该多个三维影像进行翻转得到360全视角裸眼观察到连续、无缝。
32、的三维立体成像，从而 方便用户体验。 0054 尽管上面已经示出和描述了本发明的实施例，可以理解的是，上述实施例是示例 性的，不能理解为对本发明的限制，本领域的普通技术人员在不脱离本发明的原理和宗旨 的情况下在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。 说 明 书CN 103969838 A 1/6页 9 图1 图2 说 明 书 附 图CN 103969838 A 2/6页 10 图3 图4 图5 说 明 书 附 图CN 103969838 A 10 3/6页 11 图6 图7 说 明 书 附 图CN 103969838 A 11 4/6页 12 图8 图9 说 明 书 附 图CN 103969838 A 12 5/6页 13 图10 图11 说 明 书 附 图CN 103969838 A 13 6/6页 14 图12 说 明 书 附 图CN 103969838 A 14 。