使用关于多视点视频流的链接信息发送数字广播流的方法和设备以及接收数字广播流的方法和设备技术领域
与示例性实施例一致的设备和方法涉及用于提供二维(2D)内容或三维
(3D)内容的数字数据发送和接收。
背景技术
在基于运动图像专家组(MPEG)传输(TS)的数字广播方法中，发送终端将
未压缩的视频数据和未压缩的音频流插入各个基本流(ES)中，对每个ES进行
复用以产生TS，并经由信道发送TS。
TS包括与ES一起的节目说明信息(PSI)。PSI典型地包括节目关联表(以
下，称为PAT信息)和节目映射表(以下，称为PMT信息)。提供单个节目信
息的PMT信息描述用于每个ES的包标识符(PID)，PAT信息描述用于每个
PMT信息的PID。
接收终端经由信道接收TS，并通过与在发送终端中执行的处理相反的处
理来从TS提取ES。由显示装置恢复和再现包含在ES中的数字内容。
发明内容
技术问题
提供了根据示例性实施例的能够提供3D视频服务的数字广播流发送设
备和方法以及能够提供3D视频服务的数字广播流接收设备和方法。
技术方案
根据示例性实施例的一方面，提供了一种用于提供3D视频服务的数字
广播流发送方法，所述方法包括：产生针对多条视频信息的多个ES，所述多
条视频信息包括以下项中的至少一个：关于3D视频的基本视点视频的信息、
关于与基本视点视频对应的附加视点视频的信息以及具有与3D视频的视点
不同的视点的2D视频；通过将所述多个TS与用于标识与所述多条视频信息
中的每一条链接的至少一条视频信息的链接信息进行复用来产生至少一个
TS；经由至少一个信道发送产生的所述至少一个TS。
有益效果
本发明可在保持与使用基于运动图像专家组(MPEG)的TS的数字广播系
统的兼容性的同时提供3D视频的数字内容服务和2D视频的数字内容服务。
由于PMT信息包括关于单个视频ES的信息，因此发送终端将用于标识
相对视频信息所在的ES、TS或信道的关联信息插入每个PMT信息，从而接
收终端可在3D再现模式或2D再现模式下根据ES、TS或信道之间的关联信
息再现关联项视频数据。
另外，由于经由PMT信息不仅发送和接收链接信息，还发送和接收关于
在2D视频再现方法和3D视频再现方法之间转换的信息以及关于3D视频特
性的附加信息，因此本发明可在保持与用于2D内容服务的数字广播系统的
兼容性的同时，平滑地提供3D视频的数字内容服务。
不需要新产生PSI或用于PSI的TS，多条视频信息和附加信息(诸如，
3D视频流描述符)之间的链接信息可被包括在PMT信息或PAT信息中。另外，
附加信息可被包括在保留字段中而不需要将包标识符(PID)添加到PMT信息。
附图说明
图1是根据示例性实施例的数字广播流发送设备的框图；
图2是根据示例性实施例的数字广播流接收设备的框图；
图3是根据示例性实施例的用于2D内容服务的数字TV发送系统的框
图；
图4是根据示例性实施例的用于2D内容服务的数字TV接收系统的框
图；
图5示出根据第一示例性实施例的经由多个信道发送和接收多个视频流
的信道频带的分布的示例；
图6是根据图5中示出的第一示例性实施例的经由多个信道发送包括链
接信息的3D视频流的数字广播流发送设备的框图；
图7示出根据第二示例性实施例的能够经由单个信道发送和接收针对
3D视频流和2D视频流的多个TS的信道频带的分布的示例；
图8是根据图7中示出的第二示例性实施例的经由单个信道发送具有链
接信息的多个TS的数字广播流发送设备的框图；
图9是根据第三示例性实施例的经由单个信道发送包括3D视频流和2D
视频流的单个TS的数字广播流发送设备的框图；
图10是根据第四示例性实施例的经由与多个传输网络系统对应的多个
信道接收多个TS的数字广播流接收设备的框图；
图11示出根据第五示例性实施例的信道频带分布的示例，在该信道频带
中，能够经由多个信道发送和接收针对3D视频的基本视点视频流的多个TS
并且能够经由单个信道发送和接收针对于3D视频的附加视点视频流的单个
TS；
图12示出根据示例性实施例的能够经由单个信道发送和接收用于多视
点视频流的多个TS的信道频带的分布的示例；
图13示出根据示例性实施例的使用了针对3D复合格式的按比例缩减方
法的示例；
图14、图15、图16、图17和图18是根据示例性实施例的数字广播流
接收设备的再现单元的示意图；
图19是根据示例性实施例的能够提供3D视频服务的数字广播流发送方
法的流程图；
图20是根据示例性实施例的能够提供3D视频服务的数字广播流接收方
法的流程图。
具体实施方式
最佳模式
根据示例性实施例的一方面，提供了一种用于提供3D视频服务的数字
广播流发送方法，所述方法包括：产生针对多条视频信息的多个ES，所述多
条视频信息包括关于3D视频的基本视点视频的信息、关于与基本视点视频
相应的附加视点视频的信息和具有与3D视频的视点不同的视点的2D视频中
的至少一个；通过将所述多个ES与链接信息进行复用来产生至少一个TS，
其中，所述链接信息用于标识与所述多条视频信息链接的至少一条视频信息；
经由至少一个信道发送产生的所述至少一个TS。
产生所述至少一个TS的步骤可包括对每个ES进行复用以产生至少一个
TS，发送所述至少一个TS的步骤可包括：经由不同的信道发送所述至少一
个多节目传输流。
产生所述至少一个TS的步骤可包括对每个ES进行复用以产生至少一个
TS，发送所述至少一个TS的步骤可包括经由单个信道发送所述至少一个TS。
产生所述至少一个TS的步骤可包括对ES进行复用以产生单个TS，发
送所述至少一个TS的步骤可包括经由单个信道发送所述单个个TS。
根据另一示例性实施例的一方面，提供了一种提供3D视频服务的数字
广播流接收方法，所述方法包括：经由至少一个信道接收针对多条视频信息
的至少一个TS，所述多条视频信息包括关于3D视频的基本视点视频的信息、
关于3D视频的附加视点视频的信息和具有与3D视频的视点不同的视点的
2D视频中的至少一个；对接收的所述至少一个TS进行解复用以从所述至少
一个TS提取用于标识与所述多条视频信息链接的至少一条视频信息的链接
信息以及针对所述多条视频信息的至少一个ES；对提取的所述至少一个ES
进行解码以基于链接信息再现通过解码而恢复的3D视频和2D视频中的至少
一个。
接收的步骤可包括：通过对所述至少一个信道中的每个信道进行解码并
从所述至少一个信道中的每个信道接收单个TS来接收至少一个TS，提取的
步骤可包括：通过对所述至少一个多节目TS中的每一个进行解复用来提取至
少一个ES。
接收的步骤可包括：通过对所述至少一个信道中的一个信道进行解码来
经由所述信道接收多个TS，提取的步骤可包括：通过对所述至少一个TS中
的每一个进行解复用来提取所述至少一个ES。
接收的步骤还可包括：通过对所述至少一个信道中的一个信道进行解码
来接收该信道的TS，提取的步骤可包括：通过对传输流进行解复用来提取所
述至少一个ES。
链接信息可包括链接标识符和链接描述符，链接标识符表示在至少一个
TS中包括的多条视频信息中是否存在相互链接的多条视频信息，链接描述符
包括关于在至少一个TS中包括的多条视频信息中相互链接的多条视频信息
之间的链接的信息。
链接标识符可被包括在针对所述至少一个TS的节目关联表中。
链接描述符可被包括在针对相互链接的多条视频信息的ES的节目映射
表中。
包括用于再现当前TS的当前视频信息的附加信息的3D视频流描述符可
被包括在针对当前视频信息的节目映射表中。
根据另一示例性实施例的一方面，提供了一种用于提供3D视频服务的
数字广播流发送设备，所述设备包括：ES产生单元，产生针对多条视频信息
的多个ES，所述多条视频信息包括关于3D视频的基本视点视频的信息、关
于与基本视点视频相应的附加视点视频的信息和具有与3D视频的视点不同
的视点的2D视频中的至少一个；TS产生单元，通过将产生的所述多个ES
与链接信息进行复用来产生至少一个TS，其中，所述链接信息用于标识与所
述多条视频信息链接的至少一条视频信息；发送单元，经由至少一个信道发
送产生的所述至少一个TS。
根据另一示例性实施例的一方面，提供了一种提供3D视频服务的数字
广播流接收设备，所述设备包括：TS接收单元，经由至少一个信道接收针对
多条视频信息的至少一个TS，所述多条视频信息包括关于3D视频的基本视
点视频的信息、关于3D视频的附加视点视频的信息和具有与3D视频的视点
不同的视点的2D视频中的至少一个；ES提取单元，对接收的所述至少一个
TS进行解复用以从所述至少一个TS提取用于标识与所述多条视频信息链接
的至少一条视频信息的链接信息以及针对所述多条视频信息的至少一个ES；
再现单元，以基于链接信息所表示的链接，再现通过对提取的所述至少一个
ES进行解码而恢复的3D视频数据和2D视频数据中的至少一个。
根据另一示例性实施例的一方面，提供了一种其上记录有上述的用于提
供3D视频服务的数字广播流发送方法的程序的计算机可读记录介质。
根据另一示例性实施例的一方面，提供了一种其上记录有上述的用于提
供3D视频服务的数字广播流接收方法的程序的计算机可读记录介质。
本发明的模式
以下，将参照附图更完整地描述示例性实施例。应理解，当诸如“中的
至少一个”的表述出现在列出的元件之后时，其修饰列出的全部元件而不是
修饰列出的单个元件。此外，在此使用的“单元”可被实施为硬件组件和/或
由计算机或硬件处理器执行的软件组件。
现在将参照图1到图20详细描述根据示例性实施例的能够提供3D视频
服务的数字广播流发送设备和方法以及能够提供3D视频服务的数字广播流
接收设备和方法。
图1是根据示例性实施例的数字广播流发送设备100的框图。
参照图1，数字广播流发送设备100包括基本流(ES)产生单元110、传输
流(TS)产生单元120和发送单元130。
ES产生单元110产生针对多条视频信息的多个ES，所述多条视频信息
包括以下项中的至少一个：关于3D视频的基本视点视频的信息、关于3D视
频的附加视点视频的信息以及二维(2D)视频。
可针对单条视频信息产生单个ES。3D视频可以是单个基本视点视频和
与单个基本视点视频相应的单个附加视点视频的组合(诸如，立体视频)，或者
是单个基本视点视频和与单个基本视点视频相应的多个附加视点视频的组
合。
关于附加视点视频的信息表示与基本视点视频相应的附加视点视频，因
此可以是附加视点视频数据本身，或者是与基本视点视频数据相关的深度信
息、视差信息等中的至少一个。
2D视频可以不是3D视频的一个视点的视频而是具有与3D视频的视点
分离的视点的2D视频。
TS产生单元120接收由ES产生单元110产生的多个ES。TS产生单元
120将多条视频信息之间的链接信息与多个ES进行复用，以产生针对多个
ES的至少一个TS。发送单元130经由至少一个信道发送所述至少一个TS。
链接信息包括用于指示与多条视频信息中的每一条相关联的至少一条视
频信息的标识符。
TS产生单元120可通过对多个ES中的每一个进行复用来产生至少一个
TS，发送单元130可经由不同的信道发送所述至少一个TS。
TS产生单元120可通过单独地复用多个ES来产生至少一个TS，发送单
元130可经由单个信道发送所述至少一个TS。
TS产生单元120可通过对多个ES进行利用来产生单个TS，发送单元
130可经由单个信道发送所述单个TS。
现在将详细描述TS产生单元120的操作。
TS产生单元120可单独地将ES打包以产生打包的基本流(PES)包，并复
用包括PES包和链接信息的节目映射表(以下，称为PMT信息)，以产生单节
目传输流(SP TS)。TS产生单元120可通过复用视频ES、音频ES、附加数据
等来产生SP TS。可针对每个SP产生PMT信息。
TS产生单元120可通过将至少一个SP TS与节目关联表(以下，称为PAT
信息)进行复用来产生多节目传输流(MP TS)。
在这种情况下，可通过将SP TS复用到若干组中来产生不大于SP TS的
总数的多个MP TS。
现在将描述第一到第五示例性实施例，其中，TS产生单元120和发送单
元130经由不同的ES、不同的TS或不同的信道发送多条视频信息。
根据第一示例性实施例，TS产生单元120可通过单独地复用至少一个
ES来产生至少一个SP TS，并通过单独地复用至少一个SP TS来产生至少一
个MP TS。根据第一示例性实施例，发送单元130可经由基于相同传输网络
系统的多个信道分别发送由根据第一示例性实施例的TS产生单元120产生的
至少一个MP TS。
根据第二示例性实施例，TS产生单元120可通过单独地复用至少一个
ES来产生至少一个SP TS，并通过将所述至少一个SP TS复用在一起来产生
单个MP TS。根据第二示例性实施例，发送单元130可经由单个信道发送由
根据第二示例性实施例的TS产生单元120产生的单个MP TS。
根据第三示例性实施例，TS产生单元120可通过将至少一个ES复用在
一起来产生单个SP TS，并通过复用单个SP TS来产生单个MP TS。根据第
三示例性实施例，发送单元130可经由单个信道发送由根据第三示例性实施
例的TS产生单元120产生的单个MP TS。
根据第四示例性实施例，TS产生单元120可像第一示例性实施例一样从
至少一个ES产生至少一个SP TS和至少一个MP TS。然而，与第一示例性实
施例不同，根据第四示例性实施例的发送单元130可经由基于各个类型的传
输网络系统的多个信道分别发送至少一个MP TS。
根据第五示例性实施例，TS产生单元120可单独地复用至少一个ES中
的针对至少一个基本视点视频的ES以产生针对至少一个基本视点视频的至
少一个SP TS。根据第五示例性实施例，TS产生单元120可单独地复用针对
至少一个基本视点视频的至少一个SP TS以产生至少一个基本视点MP TS。
另外，根据第五示例性实施例，TS产生单元120可单独地复用针对与至
少一个基本视点视频相应的至少一个附加视点视频的ES，以产生针对至少一
个附加视点视频的至少一个SP TS。根据第五示例性实施例，TS产生单元120
可将针对至少一个附加视点视频的至少一个SP TS复用在一起以产生单个的
附加视点MP TS。
根据第五示例性实施例，发送单元130可经由不同的信道分别发送由根
据第五示例性实施例的TS产生单元120产生的至少一个基本视点MP TS和
单个附加视点MP TS。
参照回到图1，TS产生单元120可通过将多条视频信息之间的链接信息
插入节目说明信息(PSI)来将链接信息包括在至少一个TS中。
链接信息可被分类为链接标识符和链接描述符。
链接标识符指示在至少一个TS中包括的多条视频信息中是否存在关联
的多条视频信息。TS产生单元120可将链接标识符包括在关于至少一个TS
的PAT信息中。在这种情况下，链接标识符可指示由PAT信息标识的多条PMT
信息是否彼此链接。
链接描述符可包括与至少一个TS中所包括的多条视频信息中存在的关
联的多条视频信息之间的链接有关的信息。TS产生单元120可将链接描述符
插入PMT信息的描述符区。
TS产生单元120不仅可将链接信息插入PMT信息，还可将用于表示当
前ES是否是针对3D视频的3D视频认证描述符插入PMT信息。例如，包括
3D视频信息开始信息的3D视频开始描述符和包括3D视频的格式标识符信
息的3D视频注册描述符中的至少一个可被插入关于当前ES的PMT信息，
其中，所述3D视频信息开始信息表示关于3D视频的附加信息开始被插入的
位置。
以下将参照表1更详细地描述链接描述符，以下将参照表4、表5和表6
更详细地描述链接描述符，并且以下将参照表2和表3更详细地描述3D视
频认证描述符。
TS产生单元120不仅可将链接信息插入针对当前视频信息的PMT信息，
还可将包括用于再现当前TS的当前视频信息的附加信息的3D视频流描述符
插入该PMT信息。
3D视频流描述符可包括关于针对当前视频流发生的2D/3D再现模式的
转换的信息。
3D视频流描述符可包括用于单独(例如，针对小孩和成人)设置视点信息
的关于3D视频的视点的信息。
以下将参照表7到表16更详细地描述3D视频流描述符。
因此，图1的数字广播流发送设备100可将3D视频信息插入不同的信
道、不同的TS或不同的ES以发送3D视频信息。对于关联的多条视频信息，
可设置用于标识它们的相对的多条视频信息已经被插入的位置的链接信息。
链接信息可被插入针对关联的多条视频信息的TS的PMT信息并被发送。
图2是根据示例性实施例的数字广播流接收设备200的框图。
参照图2，数字广播流接收设备200包括TS接收单元210、ES提取单
元220和再现单元230。
TS接收单元210经由至少一个信道接收包括多条视频信息的至少一个
TS。接收的至少一个TS可包括以下项中的至少一个：关于3D视频的基本视
点视频的信息、关于与基本视点视频对应的附加视点视频的信息以及2D视
频。2D视频可以是视点与3D视频的视点不同的视频信息。关于与基本视点
视频对应的附加视点视频的信息可以是附加视点视频数据本身，或者可以是
使附加视点视频数据可基于基本视点视频数据被恢复的视差信息和深度信息
中的至少一个。
ES提取单元220从TS接收单元210接收至少一个TS，并将TS解复用
以从TS提取针对多条视频信息的至少一个ES。ES提取单元220还从解复用
的TS提取多条视频信息之间的链接信息。
TS接收单元210可经由至少一个信道接收MP TS。可经由每个信道接收
单个MP TS。
TS接收单元210可通过单独地对多个信道进行解码并从每个信道接收单
个TS来接收多个TS。ES提取单元220可通过单独地对多个MP TS进行解
复用来提取多个ES。
TS接收单元210可通过对单个信道进行解码来接收多个TS，ES提取单
元220可通过对多个TS进行解复用来提取多个ES。
TS接收单元210可通过对单个信道进行解码来接收单个TS，ES提取单
元220可通过对单个TS进行解复用来提取多个ES。
现在将更详细地描述ES提取单元220的操作。
ES提取单元220可对MP TS进行解复用以从解复用的MP TS提取至少
一个SP TS以及PAT信息。ES提取单元220可对每个SP TS进行解复用以提
取PES包和PMT信息。
PMT信息可包括关于包括在至少一个SP TS中的多个ES之间的链接的
链接信息。PES包可被解包为ES。
每个ES可包括针对3D视频的基本视点视频信息、针对3D视频的附加
视点视频信息、基本视点视频信息和附加视点视频信息的3D复合格式或2D
视频信息。ES提取单元220还可从解复用的SP TS提取音频ES。
由于单个MP TS可被解复用为至少一个SP TS，因此可提取不少于多个
MP TS的SP TS。
TS接收单元210和ES提取单元220分别接收分别由TS产生单元120
产生并由发送单元130发送的TS，并对TS解复用。因此，根据上述的第一
到第五示例性实施例的TS接收单元210接收至少一个TS和ES提取单元220
从TS提取ES的操作如下。
根据第一示例性实施例，TS接收单元210可通过单独地对至少一个信道
进行解码并从每个信道接收单个MP TS来接收至少一个MP TS。根据第一示
例性实施例，ES提取单元220可单独地对至少一个MP TS进行解复用以从
每个MP TS提取单个SP TS，并对每个SP TS进行解复用以从每个MP TS提
取单个ES。因此，根据第一示例性实施例的TS接收单元210和ES提取单
元220可最终从针对至少一个信道接收的至少一个TS提取针对3D视频信息
或2D视频信息的ES。
根据第二示例性实施例，TS接收单元210可对单个信道进行解码以提取
单个MP TS。根据第二示例性实施例，ES提取单元220可对单个MP TS进
行解复用以提取至少一个SP TS，并单独地对所述至少一个SP TS进行解复用
以提取至少一个ES。因此，根据第二示例性实施例的TS接收单元210和ES
提取单元220可经由单个信道提取至少一个SP TS，因此可提取针对3D视频
信息或2D视频信息的ES。
根据第三示例性实施例，TS接收单元210可对单个信道进行解码以提取
单个MP TS。根据第三示例性实施例，ES提取单元220可对单个MP TS进
行解复用以提取单个SP TS，并对单个SP TS进行解复用以提取至少一个ES。
因此，根据第三示例性实施例的TS接收单元210和ES提取单元220可最终
经由单个信道提取包括3D视频信息或2D视频信息的至少一个ES。
根据第四示例性实施例，与第一示例性实施例相反，TS接收单元210可
单独地对基于各个类型的传输网络系统的信道进行解码，并接收针对每个信
道的单个MP TS，从而接收至少一个MP TS。根据第四示例性实施例，ES提
取单元220可单独地对至少一个MP TS进行解复用以从至少一个MP TS中的
每一个提取单个SP TS，并对每个SP TS进行解复用以从每个SP TS提取单个
ES。因此，根据第四示例性实施例的TS接收单元210和ES提取单元220可
最终从分别经由基于各个类型的传输网络类型的多个信道接收的TS提取针
对3D视频信息或2D视频信息的ES。
根据第五示例性实施例，TS接收单元210可对多个信道进行解码以从所
述多个信道中的至少一个接收针对3D视频的至少一个基本视点MP TS，并
从所述多个信道之一接收针对3D视频的单个附加视点MP TS。
根据第五示例性实施例，ES提取单元220可单独地对至少一个基本视点
MP TS进行解复用以提取至少一个基本视点SP TS，并单独地对至少一个基
本视点SP TS进行解复用以提取至少一个基本视点ES。根据第五示例性实施
例，ES提取单元220还可对单个附加视点MP TS进行解复用以提取至少一
个附加视点SP TS，并单独地对所述至少一个附加视点SP TS进行解复用以提
取至少一个附加视点ES。
因此，根据第五示例性实施例的TS接收单元210和ES提取单元220可
最终经由多个信道提取针对3D视频信息或2D视频信息的多个ES。
参照回到图2，从ES提取单元220提取的链接信息包括用于指示与多条
视频信息中的每一条关联的至少一条视频信息的标识符。再现单元230可使
用链接信息搜索与预定视频数据相应的其它视频数据，并在保持它们之间的
链接的同时再现视频数据。
ES提取单元220可从TS的PSI提取多条视频信息之间的链接信息。链
接信息可包括链接标识符和链接描述符。ES提取单元220可从TS的PAT信
息提取链接信息的链接标识符。在这种情况下，链接标识符可表示由PAT信
息标识的多条PMT信息是否彼此链接。ES提取单元220可从PMT信息的描
述符区提取链接信息的描述符。
ES提取单元220不仅可从PMT信息提取链接信息，还可从PMT信息提
取3D视频认证描述符。可从被提取作为3D认证描述符的3D视频开始描述
符和3D视频注册描述符中的至少一个来检查在当前ES中是否包括3D视频
信息。
以下将参照表1更详细地描述链接标识符，以下将参照表4、表5和表6
更详细地描述链接描述符，以下将参照表2和表3更详细地描述3D视频认
证描述符。
ES提取单元220不仅可从针对当前视频信息的PMT信息提取链接信息，
还可从针对当前视频信息的PMT信息提取3D视频流描述符。ES提取单元
220可从3D视频流描述符提取与针对当前视频流发生的2D/3D再现模式的转
换相关的信息、用于单独(例如，针对小孩和成人)设置视点信息的与3D视频
的视点相关的信息以及其它信息。以下将参照表7到表16更详细地描述3D
视频流描述符。
再现单元230对由ES提取单元220提取的至少一个ES进行解码以恢复
3D视频数据或2D视频数据。再现单元230可考虑由链接信息表示的链接来
再现恢复的3D视频数据和恢复的2D视频数据中的至少一个。
例如，如果再现单元230从ES提取单元220接收针对3D视频的基本视
点视频信息的ES和针对3D视频的附加视点视频信息的ES，则再现单元230
可从这些ES恢复3D视频的基本视点视频数据和附加视点视频数据。具体地，
再现单元230可基于链接信息搜索并恢复基本视点视频数据和附加视点视频
数据，并可按照能够被3D显示装置再现的3D再现格式来转换并再现基本视
点视频数据和附加视点视频数据。
如果再现单元230从ES提取单元220接收了针对2D视频信息的ES和
针对附加视点视频的视差信息或深度信息的ES，则再现单元230可从ES恢
复基本视点视频数据和附加视点视频数据。具体地，再现单元230可基于链
接信息搜索与2D视频数据相应的视差信息或深度信息以恢复附加视点视频
数据，并可将附加视点视频数据转换为能够被3D显示装置再现的3D再现格
式并再现附加视点视频数据。
另外，可将针对3D复合格式的3D视频的ES和针对2D视频的ES输入
到再现单元230。再现单元230可基于链接信息将3D复合格式的视频信息恢
复为3D视频数据，并可将3D视频数据转换为均可被3D显示装置再现的基
本视点视频数据和附加视点视频数据。由于再现单元230还可恢复3D视频
数据，再现单元230可选择性地再现基本视点视频数据、附加视点视频数据
和2D视频数据。
如果关联的针对2D视频的ES被输入再现单元230，则再现单元230可
基于链接信息恢复相应的2D视频数据的项，并选择性地、独立地再现2D视
频数据项。再现单元230可在画中画(PIP)模式中选择性地根据链接信息再现
相应的2D视频数据项。
数字广播流接收设备200的ES提取单元220可通过使用链接信息检测
经由不同信道、不同的SP TS或不同的ES发送的关联的多条视频信息，以仅
提取关联的ES。数字广播流接收设备200的再现单元230可根据链接信息识
别与用户选择的SP视频流关联的不同视频流的存在，并可再现关联的视频
流。
数字广播流发送设备100和数字广播流接收设备200可在保持与使用基
于运动图像专家组(MPEG)的TS的数字广播系统的兼容性的同时，提供3D
视频的数字内容服务和2D视频的数字内容服务。
由于PMT信息包括关于单个视频ES的信息，因此发送终端将用于标识
相对视频信息所在的ES、TS或信道的关联信息插入每个PMT信息，因此接
收终端可在3D再现模式或2D再现模式下根据ES、TS或信道之间的关联信
息再现关联项视频数据。
另外，由于不仅链接信息经由PMT信息被发送和接收而且关于2D视频
再现方法和3D视频再现方法之间的转换的信息以及关于3D视频特性的附加
信息也经由PMT信息被发送和接收，因此数字广播流发送设备100和数字广
播流接收设备200可在保持与用于2D内容服务的数字广播系统的兼容性的
同时平稳地提供3D视频的数字内容服务。
不需要新产生PSI或用于PSI的TS，多条视频信息之间的链接信息和诸
如3D视频流描述符的附加信息可被包括在PMT信息或PAT信息中。另外，
附加信息可被包括在保留字段中，而不需要将包标识符(PID)添加到PMT信
息。
图3是根据示例性实施例的用于2D内容服务的数字TV发送系统300
的框图。
参照图3，数字TV发送系统300通过使用单节目编码器310来产生包
括单个视频ES和单个音频ES的SP TS，并通过使用复用器(MUX)380对由
多个单节目编码器产生的至少一个SP TS进行复用以产生并发送MP TS。
单节目编码器310包括视频编码器320、音频编码器330、打包器340
和350以及复用器(MUX)360。
视频编码器320和音频编码器330分别对未压缩的视频数据和未压缩的
音频数据进行编码以分别产生和输出视频ES和音频ES。单节目编码器310
的打包器340和350分别对视频ES和音频ES进行打包，并将PES头分别插
入打包的视频ES和打包的音频ES，以分别产生视频PES包和音频PES包。
MUX 360对视频PES包、音频PES包和各种附加数据进行复用以产生
第一单节目传输流SP TS1。PMT信息可与视频PES包和音频PES包复用，
并被包括在单节目传输流SP TS1中。PMT信息被插入每个单节目传输流并
描述每个ES或附加数据的PID。
MUX 380将多个单节目传输流SP TS1、SP TS2、...与PAT信息复用以
产生多节目传输流MP TS。
由PSI以及节目和系统信息协议(PSIP)产生器370产生PMT信息和PAT
信息。
多节目传输流(MP TS)可包括PAT信息和PSIP。PAT信息描述关于包括
在多节目传输流中的单节目传输流的PMT信息的PID。
图4是根据示例性实施例的用于2D内容服务的数字TV接收系统400
的框图。
数字TV接收系统400接收数字广播流，并从数字广播流中提取视频数
据、音频数据和附加数据。
数字TV(DTV)调谐器410被调谐到根据观看者输入的物理信道选择信号
选择的信道的波频率，以选择性地提取经由与波频率相应的波接收的信号。
信道解码器和解调器420从信道信号提取多节目传输流MP TS。多节目传输
流MP TS被解复用器(DEMUX)430解复用为多个单节目传输流SP TS1、SP
TS2、...和PSIP。
单节目解码器440对观看者输入的节目选择信号选择的第一单节目传输
流SP TS1进行解码。单节目解码器440进行与单节目编码器310相反的操作。
从第一单节目传输流SP TS1恢复视频PES包、音频PES包和附加数据。解
包器460和465分别将视频PES和音频PES恢复为ES，然后视频解码器470
和音频解码器475分别将ES恢复为视频数据和音频数据。显示处理器480
可将视频数据转换为可显示的格式。
时钟恢复和音频/视频(AV)同步装置490可通过使用从第一单节目传输流
SP TS1提取的节目时钟参考(PCR)信息和时间戳信息来将视频数据再现时间
与音频数据再现时间同步。
节目指南数据库445可接收观看者输入的节目选择信号，通过将节目选
择信号与从多节目传输流MP TS提取的PSIP进行比较来搜索与观看者输入
的节目选择信号相应的信道和节目，并随后将信道选择输入信号发送到数字
TV调谐器410，并将节目选择输入信号发送到DEMUX 430。节目指南数据
库445还可将同屏显示信息发送到显示处理器480并支持同屏显示操作。
现在将参照图5到图11描述各种示例性实施例，其中，数字广播流发送
设备100和数字广播流接收设备200通过多个信道或多个ES发送和接收3D
视频信息、链接信息和3D附加信息，从而在与用于提供2D内容服务的基于
MPEG-TS的数字广播系统保持兼容性的同时提供3D数字广播服务。
以下，视频流可以是用于视频信息(诸如视频数据、视差信息、深度信息
等)和作为在不同阶段执行的转换的结果的ES、PES包、单节目传输流和多
节目传输流的通项(general term)。
在以下参照图5到图11描述的示例性实施例中，为了便于解释，包括左
视点视频和右视点视频的立体视频流被发送和接收。然而，数字广播流发送
设备100和数字广播流接收设备200也可应用于多视点视频流，所述多视点
视频流均包括参考视点和至少一个附加视点，如图12的示例性实施例。
图5示出根据上述第一示例性实施例的信道频带500的分布的示例，在
信道频带500中，可经由多个信道发送和接收多个视频流。
在信道频带500中，频带被分配给多个信道中的每一个。例如，信道频
带500包括用于信道6的频带510、用于信道7的频带520、用于信道8的频
带530、用于信道9的频带540和用于信道10的频带550。
可通过用于信道6的频带510和用于信道8的频带530分别发送和接收
针对左视点视频信息的TS和针对右视点视频信息的TS以作为第一立体视
频。在这种情况下，可针对信道6和信道8设置指示立体视频的多个视频之
间的关联存在(即，指示多个视频被立体链接)的链接信息。可在信道、TS或
ES之间设置链接信息。
可通过用于信道7的频带520和用于信道10的频带520分别发送和接收
针对左视点视频信息的TS和针对右视点视频信息的TS以作为第二立体视
频。在这种情况下，可针对信道7和信道10设置指示立体视频的多个视频之
间的关联存在(即，指示多个视频被立体链接)的链接信息。
因此，在根据第一示例性实施例的将立体视频流分配到多个信道的方法
中，分别经由不同的信道发送针对左视点视频的TS和针对右视点视频的TS。
图6是根据以上参照图5描述的第一示例性实施例的经由多个信道发送
具有链接信息的3D视频流的数字广播流发送设备600的框图。
数字广播流发送设备600对应于根据图5的第一示例性实施例构建的数
字广播流发送设备100的框图。数字广播流发送设备600的单节目编码器610、
630和650以及MUX 620、640和660的操作与根据第一示例性实施例执行
的数字广播流发送设备100的ES产生单元110和TS产生单元120的操作对
应。数字广播流发送设备600的信道编码器和调制器625、645和665以及
DTV发送器670的操作与根据第一示例性实施例执行的数字广播流发送设备
100的发送单元130的操作对应。
单节目编码器610、630和650可分别接收左视点视频序列Left Seq.、2D
视频序列2D Seq.和右视点视频序列Right Seq.，以分别产生和输出第一单节
目传输流SP TS1、第二单节目传输流SP TS2和第三单节目传输流SP TS3。
MUX 620可对针对左视点视频序列的第一单节目传输流SP TS1进行复
用以产生第一多节目传输流MP TS1。类似地，MUX 640和660可分别对针
对2D视频序列的第二单节目传输流SP TS2和针对右视点视频序列的第三单
节目传输流SP TS3进行复用，以分别产生第二多节目传输流MP TS2和第三
多节目传输流MP TS3。
信道编码器和调制器625可根据信道6(或信道7)对第一多节目传输流
MP TS1进行编码和调制。信道编码器和调制器665可根据信道8(或信道10)
对第三多节目传输流MP TS3进行编码和调制。信道编码器和调制器645可
根据信道9对第二多节目传输流MP TS2进行编码和调制。
DTV发送器670可发送分配到多个信道的广播视频流。因此，根据第一
示例性实施例的数字广播流发送设备600和数字广播流发送设备100可从立
体视频的左视点视频和右视点视频中的每一个以及2D视频产生单节目传输
流和多节目传输流，并分别经由多个信道发送单节目传输流和多节目传输流。
用于左视点视频的单节目编码器610可设置用于将右视点视频标识为与
左视点视频相应的链接信息615。用于右视点视频的单节目编码器650可设
置用于将左视点视频标识为与右视点视频相应的链接信息655。如果存在与
2D视频关联的视频，则用于2D视频的单节目编码器630可设置用于标识关
联的视频的链接信息635。可将每个链接信息插入单节目传输流的PMT信息。
根据第一示例性实施例，数字广播流接收设备200可选择性地接收经由
不同信道发送的针对立体视频的左视点视频的TS、针对立体视频的右视点视
频的TS和针对2D视频的TS，并恢复期望的TS的视频数据。
根据第一示例性实施例，数字广播流接收设备200的ES提取单元220
可提取链接信息。根据第一示例性实施例的再现单元230可通过使用链接信
息识别与左视点视频序列相应的右视点视频序列，并因此执行3D再现。ES
提取单元220还可在搜索与第一单节目传输流相应的第三单节目传输流时使
用链接信息，以分别从第一单节目传输流和第三单节目传输流提取ES。
图7示出根据上述的第二示例性实施例的信道频带700的分布的示例，
在信道频带700中，可经由单个信道发送和接收针对3D视频流和2D视频流
的多个TS。
信道频带700包括用于信道8的频带710、用于频道9的频带720和用
于频道10的频带730。
可通过用于信道8的频带710发送和接收针对左视点视频信息的TS 740
和针对右视点视频信息的TS 760以作为立体视频。在这种情况下，可在针对
左视点视频信息的ES和针对右视点视频信息的ES之间设置指示立体视频的
多个视频之间的关联存在(即，指示多个视频被立体链接)的链接信息，或可在
针对左视点视频信息的SP TS和针对右视点视频信息的SP TS之间设置链接
信息。
可通过用于信道8的频带710发送和接收用于普通2D视频的TS 750和
另一TS 770。
因此，在根据第二示例性实施例的将立体视频流分配给多个信道的方法
中，经由单个信道发送和接收针对左视点视频的TS和针对右视点视频的TS。
图8是根据以上参照图7描述的第二示例性实施例的经由单个信道发送
具有链接信息的多个TS的数字广播流发送设备800的框图。
数字广播流发送设备800与根据第二示例性实施例构建的数字广播流发
送设备100的框图对应。换而言之，数字广播发送设备800的单节目编码器
810、820和830以及MUX 840的操作对应于根据第二示例性实施例执行的
数字广播流发送设备100的ES产生单元110和TS产生单元120的操作。数
字广播发送设备800的信道编码器和调制器850以及DTV发送器860的操作
对应于根据第二示例性实施例执行的数字广播流发送设备100的发送单元
130的操作。
单节目编码器810、820和830可分别接收左视点视频序列Left Seq.、2D
视频序列2D Seq.和右视点视频序列Right Seq.，以分别产生和输出第一单节
目传输流SP TS1、第二单节目传输流SP TS2和第三单节目传输流SP TS3。
MUX 840可对第一单节目传输流SP TS1、第二单节目传输流SP TS2和
第三单节目传输流SP TS3进行复用，以产生多节目传输流MP TS。换而言之，
可将针对左视点视频序列的第一单节目传输流SP TS1、针对于2D视频序列
的第二单节目传输流SP TS2和针对右视点视频序列的第三单节目传输流SP
TS3复用在一起以产生单个多节目传输流MP TS。
信道编码器和调制器850可根据信道8对多节目传输流MP TS进行编码
和调制。DTV发送器860可发送分配给信道8的广播视频流。因此，根据第
二示例性实施例的数字广播流发送设备800和数字广播流发送设备100可将
针对立体视频的左视点视频、立体视频的右视点视频和2D视频中的每一个
的单节目传输流复用为单个多节目传输流，并经由单个信道发送所述单个多
节目传输流。
用于左视点视频的单节目编码器810可设置用于将右视点视频标识为与
左视点视频对应的链接信息815，并可将链接信息815插入第一单节目传输
流SP TS1的PMT信息。用于右视点视频的单节目编码器830可设置用于将
左视点视频标识为与右视点视频对应的链接信息835，并可将链接信息835
插入第三单节目传输流SP TS3的PMT信息。如果存在与2D视频关联的视
频，则用于2D视频的单节目编码器820可设置用于标识关联的视频的链接
信息825，并可将链接信息825插入第二单节目传输流SP TS2的PMT信息。
根据第二示例性实施例的单节目编码器810、820和830可符合各个数字
数据通信系统。例如，先进电视系统委员会(ATSC)地面广播通信方法支持高
级残余边带(E-VSB)技术。在VSB技术中，可按照与MPEG技术不同的方式
构建TS。例如，由于根据示例性实施例的链接信息被插入将被发送的TS，
因此可按照MPEG传输流的形式发送基本视点视频流，并可按照E-VSB传输
流的形式发送附加视点视频流。
根据第二示例性实施例的单节目编码器810、820和830可符合各个视频
编码系统。由于根据示例性实施例的链接信息被插入TS的PMT信息，因此
可根据MPEG-2视频编码方法对基本视点视频进行编码，并根据MPEG高级
视频编码(AVC)/H.264编码方法对附加视点视频进行编码。
根据第二示例性实施例，数字广播流接收设备200可接收经由单个信道
发送的、针对立体视频的左视点视频、立体视频的右视点视频和2D视频的
单个多节目传输流，将单个多节目传输流解复用为针对左视点视频的单节目
传输流、针对右视点视频的单节目传输流和针对2D视频的单节目传输流，
并从所述单节目传输流提取至少一个，从而恢复期望的视频序列数据。
根据第二示例性实施例，数字广播流接收设备200的ES提取单元220
可提取链接信息。根据第二示例性实施例的再现单元230可通过使用链接信
息识别与左视点视频序列对应的右视点视频序列，并因此执行3D再现。ES
提取单元220还可在搜索与第一单节目传输流对应的第三单节目传输流并分
别从第一单节目传输流和第三单节目传输流提取ES时使用链接信息。
图9是根据上述第三示例性实施例的经由单个信道发送包括3D视频流
和2D视频流的单个TS的数字广播流发送设备900的框图。
数字广播流发送设备900与根据第三示例性实施例构建的数字广播流发
送设备100的框图对应。换而言之，数字广播发送设备900的单节目编码器
910以及MUX 980的操作对应于根据第三示例性实施例执行的数字广播流发
送设备100的ES产生单元110和TS产生单元120的操作。数字广播发送设
备900的信道编码器和调制器990以及DTV发送器995的操作对应于根据第
三示例性实施例执行的数字广播流发送设备100的发送单元130的操作。
单节目编码器910可接收左视点视频、右视点视频和2D视频，并通过
使用视频编码器920、930和940来分别产生第一视频基本流Video ES1、第
二视频基本流Video ES2和第三视频基本流Video ES3。第一视频基本流Video
ES1、第二视频基本流Video ES2和第三视频基本流Video ES3分别被打包器
925、935和945打包为第一视频PES包Video PES1、第二视频PES包Video
PES2和第三视频PES包Video PES3。
单节目编码器910可接收音频，通过使用音频编码器950将音频转换为
音频基本流Audio ES，并通过使用打包器955将音频基本流Audio ES转换为
音频PES包Audio PES。
单节目编码器910的MUX 960可将第一视频PES包、第二视频PES包
和第三视频PES包以及音频PES包复用为第一单节目传输流SP TS1。单节目
编码器910还可接收由PSI和PSIP产生器970产生的PMT信息以及各种附
加数据DATA，并通过使用MUX 960将PMT信息和附加数据DATA与第一
视频PES包、第二视频PES包和第三视频PES包以及音频PES包复用在一
起，从而使PMT信息和附加数据DATA被插入第一单节目传输流SP TS1。
第一单节目传输流SP TS1可随后被输出。
3D视频数据和其它2D视频数据中的至少一个可与PMT信息被复用到
第二单节目传输流SP TS2。PSI和PSIP产生器970可产生包括PMT信息的
PID的PAT信息和关于各种节目和系统信息的PSIP，其中，所述PMT信息
包括在第一单节目传输流SP TS1和第二单节目传输流SP TS2中。MUX 980
可将第一单节目传输流SP TS1和第二单节目传输流SP TS2、PAT信息以及
PSIP复用为单个多节目传输流MP TS。
信道编码器和调制器990可根据信道对多节目传输流MP TS进行编码和
调制。DTV发送器995可发送分配给信道的广播视频流。因此，根据第三示
例性实施例的数字广播流发送设备900和数字广播流发送设备100可将针对
所有的立体视频的左视点视频、立体视频的右视点视频和2D视频的ES复用
为单个单节目传输流，并经由单个信道发送所述单个多节目传输流。
单节目编码器910可将用于将彼此对应的左视点视频或右视点视频标识
为立体视频的多个视频(即，指示多个视频被立体链接)的链接信息分别设置到
第一视频PES包或第二视频PES包，并可将立体链接信息插入第一单节目传
输流SP TS1的PMT信息。
根据第三示例性实施例的单节目编码器910可根据独立的数字数据通信
方法产生TS。例如，可按照MPEG传输流的形式产生第一单节目传输流SP
TS1，可按照E-VSB传输流的形式发送第二单节目传输流SP TS2，并可将链
接信息插入第一单节目传输流SP TS1的PMT信息和第二单节目传输流SP
TS2的PMT信息中的每一个。根据第三示例性实施例的视频编码器920和
930可符合独立的视频编码方法。例如，可根据MPEG-2视频编码方法对基
本视点视频进行编码，可根据MPEG AVC/H.264视频编码方法对附加视点视
频进行编码，并可将链接信息插入第一单节目传输流SP TS1的PMT信息和
第二单节目传输流SP TS2的PMT信息中的每一个。
根据第三示例性实施例，数字广播流接收设备200可提取经由单个信道
发送的、针对立体视频的左视点视频、立体视频的右视点视频、2D视频以及
音频的单个多节目传输流，对所述单个多节目传输流进行解复用，从而选择
和提取期望的单节目传输流。另外，根据第三示例性实施例的数字广播流接
收设备200可从提取的单节目传输流选择和提取针对立体视频的左视点视频
的视频ES、针对立体视频的右视点视频的视频ES和针对2D视频的视频ES，
从而恢复期望的视频数据。
根据第三示例性实施例，数字广播流接收设备200的ES提取单元220
可提取链接信息。根据第三示例性实施例的再现单元230可通过使用链接信
息来识别与左视点视频数据对应的右视点视频数据，并因此可准确地再现3D
视频。ES提取单元220还可在搜索和提取与第一视频ES对应的第二视频ES
时使用链接信息。
图10是根据上述的第四示例性实施例的经由基于多个传输网络系统的
多个信道接收多个TS的数字广播流接收设备1000的框图。
根据第四示例性实施例，数字广播流发送设备1000经由基于各个传输网
络系统(例如，地面系统1010、卫星TV系统1012、有线TV系统1014、互
联网协议电视(IPTV)系统1016等)的不同信道接收针对左视点视频的TS和针
对右视点视频的TS。
数字广播流接收设备1000对应于根据第四示例性实施例构建的数字广
播接收设备200的框图。换而言之，数字广播流接收设备1000的地面数字调
谐器1020或卫星数字调谐器1060以及信道解码器和解调器1030和1070的
操作可对应于根据第四示例性实施例执行的数字广播流接收设备200的TS
接收单元210的操作，数字广播流接收设备1000的TS DEMUX 1040和1080
以及单节目解码器1050和1090的操作可对应于根据第四示例性实施例执行
的数字广播流接收设备200的ES提取单元220的操作。
数字广播流接收设备1000可以是数字TV接收系统。数字广播流接收设
备1000可经由与地面系统1010、卫星TV系统1012、有线TV系统1014和
IPTV系统1016对应的多个信道接收广播流。
地面数字调谐器1020以及信道解码器和解调器1030被调谐到地面信道
以提取经由地面波接收的多节目传输流。在这种情况下，可经由地面信道接
收针对立体视频的左视点视频的TS。
卫星数字调谐器1060以及信道解码器和解调器1070被调谐到卫星信道
以提取经由卫星波接收的多节目传输流。在这种情况下，可经由卫星信道接
收针对立体视频的右视点视频的TS。
TS DEMUX 1040和1080可将多节目传输流解复用为多个单节目传输
流。单节目解码器1050和1090可分别将单节目传输流恢复为左视点视频和
右视点视频。
在这种情况下，经由地面信道接收和提取的针对左视点视频的单节目传
输流可包括关于构成立体图像的其余视点的右视点视频的链接信息1055。在
这种情况下，左视点视频的链接信息可包括指示经由卫星信道接收的右视点
视频的信道、TS或ES的标识符。
经由卫星信道接收和提取的针对右视点视频的单节目传输流可包括关于
左视点视频的链接信息1095。右视点视频的链接信息可包括指示经由地面信
道接收的左视点视频的信道、TS或ES的标识符。
数字广播流接收设备1000可通过使用用于再现3D视频的链接信息来检
测分别经由地面信道和卫星信道接收的左视点视频和右视点视频，从而提供
3D视频广播服务。
图11示出根据上述的第五示例性实施例的信道频带1100的分布的示例，
在信道频带1100中，可经由多个信道发送和接收针对3D视频的左视点视频
的多个TS，并可经由单个信道发送和接收针对3D视频的右视点视频的TS。
信道频带1100包括用于信道8的频带1110、用于信道9的频带1120和
用于频道10的频带1130。
根据第五示例性实施例，第一立体视频的左视点视频Left Video 1和第二
立体视频的左视点视频Left Video 2分别被分配给用于信道9的频带1120和
用于信道10的频带1130。可通过用于信道8的频带1110发送和接收针对第
一立体视频的右视点视频Right Video 1的TS 1140和针对第二立体视频的右
视点视频Right Video 2的TS 1150。
在这种情况下，可在第一立体视频的左视点视频Left Video 1和右视点视
频Right Video 1的信道(视频流)之间以及第二立体视频的左视点视频Left
Video 2和右视点视频Right Video 2的信道(视频流)之间设置链接信息，该
链接信息指示在立体视频的多个视频之间存在关联，即，指示多个视频被立
体链接。
虽然在图11中没有示出，但是如果另一左视点视频被分配给另一信道，
则可经由用于信道8的频带1110发送针对另一右视点视频的TS 1160。如果
信道频带1100足够大，则还可发送针对其它数据的TS 1170。
因此，根据第五示例性实施例的数字广播流发送设备100可对针对至少
一个左视点视频的ES进行复用以产生针对所述至少一个左视点视频的至少
一个单节目传输流，并从所述至少一个单节目传输流产生至少一个左视点多
节目传输流。根据第五示例性实施例的数字广播流发送设备100还可对针对
与所述至少一个左视点视频对应的至少一个右视点视频的ES进行复用以产
生针对所述至少一个右视点视频的至少一个单节目传输流，并从所述至少一
个单节目传输流产生单个右视点多节目传输流。因此，根据第五示例性实施
例的数字广播流发送设备100可经由不同的信道发送至少一个左视点多节目
传输流和单个右视点多节目传输流。
根据第五示例性实施例的数字广播流接收设备200可对多个信道进行解
码以从所述多个信道中的至少一个接收3D视频的左视点多节目传输流，并
从所述多个信道之一接收3D视频的右视点多节目传输流。根据第五示例性
实施例的数字广播流接收设备200可单独地对至少一个左视点多节目传输流
进行解复用以提取至少一个左视点单节目传输流，并可对所述至少一个左视
点单节目传输流进行解复用以提取至少一个左视点基本流。根据第五示例性
实施例的ES提取单元220可对单个右视点多节目传输流进行解复用以提取至
少一个右视点单节目传输流，并单独地对所述至少一个右视点单节目传输流
进行解复用以提取至少一个右视点基本流。
因此，根据第五示例性实施例的数字广播流接收设备200可经由多个信
道提取针对3D视频信息或2D视频信息的多个ES。另外，根据第五示例性
实施例的数字广播流接收设备200可通过使用链接信息来三维地再现相互关
联的立体视频。
以上参照图5到图11关于3D视频的立体视频描述了数字广播流发送设
备100和数字广播流接收设备200的第一到第五示例性实施例。然而，应理
解，另外的示例性实施例不限于立体图像。例如，3D视频可以是包括至少三
个视点视频的多视点视频。
根据上述的第一到第五示例性实施例，可经由至少一个信道和至少一个
TS发送或接收相互关联的多个视频流。
根据第二和第三示例性实施例，可经由单个信道发送或接收相互关联的
左视点视频流和右视点视频流。例如，提出了这样的情况：实施第二或第三
示例性实施例以保持与现有技术2D数字地面广播系统的兼容性。当2D数字
地面广播系统以第一比特率在19.38Mbps附近的频带内发送和接收单个视频
流时，2D数字地面广播系统可以以低于第一比特率的第二比特率发送和接收
基本视点视频流，并以剩余的比特率发送附加视点视频流，以便实现第二或
第三示例性实施例。
根据第二和第三示例性实施例，经由单个信道发送和接收基本视点视频
信息和附加视点视频信息，因此可以在不使用附加信道的情况下实现与现有
广播系统的兼容性。当使用高压缩能力编码和解码方法来压缩视频数据时，
最小化了由于基本视点视频流的压缩造成的数据损失，并且可经由单个信道
与附加视点视频信息一起发送和接收基本视点视频流。
根据第一、第四和第五示例性实施例，可经由多个信道发送和接收基本
视点视频流和附加视点视频流。例如，如果实施第一、第四和第五示例性实
施例以允许保持与现有技术2D数字地面广播系统的兼容性，则可经由现有
信道发送基本视点视频流，并可经由附加信道发送附加视点视频流。
根据第一、第四和第五示例性实施例，经由不同的信道发送和接收基本
视点视频信息和附加视点视频信息，因此，如果第一、第四和第五示例性实
施例在逐个信道的基础上与现有技术广播系统兼容，则可在不使显示的图像
的质量降级的情况下提供多视点数字内容广播服务。
图12示出根据示例性实施例的信道频带1200的分布的示例，在信道频
带1200中，可经由单个信道发送和接收针对多视点视频流的多个TS。
信道频带1200包括用于信道8的频带1210和用于信道9的频带1220
等。
根据本示例性实施例，可通过用于信道8的频带1210发送和接收针对多
视点视频的第一视点视频信息Video 1的TS 1230、针对多视点视频的第二视
点视频信息Video 2的TS 1240、针对多视点视频的第三视点视频信息Video 3
的TS 1250、针对多视点视频的第四视点视频信息Video 4的TS 1260和针对
多视点视频的第五视点视频信息Video 5的TS 1270。
如果第三视点视频信息Video 3是主视点视频，则可设置链接信息“3d
linked”，用于表示在第一视点视频信息Video 1、第二视点视频信息Video 2、
第四视点视频信息Video 4和第五视点视频信息Video 5中的每一个与第三视
点视频信息Video 3之间存在的链接。
根据本示例性实施例的用于实现多视点视频服务的数字广播流发送设备
100可将构成多视点视频的多个视点的视频的ES分别转换为单节目传输流，
将针对各个视点的单节目传输流复用为单个多节目传输流，并经由单个信道
发送单个多节目传输流。以下，多个视点的多个视频被称为多个视点视频。
根据本示例性实施例的用于实现多视点视频服务的数字广播流接收设备
200可对单个信道进行解码以提取单个多节目传输流，并可对单个多节目传
输流进行解复用以提取针对多个视点视频的各个单节目传输流。多个视点视
频构成一个多视点视频，可从针对所述多个视点视频的单节目传输流提取针
对所述多个视点视频的各个ES。因此，根据本示例性实施例的数字广播流接
收设备200可最终经由单个信道提取所述多个视点视频的单节目传输流和所
述多个视点视频的ES，并因此再现恢复的多个视点视频。
由于根据图1的示例性实施例的数字广播流发送设备100经由不同的信
道、TS或ES发送相互关联的多条视频信息，因此根据图2的示例性实施例
的数字广播流接收设备200可检查已经通过哪个信道、TS或ES接收了与提
取的视频信息关联的视频信息。为此，根据图1的示例性实施例的数字广播
流发送设备100和根据图2的示例性实施例的数字广播流接收设备200使用
表示3D视频(诸如立体视频或多视点视频)之间的关联的链接信息。
由于根据图1的示例性实施例的数字广播流发送设备100将相互关联的
多条3D视频信息转换为发送格式，并以该发送格式发送相互关联的多条3D
视频信息，因此根据图2的示例性实施例的数字广播流接收设备200可确定
3D视频的特征以便正确地将相互关联的多条3D视频信息恢复为3D再现格
式，并以该3D再现格式再现相互关联的多条3D视频信息。因此，根据图1
的示例性实施例的数字广播流发送设备100和根据图2的示例性实施例的数
字广播流接收设备200使用用于表示3D视频信息的存在或不存在的3D视频
开始描述符或3D视频注册描述符以及3D视频流描述符，以准确的恢复和再
现3D视频信息。
现在将参照表1到表18来描述示例性实施例，其中，图1的数字广播流
发送设备100和图2的数字广播流接收设备200通过使用PSI发送和接收链
接信息、3D视频开始描述符或3D视频注册描述符以及3D视频流描述符。
根据示例性实施例的链接信息可包括链接标识符和链接描述符，其中，
链接标识符表示在TS中包括的多条视频信息中是否存在关联的多条视频信
息，链接描述符用于标识与每条视频信息关联的视频信息的ES、TS或信道。
图1的数字广播流发送设备100的TS产生单元120可将根据示例性实
施例的链接标识符插入PAT信息。图2的数字广播流接收设备200的ES提
取单元220检查从TS提取的PAT信息中所包括的链接标识符，并预测包括
在TS中的多条PMT信息之间的链接。相互关联的多条PMT信息包括定义
多条视频信息之间的链接的链接描述符。
例如，可针对PAT信息内的每个PMT信息另外设置包括链接标识符的
参数“linked_indicator”。如果当前PMT信息的参数“linked_indicator”是000，
则PAT信息所指示的至少一条相对PMT信息中没有PMT信息与当前PMT
信息关联。另一方面，如果当前PMT信息的参数“linked_indicator”是001
到111中的一个，则PAT信息所指示的至少一条相对PMT信息中包括具有与
当前PMT信息相同的值的参数“linked_indicator”的PMT信息与当前PMT
信息关联。换而言之，包括具有相同值的参数“linked_indicator”的多条PMT
信息均可包括定义它们之间的链接的链接描述符。
图1的数字广播流发送设备100的TS产生单元120可将根据示例性实
施例的链接描述符插入PMT信息。可针对每个视频信息设置链接描述符。图
2的数字广播流接收设备200的ES提取单元220可检查从单节目传输流提取
的PMT信息中包括的链接描述符，并确定与包括在单节目传输流中的视频信
息对应的相对视频信息的位置。因此，图2的设置广播流接收设备200可检
测相互关联的多条视频信息，并从相互关联的多条视频信息恢复多条视频信
息。
表1显示了PMT信息的参数“program_stream_map()”的语法的示例。
根据示例性实施例的链接描述符包括在参数“linked_descriptor”中。参数
“linked_descriptor”可包括在作为以下参数“elementary_stream_info_length”
的描述符区的参数“descriptor()”中，参数“elementary_stream_info_length”
包括在参数“program_stream_map()”中。
表1
图1的数字广播流发送设备100的TS产生单元120可将根据示例性实
施例的3D视频开始描述符或3D视频注册描述符插入PMT作为3D视频认
证信息。图2的数字广播流接收设备200的ES提取单元220可检查从单节目
传输流提取的PMT信息中包括的3D视频开始描述符或3D视频注册描述符，
并预测针对单节目传输流的ES的视频信息是否是关于3D视频的信息。另外，
如果基于3D视频开始描述符或3D视频注册描述符确定在PMT信息中包括
3D视频流描述符，则ES提取单元220可从PMT信息提取3D视频流描述符
并从ES提取3D视频信息。
用于设置3D视频开始描述符的参数“3d_start_descriptor”或用于设置
3D视频注册描述符的参数“3d_registration_descriptor”可包括在参数
“descriptor()”中，参数“descriptor()”是包括在表1的PMT中的参数
“program_stream_info_length”之后的描述符区。
表2示出表示3D视频开始描述符的参数“3d_start_descriptor”的语法的
示例。
表2
语法
3dd_start_descriptor(){
descriptor_tag
descriptor_length
threed_info_start_code
}
在MPEG TS的描述符区中，用户定义的描述符可被插入具有64～255之
间的值的参数“descriptor_tag”。例如，图1的数字广播流发送设备100的TS
产生单元120可将表示3D视频开始描述符的参数“3d_start_descriptor”插入
具有值为0xF0的参数“descriptor_tag”的描述符区。
参数“descriptor_length”表示在参数“descriptor_length”之后的字节的
数量。可设置ASCII码“3DAV”作为参数“threed_info_start_code”的值，
从而使3D视频信息包括在单节目传输流中，并且使3D视频流描述符包括在
PMT信息中。
表3示出表示3D视频注册描述符的参数“3d_registration_descriptor”的
语法的示例。
表3
语法
3d_registration_descriptor(){
descriptor_tag
descriptor_length
format_identifier
for(i＝0；i＜N；i++){
private_data_byte
}
}
可将ASCII码“3DAV”设置为参数“format_identifier”的值，从而参数
“format_identifier”表示3D视频格式数据包括在单节目传输流中，并且3D
视频流描述符包括在PMT中。
表4示出表示链接描述符的参数“linking_descriptor”的语法的示例。
语法
linking_descriptor(){
descriptor_tag
descriptor_length
linking_priority
distribution_indicator_flag
channel_indicator_flag
pmt_indicator_flag
simulcast_flag
Reserved
if(distribution_indicator_flag){
linked_distribution_method
}
if(channel_indicator_flag){
linked_ts_id
linked_channel
}
if(pmt_indicator_flag){
linked_pmt_pid
Reserved
}
linked_stream_PID
if(simulcast_flag){
linked_service_indification_time
}
Reserved
}
参数“linking_priority”表示链接优先级信息，链接优先级信息指示多个
视频流之间的链接以及关联的视频流之间的优先级是存在还是不存在。定义
当前视频流和与当前视频流关联的相对视频流之间的链接的参数
“linking_prority”的值的示例性实施例基于表5。
表5
如果参数“linking_priority”的值是00，则两个视频流彼此没有链接。
如果参数“linking_priority”的值是01，则两个视频流彼此平等地链接
而没有优先级。在这种情况下，当两个视频流被独立地编码从而如第一示例
性实施例具有平等关系时，对于每个信道，参数“linking_priority”的值可被
设置为01。
当立体视频的参考视点和附加视点是准确的时候，参数“linking_priority”
的值可被设置为10或11。当参数“linking_priority”的值是10时，当前视频
流具有比相对视频流更高的优先级。当参数“linking_priority”的值是11时，
当前视频流具有比相对视频流更低的优先级。换而言之，当当前视频流包括
参考视点的视频信息时，参数“linking_priority”的值可被设置为10。当当前
视频流包括附加视点的视频信息时，参数“linking_priority”的值可被设置为
11。
参数“distribution_indicator_flag”表示相同传输网络方法信息，其指示
是否使用相同的传输网络方法发送和接收相互关联的视频流。
例如，当参数“distribution_indicator_flag”的值为0时，可指示使用相
同的传输网络方法发送和接收相互关联的视频流。当参数
“distribution_indicator_flag”的值为1时，可指示使用不同的传输网络方法
发送和接收相互关联的视频流。
参数“channel_indicator_flag”表示相同信道信息，其指示是否经由相同
的信道发送相互关联的多条视频信息。
例如，当参数“channel_indicator_flag”的值为0时，可指示使用相同的
信道发送相互关联的视频流。当参数“channel_indicator_flag”的值为1时，
可指示使用不同的信道发送相互关联的视频流。在如上参照图7、图8和图9
描述的经由单个信道发送彼此链接的左视点视频信息和右视点视频信息的第
二和第三示例性实施例中，参数“channel_indicator_flag”的值可被设置为0。
在其它示例性实施例中，参数“channel_indicator_flag”的值可被设置为1。
参数“pmt_indicator_flag”表示相同单节目传输流信息，其表示在相同
的单节目传输流内是否存在相互关联的视频流。
例如，当参数“pmt_indicator_flag”的值为0时，可指示在相同的单节
目传输流内存在相互关联的视频流，诸如ES、PES等。当参数
“pmt_indicator_flag”的值为1时，可指示相互关联的视频流(诸如ES、PES
等)分别存在于不同的单节目传输流内。在以上参照图9描述的彼此链接的左
视点视频信息和右视点视频信息包括在一个单节目中的第三示例性实施例
中，参数“pmt_indicator_flag”的值可被设置为0。在其它示例性实施例中，
参数“pmt_indicator_flag”的值可被设置为1。
参数“simulcast_flag”表示相同视点信息，其表示是否存在相同视点的
相互关联的视频流。
例如，当参数“simulcast_flag”的值为0时，可指示相互关联的视频流
作为相同视点的视频信息而存在。当参数“simulcast_flag”的值为1时，可
指示在相同的时间点不存在相互关联的视频流，而数据可在稍后被提供。
参数“linked_distribution_method”表示链接视频传输网络方法信息，其
表示发送相对视频流所通过的信道的传输网络方法。当表示相同传输网络方
法的参数“linked_distribution_method”的值为1时，可设置链接视频传输网
络方法信息以定义用于相对视频流的传输网络方法。表6示出了链接视频传
输网络方法信息的示例。
表6
linked_distribution_method
Description
0x00
地面广播
0x01
卫星广播
0x02
有线广播
0x03
IPTV广播
0x04～0xFF
保留
参数“linked_ts_id”表示链接TS PID信息，其指示包括相互关联的视频
流的多节目TS的PID。
参数“linked_channel”表示链接视频信道信息，其表示相互关联的多个
视频流中的相对视频流被发送和接收所通过的信道。当表示相同信道信息的
参数“channel_indicator_flag”的值为1时，可设置链接视频信道信息。
在卫星广播、地面广播和有线广播中，频率信息可被提供作为链接视频
信道信息。在IPTV广播中，统一资源定位符(URL)信息可被提供作为链接视
频信道信息。
参数“linked_pmt_pid”表示链接视频PID信息，其指示发送相对视频流
所通过的单节目传输流的PMT的PID。当表示相同的单节目传输流信息的参
数“linked_pmt_pid”的值为1时，可定义链接视频包标识符信息。
参数“linked_stream_PID”表示链接视频流PID信息，其指示相互关联
的视频流中的相对视频流的PID。
参数“linked_service_identification_time”表示链接视频服务标识时间信
息，其表示何时提供相互关联的视频流中的相对视频流的节目。例如，链接
视频服务标识时间信息可按照月、日、小时和分钟为单位指示何时提供链接
的节目。
图1的数字广播流发送设备100可将用于标识相互关联的视频流的存在
和位置的链接信息(诸如链接描述符、链接标识符等)与所述相互关联的视频流
一起发送。图2的数字广播流接收设备200可从接收的TS提取链接信息和视
频流，并且还可根据链接信息提取相互关联的视频流，从而正确地再现3D
视频。
在未链接的视频流之间使用链接描述符的示例如下。当表示链接优先级
信息的参数“lining_priority”的值为00时，由于用于标识与当前视频流链接
的相对视频流的信息没有被定义，因此参数“distribution_indicator_flag”、
“channel_indicator_flag”和“pmt_indicator_flag”的值被设置为0。参数
“linked_stream_PID”的值可被设置为针对3D视频的附加视点视频的视频信
息而新定义的PID值。
根据示例性实施例的PMT信息可包括表示提供TS的服务提供者信息或
广播站信息的参数“linked_network_id”。在基于数字视频广播(DVB)方法的
数据广播系统中，使用参数“transport_stream_id”标识TS，并使用参数
“original_network_id”标识服务提供者信息或广播站信息。因此，插入TS
的节目可被安全地彼此区分。相应地，当图2的数字广播流接收设备200采
用DVB方法时，可使用参数“linked_network_id”而不是参数“linked_channel”
来准确地确定立体链接信息。参数“linked_channel”的值表示与当前TS关
联的相对视频信息的信道，并且可根据广播方法或广播系统的类型而变化。
根据示例性实施例的链接描述符不限于表4中示出的链接描述符，并可
根据链接描述符被扩展为包括多视点图像或用于预定目的的情况而适当地改
变。
到目前为止描述的链接信息可针对每个视频信息被设置。然而，在未使
用关于从附加视点到参考视点的链接的链接信息的情况下，包括可根据用户
输入由用户选择的单节目的情况下，系统环境、通信环境等被固定为仅仅是
参考视点，可使用仅针对基本视点视频信息设置链接信息的单向链接信息。
图1的数字广播流发送设备100的TS产生单元120可将当前视频流的
3D视频流描述符插入当前视频流的PMT信息。图2的数字广播流接收设备
200的ES提取单元220可从当前视频流的PMT信息提取3D视频流描述符。
3D视频流描述符包括在图2的数字广播流接收设备200的再现单元230执行
3D渲染时使用的附加信息，从而准确地恢复和再现当前视频流的视频数据。
表7示出包括根据示例性实施例的3D视频流描述符的参数
“3d_video_stream_descriptor”。
表7
语法
3d_video_stream_descriptor(){
descriptor_tag
descriptor_length
3d_video_property
linked_stream_coding_mode
full_image_size_indicator
if(3d_video_property＝＝0x0f){
3d_composite_format
is_left_first
}
if(full_image_size_indicator＝＝0){
additional_view_image_size
scaling_method
scaling_order
}
if(3d_video_property＝＝3D){
Is_Main
picture_display_order
view_info
}
else if(3d_video_property＝＝2D_Multi){
view_index
}
es_icon_indicator
transition_indicator
transition_time_stamp
transition_message
Reserved
}
参数“3d_video_property”表示3D视频属性信息，其表示当3D视频被
构建时当前视频流的视频属性。
可参照以下的表8定义根据示例性实施例的3D视频属性信息。
表8
3d_video_property
描述
0x00
左视频
0x01
右视频
0x02
2D视频
0x03
深度
0x04
视差
0x05
3D_DOT
0x06
2D_Multi
0x07-0x0e
保留
0x0f
3d_composite_format
当当前视频流的参数“3d_video_property”的值为0x00时，当前视频流
是立体视频的左视点视频。当当前视频流的参数“3d_video_property”的值为
0x01时，当前视频流是立体视频的右视点视频。
当当前视频流的参数“3d_video_property”的值为0x02时，当前视频流
是2D视频。当当前视频流的参数“3d_video_property”的值为0x03或0x04
时，当前视频流分别是用于立体视频的左视点视频的附加视点视频的深度信
息或差距信息。
如果用2D视频信息和深度信息构建立体视频，则包括2D视频信息的视
频流的参数“3d_video_property”的值可被设置为0x02，包括深度信息的视
频流的参数“3d_video_proptery”的值可被设置为0x03。
当当前视频流的参数“3d_video_proptery”的值为0x05时，3D视频是
基于3D点方法或随机点立体图方法的图像。当当前视频流的参数
“3d_video_proptery”的值为0x06时，当前视频流是针对多视点视频的多个
2D视频流。
当当前视频流的参数“3d_video_proptery”的值为0x0f时，当前视频流
是通过将左视点图像和右视点图像构成单个帧而获得的3D复合格式(诸如
按照并排格式或按照顶部和底部格式)的视频流。
在表8中没有定义的其它字段可保留作为保留字段。可根据用户需要在
保留字段中设置新视频属性的视频格式。例如，可根据需要将3D复合格式
以及深度信息和差距信息的组合的视频格式分配到保留字段。
参数“linked_stream_code_mode”表示链接视频编码方法信息，其表示
在相互关联的多条视频信息之间的压缩编码方法。参照表9设置根据示例性
实施例的链接视频编码方法信息。
表9
linked_stream_coding_mode
描述
000
独立编码
001
可分级编码
010
差分图像编码
011～111
保留
当参数“linked_stream_coding_mode”的值是000时，两个相互关联的
视频数据的项被独立地编码。在这种情况下，图1的数字广播流发送设备100
可通过分别使用两个独立的视频编码器来压缩两个视频数据项，并按照两个
视频流的形式发送这两个视频数据项。图2的数字广播流接收设备200可接
收两个视频流并通过使用两个独立的视频解码器来从这两个视频流中的每一
个恢复视频数据。
当参数“linked_stream_coding_mode”的值为001时，使用可分级编码
方法来对相互关联的视频数据项进行编码。当参数
“linked_stream_coding_mode”的值为010时，左视点图像和右视点图像之间
的差分图像被编码为附加视点视频信息。
参数“full_image_size_indicator”表示尺寸指示符信息，其指示当前视频
流是否以原始视频信息的原始尺寸发送视频信息。例如，尺寸指示符信息可
表示当前视频流的视频数据相对于原始视频数据的原始尺寸的比率。当参数
“full_image_size_indicator”的值为0时，当前视频数据的尺寸与原始视频数
据的完全尺寸不同。当参数“full_image_size_indicator”的值为1时，当前视
频数据的尺寸与原始视频数据的完全尺寸相同。
某些偏振类型的显示装置将图像的垂直分辨率减半并显示具有减半的垂
直分辨率的图像。即使在以全分辨率接收3D视频数据时，偏振类型的显示
装置将3D视频数据的垂直分辨率减半并显示具有减半的垂直分辨率的图像。
由于全分辨率的基本视点视频数据和全分辨率的附加视点视频数据不需要被
提供给这些显示装置，因此在传输数据量和数据处理速率方面提供通过将垂
直分辨率减半而获得的半尺寸视频数据是有效的。
考虑与用于2D内容服务的广播系统的兼容性，以全分辨率发送基本视
点视频，因为附加视点视频在3D视频再现期间被使用因此以半尺寸发送和
接收附加视点视频，从而有效地发送和接收视频流。另外，可按照1/2或1/4
尺寸而不是全尺寸发送和接收深度信息和视差信息。
在3D复合格式的并排格式中，复合帧的尺寸是帧的原始尺寸，构成复
合帧的左视点帧和右视点帧的尺寸可被减少到一半的尺寸。因此，在这种情
况下，参数“full_image_size_indicator”的值不是1。如果左视点帧和右视点
帧中的每一个都被创建为具有原始帧的全尺寸从而3D复合格式帧的尺寸是
原始帧的尺寸的两倍，则参数“full_image_size_indicator”的值可被设置为1。
当当前视频流的3D视频属性信息是3D复合格式时，即，当参数
“3d_video_property”的值表示“3d_compostie_format”时，参数
“3d_composte_format”和参数“is_left_first”可被设置为如下。
参数“3d_composote_format”表示3D复合格式信息，其表示通过构成
与左视点视频和右视点视频对应的图像来构建3D复合格式图像的方法。3D
复合格式信息对应于如表10中的3D复合格式的类型。
表10
当当前视频流的参数“3d_composite_format”的值为0x00时，当前视频
数据的3D复合格式是并排格式。类似地，当当前视频流的参数
“3d_composite_format”的值为0x01、0x02、0x03、0x04、0x05或0x06时，
当前视频数据的3D复合格式分别为顶部和底部格式、垂直线交错格式、水
平线交错格式、帧顺序格式、场顺序格式或棋盘格式。
并排格式是这样的图像格式：其中，分别对应于3D复合格式图像的左
区域和右区域的左视点图像和右视点图像被并排地排列。顶部和底部格式是
这样的图像格式：其中，分别对应于3D复合格式图像的上区域和下区域的
左视点图像和右视点图像被排列。
垂直线交错格式是这样的图像格式：其中，分别对应于3D复合格式图
像的奇数垂直线和偶数垂直线的左视点图像和右视点图像被排列。水平线交
错格式是这样的图像格式：其中，分别对应于分别对应于3D复合格式图像
的奇数水平线和偶数水平线的左视点图像和右视点图像被排列。
帧顺序格式是这样的图像格式，其中，分别对应于3D复合格式图像的
奇数帧和偶数帧的左视点图像和右视点图像被排列。场顺序格式是这样的图
像格式，其中，分别对应于3D复合格式图像的奇数场和偶数场的左视点图
像和右视点图像被排列。
棋盘格式是这样的图像格式，其中，分别对应于3D复合格式图像的水
平方向上的像素和垂直方向上的像素的左视点图像和右视点图像以像素为单
位被交替地排列。
参数“is_left_first”表示格式排列顺序信息，其表示3D复合格式图像的
左视点图像和右视点图像被排列的顺序。参数“is_left_first”可表示哪个区域
是当前视频流的3D复合格式图像的左视点图像以及哪个区域是其右视点图
像。参照表11，根据示例性实施例的格式排列顺序信息与3D复合格式信息
链接，从而3D复合格式图像的左视点图像和右视点图像的位置可被设置如
下。
表11
当参数“is_left_first”的值为0时，左视频数据被排列在并排格式图像
的左区域、顶部和底部格式图像的上区域、垂直线交错格式图像的奇数线、
水平线交错格式图像的奇数线、帧顺序格式图像的奇数帧、场顺序格式图像
的奇数场和棋盘格式图像的奇数像素中。因此，右视点视频数据被排列在与
每个3D复合格式图像的排列左视点视频数据的区域相对的区域中。
当参数“is_left_first”的值为1时，右视点视频数据和左视点视频数据
按照与参数“is_left_first”的值为0时的排列方式相对的方式被排列。
当当前视频流的尺寸指示符信息表示左视点视频信息和右视点视频信息
以从原始左视点视频信息和右视点视频信息的全尺寸减小的尺寸被发送时，
即，当参数“full_image_size_indicator”的值为0时，参数
“additional_view_image_size”、参数“scaling_method”和参数“scaling_order”
可被设置为如下。
参数“additional_view_image_size”包括附加视点图像尺寸信息，其表示
当前视频流的附加视点视频信息的图像尺寸相对于原始图像尺寸被放大或缩
小的比率。可参照表12将根据示例性实施例的附加视点视频信息设置为如
下。
表12
additional_view_image_size
描述
0x00
水平减半
0x01
垂直减半
0x02
四分之一大小
0x03～0x0f
保留
当参数“additional_view_image_size”的值为0x00时，其表示在水平方
向上将附加视点视频信息的图像尺寸减半的方法。该方法是能够在用于在水
平方向上将输入视频数据减半并再现减半的结果的3D显示装置(包括视差栅
格(parallax barrier)显示装置)中被有效地使用的附加视点图像缩减方法。
当参数“additional_view_image_size”的值为0x01时，其表示垂直方向
上将附加视点视频信息的图像尺寸减半的方法。该附加视点图像缩减方法可
在用于在垂直方向上将图像的分辨率减半并再现减半的结果的显示装置(包
括在以3D视频的水平线为单位改变偏振角度的同时执行再现的显示装置)中
被有效地使用。
当参数“additional_view_image_size”的值为0x02时，其表示分别在垂
直方向和水平方向上将图像尺寸减半，从而将图像尺寸减少到整体的1/4的
方法。这种附加视点图像缩减方法可在深度信息或视差信息而不是视频数据
中被使用以减少损失并增加压缩效率。
参数“scaling_method”表示按比例缩减方法信息，其表示按比例缩减
3D复合格式图像的左视点图像和右视点图像的方法。3D复合格式按比例缩
减针对多个视点中的每个视点的帧的视频数据，从而使单个帧包括针对多个
视点的多条数据。可使用多种按比例缩减方法中的任意一种来执行按比例缩
减。然而，由于在压缩之前发生的预处理过程中执行按比例缩减方法，因此
如果在视频解码期间根据与按比例缩减方法不对应的按比例放大方法来恢复
图像尺寸，则在恢复的图像上会产生伪影(artifacts)。现在将参照图13描述在
图像按比例缩减和图像恢复期间会产生伪影的示例。
图13示出根据示例性实施例的使用了针对3D复合格式的按比例缩减方
法的示例。
例如，只有原始图像1310的线1312、1314、1316和1318中的偶数线
1314和1318被下采样并排列在顶部和底部格式图像的上区域1320中。换而
言之，顶部和底部格式图像的上区域1320的线1322和1324与原始图像1310
的偶数线1314和1318相同。
然而，如果顶部和底部格式图像的线1322和1324被排列在恢复的图像
1330的奇数线1332和1336的位置而不是在恢复的图像1330的偶数线1334
和1338的位置，则在图像解码期间执行的按比例放大操作过程中，在恢复的
图像1330的所有像素中会发生垂直方向上的一像素不匹配。如果左视点图像
和右视点图像以一个像素为单位而彼此不匹配，则会在3D视频中发生最大
两个像素为单位的不匹配。
因此，为了实现3D视频的准确恢复，图1的数字广播流发生设备和图2
的数字广播流接收设备200可发送和接收针对3D复合格式的按比例缩减方
法。根据示例性实施例的按比例缩减方法信息可被设置为如表13中的参数
“scaling_method”。
表13
scaling_method
描述
0x00
采样方法
0x01
平均方法
0x02～0x03
保留
当参数“scaling_method”的值为0x00时，当前3D复合格式可包括已经
根据采样方法被按比例缩减的左视点图像信息和右视点图像信息，其中，在
所述采样方法中，选择并提取每两个连续线中的一个。
当参数“scaling_method”的值为0x01时，当前3D复合格式可包括已经
对原始左视点图像和原始右视点图像中的每一个的两条连续线进行按比例缩
减的、具有单条线的左视点图像信息和右视点图像信息，其中，通过将两条
连续线替换为对两条连续线执行的算术运算的结果来执行按比例缩减。形成
具有按比例缩减的左视点图像和按比例缩减的右视点图像的3D复合格式的
代表性方法是平均方法，其中，在所述平均方法中，两条连续线的像素之间
的平均值被确定为单条线的像素值。
参数“scaling_order”表示按比例缩减采样顺序信息，其表示根据采样方
法按比例缩减的3D复合格式的采样顺序。当表示按比例缩减采样顺序信息
的参数“scaling_method”的值为0x00时，其表示左视点图像和右视点图像
的奇数线和偶数线中的哪些线被采样以构成3D复合格式。在表14中示出了
根据示例性实施例的使用按比例缩减采样顺序信息的示例。
表14
scaling_order
左视点
右视点
0x00
奇数线
偶数线
0x01
偶数线
奇数线
0x02
奇数线
偶数线
0x03
偶数线
奇数线
当参数“scaling_order”的值为0x00时，左视点图像的奇数线被采样并
且右视点图像的偶数线被采样以构建3D复合格式图像。类似地，当参数
“scaling_order”的值为0x01时，左视点图像的偶数线被采样并且右视点图
像的奇数线被采样以构建3D复合格式图像。当参数“scaling_order”的值为
0x02时，左视点图像的奇数线和右视点图像的偶数线被采样以构建3D复合
格式图像。当参数“scaling_order”的值为0x03时，左视点图像的偶数线和
右视点图像的奇数线被采样以构建3D复合格式图像。
以下，当当前视频流的视频属性信息表示3D视频数据时，即，当参数
“3d_video_property”是“左视频”或“右视频”时，设置参数“Is_Main”、
参数“picture_dispaly_order”和参数“view_info”。
参数“Is_Main”表示基本视点指示符信息，其表示当前视频流是否为基
本视点视频流。例如，当表示当前视频流的视频属性信息的参数
“3d_video_property”为“左视频”时，参数“Is_Main”可如表15被设置。
表15
Is_Main
描述
0x0
子视频
0x1
主视频
也就是说，当参数“Is_Main”的值为0时，左视点视频数据被设置为是
子视频。当参数“Is_Main”的值为1时，左视点视频数据被设置为是主视频。
参数“picture_display_order”表示显示顺序信息，其表示左视点和右视
点的ES被显示的顺序。
参数“view_info”表示3D视频视点相关信息，其中，如果当前视频流
是3D视频，则视点信息针对小孩和成人被不同地设置。考虑到小孩和成人
在双眼差异方面不相同的事实，可针对小孩和成人不同地设置视点相关信息，
诸如深度和视差。例如，针对成人的图像是具有相对较大的双眼视差的图像，
针对小孩的图像是具有相对较小的双眼视差的图像。由于参数“view_info”
的使用，可对针对成人的图像和针对小孩的图像进行区分，并且还可根据3D
显示装置的屏幕尺寸执行选择性的3D再现。参数“view_info”可被使用，
从而如果3D显示装置的屏幕尺寸相对较大，则具有相对较小双眼视差的3D
图像被再现，如果3D显示装置的屏幕尺寸相对较小，则具有相对较大的双
眼视差的3D图像被再现。当考虑这种情况制作3D视频内容时，无论3D显
示器的尺寸如何，立体效果可被不均匀地提供给观看者。
参数“view_index”表示视频索引信息，如果当前视频流与多个2D视频
(每个2D视频均包括多个视点)中的一个2D视频相关，则其指示当前视频流
的多个视点中的当前视点。换而言之，如果表示当前视频流的视频属性信息
的参数“3d_video_property”是“2D_Multi”，则可设置参数“view_index”。
当包括多个2D视频的服务被接收时可使用参数“2D_Multi”。在这种情况下，
参数“view_index”可用于彼此区分2D运动图像。
参数“es_icon_indicator”表示3D视频服务通知指示符，其指示来自内
容提供者的3D服务相关图标的提供。3D视频服务的通知的指示可通过3D
视频服务通知指示符被插入内容而不与机顶盒或TV重叠。
图1的数字广播流发送设备100和图2的数字广播流接收设备200可发
送和接收与当前视频流中的2D或3D再现模式的转换相关联的信息。以下，
再现模式转换指示符、再现模式转换时间信息等可被设置为与再现模式转换
相关联的信息。
参数“transition_indicator”包括再现模式转换指示符，其指示在当前PMT
信息之后的PMT信息中是否设置了与当前PMT信息中设置的2D/3D视频再
现模式不同的2D/3D视频再现模式。再现模式转换指示符指示当在后续PMT
信息和当前PMT信息中设置了不同的多条再现模式信息时，再现模式转换已
经发生。
参数“transisition_time_stamp”表示再现模式转换时间信息，其以显示
时间戳(PTS)为单位表示再现模式转换发生的时间。再现模式转换时间信息可
被设置为时间的绝对长度，或者被设置为从预定的参考时间点开始的相对时
间长度。
参数“transisition_message”包括用于向观看者通知再现模式转换的各种
消息信息，诸如文本、图像、音频等。例如，参数“transistion_message”包
括再现模式转换消息的尺寸信息和消息信息，再现模式转换信息可通过使用
重复与消息尺寸参数的值对应的次数的for语句被表示为8比特字符串。
根据示例性实施例的3D视频流描述符不限于表7中示出的语法，并可
在3D视频扩展到多视点图像或用于预定目的时被适当地改变。
图1的数字广播流发送设备100的TS产生单元120可将用于准确区分
多个多视点视频流的多视点视频流描述符插入当前视频流的PMT信息。图2
的数字广播流接收设备200的ES提取单元220可从当前视频流的PMT信息
提取多视点视频流描述符。多视点视频流描述符包括由图2的数字广播流接
收设备200的再现单元230使用以准确地恢复和再现多视点视频流的附加信
息。
根据示例性实施例的多视点视频流描述符可如表16被设置。
表16
语法
multiview_video_stream_descriptor(){
descriptor_tag
descriptor_length
number_of_views
mv_numbering
}
参数“number_of_views”表示关于多视点视频流的视点数量的信息。
参数“mv_numbering”表示多视点视频流的视频索引信息。例如，参数
“mv_numbering”的值可被设置为从针对最左边的视点视频流的0开始，向
最左边的视点视频流的右边每个视频流加1。最左边视点视频流的参数
“mv_numbering”的值可被设置为0，最左边视点视频流的参数
“mv_numbering”的值可被设置为通过从参数“number_of_views”的值减去
1而获得的值。
可从参数“linking_descriptor”的参数“linking_priority”预测多视点视
频流中的基本视点视频流的位置。基本视点视频流的参数“linking_priority”
的值可被设置为10，其它视点视频流的参数“linking_priority”的值可都被设
置为11。
通过参照前述的链接描述符和3D视频流描述符，图1的数字广播流发
送设备100可如表17设置与基本视点视频流对应的左视点视频流的部分链接
描述符和3D视频流描述符，并可如表18设置与附加视点视频流对应的右视
点视频流的部分链接描述符和3D视频流描述符。
表17
语法
值
linking_priority
10
3d_video_property
0000
linked_stream_coding_mode
000
full_image_size_indicator
1
表18
语法
值
linking_priority
11
3d_video_property
0001
linked_stream_coding_mode
000
full_image_size_indicator
1
如果图2的数字广播流接收设备200提取如表17设置的针对第一视频流
的链接描述符和3D视频流描述符，则由于第一视频流的链接优先级信息是
“linking_priority＝＝10”并且第一视频流的3D属性信息是“3d_ideo_property
＝＝0000”，因此可确定第一视频流是参考视点的左视点视频流，其具有比与
第一视频流关联的相对视频流更高的优先级。
如果图2的数字广播流接收设备200提取如表18设置的针对第二视频流
的链接描述符和3D视频流描述符，则由于第二视频流的链接优先级信息是
“linking_priority＝＝11”并且第二视频流的3D属性信息是“3d_video_property
＝＝0001”，因此可确定第二视频流是附加视点的右视点视频流，其具有比与
第二视频流关联的相对视频流更低的优先级。
根据第一视频流和第二视频流的参数“linked_stream_coding_mode”的
值为000，图2的数字广播流接收设备200可确定第一视频流和第二视频流
已根据与用于对相对视频流编码的编码方法独立的编码方法被编码，根据参
数“full_image_size_indicator”的值为1，可确定保持了原始图像尺寸。
图14、图15、图16、图17和图18是根据示例性实施例的数字广播流
接收设备的再现单元的示意图。现在将参照图14到图18描述图2的数字广
播流接收设备200的再现单元230从视频流恢复和再现3D或2D视频数据的
方法。
根据再现单元230的第一示例性实施例1400，可通过流解码器1410和
1420分别恢复左视点视频数据1415和右视点视频数据1425。左视点视频数
据1415和右视点视频数据1425可被转换为能够被3D格式化器或渲染器1430
再现为3D视频的3D再现格式。3D再现格式的信号可被3D显示装置1440
再现。
根据再现单元230的第二示例性实施例1500，可通过流解码器1510和
1520分别恢复2D视频数据1515和深度/视差视频1525。2D视频数据1515
和深度/视差视频1525可被3D渲染器1530转换为3D再现格式。3D再现格
式的信号可被3D显示装置1540再现。
根据再现单元230的第三示例性实施例1600，可通过流解码器1610和
1620分别恢复2D视频数据1615和3D复合视频1625。3D复合视频1625被
3D格式化器1630转换为3D再现格式。2D视频数据1615和3D再现格式的
信号可基于用户输入或自动再现模式转换算法经过再现模式转换处理1640，
并随后可被3D显示装置1650选择性地再现。
根据再现单元230的第四示例性实施例1700，可通过流解码器1710和
1720分别恢复主2D视频数据1715和子2D视频数据1725。主2D视频数据
1715和子2D视频数据1725可基于用户输入或主/子视频选择算法经过视频
转换处理1730，并随后可被2D显示装置1740选择性地再现。
根据再现单元230的第五示例性实施例1800，可通过流解码器1810和
1820分别恢复主2D视频数据1815和子2D视频数据1825。可通过2D显示
装置1830以PIP模式再现主2D视频数据1815和子2D视频数据1825。换而
言之，主2D视频数据1815可被再现在2D显示装置1830的屏幕1840上以
整体地覆盖屏幕1840，子2D视频数据1825可被再现在2D显示装置1830
的部分屏幕1850上。
主2D视频和子2D视频不是用于实现3D内容的立体效果的视频，但可
以是相互关联的内容的视频。例如，主视点的2D视频可包含棒球比赛场景
的内容，子视点的2D视频可包含棒球比赛的附加信息的内容，诸如看台场
景、当前投手的投球姿势的分析信息、当前投手的平均击球信息等。
在这种情况下，图1的数字广播流发送设备100可设置和发送针对主2D
视频和子2D视频的链接信息和3D视频流信息，图2的数字广播流接收设备
200可通过使用链接信息和3D视频流信息恢复彼此链接的主2D视频和子2D
视频，并选择性地再现主2D视频和子2D视频，或以PIP模式再现主2D视
频和子2D视频。因此，用户可以在以主视点持续观看棒球比赛的同时以子
视点观看关于棒球比赛的各种信息。
针对提供3D视频和2D视频的数据流，图1的数字广播流发送设备100
发送并且图2的数字广播流接收设备200接收数据流的相互关联的视频流之
间的链接信息，从而在保证与用于2D内容服务的数字广播系统的兼容性的
同时实现3D数字视频内容广播系统。
图1的数字广播流发送设备100和图2的数字广播流接收设备200通过
在保证与诸如数字视频盘(DVD)的介质的兼容性的同时提供2D数字内容和
3D数字内容，来提供不被时间和地点打断的3D运动图像服务。
图19是根据示例性实施例的能够提供3D视频服务的数字广播流发送方
法的流程图。
在操作1910，产生针对多条视频信息的多个ES，所述多条视频信息包
括关于3D视频的基本视点视频的信息、关于3D视频的附加视点视频的信息
和具有与3D视频的视点不同的视点的2D视频中的至少一个。
在操作1920，多条视频信息之间的链接信息和多个ES被复用以产生至
少一个TS。
在操作1930，经由至少一个信道发送至少一个TS。
图20是根据示例性实施例的能够提供3D视频服务的数字广播流接收方
法的流程图。
在操作2010，经由至少一个信道接收至少一个TS。所述至少一个TS可
包括多条视频信息，所述多条视频信息包括关于3D视频的基本视点视频的
信息、关于3D视频的附加视点视频的信息和具有与3D视频的视点不同的视
点的2D视频中的至少一个。
在操作2020，至少一个接收的TS被解复用以从TS提取多条视频信息
之间的链接信息以及针对所述多条视频信息的至少一个ES。
在操作2030，考虑链接信息表示的链接，通过对提取的至少一个ES进
行解码而恢复的3D视频数据和2D视频数据中的至少一个被再现。
图19的数字广播流发送方法和图20的数字广播流接收方法可分别通过
计算机程序交互被执行。通过如此，如上参照图1、图2、图5-图12和图14-
图18描述的根据示例性实施例执行的数字广播流发送设备100和数字广播流
接收设备200的操作可被实现。
示例性实施例可被编写为计算机程序并可在使用计算机可读记录介质执
行程序的通用数字计算机中实现。计算机可读记录介质的示例包括磁存储介
质(例如，ROM、软盘、硬盘等)和光学记录介质(例如，CD-ROM或DVD)。
另外，设备100、200、300、400、600、800、900和1000中的一个或多个单
元可包括执行存储在计算机可读介质中的计算机程序的处理器或微处理器。
虽然以上已经具体地示出和描述了示例性实施例，但是本领域的普通技
术人员应理解，在不脱离权利要求限定的本发明构思的精神和范围的情况下，
可在形式和细节上对其进行各种改变。