《影像压缩方法、媒体数据文件与解压缩方法.pdf》由会员分享,可在线阅读,更多相关《影像压缩方法、媒体数据文件与解压缩方法.pdf(14页珍藏版)》请在专利查询网上搜索。
1、(10)申请公布号 CN 103037247 A (43)申请公布日 2013.04.10 CN 103037247 A *CN103037247A* (21)申请号 201110443090.8 (22)申请日 2011.12.14 61/543,886 2011.10.06 US H04N 21/2668(2011.01) H04N 21/4405(2011.01) H04N 21/84(2011.01) H04N 21/85(2011.01) (71)申请人 晨星软件研发 ( 深圳 ) 有限公司 地址 518057 广东省深圳市高新区南区科技 南十路深圳航天科技创新研究院C座4 楼 申请。
2、人 晨星半导体股份有限公司 (72)发明人 王颂文 何嘉强 童怡新 (74)专利代理机构 上海专利商标事务所有限公 司 31100 代理人 陈亮 (54) 发明名称 影像压缩方法、 媒体数据文件与解压缩方法 (57) 摘要 本发明涉及影像压缩方法以及相关的媒体数 据文件与解压缩方法。该影像压缩方法首先分割 一原始图帧为一第一部份以及一第二部份。 接着, 缩减该第二部份, 以产生一缩减部份。最后, 重构 该第一部份以及该缩减部份, 以产生一重构图帧。 该重构图帧与该原始图帧具有一样的图帧大小。 (30)优先权数据 (51)Int.Cl. 权利要求书 2 页 说明书 7 页 附图 4 页 (19)。
3、中华人民共和国国家知识产权局 (12)发明专利申请 权利要求书 2 页 说明书 7 页 附图 4 页 1/2 页 2 1. 一种影像压缩方法, 包含有 : 分割一原始图帧为一第一部份以及一第二部份 ; 缩减该第二部份, 以产生一缩减部份 ; 以及 重构该第一部份以及该缩减部份, 以产生一重构图帧。 2. 如权利要求 1 所述的影像压缩方法, 其特征在于, 该重构步骤包含有 : 依据一规则, 决定该缩减部份位于该重构图帧的一放置位置 ; 其中, 该放置位置使该缩减部份与该第一部份的一重迭部份面积为最小。 3. 如权利要求 1 所述的影像压缩方法, 其特征在于, 该影像压缩方法包含有 : 依据一规。
4、则, 决定该缩减部份位于该重构图帧的一放置位置 ; 以及 对该重构图帧进行编码, 以产生一图帧数据 ; 其中, 该放置位置使该图帧数据为最小。 4. 如权利要求 1 所述的影像压缩方法, 其特征在于, 该重构步骤包含有 : 决定该缩减部份位于该重构图帧的一放置位置 ; 以及 当该放置位置使该缩减部份与该第一部份重迭时, 依照一预先定义方式, 放置该缩减 部份或是该第一部份中的一重迭部份于该重构图帧中尚未被该第一部份与该缩减部份所 占据的区域。 5. 如权利要求 1 所述的影像压缩方法, 其特征在于, 该重构步骤包含有 : 放置该第一部份于该重构图帧中 ; 将该缩减部份放置于该重构图帧中该第一部。
5、份所没有占据的区域。 6. 如权利要求 1 所述的影像压缩方法, 其特征在于, 该原始图帧包含有多个相同大小 的影像区块, 每一影像区块具有多个像素, 该分割步骤依据一预设规则, 而决定一对应影像 区块隶属于该第一部份或是该第二部份。 7. 如权利要求 6 所述的影像压缩方法, 其特征在于, 该预设规则为该对应影像区块中 的对比关系。 8. 如权利要求 6 所述的影像压缩方法, 其特征在于, 该预设规则为该对应影像区块是 否具有一笔触部分。 9. 如权利要求 1 所述的影像压缩方法, 其特征在于, 另包含有 : 对该重构图帧进行编码, 以产生一图帧数据 ; 以及 产生一媒体数据文件, 其包含有。
6、该图帧数据以及辅助信息, 该辅助信息包含有标示该 缩减部份于该重构图帧中的一放置位置。 10. 如权利要求 9 所述的影像压缩方法, 其特征在于, 该辅助信息包含有标示该缩减部 份的一缩减比例。 11. 如权利要求 9 所述的影像压缩方法, 其特征在于, 该辅助信息包含有该第一部份以 及该第二部份的原始位置信息。 12. 一种媒体数据文件, 其符合一特定文件格式, 包含有 : 多个第一物件, 其包含有多个重构图帧的媒体数据 ; 多个第二物件, 每一第二物件包含有这些重构图帧中一对应重构图帧的附属信息以及 辅助信息 ; 其中, 权 利 要 求 书 CN 103037247 A 2 2/2 页 3。
7、 该附属信息可用来对该媒体数据解压缩, 以产生该对应重构图帧 ; 该辅助信息可以用来找出该对应重构图帧中的一第一部份以及一缩减部份, 以及记录 有该缩减部分的一缩减比例。 13. 如权利要求 12 所述的媒体数据文件, 其特征在于, 该特定文件格式为 MP4 文件格 式, 该辅助信息存放于一电影原子内, 一使用者可以自订的一使用者数据原子中。 14. 一种媒体数据文件, 包含有 : 一影音文件, 其符合一特定文件格式, 经解码后可得多个重构图帧以及相对应的音讯 ; 以及 诠释数据, 包含有对应这些重构图帧的辅助信息以及时间戳记 ; 其中, 该辅助信息可以用来找出一对应重构图帧中的一第一部份以及。
8、一缩减部份, 以 及记录有该缩减部分的一缩减比例。 15.如权利要求14所述的之媒体数据文件, 其特征在于, 该特定文件格式为MP4文件格 式。 16. 一种媒体数据文件的解压缩方法, 该解压缩方法包含有 : 从该媒体数据文件产生一重构图帧以及一辅助信息 ; 依据该辅助信息, 找出该重构图帧中的一第一部份以及一缩减部份 ; 放大该缩减部份, 以产生一模糊部份 ; 以及 依据该辅助信息, 重构该第一部份以及该模糊部份以产生一组合图帧。 17. 如权利要求 16 所述的之解压缩方法, 其特征在于, 该辅助信息包含有一缩减比例, 该放大步骤依据该缩减比例来产生该模糊部份。 18. 如权利要求 16 。
9、所述的之解压缩方法, 其特征在于, 该辅助信息包含有该第一部份 以及该模糊部份的原始位置信息。 19. 如权利要求 16 所述的解压缩方法, 其特征在于, 该重构图帧包含有一空白部分。 权 利 要 求 书 CN 103037247 A 3 1/7 页 4 影像压缩方法、 媒体数据文件与解压缩方法 技术领域 0001 本发明有关于影像压缩方法、 相关的媒体数据文件与解压缩方法, 尤指可以适度 地减少数据量、 又可以维持影像品质的一种影像压缩方法。 背景技术 0002 在移动式通信装置中, 影音娱乐往往是不可或缺的一环。 举例来说, 能够随时随地 在手机或是平板电脑上点选并播放电影, 已经是大多使。
10、用者所希望或是已经习惯拥有的一 种应用。 0003 一般关于电影的媒体数据文件, 是为要在电视机或是投影机的大屏幕上呈现足够 细腻的影像, 因此, 媒体数据文件中每个图帧的解析度会相当的高, 连带的, 媒体数据文件 便会相当的庞大。这样的文件要在移动式通信装置中播放的话, 会有以下缺点。 0004 1. 画面可能延迟。庞大的媒体数据文件, 需要有高速的通信网络来维持影像播放 之流畅。 但是, 移动式通信装置的通信网络频宽往往是受限的, 因此很容易造成画面停格延 迟的事件的发生。 0005 2. 需要较多的储存硬件。在移动式通信装置中的储存硬件是较一般装置更为昂 贵。 要播放高解析度的影像, 需。
11、要较多储存媒体, 这对移动式通信装置而言, 是相当奢侈的。 0006 3.缩短移动式通信装置的操作时间。 处理高解析度的影像, 需要较多的运算, 因此 会消耗较多电能, 因而影响移动式通信装置的操作时间。 0007 为此, 如何提供一种有效的影像压缩方法, 在缩小媒体数据文件大小之余, 同时适 切保留媒体数据文件中每个图帧的品质, 是十分被需要的。 发明内容 0008 本发明的实施例提供一影像压缩方法, 包含有 : 分割一原始图帧为一第一部份以 及一第二部份 ; 缩减该第二部份, 以产生一缩减部份 ; 以及, 重构该第一部份以及该缩减部 份, 以产生一重构图帧。该重构图帧与该原始图帧具有一样的。
12、图帧大小。 0009 本发明的实施例提供一种媒体数据文件的解压缩方法, 该解压缩方法包含有 : 从 该媒体数据文件产生一重构图帧以及一辅助信息 ; 依据该辅助信息, 找出该重构图帧中的 一第一部份以及一缩减部份 ; 放大该缩减部份, 以产生一模糊部份 ; 以及, 依据该辅助信 息, 重构该第一部份以及该模糊部份, 以产生一组合图帧。 0010 本发明的实施例提供一种媒体数据文件, 其符合一特定文件格式。该媒体数据文 件包含有多个第一物件以及多个第二物件。这些第一物件包含有多个重构图帧的媒体数 据。每一第二物件包含有一相对应重构图帧的附属信息以及辅助信息。该附属信息可用来 对该媒体数据解压缩, 。
13、以产生该对应重构图帧。该辅助信息可以用来找出该对应重构图帧 中的一第一部份以及一缩减部份, 以及记录有该缩减部分的一缩减比例。 0011 本发明的实施例提供一种媒体数据文件, 包含有一影音文件以以及诠释数据。该 影音文件符合一特定文件格式, 经解码后可得多个重构图帧以及相对应的音讯。该诠释数 说 明 书 CN 103037247 A 4 2/7 页 5 据包含有对应这些重构图帧的辅助信息。 该辅助信息可以用来找出一对应重构图帧中的一 第一部份以及一缩减部份, 以及记录有该缩减部分的一缩减比例。 附图说明 0012 图 1 显示依据本发明所实施的影像压缩方法。 0013 图 2 例示一原始图帧。。
14、 0014 图 3 显示一原始图帧经过步骤 14 处理后, 所可能产生的一些结果。 0015 图 4 显示一无兴趣部分缩减成一缩减部分。 0016 图 5A 例示一重构图帧。 0017 图 5B 例示辅助信息。 0018 图 6 例示另一重构图帧。 0019 图 7 显示一种解压缩方法。 0020 主要元件符号说明 0021 10 影像压缩方法 0022 12、 14、 16、 18、 20、 22 步骤 0023 30 原始图帧 0024 32、 34 有兴趣部分 0025 33 图帧 0026 36 无兴趣部分 0027 36a 缩减部分 0028 37 辅助信息 0029 38 原始位置。
15、信息图 0030 40、 40a 重构图帧 0031 42 重构信息 0032 44a-44d 影像区块 0033 46a-46d 区域 0034 60 解压缩方法 0035 62、 64、 66、 68、 70、 74 步骤 具体实施方式 0036 在此说明书中, 相同符号的元件或信号, 为具有相同或是类似功能的元件或信号。 业界具有通常能力者, 可以依据本说明书教导, 推知相同符号的元件或信号, 其实施方式, 可能不局限于本说明书所揭露的, 而是有许多不同的变化。 0037 图 1 显示了依据本发明所实施的影像压缩方法 10, 适用于一媒体数据文件, 可运 用于一编码器 (encoder)。
16、 中。媒体数据文件中具有数个用来依序播放的原始图帧。每一原 始图帧经过影像压缩方法 10 处理后, 会产生一相对应的重构图帧。重构图帧由原始图帧中 的有兴趣部分、 无兴趣部分以及辅助信息所构成。 本实施例中, 有兴趣部分定义为第一权重 部分, 无兴趣部分为第二权重部分, 其中第一权重高于第二权重, 关于权重的选择, 举例来 说, 如使用者的需求在于字幕清晰, 可将字幕部份的权重提高, 如使用者的需求在于图帧中 说 明 书 CN 103037247 A 5 3/7 页 6 特定物体的清晰(例如人脸、 人形或物体等), 则可将对应部份的权重提高。 例如, 可将一定 比例的画面下部、 或画面中白色或。
17、高对比的部份作为判断该部分为字幕的参考。 0038 或者, 定义一位于一定比例的画面下部, 颜色接近白色且其往垂直、 水平或一定角 度延伸的同色色块为笔触区域, 并将笔触区域及其周围一定范围定义为第一权重部份。于 本实施例中, 于决定权重的高低后, 进行图帧的重构, 权重较低的第二权重部份中的像素被 对应的缩减为较低解析度的影像, 此处的缩减包含等比例缩减(scale down)以及非等比例 的缩减。 权重较高的第一权重部份, 则不进行缩减操作, 并被置放于该画帧中未经处理时的 原始位置上。 缩减后的第二权重部份被重新安排于画帧中, 因第二权重部份经过缩减, 经此 处理后画帧将产生不属于第一权。
18、重部分亦不属于第二权重部份的空白, 此部份可填入黑 / 白作为底色来减少信息量, 亦可选用其他色阶填入, 亦可达成减少信息量的目的。换言之, 使用者有兴趣部分的解析度维持不变, 无兴趣部分则解析度 ( 相对于原始图帧 ) 减少。因 此, 以重构图帧进行压缩编码所产生的新媒体数据文件, 可以小于原本的媒体数据文件, 达 到缩小文件大小的目的, 同时又可以完整保有原始图帧中有兴趣部分。 此外, 亦可将有第一 权重部分以及第二权重部份分别以不同压缩率进行压缩编码, 只要有兴趣部分的压缩率低 于无兴趣部分的压缩率, 使还原后的有兴趣部分的解析度高于无兴趣部分的解析度。 0039 在步骤 12 中, 影。
19、像压缩方法 10 从一媒体数据文件里, 接收一原始图帧。图 2 例示 了原始图帧 30, 将用以解释影像压缩方法 10 中一些步骤所产生的结果。 0040 步骤 14 分割原始图帧 30, 以产生不相重迭的至少一有兴趣部分以及至少一无兴 趣部分。这里所谓有兴趣与无兴趣部分是相对的。简单的说, 有兴趣部分大概指的是画质 不想被牺牲的部分 ; 无兴趣部分大概指的是画质可以被牺牲的部分。 举例来说, 每一原始图 帧可被定义为排列成矩阵的数个影像区块(image block) ; 每个影像区块大致为一正方形, 由 16X16( 或 8X8) 个影像像素 (image pixel) 所构成 ; 每一影像。
20、像素具有对应红绿蓝三原 色之数个像素 (pixel)。步骤 14 可以一个一个影像区块来检查。如果一个当下被检查的影 像区块符合一个预设规则, 那便可以把该影像区块隶属于有兴趣部分 ; 反之则把该影像区 块隶属于无兴趣部分。这预设规则可以由使用者任意定义。举例来说, 在一实施例中, 只要 位在一原始图帧下方四分之一之内的影像区块, 因为其大致包含有字幕讯息, 所以全部隶 属于有兴趣部分 ; 其他影像区块都隶属于无兴趣部分。 在另一实施例中, 如果一影像区块中 的影像像素的一对比关系超过一定程度, 则该影像区块隶属于有兴趣部分 ; 反之, 该影像区 块隶属于无兴趣部分。在另一实施例中, 如果一影。
21、像区块具有一笔触 (stroke) 部分, 则该 影像区块隶属于有兴趣部分 ; 反之, 该影像区块隶属于无兴趣部分。 0041 图 3 显示了原始图帧 30 经过步骤 14 处理后, 所可能产生的一些结果。步骤 14 可以产生原始位置信息图 38。原始位置信息图 38 中, 有记号区域对应到原始图帧 30 中的 太阳与字幕所在部分, 因其对比较大或是包含有笔触, 所以在此实施例中, 是隶属有兴趣部 分。原始位置信息图 38 中空白区域对应的是无兴趣部分。因此, 原始图帧 30 分割成有兴 趣部分 32 与 34、 以及无兴趣部分 36。图 3 中, 图帧 33 显示由有兴趣部分 32 与 34。
22、 所构成 的一图帧。 0042 接着, 以一个缩减比例, 步骤 16 缩减 (scale down) 无兴趣部分 36, 以产生缩减部 分 36a, 如同图 4 所示。可以推知的, 缩减部分 36a 的解析度, 将低于无兴趣部分 36。 0043 步骤 18 重构 (recomposite) 缩减部分 36a 以及有兴趣部分 32 与 34, 以形成一重 说 明 书 CN 103037247 A 6 4/7 页 7 构图帧 (recomposition frame), 其图帧尺寸与原始图帧 30 相同。图 5A 例示重构图帧 40, 其保持有兴趣部分 32 与 34 的原始位置与大小, 而缩减。
23、部分 36a 则位于重构图帧 40 中有兴 趣部分 32 与 34 没有占据的一区域内。 0044 在一实施例中, 步骤 18 是先把有兴趣部分 32 与 34 复制并放置于一空白的重构图 帧中, 并保持有兴趣部分 32 与 34 的相对位置与大小皆不变。然后, 依据一规则, 来决定缩 减部分 36a 大致位于重构图帧中的一放置位置。依据所决定的放置位置, 把缩减部分 36a 放置在重构图帧尚未被占据的空白区域中, 以完成重构图帧 40。决定放置位置的规则可以 依据使用者喜好而订定。 0045 举例来说, 缩减部分 36a 可以尝试放在重构图帧所有的可能放置位置, 其中有的 放置位置会使得被放。
24、置的缩减部分 36a 部分重迭到兴趣部分 32 或 34。如果一特定的放置 位置使得被放置之缩减部分 36a 完全不重迭到兴趣部分 32 与 34, 或是使得重迭部分为最 小, 那缩减部分 36a 就放在这特定的放置位置, 来产生最后的重构图帧。如同 5A 图所例示, 最后完成的重构图帧 40, 其中的缩减部分 36a 并没有重迭到兴趣部分 32 或 34。 0046 在另一实施例中, 被决定的放置位置, 可以使得相对的重构图帧, 依照 MPEG-4 的 压缩标准压缩后, 所产生的图帧数据的大小为最小。缩减部分 36a 的每一个可能的放置位 置, 会产生一对应的重构图帧, 经过 MPEG-4 。
25、的压缩标准进行压缩后, 也会产生一相对应的 图帧数据, 以及一相对应的数据大小。因此, 只要找到最小数据大小, 便可以以其对应的放 置位置, 来做为被决定的放置位置。 0047 在 产 生 图 5A 的 重 构 图 帧 40 的 过 程 中,步 骤 18 也 会 产 生 辅 助 信 息 (sideinformation)。图 5B 例示辅助信息 37, 其包含有原始位置信息图 38 以及重构信息 42。 如同先前所述, 原始位置信息图38包含有兴趣部分32或34以及无兴趣部分36的原始 位置信息。重构信息 42 则包含有缩减部分 36a 的缩减比例、 以及缩减部分 36a 于重构图帧 40 中。
26、的放置位置。辅助信息 37 并不限于图 5B 中所举例的内容, 而可以包含有其他使用者 所希望的信息。关于有兴趣部分的重构信息 42 的实现, 于利用 MPEG 格式进行压缩时, 可在 包含有兴趣部分的压缩单元 ( 例如一 8x8 像素或一 16x16 像素单元 ) 中的辅助或自定区域 增加一权重参数, 以定义该压缩单元是否属于有兴趣部分, 该权重参数可为一二位元制的 0 或一 1 数值, 有兴趣部分的该权重参数被定义为 1。当重构后的图帧出现重迭数据时, 权重 参数为 1 的部份被移至非有兴趣部分亦非无兴趣部分 36 的空白部份, 并以预先定义 ( 例如 由左至右、 由上至下 ) 的方式沿空。
27、白部分排列。如此一来, 在还原图帧时, 当出现权重参数 为 1, 但不存在像素数据的位置时, 则依据该预先定义的排列方式, 将像素数据还原至有兴 趣部分的原始位置。 0048 虽然在本实施例中, 有兴趣部份于重构时被放置在图帧的原来位置上, 但并不以 此为限, 有兴趣部分在重构时亦可被放置在图帧的其他位置上。以 MPEG 为例, 数据因转换 至频域后, 连续排列的数据的高频成分较大, 进行压缩时可以得到较大的压缩量, 因此在进 行重构时应以使数据连续排列为原则来放置影像区块, 使得重构后的图帧在压缩时具有最 大的压缩率。当有兴趣部份的位置于重构下亦被重新调整时, 重构信息 42 还包含有兴趣部。
28、 份于重构图帧上的位置信息。 0049 一旦缩减部分36a在一重构图帧中的放置位置被决定时, 难免地, 缩减部分36a可 能跟有兴趣部分 32 或 34 有部分重迭。当重迭事件发生时, 为解决此问题, 首先可使用适当 说 明 书 CN 103037247 A 7 5/7 页 8 的比例缩减参数, 举例来说, 当有兴趣部分的宽度部份占图帧的三分之一时, 只要选择适当 的缩减比例使缩减后缩减部分的宽度低于图帧的三分之二, 便能解决重迭的问题。 然而, 在 使用者的需求在于字幕清晰, 且利用画面中白色或者高对比色块作为判断字幕的情形下, 可能使得其他高对比或白色部分亦被判断为高权重的需保留部分, 而。
29、使得有兴趣部分呈现 不规则的状况, 于此情形下, 缩减部分的区块则为有兴趣部分区块的互补形状, 两者可能互 相交错穿插, 换言之, 同一高度以及宽度内可能同时包含有兴趣部分区块以及缩减部分。 如 此一来, 将无法单纯利用宽度或高度调整避免有兴趣部分以及缩减部分间重迭的问题。此 时, 可以依照一预定搬移方式与规则, 把缩减部份 36a 或是有兴趣部分 32 与 34 中的一重迭 部份, 置放在重构图帧中还没有被缩减部份 36a、 有兴趣部分 32 与 34 所占据的区域。图 6 例示另一重构图帧 40a, 其中缩减部分 36a 的放置位置大约是重构图帧 40a 的左上角, 因此 缩减部分36a与。
30、有兴趣部分32有部分重迭。 影像区块44a-44d显示缩减部分36a中会跟兴 趣部分 32 重迭的部分。影像区块 44a-44d 并没有置放在重构图帧 40a 中有兴趣部分 32 所 在的区域, 而是依照一预定搬移方式与规则, 分别被置放在区域 46a-46d。在重构图帧 40a 中, 被搬移的是缩减部分 36a 中的重迭部分。在另一个实施例中, 被搬移的是有兴趣部分中 的重迭部分, 预定搬移方式是依据以由左至右由上而下的顺序。 0050 步骤 20 对步骤 18 所产生的重构图帧进行编码, 以产生图帧数据。举例来说, 依照 MPEG-4 的压缩标准或是其他影像的编码协定, 对重构图帧编码, 。
31、产生相对应的图帧数据。 0051 步骤 22 把图帧数据与辅助信息, 一起结合产生一媒体数据文件。在一实施例中, 数个图帧数据存放于一 MP4 档, 而对应图帧数据的辅助信息存放于一诠释数据 (metadata) 档, 而步骤 22 所产生的媒体数据文件是 MP4 档与诠释数据档的组合。在另一实施例中, 步 骤 22 所产生的媒体数据文件只是一 MP4 档, 辅助信息则存放在该 MP4 档中使用者可以制定 的栏位中。 0052 相较于原始图帧 30 中的无兴趣部分 36, 重构图帧 40 中的缩减部份 36a 的解析度 比较低, 而且重构图帧 40 也有许多空白部分。所以可以预期的, 依据重构。
32、图帧所产生的媒 体数据文件应该就会比较小, 比较适用于移动式通信装置。 0053 步骤 22 所产生的媒体数据文件可以透过有线或是无线网络, 传送到一移动式通 信装置。只要移动式通信装置具有相对应的解码程式或是解码器, 就可以依据媒体数据文 件中的图帧数据与辅助信息, 产生并放映与原始图帧非常接近的组合图帧。 0054 图 7 显示了一种解压缩方法 60, 可以适用于一解码器 (decoder), 用来处理图 1 所 产生的媒体数据文件。解压缩方法 60 基本上是图 1 的影像压缩方法 10 的反操作。 0055 步骤 62 接收一媒体数据文件。在一实施例中, 解压缩方法 60 使用于一手机,。
33、 其透 过无线网络, 接收媒体数据文件。 0056 依据一解码协定, 步骤 64 对媒体数据文件中的图帧数据解码, 产生重构图帧。举 例来说, 如果图帧数据是依据MPEG-4的压缩标准而压缩编码产生, 那步骤64就依据MPEG-4 的解压缩标准, 来大致还原产生重构图帧。因为经历了压缩与解压缩, 所以步骤 64 所还原 产生的重构图帧, 即使没有跟图1的步骤18所产生的重构图帧完全相同, 但是, 大致上是非 常类似。步骤 64 也从媒体数据文件中找出相对应的辅助信息。 0057 依据辅助信息中的原始位置信息图38以及重构信息42, 步骤66从步骤64所产生 的重构图帧中, 找出有兴趣部分与缩减。
34、部分。举例来说, 依据第 5B 图中的原始位置信息图 说 明 书 CN 103037247 A 8 6/7 页 9 38, 可以从图 5A 的重构图帧 40 中找出有兴趣部分 32 与 34。依据图 5B 中的重构信息 42, 可以从图 5A 的重构图帧 40 中找出缩减部分 36a。 0058 类似的, 原始位置信息图 38 与重构信息 42 也可以得知重构图帧 40 是否有重迭部 分。只要知道影像压缩方法 10 中, 针对重迭事件的预定搬移方式与规则, 步骤 66 可以从重 构图帧 40 中, 找出以及 / 或拼凑出有兴趣部分 32 与 34 以及缩减部分 36a。 0059 步骤68把缩。
35、减部分36a放大, 以形成模糊部分, 使其大小与重构图帧的大小相同。 以图 4 的缩减部分 36a 为例, 因为经历了缩小与放大过程, 所以, 步骤 68 所产生的模糊部分 大致上是与无兴趣部分 36 雷同, 但是有较低的解析度。 0060 依据原始位置信息图 38, 步骤 70 重构模糊部分以及有兴趣部分, 形成组合图帧。 模糊部分就放置在无兴趣部分所对应的位置上。大致来说, 组合图帧与一相对应的原始图 帧会有享有相同的有兴趣部分, 但是, 组合图帧中模糊部分, 相较于相对应原始图帧中无兴 趣部分, 会比较模糊。模糊部分与有兴趣部分的交界处, 可以稍加处理, 以减低或是避免因 为解析度的差异。
36、所造成的图像不连续现象。步骤 70 所产生的组合图帧, 则交由步骤 74 播 放。 0061 尽管组合图帧中, 模糊部分的解析度比较低, 但是因为其中信息本来就比较不重 要或是无兴趣, 也可能在手机或是平板电脑上的小屏幕中根本就难以被肉眼辨识, 所以模 糊部分是可以被接受的。至于使用者可能比较在乎的有兴趣部分, 组合图帧依然维持其原 始的解析度。所以以组合图帧取代原始图帧来播放, 大致不会影响使用者观看的感觉。 0062 在本发明的一实施例中, 图 1 的影像压缩方法 10 所产生的媒体数据文件为一 MP4 文件, 其符合MP4的文件格式。 MP4文件包含有数个物件, 每个物件称之为原子(at。
37、om)。 举例 来说, 关于图 5A 的重构图帧 40 的真正媒体数据, 存放在媒体数据原子 (media data atom) 中。媒体数据原子一般称为 mdat atom。重构图帧 40 的压缩方式、 磁轨 (track) 型态、 时间 戳记等附属信息, 则存放在电影原子 (movie atom) 中, 一般称为 moov atom。对应重构图 帧 40 的辅助信息 37, 则是存放在, moov atom 内使用者可以自订的使用者数据原子 (user data atom)中。 所以, 在本发明的一实施例中, 一电影原子存有一重构图帧所对应的附属信 息以及辅助信息。或者, 辅助信息以及附属。
38、信息可以被附加于 MPEG 数据之后。于另一实施 例中, 当重构图帧 40 藉由 H.264 方式压缩时, 辅助信息以及附属信息则可被附加于每一个 传送的图帧之后 ( 例如图帧 1+ 第一辅助信息、 图帧 2+ 第二辅助信息)。辅助信息在本发 明中是重要的, 失去了辅助信息, 利用解压缩方法只能还原出重构后的图帧 40, 而无法还原 成原来的图帧了, 因此上述几种不同的辅助信息附加方法, 并不限定单独使用, 亦可同时将 辅助信息附加前述不同的位置上, 以避免丢失图帧获封包时, 一并丢失了辅助信息。 0063 在本发明的另一实施例中, 图 1 的影像压缩方法 10 所产生的媒体数据文件为一 MP。
39、4文件与一诠释数据(metadata)的组合。 此MP4文件存放有所有重构图帧的真正媒体数 据以及相对应附属信息。也就是直接对此 MP4 文件以 MPEG-4 的解压缩标准解压缩后, 就可 以得到数个重构图帧与相对应的音讯, 但无法得到相对应的辅助信息。诠释数据存放对应 所有重构图帧的辅助信息以及时间戳记。时间戳记可以使解码器在处理一重构图帧时, 快 速的找到相对应的辅助信息。 0064 在图 1 的实施例中, 影像压缩方法 10 只有把原始图帧分割成两种部分 : 有兴趣与 无兴趣部分。但是, 本发明也可以把原始图帧分割成两种以上的部分。譬如说, 在本发明的 说 明 书 CN 10303724。
40、7 A 9 7/7 页 10 另一个实施例中, 原始图帧被分割成三种部分 : 有兴趣、 无兴趣、 与非常无兴趣部分。 无兴趣 与非常无兴趣部分可以用不同的缩减比例缩减, 然后才与有兴趣部分一起重构成一重构图 帧。 此时, 辅助信息可能包含有有兴趣、 无兴趣、 与非常无兴趣部分的原始位置信息图、 无兴 趣部分的缩减比例与放置位置、 非常无兴趣部分的缩减比例与放置位置等等。 0065 以上所述仅为本发明的较佳实施例, 凡依本发明申请专利范围所做的均等变化与 修饰, 皆应属本发明的涵盖范围。 说 明 书 CN 103037247 A 10 1/4 页 11 图 1 图 2 说 明 书 附 图 CN 103037247 A 11 2/4 页 12 图 3 图 4 说 明 书 附 图 CN 103037247 A 12 3/4 页 13 图 5A 图 5B 说 明 书 附 图 CN 103037247 A 13 4/4 页 14 图 6 图 7 说 明 书 附 图 CN 103037247 A 14 。