《远程真人三维虚拟仿场景互动的实现方法.pdf》由会员分享，可在线阅读，更多相关《远程真人三维虚拟仿场景互动的实现方法.pdf（7页珍藏版）》请在专利查询网上搜索。
1、(10)申请公布号 CN 102625129 A (43)申请公布日 2012.08.01 C N 1 0 2 6 2 5 1 2 9 A *CN102625129A* (21)申请号 201210095199.1 (22)申请日 2012.03.31 H04N 13/00(2006.01) H04N 7/15(2006.01) H04N 5/272(2006.01) H04N 5/45(2006.01) (71)申请人福州一点通广告装饰有限公司 地址 350001 福建省福州市台江区新港街 道五一中路169号利嘉城二期16#楼 1319单元 (72)发明人林杨 (74)专利代理机构福州元创专。
2、利商标代理有限 公司 35100 代理人蔡学俊 (54) 发明名称 远程真人三维虚拟仿场景互动的实现方法 (57) 摘要 本发明涉及一种远程真人三维虚拟仿场景互 动的实现方法，其通过摄像头采集图像经过抠取 人像后与一虚拟三维景象进行合成，然后配合采 集的音频，进行实时的播放，本发明的方法能实现 将各点远程的人与虚拟背景融合，适合远程视频 会议，与亲人见面或一切因故无法参加现场直播， 虚拟到位参与互动等多方面的应用。 (51)Int.Cl. 权利要求书1页 说明书3页 附图2页 (19)中华人民共和国国家知识产权局 (12)发明专利申请 权利要求书 1 页 说明书 3 页 附图 2 页 1/1页。
3、 2 1.一种远程真人三维虚拟仿场景互动的实现方法，其特征在于，包括以下步骤： 步骤1：提供一虚拟三维背景； 步骤2：提供一第一摄像头和第二摄像头，各自捕捉该摄像头视角范围内的景象，所述 景象的背景采用单一纯色的背景； 步骤3：抠取所述景象内的人物图像，并将抠取的人物图像与所述虚拟三维背景进行 合成； 步骤4：提供一配合第一摄像头使用的第一拾音器和一配合第二摄像头使用的第二拾 音器，所述拾音器采集摄像头前方的音频； 步骤5：提供一第一显示装置和一第二显示装置，将所述第一拾音器采集的音频与所 述合成的图像发送到所述第二显示装置进行实时同步播放，将所述第二拾音器采集的音频 与所述合成的图像发送到所。
4、述第一显示装置进行实时同步播放。 2.根据权利要求1所述的远程真人三维虚拟仿场景互动的实现方法，其特征在于：所 述虚拟三维背景是由一服务器提供，该服务器负责所述的合成后的数据存储与发送。 3.根据权利要求2所述的远程真人三维虚拟仿场景互动的实现方法，其特征在于：所 述的第一摄像头、第一拾音器和第一显示装置组成一第一客户端，所述的第二摄像头、第二 拾音器和第二显示装置组成第二客户端，该第一客户端与该第二客户端经网络与所述服务 器连接。 4.根据权利要求3所述的远程真人三维虚拟仿场景互动的实现方法，其特征在于：所 述第一客户端和第二客户端的用户通过各自账号登陆，由所述服务器进行验证，验证成功 后进。
5、行联网对接。 5.根据权利要求3所述的远程真人三维虚拟仿场景互动的实现方法，其特征在于：所 述的第一客户端和第二客户端是一配有拾音器和摄像头的计算机。 6.根据权利要求2所述的远程真人三维虚拟仿场景互动的实现方法，其特征在于：所 述的数据包括图像数据和视频数据。 7.根据权利要求2所述的远程真人三维虚拟仿场景互动的实现方法，其特征在于：所 述虚拟三维背景存储于该服务器中，其能供用户自由选择。 8.根据权利要求1所述的远程真人三维虚拟仿场景互动的实现方法，其特征在于：所 述的摄像头是云台摄像机，以实现远程联动控制。 9.根据权利要求1所述的远程真人三维虚拟仿场景互动的实现方法，其特征在于：所 述。
6、显示装置显示的合成视频图像中的人物可选，当用户选择对应的人物时，该显示装置仅 播放该人物所用客户端采集的音频，实现点对点或一点对多点的融合应用和自由交流。 10.根据权利要求1所述的远程真人三维虚拟仿场景互动的实现方法，其特征在于：所 述的显示装置具备画中画显示或多对话框显示，系统根据用户指令，能将多人交流场景中， 以画中画或多对话框的形式显示和播放指定人物的视频。 权 利 要 求 书CN 102625129 A 1/3页 3 远程真人三维虚拟仿场景互动的实现方法 技术领域 0001 本发明涉及一种远程真人三维虚拟仿场景互动的实现方法。 背景技术 0002 市场经济竞争的加剧，企业生产经营逐渐。
7、融入全国性、全球性的竞争范围。高效便 捷的信息交流、灵活的培训体系，以及强大的工作协同需要，成为大中型企业信息化建设的 首要需求。随着通讯技术的发展，现在人们能实现视频聊天和视频会议等。 0003 但是，该些技术仅局限于单方图像显示，即实时显示对方的视频图像。然而，随着 三维虚拟仿真技术的发展，上述的技术已经永远无法满足用户的需求。 发明内容 0004 本发明的目的是提供一种远程真人三维虚拟仿场景互动的实现方法，能实现将各 点远程的人与虚拟背景融合。 0005 本发明采用以下方案实现：一种远程真人三维虚拟仿场景互动的实现方法，其特 征在于，包括以下步骤： 步骤1：提供一虚拟三维背景； 步骤2：。
8、提供一第一摄像头和第二摄像头，各自捕捉该摄像头视角范围内的景象，所述 景象的背景采用单一纯色的背景； 步骤3：抠取所述景象内的人物图像，并将抠取的人物图像与所述虚拟三维背景进行 合成； 步骤4：提供一配合第一摄像头使用的第一拾音器和一配合第二摄像头使用的第二拾 音器，所述拾音器采集摄像头前方的音频； 步骤5：提供一第一显示装置和一第二显示装置，将所述第一拾音器采集的音频与所 述合成的图像发送到所述第二显示装置进行实时同步播放，将所述第二拾音器采集的音频 与所述合成的图像发送到所述第一显示装置进行实时同步播放。 0006 在本发明一实施例中，所述虚拟三维背景是由一服务器提供，该服务器负责所述 的。
9、合成任务以及合成后的数据存储与发送。 0007 在本发明一实施例中，所述的第一摄像头、第一拾音器和第一显示装置组成一第 一客户端，所述的第二摄像头、第二拾音器和第二显示装置组成第二客户端，该第一客户端 与该第二客户端经网络与所述服务器连接。 0008 在本发明一实施例中，所述第一客户端和第二客户端的用户通过各自账号登陆， 由所述服务器进行验证，验证成功后进行联网对接。 0009 在本发明一实施例中，所述的第一客户端和第二客户端是一配有拾音器和摄像头 的计算机。 0010 在本发明一实施例中，所述的数据包括图像数据和视频数据。 0011 在本发明一实施例中，所述虚拟三维背景存储于该服务器中，其能。
10、供用户自由选 说 明 书CN 102625129 A 2/3页 4 择。 0012 在本发明一实施例中，所述虚拟三维背景是由所述第一摄像头或第二摄像头采集 的现场景象。 0013 在本发明一实施例中，所述显示装置显示的合成视频图像中的人物可选，当用户 选择对应的人物时，该显示装置仅播放该人物所用客户端采集的音频，实现点对点或一点 对多点的融合应用和自由交流。 0014 在本发明一实施例中，所述的显示装置具备画中画显示或多对话框显示，系统根 据用户指令，能将多人交流场景中，以画中画或多对话框的形式显示和播放指定人物的视 频,可以实现远程虚拟合成录像,方便参会者的记录和查看会议资料,实现会议与视频。
11、的 全程存储。 0015 本发明通过图像抠取虚拟合成，然后显示给用户，该方法适合远程视频会议，与亲 人见面或一切因故参加无法现场直播，虚拟到位参与等方面的应用，为用户提供亲临现场 的感觉，提高了人与人之间的远程互动性，具有较好的实用价值。 附图说明 0016 图1是本发明方法的流程示意图。 0017 图2是本发明系统架构原理示意图。 具体实施方式 0018 下面结合附图及实施例对本发明做进一步说明。 0019 请参见图1，图1是本发明方法的流程示意图。本实施例提供一种远程真人三维虚 拟仿场景互动的实现方法，其包括以下步骤： 步骤1：提供一虚拟三维背景，该虚拟三维背景可以具有图层结构，以利系统抠。
12、图； 步骤2：提供一第一摄像头和第二摄像头，各自捕捉该摄像头视角范围内的景象，所述 景象的背景采用单一纯色的背景； 步骤3：抠取所述景象内的人物图像，并将抠取的人物图像与所述虚拟三维背景进行 合成； 步骤4：提供一配合第一摄像头使用的第一拾音器和一配合第二摄像头使用的第二拾 音器，所述拾音器采集摄像头前方的音频； 步骤5：提供一第一显示装置和一第二显示装置，将所述第一拾音器采集的音频与所 述合成的图像发送到所述第二显示装置进行实时同步播放，将所述第二拾音器采集的音频 与所述合成的图像发送到所述第一显示装置进行实时同步播放。根据上述步骤，本发明将 两个摄像头采集的人像合成到一虚拟背景中，然后通过。
13、显示装置进行播放，即使通信的双 方相隔很远，都会带来共聚一处的感觉，增强了互动性。 0020 下面为了让一般技术人员更好的理解本发明，我们对该方法做进一步说明。本实 施例中，为了更好的施行该方法，所述的虚拟三维背景可由一服务器提供，该服务器主要负 责所述的合成任务以及合成后的数据存储与发送。请参照图2，图中，该第一摄像头2、第一 拾音器和第一显示装置1组成一第一客户端，所述的第二摄像头6、第二拾音器和第二显示 装置7组成第二客户端，该第一客户端与该第二客户端经网络与所述服务器连接。图中，摄 说 明 书CN 102625129 A 3/3页 5 像头视角范围内的背景3我们采用单一纯色的背景，这样。
14、摄像头采集到图片信息后，传输 给服务器，服务器能根据图像的颜色进行高效抠图，并把抠取后的人像与所述的虚拟背景 融合。较佳的，所述的第一客户端和第二客户端可以是配有拾音器和摄像头的计算机，该计 算机可以使台式电脑或手提电脑，这样用户通过各自账号登陆，由所述服务器进行验证，验 证成功后进行联网对接。用户通过计算机发送指令，可调取服务器存储的数据，该数据包括 图像数据和视频数据。这样用户可以实现远程虚拟合影，如果是视频会议，还可以在事后， 通过指令向服务器对该虚拟会议进行调取播放。 0021 值得一提的是，本发明所述的虚拟三维背景存储于该服务器中，其能根据用户的 需求自由选择。较佳的，用户还可以自行。
15、上传由所述第一摄像头或第二摄像头采集的现场 景象作为虚拟背景。例如，两个公司开远程会议，其中一个客户端采集其中一个会议室的场 景上传到服务器，服务器会将抠取的人像与该会议室场景进行融合，然后配合拾音器采集 的音频数据在双方的一显示器上实时播放，本发明改变了以往会议只能看到对方或者只能 语音通讯的缺点，更为真实的模拟了现场会议。本发明这里仅以两个客户为例，根据本发 明的方法，其还可以多个用户同时进行使用，即抠取多个客户的人像，在同一背景里进行合 成，再实时显示。 0022 为了让方法更为人性化，我们采用的显示装置显示的合成视频图像中的人物可 选，如果显示屏是触摸显示频，则用户可通过触摸选择对应的。
16、人物，如果是鼠标或遥控器操 控的，则可通过该鼠标或遥控器进行选择，选中后该显示装置仅播放该人物所用客户端采 集的音频，实现点对点或一点对多点的融合应用和自由交流。 0023 在本发明另一实施例中，我们还以利用显示装置的功能，即具备画中画显示或多 对话框显示，系统根据用户指令，能将多人交流场景中，以画中画或多对话框的的形式显示 和播放指定人物的视频。 0024 为了方便采集图像，本实施例中，所述的摄像头我们采用云台摄像机，这样用户可 以方便的进行联动控制，例如，一方客户想观察会议的某个角落，可以根据指令控制对方的 云台摄像机转动到相应的位置进行采集。 0025 此外，本发明的方法还可以用于与亲人。
17、见面或一切因故参加无法现场直播，虚 拟到位参与等方面。本发明利用于会议系统，可以落实贯彻各种精神，完成上传下达、提高 现有办公效率，成为该行业信息化建设的任务重点。作为企业的最宝贵财富，员工业务能力 不断提高是企业成长的前提，内部培训的重要性也为企业所重视。通过系统可以随时随地 的进行异地培训，无需地点和场地的限制，通过系统强大的音视频和数据共享功能，完全满 足远程培训的各种课件共享、投票、互动问答等需求，并可以通过录制保存培训资料，以备 新学员随时学习。另外，企业人力资源部门的人才招聘同样可以利用系统来进行，招聘方和 面试者在异地通过音视频的通话互动，完全模拟真实招聘现场，便捷整个招聘过程。 0026 以上所述仅为本发明的较佳实施例，凡依本发明申请专利范围所做的均等变化与 修饰，皆应属本发明的涵盖范围。 说 明 书CN 102625129 A 1/2页 6 图1 说 明 书 附 图CN 102625129 A 2/2页 7 图2 说 明 书 附 图CN 102625129 A 。