《一种基于图片识别显示咨询信息的方法和系统.pdf》由会员分享，可在线阅读，更多相关《一种基于图片识别显示咨询信息的方法和系统.pdf（9页珍藏版）》请在专利查询网上搜索。
1、(10)申请公布号 CN 103678305 A (43)申请公布日 2014.03.26 CN 103678305 A (21)申请号 201210318666.2 (22)申请日 2012.08.31 G06F 17/30(2006.01) G06K 9/00(2006.01) (71)申请人 北京网秦天下科技有限公司 地址 100013 北京市东城区和平里东街 11 号院 4 号楼 (72)发明人 邹仕洪 曾阳 (74)专利代理机构 中科专利商标代理有限责任 公司 11021 代理人 赵伟 (54) 发明名称 一种基于图片识别显示咨询信息的方法和系 统 (57) 摘要 本发明提供了一种基。
2、于图片识别显示咨询信 息的方法和系统， 用于包含摄像头模块和显示模 块的移动终端， 所述方法包括 ： 输入步骤， 所述移 动终端通过摄像头模块拍摄标识物图片， 并将所 述标识物图片上传至服务器端 ； 识别处理步骤， 所述服务器端对所述标识物图片进行文字识别、 比对， 并进行信息搜索， 获得咨询信息。本发明能 够根据用户拍的照片识别出对应的标识物， 并且 通过服务器端对图片内容进行搜索， 并不断修正， 获取到丰富的咨询信息， 让结果越来越接近用户 的需求。 (51)Int.Cl. 权利要求书 1 页 说明书 4 页 附图 3 页 (19)中华人民共和国国家知识产权局 (12)发明专利申请 权利要。
3、求书1页 说明书4页 附图3页 (10)申请公布号 CN 103678305 A CN 103678305 A 1/1 页 2 1. 一种基于图片识别显示咨询信息的方法， 用于包含摄像头模块和显示模块的移动终 端， 其特征在于， 所述方法包括 ： 输入步骤， 所述移动终端通过摄像头模块拍摄标识物图片， 并将所述标识物图片上传 至服务器端 ； 识别处理步骤， 所述服务器端对所述标识物图片进行文字识别、 比对， 并进行信息搜 索， 获得咨询信息。 2.根据权利要求1所述的方法， 其特征在于， 所述摄像头模块包括前置摄像头和/或后 置摄像头。 3. 根据权利要求 1 所述的方法， 其特征在于， 所述。
4、标识物包括 ： 建筑物、 景观、 名片、 标 签。 4. 根据权利要求 1 所述的方法， 其特征在于， 所述识别处理步骤进一步包括 ： 图文处理步骤， 如果所述标识物图片中包含有图标或文字信息， 则从所述标识物图片 中检测出图标和文字信息， 否则直接执行比对识别步骤 ； 比对识别步骤， 依据所述图标、 文字信息和 / 或标识物图片， 在所述服务器端进行搜 索、 比对识别出与所述图标、 文字信息和 / 或标识物图片对应的咨询信息。 5. 根据权利要求 4 所述的方法， 其特征在于， 所述咨询信息包括 ： 建筑物资料、 景观介 绍、 公司详情、 商品信息。 6. 一种基于图片识别显示咨询信息的系统。
5、， 用于包含摄像头模块和显示模块的移动终 端， 其特征在于， 所述系统包括 ： 移动终端、 服务器端， 所述移动终端包括 ： 输入模块， 用于移动终端通过摄像头模块拍摄标识物图片， 并将所 述标识物图片上传至服务器端 ； 所述服务器端包括 ： 通讯模块、 识别处理单元， 所述通讯模块， 用于接收所述移动终端发送的标识物图片数据， 并将所述识别处理单 元获得的咨询信息发送到所述移动终端 ； 所述识别处理单元， 用于对所述移动终端发送的所述标识物图片进行文字识别、 比对， 并进行信息搜索， 获得咨询信息。 7.根据权利要求6所述的系统， 其特征在于， 所述摄像头模块包括前置摄像头和/或后 置摄像头。
6、。 8. 根据权利要求 6 所述的系统， 其特征在于， 所述标识物包括 ： 建筑物、 景观、 名片、 标 签。 9. 根据权利要求 6 所述的系统， 其特征在于， 所述识别处理单元进一步包括 ： 图文处理模块， 用于如果所述标识物图片中包含有文字信息， 则从所述标识物图片中 检测出图标和文字信息 ； 比对识别模块， 用于依据所述图标、 文字信息和 / 或标识物图片， 在所述服务器端进行 搜索、 比对识别出与所述图标、 文字信息和 / 或标识物图片对应的咨询信息。 10. 根据权利要求 9 所述的系统， 其特征在于， 所述咨询信息包括 ： 建筑物资料、 景观介 绍、 公司详情、 商品信息。 权 。
7、利 要 求 书 CN 103678305 A 2 1/4 页 3 一种基于图片识别显示咨询信息的方法和系统 技术领域 0001 本发明属于移动通讯领域， 尤其涉及一种基于图片识别显示咨询信息的方法和系 统。 背景技术 0002 目前， 人们对信息的搜集往往是通过文字搜索或者语音搜索技术来获取相应的内 容， 但是在很多场景下， 用户需要更加精确的信息来源， 传统的搜索技术无法满足人们的需 求， 并且随着移动互联网的发展， 搜索技术从文字、 语音逐渐往图像识别发展， 人们更加喜 欢简洁易用并富有人性化的搜索方式， 而图像搜索作为一种更加符合大多数人思维模式的 搜索方式， 越来越成为迫切的需求， 从。
8、用户体验上讲比文字和语音搜索都要好。 发明内容 0003 有鉴于此， 本发明的目的是提供一种基于图片识别显示咨询信息的方法和系统， 能够根据用户拍的照片识别出对应的标识物， 能从服务器端不断优化搜索策略， 能更好地 改进搜索策略， 让用户有更好的搜索体验。 0004 本发明提供一种基于图片识别显示咨询信息的方法， 用于包含摄像头模块和显示 模块的移动终端， 该方法包括 ： 0005 输入步骤， 所述移动终端通过摄像头模块拍摄标识物图片， 并将所述标识物图片 上传至服务器端 ； 0006 识别处理步骤， 所述服务器端对所述标识物图片进行文字识别、 比对， 并进行信息 搜索， 获得咨询信息。 00。
9、07 根据上述的方法， 其中， 所述摄像头模块包括前置摄像头和 / 或后置摄像头。 0008 根据上述的方法， 其中， 所述标识物包括 ： 建筑物、 景观、 名片、 标签。 0009 根据上述的方法， 其中， 所述识别处理步骤进一步包括 ： 0010 图文处理步骤， 如果所述标识物图片中包含有图标或文字信息， 则从所述标识物 图片中检测出图标和文字信息， 否则直接执行比对识别步骤 ； 0011 比对识别步骤， 依据所述图标、 文字信息和 / 或标识物图片， 在所述服务器端进行 搜索、 比对识别出与所述图标、 文字信息和 / 或标识物图片对应的咨询信息。 0012 根据上述的方法， 其中， 所述。
10、咨询信息包括 ： 建筑物资料、 景观介绍、 公司详情、 商 品信息。 0013 本发明提供一种基于图片识别显示咨询信息的系统， 用于包含摄像头模块和显示 模块的移动终端， 该系统包括 ： 移动终端、 服务器端， 0014 所述移动终端包括 ： 输入模块， 用于移动终端通过摄像头模块拍摄标识物图片， 并 将所述标识物图片上传至服务器端 ； 0015 所述服务器端包括 ： 通讯模块、 识别处理单元， 0016 所述通讯模块， 用于接收所述移动终端发送的标识物图片数据， 并将所述识别处 说 明 书 CN 103678305 A 3 2/4 页 4 理单元获得的咨询信息发送到所述移动终端 ； 0017。
11、 所述识别处理单元， 用于对所述移动终端发送的所述标识物图片进行文字识别、 比对， 并进行信息搜索， 获得咨询信息。 0018 根据上述的系统， 其中， 所述摄像头模块包括前置摄像头和 / 或后置摄像头。 0019 根据上述的系统， 其中， 所述标识物包括 ： 建筑物、 景观、 名片、 标签。 0020 根据上述的系统， 其中， 所述识别处理单元进一步包括 ： 0021 图文处理模块， 用于如果所述标识物图片中包含有文字信息， 则从所述标识物图 片中检测出图标和文字信息 ； 0022 比对识别模块， 用于依据所述图标、 文字信息和 / 或标识物图片， 在所述服务器端 进行搜索、 比对识别出与所。
12、述图标、 文字信息和 / 或标识物图片对应的咨询信息。 0023 根据上述的系统， 其中， 所述咨询信息包括 ： 建筑物资料、 景观介绍、 公司详情、 商 品信息。 0024 本发明提供的一种基于图片识别显示咨询信息的方法和系统， 能够根据用户拍的 照片识别出对应的标识物， 并且通过服务器端对图片内容进行搜索， 并不断修正， 获取到丰 富的咨询信息， 让结果越来越接近用户的需求。 附图说明 0025 为了更清楚地说明本发明实施例或现有技术中的技术方案， 下面将对实施例或现 有技术描述中所需要使用的附图作简单的介绍。显而易见地， 下面描述中的附图仅仅是本 发明的一些实施例， 对于本领域内普通技术。
13、人员来说， 在不付出创造性劳动的前提下， 还可 以根据这些附图获得其他的附图。在附图中 ： 0026 图 1 是根据本发明实施例的显示咨询信息的方法流程图 ； 0027 图 2 是根据本发明实施例的显示咨询信息的具体方法流程图 ； 0028 图 3 是根据本发明实施例的服务器端获取咨询信息的处理流程图 ； 以及 0029 图 4 是根据本发明实施例的显示咨询信息的系统框图。 具体实施方式 0030 为了使本发明实施例的目的、 技术方案和优点更加清楚明白， 下面结合附图对本 发明实施例做进一步详细说明。 在此， 本发明的示意性实施例及其说明用于解释本发明， 但 并不作为对本发明的限定。 0031。
14、 参见图 1， 本实施例的提供的显示咨询信息的方法流程图， 包括以下步骤 ： 0032 步骤 110， 输入步骤， 移动终端通过摄像头模块拍摄标识物图片， 并将标识物图片 上传至服务器端。 0033 步骤 120， 识别处理步骤， 服务器端对标识物图片进行文字识别、 比对， 并进行信息 搜索， 获得咨询信息。 0034 本发明的移动终端包括 ： 手机、 平板电脑等智能移动终端， 具备有摄像头模块， 并 能进行基本拍摄操作， 在以下实施例中以手机为例对显示咨询信息的方法进行详细描述。 0035 参见图 2， 根据本发明实施例的显示咨询信息的具体方法流程图， 具体如下所述 ： 0036 步骤 21。
15、0， 启动手机客户端， 同时启动手机的摄像头， 拍摄标识物图片。 说 明 书 CN 103678305 A 4 3/4 页 5 0037 用户在遇到需要进行了解的标识物时， 可以通过手机来拍摄该标识物的图片， 其 中， 标识物包括但不限于 ： 建筑物、 景观、 名片、 标签等， 比如， 用户在旅游时参观了 “埃菲尔 铁塔” ， 很想要了解关于 “埃菲尔铁塔” 的一些资料， 这时用户可以先通过手机对其进行拍 照。其中， 手机的摄像头包括 ： 前置摄像头、 后置摄像头。 0038 步骤 220， 手机客户端对手机拍摄的标识物图片进行保存， 完成信息的采集。 0039 步骤 230， 手机客户端将标。
16、识物图片上传到服务器端。 0040 步骤 240， 服务器端对标识物图片进行文字识别、 比对， 并进行信息搜索， 将获得的 标识物图片对应的咨询信息返回给移动终端。 0041 服务器端对标识物图片进行处理后获得咨询信息的过程具体如图 3， 根据本发明 实施例的服务器端获取咨询信息的处理流程图， 步骤进一步包括 ： 0042 步骤310， 服务器端接收手机上传的标识物图片数据。 如果标识物图片中包含有图 标或文字信息， 需要进行进一步的处理， 则执行步骤 320， 否则执行步骤 330。 0043 步骤 320， 服务器端从标识物图片中检测出图标和文字信息。 0044 首先， 服务器端依据标识物。
17、图片按照一定方法 （如基于颜色的连通分量方法） 或算 法 （如基于纹理的分割算法） 检测出其中包含的图标和文字区域 ； 然后， 将文字区域的文字 图像从画面背景中分割出来得到文字图像信息， 服务器端依据文字图像信息与文字库进行 比对识别， 依据文字图像信息中文字的笔画特征与文字库进行比对， 检索出最相似字形的 文字 ； 最后， 对比对识别结果进行分类、 整理后获得图标和文字信息。 其中， 文字库包括但不 限于 ： 汉字、 字母、 数字等， 服务器端的文字库还可以定期从网络上进行下载更新。 0045 步骤 330， 根据图标、 文字信息和 / 或标识物图片， 在服务器端进行搜索， 比对识别 出与。
18、图标、 文字信息和 / 或标识物图片对应的咨询信息。 0046 服务器端可以预先采集并建立标识物资料数据库， 通过比对可以识别出当前图 标、 文字信息和 / 或标识物图片的准确内容， 再通过服务器搜索出对应的咨询信息， 该咨询 信息包括但不限于 ： 建筑物资料、 景观介绍、 公司详情、 商品信息等， 具体可以包括 ： 建筑物 的历史背景和地理交通， 景观的特色介绍和地理交通， 公司 Logo、 网址和相关新闻链接， 商 品名称、 类型和打折信息等， 比如 ： 服务器端通过比对 “埃菲尔铁塔” 的图片， 搜索出 “埃菲尔 铁塔” 的历史背景和地理位置介绍， 以及交通情况。 0047 如果在服务器。
19、端没有识别到图标、 文字信息和 / 或标识物图片的准确内容， 可以 通过网络进行检索。 0048 步骤 340， 服务器端将咨询信息返回给移动终端。 0049 实际使用过程中， 如果服务器端进行搜索后并没有相匹配的咨询信息， 则返回咨 询信息为空， 并提示用户 “没有找到相关信息” 。 0050 步骤 250， 移动终端收到服务器端返回的咨询信息， 用户可选择显示需要的信息。 0051 收到返回的咨询信息后， 手机可通过显示屏进行显示， 用户可以通过选择建筑物 资料、 景观介绍、 公司详情、 商品信息来获取需要的信息。比如 ： 0052 选择建筑物资料， 用户可了解建筑物的历史背景、 地理位置。
20、、 交通情况， 并可实现 导航功能 ； 0053 选择景观介绍， 用户可了解标识物图片中景观的特色介绍、 地理位置、 交通情况， 并可实现导航功能 ； 说 明 书 CN 103678305 A 5 4/4 页 6 0054 选择公司详情， 用户可了解名片上公司 Logo 对应的公司名称地址、 公司网址、 相 关新闻链接 ； 0055 选择商品信息， 用户可了解标签对应商品的名称、 类型、 价格和打折信息等。 0056 图 4 是本实施例提供的显示咨询信息的系统框图， 用于包含摄像头模块 410 和显 示模块 420 的移动终端 400a， 该系统 400 包括 ： 移动终端 400a、 服务器。
21、端 400b， 本实施例中 所说的摄像头模块 410 包括前置摄像头和 / 或后置摄像头。 0057 移动终端 400a 包括 ： 输入模块 430， 用于移动终端 400a 通过摄像头模块 410 拍摄 标识物图片， 并将标识物图片上传至服务器端 400b， 其中， 标识物包括但不限于 ： 建筑物、 景观、 名片、 标签等。 0058 服务器端 400b 包括 ： 通讯模块 440， 用于接收所述移动终端 400a 发送的标识物图 片数据， 并将识别处理单元 450 获得的咨询信息发送到移动终端 400a ； 识别处理单元 450， 用于对移动终端 400a 发送的标识物图片进行文字识别、 。
22、比对， 并进行信息搜索， 获得咨询 信息。 0059 在本实施例中， 识别处理单元 450 进一步包括 ： 0060 图文处理模块 450a， 用于如果标识物图片中包含有文字信息， 则从标识物图片中 检测出图标和文字信息。首先， 图文处理模块 450a 依据标识物图片按照一定方法 （如基于 颜色的连通分量方法） 或算法 （如基于纹理的分割算法） 检测出其中包含的图标和文字区 域 ； 然后， 将文字区域的文字图像从画面背景中分割出来得到文字图像信息， 图文处理模块 450a 依据文字图像信息与文字库进行比对识别， 依据文字图像信息中文字的笔画特征与文 字库进行比对， 检索出最相似字形的文字 ； 。
23、最后， 对比对识别结果进行分类、 整理后获得图 标和文字信息。其中， 文字库包括但不限于 ： 汉字、 字母、 数字等， 服务器端的文字库还可以 定期从网络上进行下载更新 ； 0061 比对识别模块450b， 用于依据图标、 文字信息和/或标识物图片， 在服务器端400b 进行搜索、 比对识别出与图标、 文字信息和 / 或标识物图片对应的咨询信息。 0062 本实施例中， 咨询信息包括但不限于 ： 建筑物资料、 景观介绍、 公司详情、 商品信 息等， 具体可以包括 ： 建筑物的历史背景和地理交通， 景观的特色介绍和地理交通， 公司 Logo、 网址和相关新闻链接， 商品名称、 类型和打折信息等。。
24、 0063 如果在服务器端没有识别到图标、 文字信息和 / 或标识物图片的准确内容， 可以 通过网络进行检索。 0064 以上所述的具体实施例， 对本发明的目的、 技术方案和有益效果进行了进一步详 细说明， 所应理解的是， 以上所述仅为本发明的具体实施例而已， 并不用于限定本发明的保 护范围， 凡在本发明的精神和原则之内， 所做的任何修改、 等同替换、 改进等， 均应包含在本 发明的保护范围之内。 说 明 书 CN 103678305 A 6 1/3 页 7 图 1 图 2 说 明 书 附 图 CN 103678305 A 7 2/3 页 8 图 3 说 明 书 附 图 CN 103678305 A 8 3/3 页 9 图 4 说 明 书 附 图 CN 103678305 A 9 。