一种根据远程图像识别管理冰箱食品列表的方法.pdf

本发明公开了一种根据远程图像识别管理冰箱食品列表的方法，其特征是：在冰箱的搁架及瓶框各处内置摄像头，通过多重触发方式，启动摄像头程序运行，依次调用摄像头进行拍摄，冰箱系统将图片传输数据到云端服务器，启动图像识别软件，将云端服务器的图片数据转化为食品数据信息，并回传数据到冰箱系统和移动终端，当软件识别失败时，可由后台服务终端进行辅助识别，若仍识别失败，则通过发送提示到冰箱系统和移动终端。本发明能自动化自动生成食品列表，从而提高冰箱智能化水平，提升用户体验。

权利要求书
1.  一种根据远程图像识别管理冰箱食品列表的方法，其特征是应用于包含云端服务器、移动终端和后台服务终端的网络环境中，所述云端服务器存储有云端食品图片数据库，所述方法是按如下步骤进行：
步骤1、在冰箱的搁架及瓶框各处内置摄像头，并通过多重触发方式向冰箱系统发送触发信号，用于启动摄像头程序运行；
步骤2、冰箱系统接收触发信号，并启动摄像头程序运行，依次调用各个摄像头对冰箱内部进行拍照，获取若干图片数据；
步骤3、完成拍照后，冰箱系统上传所述若干图片数据到云端服务器进行存储；
步骤4、云端服务器接收到所述若干图片数据，并启动图像识别软件依次进行识别处理，若识别成功，则将获得的识别结果分别与所述云端食品图片数据库中的数据进行一一比对，并筛选出相似度大于90％的识别结果所表示的食品数据发送到所述冰箱系统或/和移动终端的显示界面；若识别失败，则将识别失败的图片数据发送到后台服务终端进行辅助识别；若辅助识别成功，则获得的识别结果所表示的食品数据输出到冰箱系统或/和移动终端的显示界面；若辅助识别失败，则发送提示信息到冰箱系统或/和移动终端的显示界面；
步骤5、冰箱系统或/和移动终端的显示界面接收所述食品数据或提示消息进行实时显示。

2.  根据权利要求1所述的根据远程图像识别管理冰箱食品列表的方法，其特征是：所述摄像头可安装在冰箱的箱体侧面、背面、门体上；且每层搁架或者保鲜盒中至少分配一个摄像头，并通过HUB板连接到冰箱系统中。

3.  根据权利要求1所述的根据远程图像识别管理冰箱食品列表的方法，其特征是：所述多重触发方式可以是：冰箱门开关触发、移动终端远程触发、手动触发、定时触发中至少一种触发方式。

4.  根据权利要求1所述的根据远程图像识别管理冰箱食品列表的方法，其特征是：所述辅助识别包括图像识别软件进一步识别和/或人工辅助识别。

说明书一种根据远程图像识别管理冰箱食品列表的方法
技术领域
本发明涉及智能家电领域，具体地说是一种根据远程图像识别管理冰箱食品列表的方法。
背景技术
随着家电智能化的发展，冰箱也开始智能化，日益繁忙的人们经常去超市购物时想不起来家里冰箱有什么食品，因而造成重复购买或者漏买食品，目前的智能冰箱在管理食品方面一般采用手动、语音、条码等方式，都需要用户手动操作录入信息，从而生成食品列表，操作繁琐，且改变了用户的使用习惯，没有很好的体验感。
发明内容
本发明是为避免上述现有技术所存在的不足之处，提供一种根据远程图像识别管理冰箱食品列表的方法，以期能自动化自动生成食品列表，从而提高冰箱智能化水平，提升用户体验。
本发明为解决技术问题采用如下技术方案：
本发明一种根据远程图像识别管理冰箱食品列表的方法的特点是应用于包含云端服务器、移动终端和后台服务终端的网络环境中，所述云端服务器存储有云端食品图片数据库，所述方法是按如下步骤进行：
步骤1、在冰箱的搁架及瓶框各处内置摄像头，并通过多重触发方式向冰箱系统发送触发信号，用于启动摄像头程序运行；
步骤2、冰箱系统接收触发信号，并启动摄像头程序运行，依次调用各个摄像头对冰箱内部进行拍照，获取若干图片数据；
步骤3、完成拍照后，冰箱系统上传所述若干图片数据到云端服务器进行存储；
步骤4、云端服务器接收到所述若干图片数据，并启动图像识别软件依次进行识别处理，若识别成功，则将获得的识别结果分别与所述云端食品图片数据库中的数据进行一一比对，并筛选出相似度大于90％的识别结果所表示的食品数据发送到所述冰箱系统或/和移动终端的显示界面；若识别失败，则将识别失败的图片数据发送到后台服务终端进行辅助识别；若辅助识别成功，则获得的识别结果所表示的食品数据输出到冰箱系统或/和移动终端的显示界面；若辅助识别失败，则发送提示信息到冰箱系统或/和移动终端的显示界面；
步骤5、冰箱系统或/和移动终端的显示界面接收所述食品数据或提示消息进行实时显示。
本发明所述的根据远程图像识别管理冰箱食品列表的方法的特点也在于：
所述摄像头可安装在冰箱的箱体侧面、背面、门体上；且每层搁架或者保鲜盒中至少分配一个摄像头，并通过HUB板连接到冰箱系统中。
所述多重触发方式可以是：冰箱门开关触发、移动终端远程触发、手动触发、定时触发中至少一种触发方式。
所述辅助识别包括图像识别软件进一步识别和/或人工辅助识别。
与已有技术相比，本发明的有益效果体现在：
本发明采用摄像头装置能实时采集冰箱内部食品存放情况，并通过云端服务器所带有的图像识别软件进行自动识别，获得冰箱内部真实食品库存信息并发送到用户手机或冰箱显示面板上，从而使得用户将食品放入冰箱后，无需再手动操作，即可远程查看或直接查看和管理冰箱食品，避免了重复购买和漏买食品，方便快捷，不改变用户的使用习惯，用户体验感良好。
附图说明
图1为本发明系统构成框图；
图2为本发明系统控制流程示意图；
图3为本发明系统摄像头安装结构的一个实施例。
具体实施方式
如图1所示，本实施例中，一种根据远程图像识别管理冰箱食品列表的方法，是应用于包含云端服务器、移动终端和后台服务终端的网络环境中，云端服务器存储有云端食品图片数据库，如图2所示，其方法按如下步骤进行：
步骤1、在冰箱的每层搁架及瓶框各处内置一个或者多个摄像头，并通过多重触发方式向冰箱系统发送触发信号，用于启动摄像头程序运行；如图3所示，具体实施中，摄像头可安装在冰箱的箱体侧面、背面、门体上；且每层搁架或者保鲜盒中至少分配一个摄像头，并通过HUB板连接到冰箱系统中；而多重触发方式可以是：冰箱门开关触发、移动终端远程触发、手动触发、定时触发中至少一种触发方式；
步骤2、冰箱系统接收触发信号，触发信号可能是门开关、冰箱界面手动触发或者手机端触发中的任意一种，并发送指令启动摄像头程序运行，依次调用各个摄像头对冰箱内部进行拍照，获取若干图片数据；
步骤3、完成拍照后，冰箱系统上传若干图片数据到云端服务器进行存储；
步骤4、云端服务器接收到若干图片数据，并启动图像识别软件依次进行识别处理，若识别成功，则将获得的识别结果分别与云端食品图片数据库中的数据进行一一比对，并筛选出相似度大于90％的识别结果所表示的食品数据发送到冰箱系统或/和移动终端的显示界面； 若识别失败，则将识别失败的图片数据发送到后台服务终端进行辅助识别；辅助识别包括图像识别软件进一步识别和/或人工辅助识别；后台服务终端所配备的人工服务，可以是专业人员进行辅助识别，也可以是用户进行人工识别，若辅助识别成功，则获得的识别结果所表示的食品数据输出到冰箱系统或/和移动终端的显示界面；若辅助识别失败，则发送提示信息到冰箱系统或/和移动终端的显示界面；
步骤5、冰箱系统或/和移动终端的显示界面接收食品数据或提示消息进行实时显示。