基于物联网交互式无接触心理检测治疗装置、系统及方法.pdf

1、(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 (43)申请公布日 (21)申请号 201711282013.2 (22)申请日 2017.12.07 (71)申请人 江苏大学 地址 212013 江苏省镇江市京口区学府路 301号 (72)发明人 邹荣 杜法宝 慕亚芹 杨萌 许桢英 王匀 (51)Int.Cl. A61B 5/16(2006.01) (54)发明名称 基于物联网交互式无接触心理检测治疗装 置、 系统及方法 (57)摘要 本发明公开了一种基于物联网的交互式无 接触心理状况检测治疗系统及方法， 包括智能心 理状况检测治疗装置、 云计算/存储平台、

2、专家端 远程智能终端设备。 所述智能心理状况检测治疗 装置由彩色CCD摄像机、 红外热成像仪、 麦克风阵 列、 音响系统、 紧固件， 保护前盖， 半透半反镜、 LCD液晶屏、 嵌入式智能控制处理系统及后盖组 成， 通过专属或共享方式提供给用户使用。 所述 专家端远程智能终端设备由心理专家及医生在 远程使用， 用于接入云计算/存储平台与用户进 行信息交互。 所述云计算/存储平台对用户心理 和生理数据信息进行存储形成大数据并通过云 计算分析， 实现数据共享和交换， 完成对整个系 统的控制和管理， 实现用户心理状况的检测治 疗。 权利要求书3页 说明书8页 附图1页 CN 108245176 A 2

3、018.07.06 CN 108245176 A 1.基于物联网交互式无接触心理检测治疗装置， 其特征在于， 包括摄像设备、 红外热成 像仪(2)、 语音采集设备、 音响设备(4)、 保护前盖(6)、 半透反射镜(7)、 显示屏、 智能控制处 理器、 数据传送设备和后盖(9)； 所述保护前盖(6)、 半透反射镜(7)、 显示屏和后盖(9)依次布置； 保护前盖(6)和后盖 (9)紧固连接； 所述半透半反镜(7)用于在显示屏无信息显示时呈现为镜子， 显示屏有信息显示时则 透过半透半反镜(7)被用户看见； 所述智能控制处理器分别与摄像设备、 红外热成像仪(2)、 语音采集设备、 音响设备 (4)、

4、显示屏连接， 包括摄像设备控制模块、 红外热成像仪控制模块、 显示屏控制模块、 音响 设备控制模块、 语音采集设备控制模块、 数据传送设备控制模块、 心理题库智能管理与评定 分析模块、 语音检测分析模块、 心率检测分析模块、 呼吸检测分析模块、 体温检测分析模块、 局部动作检测分析模块和人脸及脸部表情检测分析模块； 所述摄像设备控制模块控制摄像设备采集用户的视频图像数据信息； 所述红外热成像 仪控制模块控制红外热成像仪(2)采集用户身体部位温度场视频图像数据信息； 所述音响 设备控制模块控制音响设备(4)播放音频数据信息； 所述语音采集设备控制模块控制语音 采集设备采集用户的语音数据信息； 所

5、述显示屏控制模块控制显示屏显示视频图像及文字 数据信息； 所述数据传送设备控制模块控制数据传送设备与云计算平台进行通信， 实现物 联网数据信息交互功能； 所述语音检测分析模块利用所采集的语音数据信息分析用户的相 对位置、 心理测试题目的回答结果、 语速变化、 语调变化和音量变化； 所述心率检测分析模 块利用所采集的视频图像数据信息分析用户的心率及心率变异性、 女性生理期， 并根据采 集用户身体部位视频图像数据信息中的脉搏波动态信息得到血压变化情况； 所述人脸及脸 部表情检测分析模块根据所采集的视频图像数据信息分析用户的表情变化、 五官容貌、 瞳 孔位置及大小变化、 年龄和性别； 所述局部动作检

6、测分析模块根据所采集的视频图像数据 信息分析用户身体局部微小动作改变、 动作及手势识别、 肢体缺陷及残疾情况； 所述体温检 测分析模块利用所采集的身体部位温度场视频图像数据信息分析用户的面部及肢体温度 场变化情况， 并根据热流温度场分布获取血氧浓度变化情况； 所述呼吸检测分析模块根据 所采集的身体部位温度场视频图像数据信息分析用户的呼吸率及呼吸状态的改变； 所述心 理题库智能管理与评定分析模块用于控制心理测试题库的更新与题目选择和显示播放方 式。 2.根据权利要求1所述的基于物联网交互式无接触心理检测治疗装置， 其特征在于， 所 述智能控制处理器还包括治疗辅助模块； 所述治疗辅助模块包括智能音

7、频播放单元和智能 服药提醒单元。 3.根据权利要求1所述的基于物联网交互式无接触心理检测治疗装置， 其特征在于， 所 述摄像设备为彩色CCD摄像机(1)， 用于采集用户的彩色视频图像数据信息。 4.根据权利要求1所述的基于物联网交互式无接触心理检测治疗装置， 其特征在于， 所 述显示屏为LCD液晶屏(8)。 5.一种根据权利要求2所述基于物联网交互式无接触心理检测治疗装置的心理状态检 测系统， 其特征在于， 包括所述基于物联网交互式无接触心理检测治疗装置、 云计算平台、 专家端远程智能终端设备； 权 利 要 求 书 1/3 页 2 CN 108245176 A 2 所述基于物联网交互式无接触心

8、理检测治疗装置通过数据传送设备与云计算平台进 行通信， 云计算平台与专家端远程智能终端设备连接， 将用户的信息数据传送到所述专家 端远程智能终端设备； 所述专家端远程智能终端设备显示与用户相关的数据信息图像。 6.根据权利要求5所述基于物联网交互式无接触心理检测治疗装置的心理状态检测系 统， 其特征在于， 所述专家端远程智能终端设备为计算机或智能手机。 7.根据权利要求5所述基于物联网交互式无接触心理检测治疗装置的心理状态检测系 统， 其特征在于， 所述与用户相关的数据信息图像包括： 表示年龄、 性别、 女性生理期、 五官容貌、 肢体缺陷及残疾情况数据分析的图像； 表示基于心理测试题目回答结果

9、分析出的心理状态数据图像； 表示语速变化曲线的图像、 表示语调变化曲线的图像、 表示音量变化曲线的图像； 表示呼吸活动的图像； 表示身体局部微小动作改变的图像； 表示心率曲线的图像； 表示心率变异性曲线的图像； 表示心率变异性自相关曲线的图像； 表示血压和血氧浓度变化曲线的图像； 表示表情变化的图像； 表示面部及肢体温度场变化情况的图像、 瞳孔位置及大小变化情况的图像； 呼吸率及 呼吸状态变化曲线的图像； 表示心理测试题目显示播放的图像； 表示改善心理状态建议的图像。 8.一种基于权利要求5所述心理状态检测系统的心理状态信息检测方法， 其特征在于， 包括如下步骤： 步骤S1、 从基于物联网交互

10、式无接触心理检测治疗装置获得用户的生理数据信息； 步骤S2、 将所述生理数据信息导入心理状态判别模型进行心理状态自动判别； 步骤S3、 将所述心理状态判别结果和对应的生理数据信息上传至云计算平台中， 再由 所述云计算平台发送至远程访问的一个或更多个专家端远程智能终端设备； 步骤S4、 使用所述专家端远程智能终端设备的专家及医生采用共享模式， 用户可以自 主选择一个或更多个专家及医生进行交互， 而远程的专家及医生也可同时和多个用户通过 其各自的基于物联网交互式无接触心理检测治疗装置进行交互， 基于物联网交互式无接触 心理检测治疗装置的使用采用专属或共享模式； 步骤S5、 所述专家及医生通过与用户

11、进行交互， 并依据所述云计算平台发送的相关信 息对用户的心理状态进行确认或修改； 步骤S6、 所述云计算平台对用户建立相应账户， 将最终确认的心理状态结论以及所有 相关数据信息进行存储。 9.根据权利要求8所述心理状态检测系统的心理状态信息检测方法， 其特征在于， 还包 括以下步骤： 步骤S7、 与用户交互的所述专家及医生根据用户的心理状态结论共同商讨拟定治疗方 案， 并将治疗方案发送至所述云计算平台进行存储； 步骤S8、 所述云计算平台根据治疗方案定期发送音乐、 语音和视频至所述基于物联网 交互式无接触心理检测治疗装置； 权 利 要 求 书 2/3 页 3 CN 108245176 A 3

12、步骤S9、 所述基于物联网交互式无接触心理检测治疗装置通过治疗辅助模块实现智能 服药提醒和智能音视频播放。 10.根据权利要求9所述心理状态检测系统的心理状态信息检测方法， 其特征在于， 所 述心理状态判别模型由基于特征相关性原则的集成超限学习机构建， 其模型参数由所述云 计算平台利用大量用户生理数据信息进行训练确定， 所涉及方法的流程包括以下主要步 骤： 对用户的生理数据信息进行特征提取， 并利用随机森林算法对获得的特征进行相关性 排序， 基于袋装法原理随机抽取样本组合以及依据相关性原则划分特征组合， 保证相关性 强的特征在同一组合内， 对抽取的样本和特征的每一种组合建立一个超限学习机， 通

13、过建 立多个独立的超限学习机组合而成集成超限学习机， 经投票方式对心理状态进行判别。 权 利 要 求 书 3/3 页 4 CN 108245176 A 4 基于物联网交互式无接触心理检测治疗装置、 系统及方法 技术领域 0001 本发明涉及心理、 精神检测治疗领域， 具体涉及一种基于物联网的交互式无接触 心理状况检测治疗装置、 系统及方法。 背景技术 0002 人们在现实生活中会面对各种情绪困扰、 人际纠纷、 职场压力乃至婚姻家庭等诸 多心理问题， 如果处理不当， 不仅会影响个人的身心健康而且也给社会带来不安定因素。 调 查表明， 目前我国心理疾病患者数目已超过心血管疾病跃居首位。 心理疾病是

14、在心理出现 偏差时没有得到及时检测和救助， 发展成为精神类疾病。 0003 据保守估计， 中国大概有1.9亿人在一生中需要接受专业的心理检测或心理治疗。 我国心理咨询从业人员只有3000多名， 即每百万人中只有18名心理咨询师， 而美国现有心 理咨询师28万人， 每百万人口有550个心理专家。 另外， 我国心理咨询师中具有硕士和博士 学位的不足2， 而美国87以上具有心理学或哲学博士学位。 无论从数量和质量上， 我国 心理咨询师远远供不应求， 与发达国家相比更是相去甚远。 0004 此外， 国外居民出现一般心理问题时就会去检测和求助， 而国内多是已经出现了 严重心理问题或症状， 这主要是因为国

15、内居民觉得有心理问题是一件很见不得人的事情， 不愿去心理诊所或心理咨询机构， 而另一个原因是国内居民对心理咨询师的不信任， 不愿 完全倾述实情或接受心理咨询师上门服务。 0005 目前在市场领域也出现了可以人机互动的心理检测高科技产品， 但这类产品的弊 端就是单机运行， 缺少网络支持， 智能程度不够， 准确性和可靠性不足， 并且用户必须穿戴 陌生、 复杂的传感器并连接大量数据线， 在一定程度上影响了用户的心理状况， 造成检测结 果的不准确， 并且该类产品也缺乏心理疗愈功能。 0006 网络的发展给心理咨询提供了新的途径， 但目前的许多在线咨询还只能提供解释 疑惑、 商量讨论、 提出建议， 劝告

16、等一些初级的服务， 距离严格的心理检测与治疗有相当的 距离。 发明内容 0007 本发明的目的是针对上述问题提供一种基于物联网的交互式无接触心理状况检 测治疗装置、 系统及方法。 所述专家端远程智能终端设备由心理专家及医生在远程使用， 用 于接入云计算平台与用户进行信息交互。 所述云计算平台对用户心理和生理数据信息进行 存储形成大数据并通过云计算分析， 实现数据共享和交换， 完成对整个系统的控制和管理， 实现用户心理状况的检测， 并能根据心理专家及医生的治疗方案提供智能音频播放单元和 智能服药提醒单元的辅助功能。 0008 本发明的技术方案是： 一种基于物联网交互式无接触心理检测治疗装置， 包

17、括摄 像设备、 红外热成像仪、 语音采集设备、 音响设备、 保护前盖、 半透反射镜、 显示屏、 智能控制 处理器、 数据传送设备和后盖； 说 明 书 1/8 页 5 CN 108245176 A 5 0009 所述保护前盖、 半透反射镜、 显示屏和后盖依次布置； 保护前盖和后盖紧固连接； 0010 所述摄像设备、 红外热成像仪、 语音采集设备和音响设备分别安装在保护前盖上， 所述智能控制处理器嵌入在后盖里； 0011 所摄像设备用于采集用户的视频图像数据信息； 所述红外热成像仪用于采集用户 身体部位温度场视频图像数据信息； 所述语音采集设备用于采集用户的语音数据信息； 所 述音响设备用于播放音

18、频数据信息； 所述半透半反镜用于在显示屏无信息显示时呈现为镜 子， 显示屏有信息显示时则透过半透半反镜被用户看见； 所述显示屏用于显示视频图像及 文字数据信息； 所述数据传送设备用于与云计算平台进行通信， 实现物联网数据信息交互 功能； 0012 所述智能控制处理器分别与摄像设备、 红外热成像仪、 语音采集设备、 音响设备、 显示屏连接， 包括摄像设备控制模块、 红外热成像仪控制模块、 显示屏控制模块、 音响设备 控制模块、 语音采集设备控制模块、 数据传送设备控制模块、 心理题库智能管理与评定分析 模块、 语音检测分析模块、 心率检测分析模块、 呼吸检测分析模块、 体温检测分析模块、 局部

19、动作检测分析模块和人脸及脸部表情检测分析模块； 0013 所述摄像设备控制模块控制摄像设备采集用户的视频图像数据信息； 0014 所述红外热成像仪控制模块控制红外热成像仪采集用户身体部位温度场视频图 像数据信息； 0015 所述音响设备控制模块控制音响设备播放音频数据信息； 0016 所述语音采集设备控制模块控制语音采集设备采集用户的语音数据信息； 0017 所述显示屏控制模块控制显示屏显示视频图像及文字数据信息； 0018 所述数据传送设备控制模块控制数据传送设备与云计算平台进行通信， 实现物联 网数据信息交互功能； 0019 所述语音检测分析模块利用所采集的语音数据信息分析用户的相对位置、

20、 对心理 测试题目的回答结果、 语速变化、 语调变化和音量变化； 0020 所述心率检测分析模块利用所采集的视频图像数据信息分析用户的心率及心率 变异性、 女性生理期， 并根据采集用户身体部位视频图像数据信息中的脉搏波动态信息得 到血压变化情况； 0021 所述人脸及脸部表情检测分析模块根据所采集的视频图像数据信息分析用户的 表情变化、 五官容貌、 瞳孔位置及大小变化、 年龄和性别； 0022 所述局部动作检测分析模块根据所采集的视频图像数据信息分析用户身体局部 微小动作改变、 动作及手势识别、 肢体缺陷及残疾情况； 0023 所述体温检测分析模块利用所采集的身体部位温度场视频图像数据信息分析

21、用 户的面部及肢体温度场变化情况， 并根据热流温度场分布获取血氧浓度变化情况； 0024 所述呼吸检测分析模块根据所采集的身体部位温度场视频图像数据信息分析用 户的呼吸率及呼吸状态的改变； 0025 所述心理题库智能管理与评定分析模块用于控制心理测试题库的更新与题目选 择和显示播放方式。 0026 上述方案中， 所述智能控制处理器还包括治疗辅助模块； 所述治疗辅助模块包括 智能音频播放单元和智能服药提醒单元。 说 明 书 2/8 页 6 CN 108245176 A 6 0027 上述方案中， 所述摄像设备为彩色CCD摄像机， 用于采集用户的彩色视频图像数据 信息。 0028 上述方案中， 所

22、述语音采集设备为麦克风阵列。 0029 上述方案中， 所述显示屏为LCD液晶屏。 0030 一种根据所述基于物联网交互式无接触心理检测治疗装置的心理状态检测系统， 包括所述基于物联网交互式无接触心理检测治疗装置、 云计算平台、 专家端远程智能终端 设备； 0031 所述基于物联网交互式无接触心理检测治疗装置通过数据传送设备与云计算平 台进行通信， 云计算平台与专家端远程智能终端设备连接， 将用户的信息数据传送到所述 专家端远程智能终端设备； 所述专家端远程智能终端设备显示与用户相关的数据信息图 像。 0032 上述方案中， 所述专家端远程智能终端设备为计算机或智能手机。 0033 上述方案中，

23、 所述与用户相关的数据信息图像包括： 0034 表示年龄、 性别、 女性生理期、 五官容貌、 肢体缺陷及残疾情况数据分析的图像； 0035 表示基于心理测试题目回答结果分析出的心理状态数据图像； 0036 表示语速变化曲线的图像、 表示语调变化曲线的图像、 表示音量变化曲线的图像； 0037 表示呼吸活动的图像； 表示身体局部微小动作改变的图像； 0038 表示心率曲线的图像； 0039 表示心率变异性曲线的图像； 表示心率变异性自相关曲线的图像； 0040 表示血压和血氧浓度变化曲线的图像； 0041 表示表情变化的图像； 0042 表示面部及肢体温度场变化情况的图像、 瞳孔位置及大小变化情

24、况的图像； 呼吸 率及呼吸状态变化曲线的图像； 0043 表示心理测试题目显示播放的图像； 0044 表示改善心理状态建议的图像。 0045 一种根据所述心理状态检测系统的心理状态信息检测方法， 包括如下步骤： 0046 步骤S1、 从基于物联网交互式无接触心理检测治疗装置获得用户的生理数据信 息； 0047 步骤S2、 将所述生理数据信息导入心理状态判别模型进行心理状态自动判别； 0048 步骤S3、 将所述心理状态判别结果和对应的生理数据信息上传至云计算平台中， 再由所述云计算平台发送至远程访问的一个或更多个专家端远程智能终端设备； 0049 步骤S4、 使用所述专家端远程智能终端设备的专

25、家及医生采用共享模式， 用户可 以自主选择一个或更多个专家及医生进行交互， 而远程的专家及医生也可同时和多个用户 通过其各自的基于物联网交互式无接触心理检测治疗装置进行交互， 基于物联网交互式无 接触心理检测治疗装置的使用采用专属或共享模式； 0050 步骤S5、 所述专家及医生通过与用户进行交互， 并依据所述云计算平台发送的相 关信息对用户的心理状态进行确认或修改； 0051 步骤S6、 所述云计算平台对用户建立相应账户， 将最终确认的心理状态结论以及 所有相关数据信息进行存储。 说 明 书 3/8 页 7 CN 108245176 A 7 0052 上述方案中， 还包括以下步骤： 0053

26、 步骤S7、 与用户交互的所述专家及医生根据用户的心理状态结论共同商讨拟定治 疗方案， 并将治疗方案发送至所述云计算平台进行存储； 0054 步骤S8、 所述云计算平台根据治疗方案定期发送音乐、 语音和视频至所述基于物 联网交互式无接触心理检测治疗装置； 0055 步骤S9、 所述基于物联网交互式无接触心理检测治疗装置通过治疗辅助模块实现 智能服药提醒和智能音视频播放。 0056 上述方案中， 所述心理状态判别模型由基于特征相关性原则的集成超限学习机构 建， 其模型参数由所述云计算平台利用大量用户生理数据信息进行训练确定， 所涉及方法 的流程包括以下主要步骤： 0057 对用户的生理数据信息进

27、行特征提取， 并利用随机森林算法对获得的特征进行相 关性排序， 基于袋装法原理随机抽取样本组合以及依据相关性原则划分特征组合， 保证相 关性强的特征在同一组合内， 对抽取的样本和特征的每一种组合建立一个超限学习机， 通 过建立多个独立的超限学习机组合而成集成超限学习机， 经投票方式对心理状态进行判 别。 0058 与现有技术相比， 本发明的有益效果是： 0059 1.本发明的提供了一种基于物联网交互式无接触心理检测治疗装置， 为消除用户 对陌生装置的紧张不适感， 该基于物联网交互式无接触心理检测治疗装置被设计成家庭用 的普通镜子形式， 可与普通镜子一样安装或放置在室内任何合适区域， 和周围环境

28、布置相 协调， 从而不会对用户产生任何心理影响。 该系统可以在用户无需佩戴任何装置的情况下 采集与分析生理和心理状态数据， 消除了各种穿戴式传感器及其连线对用户的束缚与不 适， 并可通过手势、 语音进行互动， 方便用户以自由交互方式随时进行心理检测与治疗。 0060 2.本发明的提供了一种基于物联网的交互式无接触心理状况检测系统。 众多的所 述基于物联网交互式无接触心理检测治疗装置通过WIFI/4G/有线网络接入云计算平台， 将 众多用户的心理状态和对应的生理数据信息上传至云计算平台中， 再由所述云计算平台发 送至远程访问的一个或更多个专家端远程智能终端设备。 所述专家端远程智能终端设备由 心

29、理方面的专家及医生在远程使用， 用于接入云计算平台进行信息交互。 依靠云计算平台 高效率存储和高计算能力， 这些心理和生理数据信息被存储形成大数据并进行云计算分 析， 实现数据共享和交换， 完成对整个系统的控制和管理。 所述基于物联网交互式无接触心 理检测治疗装置使用以及心理专家及医生的参与采用专属或共享模式， 专属模式提供给特 殊用户， 而普通用户则采用共享模式， 共享模式既有效去除了基于物联网交互式无接触心 理检测治疗装置数量以及价格限制， 又解决了我国高学历、 有资质的心理专家及医生数量 不足、 地区分布不均问题。 0061 3.本发明的提供了用户心理状况的检测方法。 所述基于物联网交互

30、式无接触心理 检测治疗装置获得用户的生理数据信息后， 将所述生理数据信息导入心理状态判别模型进 行心理状态自动判别， 所述心理状态判别模型由基于特征相关性原则的集成超限学习机构 建， 其模型参数由所述云计算平台利用大量用户生理数据信息进行训练确定， 所涉及方法 的流程包括以下主要步骤： 对用户的生理数据信息进行特征提取， 并利用随机森林算法对 获得的特征进行相关性排序， 基于袋装法原理随机抽取样本组合以及依据相关性原则划分 说 明 书 4/8 页 8 CN 108245176 A 8 特征组合， 保证相关性强的特征在同一组合内， 对抽取的样本和特征的每一种组合建立一 个超限学习机， 通过建立多

31、个独立的超限学习机组合而成集成超限学习机， 经投票方式对 心理状态进行判别。 所述基于物联网交互式无接触心理检测治疗装置将心理状态判别结果 和对应的生理数据信息上传至云计算平台， 再由所述云计算平台发送至远程访问的一个或 更多个专家端远程智能终端设备， 使用所述专家端远程智能终端设备的专家及医生采用专 属或共享模式， 用户可以自主选择一个或更多个专家及医生进行交互， 而远程的专家及医 生也可同时和一个或多个用户通过其各自的基于物联网交互式无接触心理检测治疗装置 进行交互， 心理专家及医生通过与用户进行交互， 并依据所述云计算平台发送的相关信息 对用户的心理状态进行确认或修改。 所述云计算平台对

32、用户建立相应账户， 将最终确认的 心理状态结论以及所有相关数据信息进行存储。 0062 4.与用户交互的所述心理专家及医生根据用户的心理状况可以共同商讨拟定治 疗方案， 并将治疗方案发送至所述云计算平台进行存储， 所述治疗方案包括定期与所述专 家及医生实施认知、 行为疗法、 催眠、 提高情绪的交互式治疗； 由所述云计算平台可以根据 治疗方案智能定期发送相关音乐、 语音和视频至所述基于物联网交互式无接触心理检测治 疗装置， 所述基于物联网交互式无接触心理检测治疗装置治疗辅助模块的智能音频播放单 元具有定时音视频播放的功能； 所述基于物联网交互式无接触心理检测治疗装置的智能服 药提醒单元根据治疗方

33、案对用户进行智能提醒的功能。 附图说明 0063 图1是本发明一实施方式的装置结构示意图； 0064 图2是本发明一实施方式的系统整体框图。 0065 图中， 1彩色CCD摄像机， 2红外热成像仪， 3麦克风阵列， 4音响设备， 5紧固件， 6保护 前盖， 7半透反射镜， 8LCD液晶屏， 9后盖。 具体实施方式 0066 下面结合附图和具体实施方式对本发明作进一步详细说明， 但本发明的保护范围 并不限于此。 0067 本发明所述基于物联网交互式无接触心理检测治疗装置， 包括摄像设备、 红外热 成像仪2、 语音采集设备、 音响设备4、 保护前盖6、 半透反射镜7、 显示屏、 智能控制处理器、

34、数 据传送设备和后盖9。 0068 所述保护前盖6、 半透反射镜7、 显示屏和后盖9依次布置； 保护前盖6和后盖9通过 紧固件5紧固连接。 所述摄像设备、 红外热成像仪2、 语音采集设备和音响设备4分别安装在 保护前盖6上。 所述智能控制处理器嵌入在后盖9里。 0069 所摄像设备用于采集用户的视频图像数据信息； 所述红外热成像仪2用于采集用 户身体部位温度场视频图像数据信息； 所述语音采集设备用于采集用户的语音数据信息； 所述音响设备4用于播放音频数据信息； 0070 所述半透半反镜7用于在显示屏无信息显示时呈现为镜子， 显示屏有信息显示时 则透过半透半反镜7被用户看见； 所述显示屏用于显示

35、视频图像及文字数据信息； 数据传送 设备用于与云计算平台进行通信， 实现物联网数据信息交互功能。 说 明 书 5/8 页 9 CN 108245176 A 9 0071 所述智能控制处理器分别与摄像设备、 红外热成像仪2、 语音采集设备、 音响设备 4、 显示屏连接， 包括摄像设备控制模块、 红外热成像仪控制模块、 显示屏控制模块、 音响设 备控制模块、 语音采集设备控制模块、 数据传送设备控制模块、 心理题库智能管理与评定分 析模块、 语音检测分析模块、 心率检测分析模块、 呼吸检测分析模块、 体温检测分析模块、 局 部动作检测分析模块、 人脸及脸部表情检测分析模块和治疗辅助模块。 0072

36、 所述摄像设备控制模块控制摄像设备采集用户的视频图像数据信息。 0073 所述红外热成像仪控制模块控制红外热成像仪2采集用户身体部位温度场视频图 像数据信息。 0074 所述音响设备控制模块控制音响设备4播放音频数据信息。 0075 所述语音采集设备控制模块控制语音采集设备采集用户的语音数据信息。 0076 所述显示屏控制模块控制显示屏显示视频图像及文字数据信息。 0077 所述数据传送设备控制模块控制数据传送设备与云计算/存储平台进行通信， 实 现物联网数据信息交互功能。 0078 所述语音检测分析模块利用所采集的语音数据信息分析用户的相对位置、 对心理 测试题目的回答结果、 语速变化、 语

37、调变化和音量变化。 0079 所述心率检测分析模块利用所采集的视频图像数据信息分析用户的心率及心率 变异性、 女性生理期， 并根据采集用户身体部位视频图像数据信息中的脉搏波动态信息得 到血压变化情况。 0080 所述人脸及脸部表情检测分析模块根据所采集的视频图像数据信息分析用户的 表情变化、 五官容貌、 瞳孔位置及大小变化、 年龄、 性别。 0081 所述局部动作检测分析模块根据所采集的视频图像数据信息分析用户身体局部 微小动作改变、 动作及手势识别、 肢体缺陷及残疾情况。 0082 所述体温检测分析模块利用所采集的身体部位温度场视频图像数据信息分析用 户的面部及肢体温度场变化情况、 并根据热

38、流温度场分布获取血氧浓度变化情况。 0083 所述呼吸检测分析模块根据所采集的身体部位温度场视频图像数据信息分析用 户的呼吸率及呼吸状态的改变。 0084 所述心理题库智能管理与评定分析模块用于控制心理测试题库的更新与题目选 择和显示播放方式。 0085 所述治疗辅助模块； 所述治疗辅助模块包括智能音频播放单元和智能服药提醒单 元。 0086 优选的， 所述摄像设备为彩色CCD摄像机1， 用于采集用户的彩色视频图像数据信 息。 0087 所述语音采集设备为麦克风阵列3。 所述数据传送设备采用无线或有线传输方式， 优选为WIFI或4G。 所述显示屏为LCD液晶屏8。 0088 优选的， 本发明所

39、述基于物联网交互式无接触心理检测治疗装置的外观组成如图 1所示， 优选的， 被设计成具有60cmX80cm矩形外框的普通镜子形式， 可与普通镜子一样安装 或放置在室内任何合适区域。 所述基于物联网交互式无接触心理检测治疗装置由彩色CCD 摄像机1、 红外热成像仪2、 麦克风阵列3、 音响设备4、 紧固件5、 保护前盖6、 半透反射镜7、 LCD 液晶屏8、 嵌入式智能控制处理器和后盖9组成。 通过图像分辨率为200万像素的所述彩色 说 明 书 6/8 页 10 CN 108245176 A 10 CCD摄像机1采集用户的彩色视频图像数据信息； 温度分辨率为0.025的所述红外热成像 仪2采集用

40、户身体部位温度场视频图像数据信息； 四颗电容型麦克风矩阵排列构成的所述 麦克风阵列3通过消除环境背景噪音以采集用户清晰的语音数据信息； 由中低音喇叭与高 音喇叭组成的所述音响设备4用于播放音频数据信息； 32寸图像分辨率为1920X1080像素的 所述LCD液晶屏8用于显示视频图像及文字数据信息； 所述半透半反镜7用于在所述LCD液晶 屏8无信息显示时呈现普通镜子的效果， 所述LCD液晶屏8有信息显示时则能透过所述半透 半反镜7被用户所看见； 所述智能控制处理器嵌于后盖9内部形成一个整体， 用于对数据采 集设备、 数据显示播放设备、 网络设备进行控制， 对数据信息进行分析处理。 0089 如图

41、2所示， 本发明所述基于物联网交互式无接触心理检测治疗装置的心理状态 检测系统包括所述基于物联网交互式无接触心理检测治疗装置、 云计算平台、 专家端远程 智能终端设备； 所述基于物联网交互式无接触心理检测治疗装置通过数据传送设备与云计 算平台进行通信， 云计算平台与专家端远程智能终端设备连接， 将用户的信息数据传送到 所述专家端远程智能终端设备； 所述专家端远程智能终端设备显示与用户相关的数据信息 图像。 0090 系统硬件主要由ARM系列芯片作为智能控制处理器及外围电路构成， 用于控制所 述麦克风阵列3对语音数据信息的采集与存储， 利用所采集的语音数据分析用户的相对位 置、 对心理测试题目的

42、回答结果、 语速变化、 语调变化、 音量变化。 控制所述彩色CCD摄像机1 对视频图像数据信息的采集与存储， 利用所采集的彩色图像视频信息分析用户的心率及心 率变异性、 年龄、 性别、 女性生理期、 五官容貌、 肢体缺陷及残疾情况、 表情变化、 身体局部微 小动作改变、 血压和血氧浓度变化、 动作及手势识别。 控制所述红外热成像仪2对身体部位 温度场图像视频信息的采集与存储， 分析用户的面部及肢体温度场变化情况、 瞳孔位置及 大小变化、 呼吸率及呼吸状态的改变。 控制所述音响设备4对音频数据信息的播放。 控制所 述LCD液晶屏8对视频图像及文字数据信息的显示与播放。 控制WIFI/4G/有线数

43、据传送设备 的开启与关闭、 网络通信以及上传与下载数据信息， 实现对心理测试题库进行更新与题目 选择。 所述专家端远程智能终端设备由心理方面的专家及医生在远程使用， 用于接入云计 算平台进行信息交互， 可选自以下装置中的一个： 平板/笔记本电脑、 智能手机、 PC机， 可显 示与用户相关的数据信息图像， 具体包括： 表示年龄、 性别、 女性生理期、 五官容貌、 肢体缺 陷及残疾情况数据分析的图像； 表示基于心理测试题目回答结果分析出的心理状态数据图 像； 表示语速变化曲线的图像、 表示语调变化曲线的图像、 表示音量变化曲线的图像； 表示 呼吸活动的图像； 表示身体局部微小动作改变的图像； 表示

44、心率曲线的图像； 表示心率变异 性曲线的图像； 表示心率变异性自相关曲线的图像； 表示血压和血氧浓度变化曲线的图像； 表示表情变化的图像； 表示面部及肢体温度场变化情况的图像、 瞳孔位置及大小变化情况 的图像； 呼吸率及呼吸状态变化曲线的图像； 表示心理测试题目显示播放的图像； 表示改善 心理状态建议的图像。 0091 交互式既指用户与所述基于物联网交互式无接触心理检测治疗装置之间的交互， 又指用户与远程专属或共享心理专家及医生之间的交互。 0092 无接触既指用户与所述基于物联网交互式无接触心理检测治疗装置之间的无接 触数据信息采集， 又指用户与心理专家及医生之间的无接触远程视频语音交流。

45、0093 本实施例基于所述心理状态检测系统的心理状态信息检测方法， 包括如下步骤： 说 明 书 7/8 页 11 CN 108245176 A 11 0094 步骤S1、 从基于物联网交互式无接触心理检测治疗装置获得用户的生理数据信 息； 0095 步骤S2、 将所述生理数据信息导入心理状态判别模型进行心理状态自动判别； 0096 步骤S3、 将所述心理状态判别结果和对应的生理数据信息上传至云计算平台中， 再由所述云计算平台发送至远程访问的一个或更多个专家端远程智能终端设备； 0097 步骤S4、 使用所述专家端远程智能终端设备的专家及医生采用共享模式， 用户可 以自主选择一个或更多个专家及医

46、生进行交互， 而远程的专家及医生也可同时和多个用户 通过其各自的基于物联网交互式无接触心理检测治疗装置进行交互， 基于物联网交互式无 接触心理检测治疗装置的使用采用专属或共享模式； 0098 步骤S5、 所述专家及医生通过与用户进行交互， 并依据所述云计算平台发送的相 关信息对用户的心理状态进行确认或修改； 0099 步骤S6、 所述云计算平台对用户建立相应账户， 将最终确认的心理状态结论以及 所有相关数据信息进行存储； 0100 步骤S7、 与用户交互的所述专家及医生根据用户的心理状态结论共同商讨拟定治 疗方案， 并将治疗方案发送至所述云计算平台进行存储； 0101 步骤S8、 所述云计算平

47、台根据治疗方案定期发送音乐、 语音和视频至所述基于物 联网交互式无接触心理检测治疗装置； 0102 步骤S9、 所述基于物联网交互式无接触心理检测治疗装置通过治疗辅助模块实现 智能服药提醒和智能音视频播放。 0103 所述步骤S2中的心理状态判别模型由基于特征相关性原则的集成超限学习机构 建， 其模型参数由云计算平台利用大量用户生理数据信息进行训练确定， 所涉及方法的流 程包括以下主要步骤： 0104 (1)对用户的生理数据信息进行特征提取； 0105 (2)利用随机森林算法对获得的特征进行相关性排序； 0106 (3)基于袋装法原理随机抽取样本组合以及依据相关性原则划分特征组合， 保证 相关

48、性强的特征在同一组合内； 0107 (4)对抽取的样本和特征的每一种组合建立一个超限学习机， 通过建立N(其中， N 1)个独立的超限学习机组合而成集成超限学习机， 经投票方式对心理状态进行判别。 0108 通过本发明， 与用户交互的多位专家及医生根据用户的心理状态共同商讨拟定治 疗方案， 并将治疗方案发送至云计算平台进行存储； 用户利用所述基于物联网交互式无接 触心理检测治疗装置根据治疗方案定期与所述专家及医生进行认知、 行为疗法、 催眠、 提高 情绪的交互式治疗； 所述云计算平台按治疗方案智能发送相关音乐、 语音和视频至所述基 于物联网交互式无接触心理检测治疗装置， 再由所述基于物联网交互式无接触心理检测治 疗装置按所述治疗方案的要求自动播放音视频； 对需要药物治疗的用户， 所述基于物联网 交互式无接触心理检测治疗装置根据治疗方案对用户按时服药治疗进行智能提醒。 0109 上文所列出的一系列的详细说明仅仅是针对本发明的可行性实施例的具体说明， 它们并非用以限制本发明的保护范围， 凡未脱离本发明技艺精神所作的等效实施例或变更 均应包含在本发明的保护范围之内。 说 明 书 8/8 页 12 CN 108245176 A 12 图1 图2 说 明 书 附 图 1/1 页 13 CN 108245176 A 13