一种多媒体设备和一种多媒体信号处理方法.pdf

上传人:00062****4422 文档编号:4333716 上传时间:2018-09-14 格式:PDF 页数:10 大小:2.22MB
返回 下载 相关 举报
摘要
申请专利号:

CN201210290837.5

申请日:

2012.08.15

公开号:

CN102831897A

公开日:

2012.12.19

当前法律状态:

驳回

有效性:

无权

法律详情:

发明专利申请公布后的驳回IPC(主分类):G10L 21/02申请公布日:20121219|||实质审查的生效IPC(主分类):G10L 21/02申请日:20120815|||公开

IPC分类号:

G10L21/02; H04N5/14; H04N7/18

主分类号:

G10L21/02

申请人:

歌尔声学股份有限公司

发明人:

王平平; 郄勇

地址:

261031 山东省潍坊市高新技术产业开发区东方路268号

优先权:

专利代理机构:

北京市隆安律师事务所 11323

代理人:

权鲜枝;何立春

PDF下载: PDF下载
内容摘要

本发明公开了一种多媒体设备和一种多媒体信号处理方法。该多媒体设备包括:麦克风阵列,接收语音信号并转换成模拟音频信号后输出给音频编码电路;音频编码电路,将所接收的模拟音频信号转换成数字音频信号后,进行消噪处理以及根据系统主控微控制单元反馈的音频信号进行回声消除处理后输出;系统主控微控制单元,接收来自音频编码电路的音频信号,将该音频信号输出给扬声器的同时反馈给音频编码电路。本发明的技术方案解决了扬声器的音频信号进入麦克风阵列中形成的回声造成语音识别错误的问题,并且实现成本和复杂度都比较低。

权利要求书

1.一种多媒体设备,其特征在于,该多媒体设备包括:麦克风阵列、音频编码电路、系统主控微控制单元和扬声器,其中:麦克风阵列,接收语音信号并转换成模拟音频信号后输出给音频编码电路;音频编码电路,将所接收的模拟音频信号转换成数字音频信号后,进行消噪处理以及根据系统主控微控制单元反馈的音频信号进行回声消除处理后输出;系统主控微控制单元,接收来自音频编码电路的音频信号,将该音频信号输出给扬声器的同时反馈给音频编码电路。2.根据权利要求1所述的多媒体设备,其特征在于,该多媒体设备进一步包括:保存有消噪算法程序和回声消除算法程序的存储器;所述音频编码电路,采用存储器中的消噪算法程序进行消噪处理,以及采用存储器中的回声消除算法进行回声消除处理。3.根据权利要求1或2所述的多媒体设备,其特征在于,该多媒体设备进一步包括:摄像头、视频处理电路、主控集成电路和显示屏,其中:摄像头,用于捕获视频信号并输出给视频处理电路;视频处理电路,用于对摄像头输出的视频信号进行编码处理后输出给主控集成电路;所述音频编码电路,将进行消噪处理以及进行回声消除处理后的音频信号输出给主控集成电路;主控集成电路,将所接收的音频信号与视频信号合成音视频数据流后输出给所述系统主控微控制单元;所述系统主控微控制单元,负责音视频数据链路的管理,将音视频数据流中的视频信号输出到显示屏,将音视频数据流中的音频信号输出到扬声器的同时反馈给音频编码电路。4.根据权利要求3所述的多媒体设备,其特征在于,所述主控集成电路采用通用串行总线USB协议将音频信号和视频信号合成音视频数据流。5.一种多媒体信号处理方法,其特征在于,该方法包括:采用麦克风阵列接收语音信号并转换成模拟音频信号后输出给音频编码电路;音频编码电路将模拟音频信号转换成数字音频信号后,进行消噪处理以及根据反馈的音频信号进行回声消除处理后输出;系统主控微控制单元,接收来自音频编码电路的音频信号,将该音频信号输出给扬声器的同时反馈给音频编码电路。6.根据权利要求5所述的多媒体信号处理方法,其特征在于,所述音频编码电路将模拟音频信号转换成数字音频信号后,进行消噪处理以及根据反馈的音频信号进行回声消除处理后输出包括:在存储器中保存消噪算法程序和回声消除算法程序;音频编码电路将模拟音频信号转换成数字音频信号后,采用存储器中的消噪算法程序进行消噪处理,以及采用存储器中的回声消除算法进行回声消除处理。7.根据权利要求5或6所述的多媒体信号处理方法,其特征在于,该方法进一步包括:采用摄像头捕获视频信号并输出给视频处理电路,视频处理电路对摄像头输出的视频信号进行编码处理后输出给主控集成电路;所述音频编码电路将模拟音频信号转换成数字音频信号后,进行消噪处理以及根据反馈的音频信号进行回声消除处理后输出给主控集成电路;主控集成电路将所接收的音频信号与视频信号合成音视频数据流后输出给所述系统主控微控制单元;系统主控微控制单元负责音视频数据链路的管理,将音视频数据流中的视频信号输出到显示屏,将音视频数据流中的音频信号输出到扬声器的同时反馈给音频编码电路。8.根据权利要求7所述的多媒体信号处理方法,其特征在于,所述主控集成电路将所接收的音频信号与视频信号合成音视频数据流包括:所述主控集成电路采用通用串行总线USB协议将音频信号和视频信号合成音视频数据流。

说明书

一种多媒体设备和一种多媒体信号处理方法

技术领域

本发明涉及多媒体信号处理技术领域,特别涉及一种多媒体设备和一种
多媒体信号处理方法。

背景技术

目前多种智能音视频设备都添加了语音识别功能。图1是现有的一种多
媒体设备的组成结构的示意图。如图1所示,该多媒体设备包括:麦克风阵
列101、音频编码电路102、摄像头103、视频处理电路104、主控集成电路
105、系统主控微控制单元(系统主控MCU)106、扬声器107及显示屏108。

其中,麦克风阵列101负责语音信号的拾取并转换成模拟音频信号后输
出给音频编码电路102,音频编码电路102将从麦克风阵列101接收的模拟
音频信号进行数字编码,然后输出给主控集成电路105;摄像头103用于捕
获视频信号并输出给视频处理电路104,视频处理电路104用于对摄像头103
输出的信号进行编码处理后输出给主控集成电路105;主控集成电路105汇
集视频信号和音频信号后,合成音视频数据流输出给系统主控微控制单元
106。系统主控微控制单元106为该音视频设备的核心器件,负责音视频数据
链路的管理。从系统主控微控制单元106输出的音频信号通过音频扬声器107
变成声音信号,从系统主控微控制单元106输出的视频信号通过显示屏108
进行显示。此外,图1所示的音视频设备还包括作为外围接口的USB接口和
负责整个系统的稳定供电的电源电路等,这里不再一一赘述。

在现有的如图1所示的具有语音识别功能的音视频设备中,由于设备自
身既有麦克风阵列,又有扬声器,因此扬声器的音频信号会进入到麦克风阵
列中形成回声,造成语音识别的误动作。

现有的一般的回声消除方案是在麦克风阵列处采用自适应滤波方式进行
回声的抑制,但这种方案实现起来成本和复杂度都较高。

发明内容

本发明提供了一种多媒体设备和一种多媒体信号处理方法,以解决扬声
器的音频信号进入麦克风阵列中形成的回声造成的语音识别错误的问题,并
且实现成本和复杂度都比较低。

为达到上述目的,本发明的技术方案是这样实现的:

本发明公开了一种多媒体设备,该多媒体设备包括:麦克风阵列、音频
编码电路、系统主控微控制单元和扬声器,其中:

麦克风阵列,接收语音信号并转换成模拟音频信号后输出给音频编码电
路;

音频编码电路,将所接收的模拟音频信号转换成数字音频信号后,进行
消噪处理以及根据系统主控微控制单元反馈的音频信号进行回声消除处理后
输出;

系统主控微控制单元,接收来自音频编码电路的音频信号,将该音频信
号输出给扬声器的同时反馈给音频编码电路。

该多媒体设备进一步包括:保存有消噪算法程序和回声消除算法程序的
存储器;

所述音频编码电路,采用存储器中的消噪算法程序进行消噪处理,以及
采用存储器中的回声消除算法进行回声消除处理。

该多媒体设备进一步包括:摄像头、视频处理电路、主控集成电路和显
示屏,其中:

摄像头,用于捕获视频信号并输出给视频处理电路;

视频处理电路,用于对摄像头输出的视频信号进行编码处理后输出给主
控集成电路;

所述音频编码电路,将进行消噪处理以及进行回声消除处理后的音频信
号输出给主控集成电路;

主控集成电路,将所接收的音频信号与视频信号合成音视频数据流后输
出给所述系统主控微控制单元;

所述系统主控微控制单元,负责音视频数据链路的管理,将音视频数据
流中的视频信号输出到显示屏,将音视频数据流中的音频信号输出到扬声器
的同时反馈给音频编码电路。

所述主控集成电路采用通用串行总线USB协议将音频信号和视频信号
合成音视频数据流。

本发明还公开了一种多媒体信号处理方法,该方法包括:

采用麦克风阵列接收语音信号并转换成模拟音频信号后输出给音频编码
电路;

音频编码电路将模拟音频信号转换成数字音频信号后,进行消噪处理以
及根据反馈的音频信号进行回声消除处理后输出;

系统主控微控制单元,接收来自音频编码电路的音频信号,将该音频信
号输出给扬声器的同时反馈给音频编码电路。

在上述方法中,所述音频编码电路将模拟音频信号转换成数字音频信号
后,进行消噪处理以及根据反馈的音频信号进行回声消除处理后输出包括:

在存储器中保存消噪算法程序和回声消除算法程序;

音频编码电路将模拟音频信号转换成数字音频信号后,采用存储器中的
消噪算法程序进行消噪处理,以及采用存储器中的回声消除算法进行回声消
除处理。

该方法进一步包括:采用摄像头捕获视频信号并输出给视频处理电路,
视频处理电路对摄像头输出的视频信号进行编码处理后输出给主控集成电
路;

所述音频编码电路将模拟音频信号转换成数字音频信号后,进行消噪处
理以及根据反馈的音频信号进行回声消除处理后输出给主控集成电路;

主控集成电路将所接收的音频信号与视频信号合成音视频数据流后输出
给所述系统主控微控制单元;

系统主控微控制单元负责音视频数据链路的管理,将音视频数据流中的
视频信号输出到显示屏,将音视频数据流中的音频信号输出到扬声器的同时
反馈给音频编码电路。

在上述方法中,所述主控集成电路将所接收的音频信号与视频信号合成
音视频数据流包括:

所述主控集成电路采用通用串行总线USB协议将音频信号和视频信号
合成音视频数据流。

由上述可见,本发明这种,麦克风阵列接收语音信号并转换成模拟音频
信号后输出给音频编码电路,音频编码电路将所接收的模拟音频信号转换成
数字音频信号后,进行消噪处理以及根据系统主控微控制单元反馈的音频信
号进行回声消除处理后输出,系统主控微控制单元接收来自音频编码电路的
音频信号输出给扬声器的同时反馈给音频编码电路的技术方案,由于系统主
控微控制单元将音频信号返回给音频编码电路形成闭环,音频编码电路根据
反馈的音频信号进行回声消除处理,因此可以有效地消除回声,该方案相对
与现有的在多麦克风阵列处采用自适应滤波消除回声的方案来说,实现成本
和复杂度都比较低。

附图说明

图1是现有的一种多媒体设备的组成结构的示意图;

图2为本发明实施例中的多媒体设备的组成结构的示意图;

图3是本发明实施例中的一种多媒体信号处理方法的流程图。

具体实施方式

本发明中,采用麦克风阵列接收语音信号并转换成模拟音频信号后输出
给音频编码电路,音频编码电路将模拟音频信号转换成数字音频信号后,进
行消噪处理以及根据反馈的音频信号进行回声消除处理后输出,系统主控微
控制单元将来自音频编码电路的音频信号输出给扬声器的同时反馈给音频编
码电路。该方案可以有效地消除回声,且该方案相对与现有的在多麦克风阵
列处采用自适应滤波消除回声的方案来说,实现成本和复杂度都比较低。

为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发
明实施方式作进一步地详细描述。

图2为本发明实施例中的多媒体设备的组成结构的示意图。如图2所示,
该系统包括:麦克风阵列101、音频编码电路201、摄像头103、视频处理电
路104、主控集成电路105、系统主控微控制单元202、扬声器107和显示屏
108。由于本发明的实施例中对音频编码电路和系统主控微控制单元的功能都
进行了改进,因此采用了与图1中不同的附图标记。

其中,麦克风阵列101,用于接收语音信号并转换成模拟音频信号后输
出给音频编码电路201。音频编码电路201,用于将所接收的模拟音频信号转
换成数字音频信号后,进行消噪处理以及根据系统主控微控制单元反馈的音
频信号进行回声消除处理后输出给主控集成电路105。摄像头103用于捕获
视频信号并输出给视频处理电路104,视频处理电路104用于对摄像头103
输出的视频信号进行编码处理后输出给主控集成电路105;

主控集成电路105,将所接收的音频信号与视频信号合成音视频数据流
后输出给所述系统主控微控制单元202。系统主控微控制单元202负责音视
频数据链路的管理,将音视频数据流中的视频信号输出到显示屏,将音视频
数据流中的音频信号输出到扬声器的同时反馈给音频编码电路201。从系统
主控微控制单元202输出的音频信号通过音频扬声器107变成声音信号,从
系统主控微控制单元202输出的视频信号通过显示屏108进行显示。

在图2所示的实施例中,音频编码电路201可以采用现有的一些成熟算
法根据系统主控微控制单元202反馈的音频信号从来自麦克风阵列101的音
频信号中消去由于扬声器107的声音信号进入麦克风阵列101所产生的回声。
并且本实施例中,音频编码电路201在进行回声消除之前还采用传统的消噪
算法进行噪声的消除。

一种具体的实现方式是,图2所示的多媒体设备还进一步包括:保存有
消噪算法程序和回声消除算法程序的存储器203;音频编码电路201,采用存
储器203中的消噪算法程序进行消噪处理,然后采用存储器203中的回声消
除算法进行回声消除处理。存储器203可以是EEPROM。

视频识别和音频识别是目前的各种智能多媒体产品追逐的目标。在本发
明的多媒体设备中,优化了视频流与音频流的处理结构,主控集成电路105
采用通用串行总线USB协议将音频信号和视频信号合成音视频数据流。具体
可以采用USB2.0协议。这样可以实现可视会议等多媒体功能。

在图2所示的实施例中,视频处理部分采用高分辨率的摄像头,视频数
据流传输采用USB协议,提高了视频数据传输的正确率。

在图2所示的实施例中,主控微控制单元202将音频信号再反馈给音频
编码电路201,从而形成一个闭环控制系统,可以根据输出到扬声器的音频
信号实时进行回音的消除,从而使得语音识别功能更加精准,避免多媒体设
备受到错误的音频信号进行误动作。

基于上述实施例给出本发明中的一种多媒体信号处理方法。图3是本发
明实施例中的一种多媒体信号处理方法的流程图。如图3所示。该方法包括:

301,采用麦克风阵列接收语音信号并转换成模拟音频信号后输出给音频
编码电路。

302,音频编码电路将模拟音频信号转换成数字音频信号后,进行消噪处
理以及根据反馈的音频信号进行回声消除处理后输出。

在本步骤中,具体可以在存储器中保存消噪算法程序和回声消除算法程
序;音频编码电路将模拟音频信号转换成数字音频信号后,采用存储器中的
消噪算法程序进行消噪处理,以及采用存储器中的回声消除算法进行回声消
除处理。

303,系统主控微控制单元接收来自音频编码电路的音频信号,将该音频
信号输出给扬声器的同时反馈给音频编码电路。

图3所示的方法还可以进一步包括:采用摄像头捕获视频信号并输出给
视频处理电路,视频处理电路对摄像头输出的视频信号进行编码处理后输出
给主控集成电路;

所述音频编码电路将模拟音频信号转换成数字音频信号后,进行消噪处
理以及根据反馈的音频信号进行回声消除处理后输出给主控集成电路;

主控集成电路将所接收的音频信号与视频信号合成音视频数据流后输出
给所述系统主控微控制单元;

系统主控微控制单元负责音视频数据链路的管理,将音视频数据流中的
视频信号输出到显示屏,将音视频数据流中的音频信号输出到扬声器的同时
反馈给音频编码电路。

其中,所述主控集成电路采用通用串行总线USB协议将音频信号和视频
信号合成音视频数据流。

综上所述,本发明的技术方案中,由于系统主控微控制单元将音频信号
返回给音频编码电路形成闭环,音频编码电路根据反馈的音频信号进行回声
消除处理,因此可以有效地消除回声,且该方案相对与现有的在多麦克风阵
列处采用自适应滤波消除回声的方案来说,实现成本和复杂度都比较低。

以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范
围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均
包含在本发明的保护范围内。

一种多媒体设备和一种多媒体信号处理方法.pdf_第1页
第1页 / 共10页
一种多媒体设备和一种多媒体信号处理方法.pdf_第2页
第2页 / 共10页
一种多媒体设备和一种多媒体信号处理方法.pdf_第3页
第3页 / 共10页
点击查看更多>>
资源描述

《一种多媒体设备和一种多媒体信号处理方法.pdf》由会员分享,可在线阅读,更多相关《一种多媒体设备和一种多媒体信号处理方法.pdf(10页珍藏版)》请在专利查询网上搜索。

1、(10)申请公布号 CN 102831897 A (43)申请公布日 2012.12.19 C N 1 0 2 8 3 1 8 9 7 A *CN102831897A* (21)申请号 201210290837.5 (22)申请日 2012.08.15 G10L 21/02(2006.01) H04N 5/14(2006.01) H04N 7/18(2006.01) (71)申请人歌尔声学股份有限公司 地址 261031 山东省潍坊市高新技术产业开 发区东方路268号 (72)发明人王平平 郄勇 (74)专利代理机构北京市隆安律师事务所 11323 代理人权鲜枝 何立春 (54) 发明名称 一。

2、种多媒体设备和一种多媒体信号处理方法 (57) 摘要 本发明公开了一种多媒体设备和一种多媒体 信号处理方法。该多媒体设备包括:麦克风阵列, 接收语音信号并转换成模拟音频信号后输出给音 频编码电路;音频编码电路,将所接收的模拟音 频信号转换成数字音频信号后,进行消噪处理以 及根据系统主控微控制单元反馈的音频信号进行 回声消除处理后输出;系统主控微控制单元,接 收来自音频编码电路的音频信号,将该音频信号 输出给扬声器的同时反馈给音频编码电路。本发 明的技术方案解决了扬声器的音频信号进入麦克 风阵列中形成的回声造成语音识别错误的问题, 并且实现成本和复杂度都比较低。 (51)Int.Cl. 权利要求。

3、书2页 说明书5页 附图2页 (19)中华人民共和国国家知识产权局 (12)发明专利申请 权利要求书 2 页 说明书 5 页 附图 2 页 1/2页 2 1.一种多媒体设备,其特征在于,该多媒体设备包括:麦克风阵列、音频编码电路、系 统主控微控制单元和扬声器,其中: 麦克风阵列,接收语音信号并转换成模拟音频信号后输出给音频编码电路; 音频编码电路,将所接收的模拟音频信号转换成数字音频信号后,进行消噪处理以及 根据系统主控微控制单元反馈的音频信号进行回声消除处理后输出; 系统主控微控制单元,接收来自音频编码电路的音频信号,将该音频信号输出给扬声 器的同时反馈给音频编码电路。 2.根据权利要求1所。

4、述的多媒体设备,其特征在于,该多媒体设备进一步包括:保存有 消噪算法程序和回声消除算法程序的存储器; 所述音频编码电路,采用存储器中的消噪算法程序进行消噪处理,以及采用存储器中 的回声消除算法进行回声消除处理。 3.根据权利要求1或2所述的多媒体设备,其特征在于,该多媒体设备进一步包括:摄 像头、视频处理电路、主控集成电路和显示屏,其中: 摄像头,用于捕获视频信号并输出给视频处理电路; 视频处理电路,用于对摄像头输出的视频信号进行编码处理后输出给主控集成电路; 所述音频编码电路,将进行消噪处理以及进行回声消除处理后的音频信号输出给主控 集成电路; 主控集成电路,将所接收的音频信号与视频信号合成。

5、音视频数据流后输出给所述系统 主控微控制单元; 所述系统主控微控制单元,负责音视频数据链路的管理,将音视频数据流中的视频信 号输出到显示屏,将音视频数据流中的音频信号输出到扬声器的同时反馈给音频编码电 路。 4.根据权利要求3所述的多媒体设备,其特征在于, 所述主控集成电路采用通用串行总线USB协议将音频信号和视频信号合成音视频数 据流。 5.一种多媒体信号处理方法,其特征在于,该方法包括: 采用麦克风阵列接收语音信号并转换成模拟音频信号后输出给音频编码电路; 音频编码电路将模拟音频信号转换成数字音频信号后,进行消噪处理以及根据反馈的 音频信号进行回声消除处理后输出; 系统主控微控制单元,接收。

6、来自音频编码电路的音频信号,将该音频信号输出给扬声 器的同时反馈给音频编码电路。 6.根据权利要求5所述的多媒体信号处理方法,其特征在于,所述音频编码电路将模 拟音频信号转换成数字音频信号后,进行消噪处理以及根据反馈的音频信号进行回声消除 处理后输出包括: 在存储器中保存消噪算法程序和回声消除算法程序; 音频编码电路将模拟音频信号转换成数字音频信号后,采用存储器中的消噪算法程序 进行消噪处理,以及采用存储器中的回声消除算法进行回声消除处理。 7.根据权利要求5或6所述的多媒体信号处理方法,其特征在于,该方法进一步包括: 采用摄像头捕获视频信号并输出给视频处理电路,视频处理电路对摄像头输出的视频。

7、信号 权 利 要 求 书CN 102831897 A 2/2页 3 进行编码处理后输出给主控集成电路; 所述音频编码电路将模拟音频信号转换成数字音频信号后,进行消噪处理以及根据反 馈的音频信号进行回声消除处理后输出给主控集成电路; 主控集成电路将所接收的音频信号与视频信号合成音视频数据流后输出给所述系统 主控微控制单元; 系统主控微控制单元负责音视频数据链路的管理,将音视频数据流中的视频信号输出 到显示屏,将音视频数据流中的音频信号输出到扬声器的同时反馈给音频编码电路。 8.根据权利要求7所述的多媒体信号处理方法,其特征在于,所述主控集成电路将所 接收的音频信号与视频信号合成音视频数据流包括:。

8、 所述主控集成电路采用通用串行总线USB协议将音频信号和视频信号合成音视频数 据流。 权 利 要 求 书CN 102831897 A 1/5页 4 一种多媒体设备和一种多媒体信号处理方法 技术领域 0001 本发明涉及多媒体信号处理技术领域,特别涉及一种多媒体设备和一种多媒体信 号处理方法。 背景技术 0002 目前多种智能音视频设备都添加了语音识别功能。图1是现有的一种多媒体设备 的组成结构的示意图。如图1所示,该多媒体设备包括:麦克风阵列101、音频编码电路102、 摄像头103、视频处理电路104、主控集成电路105、系统主控微控制单元(系统主控MCU) 106、扬声器107及显示屏10。

9、8。 0003 其中,麦克风阵列101负责语音信号的拾取并转换成模拟音频信号后输出给音频 编码电路102,音频编码电路102将从麦克风阵列101接收的模拟音频信号进行数字编码, 然后输出给主控集成电路105;摄像头103用于捕获视频信号并输出给视频处理电路104, 视频处理电路104用于对摄像头103输出的信号进行编码处理后输出给主控集成电路105; 主控集成电路105汇集视频信号和音频信号后,合成音视频数据流输出给系统主控微控制 单元106。系统主控微控制单元106为该音视频设备的核心器件,负责音视频数据链路的管 理。从系统主控微控制单元106输出的音频信号通过音频扬声器107变成声音信号,。

10、从系 统主控微控制单元106输出的视频信号通过显示屏108进行显示。此外,图1所示的音视 频设备还包括作为外围接口的USB接口和负责整个系统的稳定供电的电源电路等,这里不 再一一赘述。 0004 在现有的如图1所示的具有语音识别功能的音视频设备中,由于设备自身既有麦 克风阵列,又有扬声器,因此扬声器的音频信号会进入到麦克风阵列中形成回声,造成语音 识别的误动作。 0005 现有的一般的回声消除方案是在麦克风阵列处采用自适应滤波方式进行回声的 抑制,但这种方案实现起来成本和复杂度都较高。 发明内容 0006 本发明提供了一种多媒体设备和一种多媒体信号处理方法,以解决扬声器的音频 信号进入麦克风阵。

11、列中形成的回声造成的语音识别错误的问题,并且实现成本和复杂度都 比较低。 0007 为达到上述目的,本发明的技术方案是这样实现的: 0008 本发明公开了一种多媒体设备,该多媒体设备包括:麦克风阵列、音频编码电路、 系统主控微控制单元和扬声器,其中: 0009 麦克风阵列,接收语音信号并转换成模拟音频信号后输出给音频编码电路; 0010 音频编码电路,将所接收的模拟音频信号转换成数字音频信号后,进行消噪处理 以及根据系统主控微控制单元反馈的音频信号进行回声消除处理后输出; 0011 系统主控微控制单元,接收来自音频编码电路的音频信号,将该音频信号输出给 说 明 书CN 102831897 A 。

12、2/5页 5 扬声器的同时反馈给音频编码电路。 0012 该多媒体设备进一步包括:保存有消噪算法程序和回声消除算法程序的存储器; 0013 所述音频编码电路,采用存储器中的消噪算法程序进行消噪处理,以及采用存储 器中的回声消除算法进行回声消除处理。 0014 该多媒体设备进一步包括:摄像头、视频处理电路、主控集成电路和显示屏,其 中: 0015 摄像头,用于捕获视频信号并输出给视频处理电路; 0016 视频处理电路,用于对摄像头输出的视频信号进行编码处理后输出给主控集成电 路; 0017 所述音频编码电路,将进行消噪处理以及进行回声消除处理后的音频信号输出给 主控集成电路; 0018 主控集成。

13、电路,将所接收的音频信号与视频信号合成音视频数据流后输出给所述 系统主控微控制单元; 0019 所述系统主控微控制单元,负责音视频数据链路的管理,将音视频数据流中的视 频信号输出到显示屏,将音视频数据流中的音频信号输出到扬声器的同时反馈给音频编码 电路。 0020 所述主控集成电路采用通用串行总线USB协议将音频信号和视频信号合成音视 频数据流。 0021 本发明还公开了一种多媒体信号处理方法,该方法包括: 0022 采用麦克风阵列接收语音信号并转换成模拟音频信号后输出给音频编码电路; 0023 音频编码电路将模拟音频信号转换成数字音频信号后,进行消噪处理以及根据反 馈的音频信号进行回声消除处。

14、理后输出; 0024 系统主控微控制单元,接收来自音频编码电路的音频信号,将该音频信号输出给 扬声器的同时反馈给音频编码电路。 0025 在上述方法中,所述音频编码电路将模拟音频信号转换成数字音频信号后,进行 消噪处理以及根据反馈的音频信号进行回声消除处理后输出包括: 0026 在存储器中保存消噪算法程序和回声消除算法程序; 0027 音频编码电路将模拟音频信号转换成数字音频信号后,采用存储器中的消噪算法 程序进行消噪处理,以及采用存储器中的回声消除算法进行回声消除处理。 0028 该方法进一步包括:采用摄像头捕获视频信号并输出给视频处理电路,视频处理 电路对摄像头输出的视频信号进行编码处理后。

15、输出给主控集成电路; 0029 所述音频编码电路将模拟音频信号转换成数字音频信号后,进行消噪处理以及根 据反馈的音频信号进行回声消除处理后输出给主控集成电路; 0030 主控集成电路将所接收的音频信号与视频信号合成音视频数据流后输出给所述 系统主控微控制单元; 0031 系统主控微控制单元负责音视频数据链路的管理,将音视频数据流中的视频信号 输出到显示屏,将音视频数据流中的音频信号输出到扬声器的同时反馈给音频编码电路。 0032 在上述方法中,所述主控集成电路将所接收的音频信号与视频信号合成音视频数 据流包括: 说 明 书CN 102831897 A 3/5页 6 0033 所述主控集成电路采。

16、用通用串行总线USB协议将音频信号和视频信号合成音视 频数据流。 0034 由上述可见,本发明这种,麦克风阵列接收语音信号并转换成模拟音频信号后输 出给音频编码电路,音频编码电路将所接收的模拟音频信号转换成数字音频信号后,进行 消噪处理以及根据系统主控微控制单元反馈的音频信号进行回声消除处理后输出,系统主 控微控制单元接收来自音频编码电路的音频信号输出给扬声器的同时反馈给音频编码电 路的技术方案,由于系统主控微控制单元将音频信号返回给音频编码电路形成闭环,音频 编码电路根据反馈的音频信号进行回声消除处理,因此可以有效地消除回声,该方案相对 与现有的在多麦克风阵列处采用自适应滤波消除回声的方案来。

17、说,实现成本和复杂度都比 较低。 附图说明 0035 图1是现有的一种多媒体设备的组成结构的示意图; 0036 图2为本发明实施例中的多媒体设备的组成结构的示意图; 0037 图3是本发明实施例中的一种多媒体信号处理方法的流程图。 具体实施方式 0038 本发明中,采用麦克风阵列接收语音信号并转换成模拟音频信号后输出给音频编 码电路,音频编码电路将模拟音频信号转换成数字音频信号后,进行消噪处理以及根据反 馈的音频信号进行回声消除处理后输出,系统主控微控制单元将来自音频编码电路的音频 信号输出给扬声器的同时反馈给音频编码电路。该方案可以有效地消除回声,且该方案相 对与现有的在多麦克风阵列处采用自。

18、适应滤波消除回声的方案来说,实现成本和复杂度都 比较低。 0039 为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方 式作进一步地详细描述。 0040 图2为本发明实施例中的多媒体设备的组成结构的示意图。如图2所示,该系统包 括:麦克风阵列101、音频编码电路201、摄像头103、视频处理电路104、主控集成电路105、 系统主控微控制单元202、扬声器107和显示屏108。由于本发明的实施例中对音频编码电 路和系统主控微控制单元的功能都进行了改进,因此采用了与图1中不同的附图标记。 0041 其中,麦克风阵列101,用于接收语音信号并转换成模拟音频信号后输出给音频编 码。

19、电路201。音频编码电路201,用于将所接收的模拟音频信号转换成数字音频信号后,进 行消噪处理以及根据系统主控微控制单元反馈的音频信号进行回声消除处理后输出给主 控集成电路105。摄像头103用于捕获视频信号并输出给视频处理电路104,视频处理电路 104用于对摄像头103输出的视频信号进行编码处理后输出给主控集成电路105; 0042 主控集成电路105,将所接收的音频信号与视频信号合成音视频数据流后输出给 所述系统主控微控制单元202。系统主控微控制单元202负责音视频数据链路的管理,将音 视频数据流中的视频信号输出到显示屏,将音视频数据流中的音频信号输出到扬声器的同 时反馈给音频编码电路。

20、201。从系统主控微控制单元202输出的音频信号通过音频扬声器 107变成声音信号,从系统主控微控制单元202输出的视频信号通过显示屏108进行显示。 说 明 书CN 102831897 A 4/5页 7 0043 在图2所示的实施例中,音频编码电路201可以采用现有的一些成熟算法根据系 统主控微控制单元202反馈的音频信号从来自麦克风阵列101的音频信号中消去由于扬声 器107的声音信号进入麦克风阵列101所产生的回声。并且本实施例中,音频编码电路201 在进行回声消除之前还采用传统的消噪算法进行噪声的消除。 0044 一种具体的实现方式是,图2所示的多媒体设备还进一步包括:保存有消噪算法 。

21、程序和回声消除算法程序的存储器203;音频编码电路201,采用存储器203中的消噪算法 程序进行消噪处理,然后采用存储器203中的回声消除算法进行回声消除处理。存储器203 可以是EEPROM。 0045 视频识别和音频识别是目前的各种智能多媒体产品追逐的目标。在本发明的多媒 体设备中,优化了视频流与音频流的处理结构,主控集成电路105采用通用串行总线USB协 议将音频信号和视频信号合成音视频数据流。具体可以采用USB2.0协议。这样可以实现 可视会议等多媒体功能。 0046 在图2所示的实施例中,视频处理部分采用高分辨率的摄像头,视频数据流传输 采用USB协议,提高了视频数据传输的正确率。 。

22、0047 在图2所示的实施例中,主控微控制单元202将音频信号再反馈给音频编码电 路201,从而形成一个闭环控制系统,可以根据输出到扬声器的音频信号实时进行回音的消 除,从而使得语音识别功能更加精准,避免多媒体设备受到错误的音频信号进行误动作。 0048 基于上述实施例给出本发明中的一种多媒体信号处理方法。图3是本发明实施例 中的一种多媒体信号处理方法的流程图。如图3所示。该方法包括: 0049 301,采用麦克风阵列接收语音信号并转换成模拟音频信号后输出给音频编码电 路。 0050 302,音频编码电路将模拟音频信号转换成数字音频信号后,进行消噪处理以及根 据反馈的音频信号进行回声消除处理后。

23、输出。 0051 在本步骤中,具体可以在存储器中保存消噪算法程序和回声消除算法程序;音频 编码电路将模拟音频信号转换成数字音频信号后,采用存储器中的消噪算法程序进行消噪 处理,以及采用存储器中的回声消除算法进行回声消除处理。 0052 303,系统主控微控制单元接收来自音频编码电路的音频信号,将该音频信号输出 给扬声器的同时反馈给音频编码电路。 0053 图3所示的方法还可以进一步包括:采用摄像头捕获视频信号并输出给视频处理 电路,视频处理电路对摄像头输出的视频信号进行编码处理后输出给主控集成电路; 0054 所述音频编码电路将模拟音频信号转换成数字音频信号后,进行消噪处理以及根 据反馈的音频。

24、信号进行回声消除处理后输出给主控集成电路; 0055 主控集成电路将所接收的音频信号与视频信号合成音视频数据流后输出给所述 系统主控微控制单元; 0056 系统主控微控制单元负责音视频数据链路的管理,将音视频数据流中的视频信号 输出到显示屏,将音视频数据流中的音频信号输出到扬声器的同时反馈给音频编码电路。 0057 其中,所述主控集成电路采用通用串行总线USB协议将音频信号和视频信号合成 音视频数据流。 0058 综上所述,本发明的技术方案中,由于系统主控微控制单元将音频信号返回给音 说 明 书CN 102831897 A 5/5页 8 频编码电路形成闭环,音频编码电路根据反馈的音频信号进行回声消除处理,因此可以有 效地消除回声,且该方案相对与现有的在多麦克风阵列处采用自适应滤波消除回声的方案 来说,实现成本和复杂度都比较低。 0059 以上所述仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在 本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围 内。 说 明 书CN 102831897 A 1/2页 9 图1 说 明 书 附 图CN 102831897 A 2/2页 10 图2 图3 说 明 书 附 图CN 102831897 A 10 。

展开阅读全文
相关资源
猜你喜欢
相关搜索

当前位置:首页 > 物理 > 乐器;声学


copyright@ 2017-2020 zhuanlichaxun.net网站版权所有
经营许可证编号:粤ICP备2021068784号-1