将麦克风与振动传感器结合用于可佩戴设备.pdf

上传人:54 文档编号:19863 上传时间:2018-01-12 格式:PDF 页数:19 大小:3.95MB
返回 下载 相关 举报
摘要
申请专利号:

CN201410379909.2

申请日:

2014.08.04

公开号:

CN104780486A

公开日:

2015.07.15

当前法律状态:

撤回

有效性:

无权

法律详情:

发明专利申请公布后的视为撤回IPC(主分类):H04R 3/02申请公布日:20150715|||公开

IPC分类号:

H04R3/02; H04R1/08; H03G3/20

主分类号:

H04R3/02

申请人:

DSP集团有限公司

发明人:

阿里·海曼; 罗依·罗依米; 乌里·耶胡达

地址:

以色列赫尔泽利亚

优先权:

61/926,475 2014.01.13 US

专利代理机构:

北京安信方达知识产权代理有限公司11262

代理人:

周靖; 郑霞

PDF下载: PDF下载
内容摘要

本发明涉及将麦克风与振动传感器结合用于可佩戴设备。提供了将麦克风与V传感器结合用于可佩戴设备的方法和系统。V传感器可以用于检测和/或捕获骨头中的振动。所捕获的骨振动随后可以用于改善与音频相关的操作。例如,骨传导可以对应用户的音频输入(例如,语音),并且因此通过使得能够区分由麦克风捕获的用户的音频输入与环境噪声,所捕获的骨振动可以用于增强可佩戴设备中的噪声减少功能。这可以避免将可佩戴设备移动到更靠近用户的嘴部(将使嵌入的麦克风更靠近用户的嘴部)的需要。比如通过将其与预定的模式进行比较,所捕获的骨振动还可以被分析以确定其是否对应于用户的控制输入(例如,通过手指敲击)。

权利要求书

1.  一种方法,包括在可佩戴电子设备中执行下列操作:
经由与所述可佩戴电子设备的用户的身体接触的骨传导元件获得通 过所述用户的身体传播的声音信号;
处理经由所述骨传导元件获得的所述声音信号;以及
基于所述声音信号的处理,自适应地控制所述可佩戴电子设备的音频 操作。

2.
  如权利要求1所述的方法,其中所述音频操作包括噪声减少或噪 声消除。

3.
  如权利要求2所述的方法,包括在经由所述可佩戴电子设备的空 中传播音频的输入部件捕获音频输入时和/或在经由所述骨传导元件捕获 声音信号时,自适应地控制所述噪声减少或噪声消除。

4.
  如权利要求3所述的方法,其中所述空中传播音频的输入部件包 括嵌入在所述可佩戴电子设备中的麦克风。

5.
  如权利要求3所述的方法,包括通过使用经由所述骨传导元件获 得的所述声音信号,来识别经由所述空中传播音频的输入部件捕获的音频 输入中的环境噪声或其他类型的噪声,以自适应地控制所述噪声减少或噪 声消除。

6.
  如权利要求3所述的方法,其中所述噪声减少或噪声消除的自适 应控制包括:
基于所述骨传导元件确定是否没有声音信号正通过所述用户的身体 传播;
在没有声音信号正通过所述用户的身体传播时,经由所述空中传播音 频的输入部件捕获音频输入;
处理所捕获的音频输入,以产生环境噪声数据;以及
随后在噪声减少操作或噪声消除操作期间应用所产生的环境噪声数 据。

7.
  如权利要求1所述的方法,其中所述处理包括确定何时所述声音 信号对应于所述用户的语音。

8.
  如权利要求7所述的方法,包括在所述声音信号的处理期间当所 述声音信号对应于所述用户的语音时,识别所述声音信号中的对应于所述 用户的语音的部分。

9.
  如权利要求1所述的方法,其中所述处理包括确定何时所述声音 信号对应于所述用户的控制输入,所述控制输入被提供以使其导致在所述 用户的身体中的振动。

10.
  如权利要求9所述的方法,包括在所述声音信号的处理期间当所 述声音信号对应于所述用户的控制输入时,识别所述声音信号中的对应于 一个或多个特定的控制命令的部分。

11.
  如权利要求10所述的方法,包括基于所识别的部分与一个或多个 预定模式的匹配来确定所述一个或多个特定的控制命令。

12.
  如权利要求1所述的方法,其中所述可佩戴电子设备的音频操作 的自适应控制包括使用所述骨传导元件用于话音激活检测。

13.
  如权利要求12所述的方法,其中使用所述骨传导元件用于话音 激活检测包括:
经由所述骨传导元件确定何时存在通过所述用户的身体传播的声音 信号;以及
当没有声音信号通过所述用户的身体传播时,忽略由所述可佩戴电子 设备捕获的空中传播的音频信号。

14.
  一种系统,包括:
可佩戴电子设备,其包括骨传导元件和一个或多个电路,所述一个或 多个电路可操作以执行下列操作:
经由与所述可佩戴电子设备的用户的身体接触的所述骨传导元 件获得通过所述用户的身体传播的声音信号;
处理经由所述骨传导元件获得的所述声音信号;以及
基于所述声音信号的处理,自适应地控制所述可佩戴电子设备的 音频操作。

15.
  如权利要求14所述的系统,其中所述音频操作包括噪声减少或 噪声消除。

16.
  如权利要求15所述的系统,其中:
所述可佩戴电子设备包括空中传播音频的输入部件;以及
所述一个或多个电路可操作以在经由所述可佩戴电子设备的空中传 播音频的输入部件捕获来自所述用户的音频输入时和/或在经由所述骨传 导元件捕获声音信号时,自适应地控制所述噪声减少或噪声消除。

17.
  如权利要求16所述的系统,其中所述空中传播音频的输入部件 包括嵌入在所述可佩戴电子设备中的麦克风。

18.
  如权利要求16所述的系统,其中所述一个或多个电路可操作以 通过使用所获得的声音信号,来识别经由所述空中传播音频的输入部件捕 获的所述音频输入中的环境噪声或其他类型的噪声,以自适应地控制所述 噪声减少或噪声消除。

19.
  如权利要求16所述的系统,其中所述噪声减少或噪声消除的自 适应控制包括:
所述骨传导元件可操作以确定是否没有声音信号正通过所述用户的 身体传播;
在没有声音信号正通过所述用户的身体传播时,所述空中传播的部件 可操作以捕获音频输入;
所述一个或多个电路可操作以处理所捕获的音频输入,以产生环境噪 声数据;以及
所述一个或多个电路可操作以随后在噪声减少或噪声消除期间应用 所述环境噪声数据。

20.
  如权利要求14所述的系统,其中所述处理包括确定何时所述声 音信号对应于所述用户的语音。

21.
  如权利要求20所述的系统,其中所述一个或多个电路可操作以 在所述声音信号的处理期间当所述声音信号对应于所述用户的语音时,识 别所述声音信号中的对应于所述用户的语音的部分。

22.
  如权利要求14所述的系统,其中所述处理包括确定何时所述声 音信号对应于所述用户的控制输入,所述控制输入被提供以使其导致在所 述用户的身体中的振动。

23.
  如权利要求22所述的系统,其中所述一个或多个电路可操作以 在所述声音信号的处理期间当所述声音信号对应于所述用户的控制输入 时,识别所述声音信号中的对应于一个或多个特定的控制命令的部分。

24.
  如权利要求23所述的系统,其中所述一个或多个电路可操作以 基于所识别的部分与一个或多个预定模式的匹配来确定所述一个或多个 特定的控制命令。

25.
  如权利要求14所述的系统,其中所述骨传导元件可配置成作为 话音激活检测器VAD操作。

26.
  如权利要求25所述的系统,其中,在所述骨传导元件被配置成 作为话音激活检测器VAD操作时,所述一个或多个电路可操作以:
确定何时存在通过所述用户的身体传播的声音信号;以及
当没有声音信号通过所述用户的身体传播时,忽略由所述可佩戴电子 设备捕获的空中传播的音频信号。

说明书

将麦克风与振动传感器结合用于可佩戴设备
优先权声明
本专利申请参考了2014年1月13日提交的编号为61/926,475的美国 临时专利申请,并要求其优先权和利益,该美国临时专利申请在此通过引 用被全部并入本文。
技术领域
本公开的各个方面涉及音频处理。更具体地,本公开的某些实现涉及 将麦克风与振动传感器结合用于可佩戴设备。
背景技术
现有的用于捕获可佩戴电子设备中的音频的方法和系统可能效率低 和/或造价高。通过将常规和传统办法与参考附图在本公开的其余部分阐述 的本方法和装置的一些方面进行比较,这些常规和传统办法的其他限制和 缺点对本领域的技术人员将变得明显。
发明内容
提供了将麦克风与振动传感器结合用于可佩戴设备的系统和/或方法, 所述系统和/或方法实质上与在至少一个附图中示出的一样、和/或结合至 少一个附图描述的一样,并且在权利要求中进行了更全面的阐述。
本公开的这些和其他的优点、方面和新颖的特征,以及其中所示出的 实现的细节,将从下面的描述和附图中得到更全面的理解。
附图说明
图1示出了示例的可佩戴电子设备,以及使用该可佩戴电子设备的示 例布置。
图2示出了用于放置可佩戴电子设备的示例位置。
图3A-3C示出了与骨传导位置和/或不同的骨传导操作相关的示例音 频信号波形。
图4示出了可以支持使用振动传感器来捕获用户骨头中的振动的可佩 戴电子设备的示例结构。
图5是示出用于使用骨传导感知输入来支持可佩戴电子设备中的音频 操作的示例过程的流程图。
具体实施方式
可以在将麦克风与振动传感器结合用于可佩戴设备的方法和系统中 发现某些示例性实现。如在此使用的术语“电路”和“电路系统”是指实 际的电子部件(即硬件)和可以配置硬件、由硬件执行、以及以其他方式 与硬件关联的任何软件和/或固件(“代码”)。例如,如在此使用的,特定 的处理器和存储器可以包括执行第一组多行代码时的第一“电路”,并且 可以包括执行第二组多行代码时的第二“电路”。如在此使用的,“和/或” 意味着由“和/或”结合的列表中的项的任意一个或多个。作为示例,“x 和/或y”意味着三元素集合{(x),(y),(x,y)}中的任意元素。作为另一个示例, “x,y和/或z”意味着七元素集合{(x),(y),(z),(x,y),(x,z),(y,z),(x,y,z)} 中的任意元素。如在此使用的,术语“块”和“模块”是指能由一个或多 个电路执行的功能。如在此使用的,术语“示例”意味着用作非限制性示 例、例子、或说明。如在此使用的,术语“例如”和“举例”引入一个或 多个非限制性示例、例子、或说明的列表。如在此使用的,电路系统是“可 操作的”以在电路系统包含执行功能必要的硬件和代码(如果需要任何一 个的话)时执行该功能,而无论该功能的执行是否通过一些用户可配置的 设置被禁用、或不被启用。
图1示出了示例的可佩戴电子设备,以及使用该可佩戴电子设备的示 例布置。参考图1,其中示出了电子设备100。
电子设备100可以包含用于实现本发明的多个方面的合适的电路系 统。例如,电子设备100可以操作以执行或支持多个功能、操作、应用、 和/或服务。由电子设备100执行或支持的功能、操作、应用、和/或服务 可以基于用户指令和/或预先配置的指令运行或控制。
在一些例子中,电子设备100可以支持数据通信(到电子设备100和 /或来自电子设备100的通信),诸如通过有线连接和/或无线连接的数据通 信,其可以根据由电子设备100支持的一个或多个无线和/或有线协议或标 准进行设置和/或使用。
在一些例子中,电子设备100可以支持音频和其他声音信号的输入和 /或输出。例如,电子设备100可以包含多个音频输入和/或输出(I/O)部 件(例如,麦克风、扬声器、和/或其他音频I/O部件)以用于输出(播放) 和/或输入(捕获)音频,以及用于驱动、控制和/或使用音频I/O部件的合 适的电路系统。
电子设备100可以被配置成在由用户佩戴时使用。在这方面,电子设 备100可以包含用于允许设备被固定到用户身体的元件(例如,细绳、带 子、皮带等)。此外,电子设备100可以被设计为和/或被实现为用于允许 在运动中和/或在不同的位置使用设备。在这方面,电子设备100可以被设 计为和/或被配置为允许便于移动,诸如允许其在随着用户移动并由用户支 持的同时容易移动,并且电子设备100可以被配置为执行由移动中的设备 支持的至少一些操作、功能、应用和/或服务。可佩戴电子设备的示例可以 包括数字手表和类似手表的设备(例如,iWatch),以及可以被附着到臂带 等的设备。然而,本公开不限于任何特定类型的电子设备。在图1中示出 的特定示例中,电子设备100可以是类似手表的设备,其可以像手表一样 佩戴,比如被佩戴在设备用户的手110的手腕上。
在操作中,电子设备100可以被用来执行、实施、或提供比如根据预 先配置的信息和/或基于用户与设备的交互的多种操作、任务、功能、应用、 和/或服务。在一些例子中,电子设备100可以被用于输入和/或输出音频。 在这一方面,音频输入/输出可能涉及如与媒体相关的功能(例如,收听音 乐或包含音频输出的其他多媒体,其可以被存储在本地或从远程来源获 取,即“流式传输”);与控制相关的功能(例如,话音命令);和/或与通 信相关的功能(例如,涉及比如使用电子设备100与其他设备/用户通信的 功能,据此可以交换比如话音呼叫等的音频内容(例如,语音和/或其他音 频)的功能)。
因为电子设备100是可佩戴设备(特别是,如图1中示出的作为非限 制性的示例的类似手表的设备),所以在一些例子中可能需要调整设备的 定位以保证改善的(或甚至是可接受的)性能。例如,如在使用场景120 中示出的,在与音频相关的操作期间,其中设备用户(例如,用户140) 可以提供音频输入(例如,比如呼叫或话音命令期间的语音),用户140 可能需要将电子设备100移动到更靠近用户的嘴部150。这可能是其中可 能存在显著的环境噪声量的情况。在这方面,由电子设备所输入和/或输出 的音频质量可能受到环境条件及多种因素的影响,和/或可能依赖于环境条 件及多种因素。
例如,由电子设备捕获(例如,通过麦克风)的音频质量可能受到噪 声环境的影响。噪声环境可能由比如风、环境音频(例如,其他用户在附 近交谈、音乐、交通等)等的多种条件引起。所有这些条件的组合在下文 可以被描述为环境噪声。环境噪声可以以不同的方式影响音频质量。例如, 环境噪声可能与通过设备捕获的期望的音频(例如,用户语音)组合(无 意地)。因此,在电子设备中响应于用户输入产生的音频内容可能实际上 同时包含了想要的内容和不想要的内容(对应于环境噪声)。环境噪声也 可能干扰用户音频输入,严重到使得电子设备可能根本不能采集到用户输 入。因此,如在使用场景120中示出的,将电子设备100移动到更靠近用 户的嘴部150,可以通过减少环境噪声的影响来改善音频性能(特别是音 频捕获),因为电子设备100越靠近用户的嘴部150,用户音频输入相对于 环境噪声将会越强。然而,将电子设备100移动到靠近用户的嘴部150可 能并非所期望的,因为这样做用户140可能不方便。相反地,可能需要提 供用来保证增强的(或可接受的)音频性能(特别是关于捕获用户音频输 入的音频性能)而无需用户140将电子设备100移动到靠近用户的嘴部150 的办法,如在使用场景130中示出的。
因此,在本公开的多种实现中,可佩戴电子设备(比如电子设备100) 可以被配置成使用结合空中传播的音频输入工具(例如,麦克风)的骨传 导感知来增强音频输入性能。例如,可佩戴电子设备可以包含振动传感器 (V传感器),其可以操作来检测和/或捕获用户骨头中的振动。在至少一 些例子中,用户骨头中的振动可能产生于用户的动作,所述动作可能意在 输入音频或其他信息(例如,控制信息)。
例如,当用户140讲话(例如,以提供音频输入,比如在话音呼叫期 间)时,语音可能引起产生声音的地方的骨头中(或可能位于该区域附近) 的振动。这些振动可以随后传播到用户骨骼的各处。同样,在一些例子中, 振动可能由电子设备可以被配置为将其作为控制输入的动作引起。例如, 敲击模式(例如,用户140敲击手指,如在附近的表面等上敲击手指)可 以被预定义到电子设备100中,使得这些敲击模式可以被解释为特定的控 制命令,例如,第一敲击模式可以被解释为接受呼叫,第二敲击模式可以 被解释为结束呼叫,第三敲击模式可以被解释为提高音量等。因此,可以 对通过V传感器获取和/或捕获的输入进行处理,比如结合通过麦克风获 取的输入,以使增强音频操作成为可能。例如,以这种方式通过V传感器 获取的输入可以被用于提供改善的噪声减少,例如,通过使用所确定的产 生于用户语音的骨振动,来更好地定位用户音频输入和/或区分用户音频输 入和环境噪声。以这种方式通过V传感器获取的输入还可以被用于允许以 便捷的方式获取用户控制输入,例如,无需与可佩戴设备直接交互(例如, 无需触摸设备或其任何部分),从而消除了当提供控制输入(例如,控制 输入可以无需使用用户的双手而被提供,即无需用户使用空闲的手来按压 或触摸附着在另一只手上的设备,并且因此可佩戴设备不需要被重新放 置,从而使得空闲的那只手可以用来触摸设备)时对不期望的重新放置设 备的需要。
然而,使用振动传感器(或概括为骨传导感知)来增强可佩戴电子设 备中的音频操作,可能受到多种因素的影响。例如,可能关于振动传感器 的可用性的一个特定的考虑可能是可佩戴电子设备在用户身体上的位置。 在这方面,人的身体可能不一定提供一致的骨传导波形;相反地,人身体 的特定区域可以被确定为对于骨传导是最佳的(即,用于捕获骨头中的振 动),而其他区域可能表现出较差或不充分的骨传导(对于读取骨头中的 振动)。结合下面的附图更详细地解释骨传导特性中的变化以及其使用(说 明)。
图2中示出了用于放置可佩戴电子设备的示例位置。参考图2,其中 示出了手臂200。
人的身体可能表现出变化的骨传导特性,比如基于骨头上的软组织的 厚度—例如,骨头越靠近表面/皮肤,骨传导的性能越好(因为能够准确捕 获和/或检测在骨头中传播的振动)。例如,在典型的人的手臂上(例如, 手臂200),可能存在可以被视为用于捕获和/或读取骨头中的振动的最佳 位置的不同位置(例如,其中用于优化性能的可以放置V传感器的位置)。 在图2示出的示例手臂200中,示出了两个这种最佳位置:手腕区域210 和臂肘区域220。这两个位置的特征都在于具有很薄的软组织,骨头(手 腕骨头和构成臂肘关节的骨头末端)上仅仅被皮肤薄层覆盖。
因此,将V传感器放置在这些位置,即放置在手腕区域210和/或臂 肘区域220,可以实现对通过骨头传播的任何振动的最佳检测,其中包括 由用户的语音引起的振动和/或由其他动作引起的振动(例如,通过敲击手 指)。图3A-3B描绘了在用来捕获产生自用户语音的振动时,这些区域的 示例的骨传导性能。巧合的是这两个位置对于放置可佩戴电子设备也是理 想的,例如,类似手表的设备通常环绕手腕佩戴,这是前臂最细的部分; 而臂肘区域(或其正上方)通常是佩戴基于系带的设备时的选择,例如在 体育活动期间。
图3A-3C示出了与骨传导位置和/或不同的骨传导操作相关的示例性 音频信号波形。参考图3A-3C,其中显示了图310、320、330、以及340。
图310、320、330、以及340中的每个可以包括对应于经由示例V传 感器捕获的信号(例如,骨头中的振动)的波形和/或声谱图测量。图310、 320、330、以及340说明了通过V传感器在不同位置检测的、和/或关于 可能已经引起所检测的振动的不同(类型的)输入的信号的示例波形和/ 或声谱图测量。例如,图310和320对应于在最佳位置放置V传感器(例 如,分别是手腕区域210和臂肘区域220)。如在图310和320中示出的, 当放置在这些最佳位置时,V传感器可以提供对应于用户语音(期望作为 音频输入)的骨振动的非常可靠的捕获。在另一方面,如在图330中表示 的,当V传感器被放置在非最佳/较差的位置时,V传感器可能不能捕获(或 不能充分捕获)任何骨振动,从而不能检测到用户的语音(期望作为音频 输入)。
图340描绘了被用于捕获例如指头敲击的可被期望引起骨振动的控制 输入时的V传感器的性能。在这方面,图340同样对应于将V传感器放置 在最佳位置(例如,手腕区域210和肘臂区域220)。例如,用户的手指敲 击可能导致手腕和臂肘的骨头中的卡嗒声(clicking)。因此,如在图340 中示出的,由于最佳放置,V传感器可以提供对应于用户的手指敲击的骨 振动的非常可靠的捕获。
图4示出了可以支持使用振动传感器来捕获用户骨头中的振动的可佩 戴电子设备的示例结构。参考图4,其中显示了电子设备400。
电子设备400可以包括用于实现本公开的多个方面的合适的电路系 统。例如,电子设备400可以对应于图1的电子设备100。在这方面,电 子设备400可以是可佩戴电子设备。此外,电子设备400可以支持音频和 其他声音信号的输入和/或输出。例如,电子设备400可以包含多个音频输 入和/或输出(I/O)部件(例如,麦克风、扬声器、和/或其他音频I/O部 件),所述部件用于输出(播放)和/或输入(捕获)音频,以及用于驱动、 控制、和/或使用音频I/O部件的合适的电路系统。
例如,如在图4中描绘的示例实现中示出的,电子设备400可以包括 音频处理器410、音频输入设备(例如,麦克风)420、音频输出设备(例 如,扬声器)430、骨传导元件440和450(例如,分别用于输出和捕获基 于骨传导的信号)、以及骨传导控制器块460。
在这方面,麦克风420和骨传导元件450(例如,V传感器)可以被 配置用于捕获音频或其他声音信号;而扬声器430和骨传导元件440可以 被用于输出来自电子设备400的音频或其他声音信号。尽管扬声器(例如, 扬声器430)和麦克风(例如,麦克风420)可以被配置成基于通过空气 传输或接收信号(例如,经由隔膜振动)来输出或输入音频或声音信号, 骨传导元件被用于经由或通过用户的骨头输出或输入音频(或其他声音) 信号。例如,由骨传导元件440输出的声音可以受控的方式引起骨头中的 振动,使得信号能够绕过鼓膜由耳朵的内部部分捕获。在另一方面,骨传 导元件450可以被配置成捕获通过用户的骨头传播的振动,例如,由于用 户谈话或也能引起骨头中的振动的其他动作(例如,敲击手指)导致的振 动。
音频处理器410可以包括用于执行电子设备400中的各种音频信号处 理功能的合适的电路系统。例如,音频处理器410可操作以处理经由输入 音频部件(例如,麦克风430)捕获的音频信号,以能够将其转换为电气 信号,例如,用于储存和/或传递到电子设备400外部。音频处理器410还 可以操作以处理电气信号,来产生用于经由输出音频部件(例如,扬声器 420)输出的对应的音频信号。音频处理器410还可以包括合适的电路系 统,其可被配置成执行附加的与音频相关的功能(例如,话音编码/解码操 作)。在这方面,音频处理器410可以包括模数转换器(ADC)、一个或多 个数模转换器(DAC)、和/或一个或多个复用器(MUX),其可以被用于 将在音频处理器410中处理的信号引导到其恰当的输入端口和输出端口。 音频处理器410可以包括通用处理器,其可以被配置为执行或支持特定类 型的操作(例如,音频相关的操作)。可选择地,音频处理器410可以包 括专用处理器,例如,数字信号处理器(DSP)、基带处理器、和/或应用 处理器(例如,ASIC)。
骨传导控制器块460可以包括合适的电路系统,其用于管理和/或控制 电子设备400中与骨传导相关的操作或功能。在这方面,骨传导控制器块 460可以被配置成控制骨传导元件,以管理与骨传导有关的操作和/或功能 (例如,涉及经由骨传导元件输出和/或输入信号)、和/或处理或分析结合 骨传导获得的数据。例如,骨传导控制器块460可以被配置为确定与骨传 导相关的源(例如,骨传导元件240和250、和/或音频处理器210中与骨 传导相关的功能)的设置或控制参数、和/或对其进行调整。
在操作中,电子设备400可以被用于执行各种操作和/或功能,包括输 入和/或输出音频(和其他声音)信号。例如,当电子设备400被用于输入 音频时,音频信号可以经由麦克风420捕获,并且可以在音频处理器410 中进行处理,例如,将其转换成数字数据,其随后可以被储存和/或被传递 到电子设备400的外部。当电子设备400被用于输出音频时,电子设备400 可以接收包括音频内容(例如,比如在话音呼叫或其他与音频相关的数据 交换中在来自其他电子设备的信号中接收的内容;或从比如用来储存音乐 和其他多媒体的存储器的内部储存资源或合适的媒体储存设备读取的内 容)的数字数据,处理数字数据以提取音频内容,并且随后经由音频处理 器410处理音频内容,以将其转换为音频信号。音频信号可以随后经由扬 声器430输出。
在一些例子中,代替或除了经由麦克风420和/或扬声器430通过空气 进行音频输入/输出,电子设备400可以被配置为支持使用骨传导来输入和 /或输出音频信号。在这方面,预期用于骨传导输出的音频信号可以经由音 频处理器410特别处理,以使其适合经由骨传导元件440输出。在另一方 面,骨传导元件450可以被用于捕获信号(例如,在用户的骨头中传播的 对应于比如语音的音频的振动),所捕获的信号在音频处理器410中处理。
在一些例子中,电子设备400可以被配置成提供骨传导操作的特定方 面的自适应监测和控制。在这方面,骨传导控制器460可以被配置成监测 骨传导元件440和450,并且分析所获得的和/或与骨传导元件或其功能有 关的数据,从而对骨传导的质量进行评价和/或确定用来增强骨传导可能需 要的任何调整。例如,骨传导控制器460可以操作以分析与骨传导有关的 信号(例如,经由骨传导元件450捕获的信号),诸如以确定电子设备400 或至少其骨传导元件是否被放置在最佳位置。所述确定可以基于预定的 “知识”,例如,预先储存的用于识别典型的人身体上的已知用于提供最 佳骨传导的特定区域的信息。此外,骨传导控制器460可操作以自适应地 形成关于特定用户的个人(subjective)信息,这些信息比如基于从其他与 音频相关的操作获得的信息(例如,空中传播的音频输入/输出)、表明用 户对骨传导质量的感知的用户输入(例如,基于用户在比如触摸屏、键盘 等合适工具上尽可能地指示的输入)。
在一些示例性实现中,电子设备400(其可以是可佩戴电子设备)可 以被配置为使用结合空中传播的音频输入工具(例如,麦克风)的骨传导 感知,以增强音频输入性能。例如,骨传导元件(V传感器)450可以用 于检测和/或捕获用户骨头470中的振动。如关于图1、图2、以及图3A-3C 所描述的,在至少一些例子中,用户骨头470中的振动可能产生于用户的 动作,所述用户动作可能被期望是输入音频(例如,说话)和/或可能被期 望是提供其他信息(例如,用手指敲击作为提供控制信息的方式)。在这 方面,支持基于音频输入和/或其他骨振动的操作的骨传导元件(V传感器) 450的使用可能取决于电子设备400(或特别是骨传导元件(V传感器)450) 的放置。经由骨传导元件(V传感器)450获得的信号可以被用来增强与 音频相关的操作。例如,骨传导元件(V传感器)450可以被用于,一旦 确定被放置在合适的骨传导位置,那么就检测用户何时正在讲话。此外, 由骨传导元件(V传感器)450捕获的对应于用户语音的信号,可以经由 音频处理器410和/或骨传导控制器460处理。例如,所产生的数据可以随 后被用于噪声减少。例如,经由骨传导元件(V传感器)450获得的信号 信息,大概代表用户语音,可以被用于区分在从麦克风410的输入中捕获 的用户语音(将其与例如环境噪声的其他不想要的音频区分开),从而保 证在所产生的数据中仅包含用户语音。因此,使用骨传导元件(V传感器) 450避免了将可佩戴电子设备移动到更靠近用户的嘴部的需要。换句话说, 用户可以进行正常的交谈而无需将用户的手保持在用户的嘴部,并且无需 用户以其他方式直接对着表的麦克风讲话。
在一些例子中,V传感器(例如,V传感器450)可以被配置为和/或 用作VAD(话音激活检测器)。例如,当V传感器被配置成用作VAD时, 只有被检测为通过用户的骨头传播的信号才可以被视为(例如,在另外评 估之后)话音激活信号。因此,以这种方式使用V传感器可以保证只有来 自期望的人(例如,佩戴可佩戴设备的用户)的信号将导致话音激活,而 其他人将不能够激活(故意或无意)该可佩戴设备。
此外,用作VAD的V传感器还可以被配置为执行和/或支持噪声减少 操作。在这方面,以这种方式执行的噪声减少可以被应用为自适应操作, 例如,噪声减少可以基于确定是否或何时期望的人(佩戴可佩戴设备的用 户)正在谈话而进行调整。例如,噪声减少过程的自适应可以在人不在谈 话时完成,并且因此系统中支持的噪声减少能够适应于环境噪声。换句话 说,当可佩戴设备的用户不在谈话时(如目前经由V传感器/VAD检测的 任何信号确定的),可以假定所采集的任何音频(例如,经由麦克风420) 可能对应于环境噪声。因此,可以对这些捕获的音频进行处理,并且可以 将其相关信息用作环境噪声的特性,以允许在经由V传感器捕获到想要的 输入时执行对应于环境噪声的成分的噪声减少。
骨传导元件(V传感器)450还可以被用于支持基于骨振动的控制交 互性。例如,在一些例子中,用户骨头470中的振动可能来自被期望是用 来提供控制输入的方式的用户的特定动作。例如,可以使用敲击模式来提 供比如用来控制或调整与音频有关的操作或功能的控制输入。在这方面, 骨传导元件(V传感器)450可以在一旦确定被放置在合适的骨传导位置 时,就捕获骨振动,所述骨振动可能由(或不由)用户手指的敲击引起。 对应的信号可以随后被处理(例如,经由音频处理器410)和分析(例如, 经由骨传导控制器460),以确定所述振动是否被真正期望为基于敲击的控 制输入。在这方面,信号可以与预先确定的敲击波形(例如,储存到电子 设备400中的波形)比较(例如,通过骨传导控制器460比较),以确定 信号是否匹配任何预先确定的敲击波形。如果存在成功的匹配,那么在电 子设备400中可以执行相应的命令或动作。
图5是示出用于使用骨传导感知输入来支持可佩戴电子设备中的音频 操作的示例过程的流程图。参照图5,其中示出了流程图500,其包括多 个示例步骤,所述步骤可以在使用骨传导感知输入时执行以支持可佩戴电 子设备(例如,图4的电子设备400)中的音频操作。
在起始步骤502,可佩戴电子设备可以被附着到设备用户(或由设备 用户佩戴),并且可以被加电(并被启动)以进行操作。
在步骤504,音频操作可以在可佩戴电子设备中执行(例如,在话音 呼叫期间),其可以包括经由麦克风的音频输入捕获。
在步骤506,可以确定骨传导传感器的放置是否适合于骨传导操作, 即用于捕获骨头中的振动。这可以包括确定可佩戴电子设备、其骨传导传 感器(例如V传感器)是否放置在用户身体上的预定的最佳位置(比如, 位于手腕、臂肘等处)。在其中确定骨传导传感器的放置不适合骨传导操 作的例子中,过程可以环回到步骤504,以继续“正常的”音频操作(即, 只使用麦克风)。
回到步骤506,在其中确定骨传导传感器的放置适合骨传导操作的例 子中,过程可以进行到步骤508。在步骤508中,骨传导输入可以经由骨 传导传感器(V传感器)捕获。例如,骨传导输入可以包括由用户的语音 和/或其他用户输入(例如,指头敲击)引起的骨头中的振动。
在步骤510,骨传导输入可以被处理,以提取对应于用户语音或其他 用户输入的数据。
在步骤512,基于骨传导的用户语音和/或其他用户输入可以被用来增 强例如噪声减少和/或消除、控制操作等的音频操作。
其他实施方式可以提供非暂时性的计算机可读介质和/或储存介质、和 /或其上储存了机器代码和/或计算机程序的非暂时性的机器可读介质和/或 储存介质,所述机器代码和/或计算机程序具有由机器和/或计算机可执行 的至少一个代码段,从而引起机器和/或计算机执行在此描述的将麦克风与 V传感器结合用于可佩戴设备的步骤。
因此,本方法和/或系统可以在硬件、软件、或硬件和软件的组合上实 现。本方法和/或系统可以在至少一个计算机系统中以集中的方式实现,或 以其中不同的元件分布在几个互联的计算机系统上的分布式方式实现。适 于执行在此描述的各种方法的任何种类的计算机系统或其他系统都是合 适的。典型的硬件和软件的组合可以是带有计算机程序的通用计算机系 统,所述计算机程序在被加载和执行时,控制计算机系统使其执行在此描 述的方法。另一种典型的实现可以包括专用集成电路或芯片。
本方法和/或系统还可以被嵌入在计算机程序产品中,其包括使得能够 实现在此描述的方法的所有特征,并且当其被加载到计算机系统中时,能 够执行这些方法。在本上下文中的计算机程序意味着以任何语言、代码、 或标记形式对指令集合的任何表达,所述指令集合被期望引起具有信息处 理能力的系统直接执行或在下面两个功能中的一个或两个之后执行特定 的功能,所述功能如下:a)转换成另一种语言、代码或标记;b)在不同 的材料形式中重新产生。因此,一些实现可以包括具有储存在其上的一行 或多行由机器可执行的代码的非暂时性的机器可读(例如,计算机可读) 介质(例如,闪存驱动器、光盘、磁储存盘等),从而引起机器执行在此 描述的过程。
虽然已经参考某些实现对本方法和/或系统进行了描述,但是本领域的 技术人员将理解的是,可以做出多种变化并且可以替换各个等价部分而没 有背离本方法和/或系统的范围。此外,可以做出许多修改以使特定的情形 或材料适于本公开的教导而不背离其范围。因此,期望本方法和/或系统不 被限制在所公开的特定实现,而是本方法和/或系统将包括落入所附的权利 要求之内的所有实现。

将麦克风与振动传感器结合用于可佩戴设备.pdf_第1页
第1页 / 共19页
将麦克风与振动传感器结合用于可佩戴设备.pdf_第2页
第2页 / 共19页
将麦克风与振动传感器结合用于可佩戴设备.pdf_第3页
第3页 / 共19页
点击查看更多>>
资源描述

《将麦克风与振动传感器结合用于可佩戴设备.pdf》由会员分享,可在线阅读,更多相关《将麦克风与振动传感器结合用于可佩戴设备.pdf(19页珍藏版)》请在专利查询网上搜索。

本发明涉及将麦克风与振动传感器结合用于可佩戴设备。提供了将麦克风与V传感器结合用于可佩戴设备的方法和系统。V传感器可以用于检测和/或捕获骨头中的振动。所捕获的骨振动随后可以用于改善与音频相关的操作。例如,骨传导可以对应用户的音频输入(例如,语音),并且因此通过使得能够区分由麦克风捕获的用户的音频输入与环境噪声,所捕获的骨振动可以用于增强可佩戴设备中的噪声减少功能。这可以避免将可佩戴设备移动到更靠近。

展开阅读全文
相关资源
猜你喜欢
相关搜索

当前位置:首页 > 电学 > 电通信技术


copyright@ 2017-2020 zhuanlichaxun.net网站版权所有
经营许可证编号:粤ICP备2021068784号-1