用于确定用户场景的方法和装置.pdf

提供一种用于训练设备以将用户，物体或设备场景信息与用户定义的场景相关联的方法。场景信息平台从设备接收已记录的场景信息。已关联的已记录的场景信息则与场景相关联以使场景模型的训练能够与场景相关联。

权利要求书一种方法，包括：接收在用于指定场景的设备上的输入；响应所述输入，至少部分地导致场景信息的记录，所述场景信息与所述设备，所述设备的用户，或其组合相关联；将已记录的场景信息与所述场景相关联。根据权利要求1所述的方法，进一步包括：至少部分地导致未标记的场景信息的监测，该未标记的场景信息与所述设备，所述设备的所述用户，或其组合相关联；将所述未标记的场景信息与所述已记录的场景信息相比较；以及至少部分地基于所述比较至少部分地导致与所述未标记的场景信息相关联的所述场景的识别。根据权利要求2所述的方法，进一步包括：至少部分地基于所述已记录的场景信息产生场景模型，其中所述已记录的场景信息与所述场景的所述关联至少部分包括将所述场景模型与所述场景相关联，以及其中在所述未标记的场景信息中的所述场景的所述识别至少部分地基于所述场景模型。根据权利要求3所述的方法，进一步包括：至少部分地基于所述场景的所述识别更新所述场景模型。根据权利要求2至4中任一项所述的方法，进一步包括：接收用于定义关于所述场景的一个或多个规则的另一输入；以及至少部分地基于所述场景的所述识别触发一个或多个所述规则。根据权利要求5所述的方法，其中所述一个或多个规则指定动作，功能，程序，或其组合。根据权利要求2至6中任一项所述的方法，进一步包括：至少部分地基于所述场景的所述识别至少部分地导致一个或多个应用的控制。根据权利要求1至7中任一项所述的方法，其中所述场景与一个或多个动作，动作序列，或其组合相关。根据权利要求1至8中任一项所述的方法，其中所述已记录的场景信息包括来自所述设备的一个或多个传感器的信息，来自与所述设备或所述设备的所述用户或其组合相关联的一个或多个服务的信息。根据权利要求2至9中任一项所述的方法，其中所述未标记的场景信息包括来自所述设备的一个或多个传感器的信息，来自与所述设备或所述设备的所述用户或其组合相关联的一个或多个服务的信息。根据权利要求9和10中任一项所述的方法，其中来自所述传感器的信息，来自所述服务的信息或其组合包括日期，时间，地点，速度，动作，声音，环境条件，天气条件，身体条件，应用的使用或其组合。一种装置，包括：至少一个处理器；和至少一个存储器，包括用于一个或多个程序的计算机程序代码，所述至少一个存储器和所述计算机程序代码配置为，与所述至少一个处理器一起使所述装置至少执行以下步骤：接收在用于指定场景的设备上的输入；响应于所述输入，至少部分地导致场景信息的记录，该场景信息与所述设备，所述设备的用户，或其组合相关联；以及将所述已记录的场景信息与所述场景相关联。根据权利要求12所述的装置，其中进一步使所述装置：至少部分地导致未标记的场景信息的监测，该未标记的场景信息与所述设备，所述设备的所述用户，或其组合相关联；将所述未标记的场景信息与所述已记录的场景信息相比较；以及至少部分地基于所述比较至少部分地导致与所述未标记的场景信息相关联的所述场景的识别。根据权利要求13所述的装置，其中进一步使所述装置：至少部分地基于所述已记录的场景信息产生场景模型，其中所述已记录的场景信息与所述场景的所述关联至少部分包括将所述场景模型与所述场景相关联，以及其中在所述未标记的场景信息中的所述场景的所述识别至少部分地基于所述场景模型。根据权利要求14所述的装置，其中进一步使所述装置：至少部分地基于所述场景的所述识别更新所述场景模型。根据权利要求13至15中任一项所述的装置，其中进一步使所述装置：接收用于定义关于所述场景的一个或多个规则的另一输入；以及至少部分地基于所述场景的所述识别触发一个或多个所述规则。根据权利要求16所述的装置，其中所述一个或多个规则指定动作，功能，程序，或其组合。根据权利要求13至17中任一项所述的装置，其中进一步使所述装置：至少部分地基于所述场景的所述识别至少部分地导致一个或多个应用的控制。根据权利要求12至18中任一项所述的装置，其中所述场景与一个或多个动作，动作序列，或其组合相关。根据权利要求12至19中任一项所述的装置，其中所述已记录的场景信息包括来自所述设备的一个或多个传感器的信息，来自与所述设备或所述设备的所述用户或其组合相关联的一个或多个服务的信息。根据权利要求13至20中任一项所述的装置，其中所述未标记的场景信息包括来自所述设备的一个或多个传感器的信息，来自与所述设备或所述设备的所述用户或其组合相关联的一个或多个服务的信息。根据权利要求20和21中的任一项所述的方法,其中来自所述传感器的信息，来自所述服务的信息，或其组合包括日期，时间，地点，速度，动作，声音，环境条件，天气条件，身体条件，应用的使用或其组合。一种计算机可读存储介质，所述计算机可读存储介质携载一个或多个指令的一个或多个序列，当由一个或多个处理器执行时，所述一个或多个指令使装置至少执行以下步骤：接收在用于指定场景的设备上的输入；响应于所述输入，至少部分地导致场景信息的记录，该场景信息与所述设备，所述设备的用户，或其组合相关联；将所述已记录的场景信息与所述场景相关联。根据权利要求23所述的计算机可读存储介质，其中使所述装置进一步执行：至少部分地导致未标记的场景信息的监测，该未标记的场景信息与所述设备，所述设备的所述用户，或其组合相关联；将所述未标记的场景信息与所述已记录的场景信息相比较；以及至少部分地基于所述比较至少部分地导致与所述未标记的场景信息相关联的所述场景的识别。根据权利要求24所述的计算机可读存储介质，其中使所述装置进一步执行：至少部分地基于所述已记录的场景信息产生场景模型，其中所述已记录的场景信息与所述场景的所述关联至少部分包括将所述场景模型与所述场景相关联，以及其中在所述未标记的场景信息中的所述场景的所述识别至少部分地基于所述场景模型。根据权利要求24所述的计算机可读存储介质，其中使所述装置进一步执行：至少部分地基于所述场景的所述识别更新所述场景模型。根据权利要求24至26中任一项所述的计算机可读存储介质，进一步包括：接收用于定义关于所述场景的一个或多个规则的另一输入；以及至少部分地基于所述场景的所述识别触发一个或多个所述规则。根据权利要求27所述的计算机可读存储介质，其中所述一个或多个规则指定动作，功能，程序，或其组合。根据权利要求24至28中任一项所述的计算机可读存储介质，进一步包括：至少部分地基于所述场景的所述识别至少部分地导致一个或多个应用的控制。根据权利要求23至29中任一项所述的计算机可读存储介质，其中所述场景与一个或多个动作，动作序列，或其组合相关。根据权利要求23至30中任一项所述的计算机可读存储介质,其中所述已记录的场景信息包括来自所述设备的一个或多个传感器的信息，来自与所述设备或所述设备的所述用户或其组合相关联的一个或多个服务的信息。根据权利要求24至31中任一项所述的计算机可读存储介质，其中所述未标记的场景信息包括来自所述设备的一个或多个传感器的信息，来自与所述设备或所述设备的所述用户或其组合相关联的一个或多个服务的信息。根据权利要求31和32中任一项所述的计算机可读存储介质，其中来自所述传感器的信息，来自所述服务的信息，或其组合包括日期，时间，地点，速度，动作，声音，环境条件，天气条件，身体条件，应用的使用或其组合。一种装置，包括：用于接收在用于指定场景的设备上的输入的部件；响应于所述输入，用于至少部分地导致场景信息的记录的部件，该场景信息与所述设备，所述设备的用户，或其组合相关联；用于将已记录的场景信息与所述场景相关联的部件。根据权利要求34所述的装置，进一步包括：用于至少部分地导致未标记的场景信息的监测的部件，该未标记的场景信息与所述设备，所述设备的所述用户，或其组合相关联；用于将所述未标记的场景信息与所述已记录的场景信息相比较的部件；以及用于至少部分地基于所述比较至少部分地导致与所述未标记的场景信息相关联的所述场景的识别。根据权利要求35所述的装置，进一步包括：用于至少部分地基于所述已记录的场景信息产生场景模型的部件，其中所述已记录的场景信息与所述场景的所述关联至少部分包括将所述场景模型与所述场景相关联，以及其中在所述未标记的场景信息中的所述场景的所述识别至少部分地基于所述场景模型。根据权利要求36所述的装置，进一步包括：用于至少部分地基于所述场景的所述识别更新所述场景模型的部件。根据权利要求35至37中任一项所述的装置，进一步包括：用于接收用于定义关于所述场景的一个或多个规则的另一输入的部件；以及用于至少部分地基于所述场景的所述识别触发一个或多个所述规则的部件。根据权利要求38所述的装置，其中所述一个或多个规则指定动作，功能，程序，或其组合。根据权利要求35至39中任一项所述的装置，进一步包括：用于至少部分地基于所述场景的所述识别至少部分地导致一个或多个应用的控制。根据权利要求34至40中任一项所述的装置，其中所述场景与一个或多个动作，动作序列，或其组合相关。根据权利要求35至41中任一项所述的装置，其中所述已记录的场景信息包括来自所述设备的一个或多个传感器的信息，来自与所述设备或所述设备的所述用户或其组合相关联的一个或多个服务的信息。根据权利要求35至42中任一项所述的装置，其中所述未标记的场景信息包括来自所述设备的一个或多个传感器的信息，来自与所述设备或所述设备的所述用户或其组合相关联的一个或多个服务的信息。根据权利要求42和43中任一项所述的装置，其中来自所述传感器的信息，来自所述服务的信息，或其组合包括日期，时间，地点，速度，动作，声音，环境条件，天气条件，身体条件，应用的使用或其组合。一种计算机程序产品，包括一个或多个指令的一个或多个序列，当由一个或多个处理器执行时，所述一个或多个指令使装置至少执行权利要求1至11中任一项的方法的步骤。

说明书用于确定用户场景的方法和装置
背景技术
服务提供商（例如，无线和蜂窝服务）和设备制造商不断地面临通过例如提供引人注目的网络服务和提升优质技术向消费者提供价值和便利的挑战。关注的一方面是用于表征关于用户与设备（例如，移动电话，智能电话，或其他移动设备）的交互的行为的服务和技术的发展。更具体地，表征用户行为的特征例如依赖于例如使设备的用户交互（例如，用户执行设备的各种功能和特征以置入电话呼叫，调用应用，播放媒体文件，拍摄照片等）与给定的与用户或设备相关的场景（例如地点，时间，日期，活动等）相关联。然而，由于表征更复杂的用户场景的难度，服务提供商和设备制造商面临做出这样的关联的重大技术挑战。结果，在给定场景的情况下限制自动化确定的用户与移动设备交互的能力。例如，如果用户需要如它们经由应用使用慢跑一样的自动地拥有他们的移动设备的累计记录里程和路线数据，必须正确地训练移动设备以检测和感知场景信息（例如，里程和路线数据），该信息是关于与正确的时刻/场景（在慢跑时间的开始或期间）相关的这类软件交互（例如，里程记录）。
发明内容
因此，存在用于训练设备以将用户，物体或设备的场景信息与用户限定的场景相联系的方法的需求。
根据一个实施例，一种方法，包括接收在用于指定场景的设备上的输入。所述方法也包括至少部分地导致与设备，设备的用户，或其组合相关联的场景信息的记录。所述方法进一步包括将已记录的场景信息与场景相关联。
根据另一个实施例，一种装置，包括至少一个处理器，和至少一个包括计算机程序代码的存储器，所述至少一个存储器和所述计算机程序代码配置为与所述至少一个处理器一起至少部分地使装置接收在用于指定场景的设备上的输入。该装置还导致记录与该设备，设备的用户，或其组合相关联的场景信息。该装置进一步导致将已记录的场景信息与场景相关联。
根据另一个实施例，携载一个或多个指令的一个或多个序列的计算机可读存储介质，当由一个或多个处理器执行时，所述一个或多个指令至少部分地使装置接收在用于指定场景的设备上的输入。还使该装置记录与该设备，设备的用户，或其组合相关联的场景信息。进一步使该装置与已记录的场景信息与场景结合。
根据另一个实施例，一种装置，包括接收在用于指定场景的设备的输入的部件。该装置还包括用于至少部分地导致记录与该设备，设备的用户，或其中组合相关联的场景信息的部件。该装置进一步包括用于将已记录的场景信息与场景相关联的部件。
根据另一个实施例，一种方法，包括便于访问至少一个配置成允许访问至少一个服务的接口，所述至少一个服务配置成至少部分地导致接收在用于指定场景的设备的输入。所述服务也配置成至少部分地导致记录与该设备，设备的用户，或其组合相关联的场景信息。服务进一步配置成至少部分地导致将已记录的场景信息与场景相关联。
仅通过说明多个特定实施例和实现，包括预期用于执行本发明的最佳模式，本发明的其它方面、特征以及优点从下列详细说明中显而易见。在全部不脱离本发明的精神和范围的情况下，本发明还能够具有其它和不同的实施方式，并且可以在各种明显方面修改它的许多细节。因此，实际上附图和说明书被认为是示意性的，而不是限制性的。
附图说明
通过示例并且不是通过限制的方式说明本发明的实施例，在附图中：
图1是根据一个实施例，用于将用户，物体或设备场景信息与代表真实世界场景的用户定义的场景模型相关联的系统的图；
图2是根据一个实施例的场景模式平台部件的图；
图3是根据一个实施例，用于将用户，物体或设备场景信息与代表真实世界场景的用户定义的场景模型相关联的过程的高级流程图；
图4A是根据一个实施例，用于将场景信息与代表真实世界场景的用户定义的场景模型相关联的过程的流程图；
图4B是根据一个实施例，用于将未标记的场景信息与代表真实世界场景的用户定义的场景模型相关联的过程的流程图。
图5是根据一个实施例，用于基于所指定的用户场景的所记录的场景信息或所监测的未标记的场景信息来触发一个或更多动作的过程的流程图；
图6A和6B是根据多个实施例，在包括在图4A，4B和5的过程中的数据挖掘中使用的客户端和服务器之间的交互的图；
图7A‑7D是根据多个实施例，在图4A，4B和5的过程中使用的设备的用户接口的图；
图8是可用于实现本发明实施例的硬件的图；
图9是可用于实现本发明实施例的芯片组的图；
图10是可用于实现本发明实施例的移动终端（例如手机）的图。
具体实施方式
公开了用于训练设备以将用户，物体或设备场景信息与用户定义的场景相关联的方法、装置和计算机程序的范例。在以下描述中，为了说明的目的，阐述多个具体细节以提供本发明的实施例的全面理解。然而，对本领域技术人员显而易见的，本发明的实施例可在没有这些具体细节或具有等同设置的情况下实现。在其他情形下，以框图形式示出熟知的结构和设备以避免不必要地模糊本发明的实施例。尽管关于移动设备描述了多个实施例，预期在此描述的方法可以用在任何其他的设备，上述设备支持并保持与用户定义的场景相关联的场景数据的检测。
图1是根据一个实施例，用于将用户，物体或设备场景信息与代表现实世界场景的用户定义的场景模型相关联的系统的图。“用户交互”在这里指的是关于在其中设备用户执行的设备的各种功能和特征中的任何部件，例如完成所需的使用模式和/或与给定的操作环境相联系。如上所述，指出检查如何，什么，何时和何地某人（谁）使用设备（例如，移动设备）示出具体的模式，该模式代表相对于给定的场景的用户行为或功能设备使用倾向（即为什么执行信息以这样的方式披露）。举例来说，一些移动设备保持用户与设备的功能的和信息的交互的记录，例如：（1）由设备通过文本消息传递应用或电子邮件执行的用户通信的记录/历史；（2）与设备的媒体播放器相关联的“最近的”用户选择播放列表；（3）与多种游戏应用相关联的“最近玩过的”游戏列表；（4）用户使用的设备应用的记录等。这个用户交互历史或数据可关于与设备相关联的场景数据来记录（例如，时间，地点，环境条件等）。此外，数据在交互的瞬间记录并且保存为场景信息。
通常，“场景信息”至少部分指的是，在相对于物体或用户的设备使用的实例期间收集的所有场景数据和交互数据（例如，日期，当日时间，地点，行为，动作，位置，形态，时空元素等）。这可包括在场景执行的实例期间由一个或多个服务115a‑115n传输的数据，该数据包括但不限于RSS馈送数据，天气数据，地点数据，用户配置文件消息等。而且，场景信息关于由一个或多个与设备使用的所定义的场景相关联的设备的传感器111a收集的任何数据，所述的数据代表用于表征在设备和一个或多个设备，物体或用户之间的当前时刻交互的感官现象。设备可以交互的物体包括但不限于其他用户设备（例如，手机），外围设备例如蓝牙手机，键盘和服务器设备或在直接环境内的实体或例如建筑物，地标，机器，车辆或人的使用场景。
通常，可将场景信息定义为确认到一个或多个场景的数据类型，其中每个场景根据场景模型定义。例如，给定的场景信息接收为包括时间，场景数据，和交互数据的数据类型，例如，［时间=1，场景数据=<（工作日），（傍晚），（高速），（高音频等级）>，交互=玩游戏］，场景数据的多种组合或排列能够产生多种场景例如：（1）<（傍晚）>，（2）<高速>，（3）<（工作日），（傍晚）>等。可以预想场景信息可以是根据场景模型定义的以任何组合排列的数据类型的任何子集。
需要指出因为包括移动设备的场景经常与具体使用目的密切相关，所以在具体场景和用户交互之间的关联可以表征用户的行为模式。该表征根据场景模型定义。正如在此使用的，“场景模型”关于任何数据类型定义，关联数据结构和/或用于表示物体，交互，事件，过程或其组合的架构（schema）。特别地，场景模型指出分类器类型和物体类型，关联预期输入数据类型与预期响应或输出数据类型用于要建模的场景（例如，基于场景的系统或物体）。此外，场景模型指示在其包括的数据集合和数据类型之间的关系。更进一步，场景模型也可定义一个或多个以组合方式表征底层系统，物体，交互，事件或过程的行为的面向对象的，摘要或概念要素。可以认识到多种已知的产生场景模型的方法在上述实施例的范围内。作为通常的方法，场景模型可以初始设计为分别对于设备，物体或用户的已知模式或历史交互。
认识关于给定场景模型的场景信息可实现在移动设备和与场景相关联的用户，事件或物体之间多种交互的自动化。例如，给定用户正在工作日的傍晚等公交车并且环境嘈杂的所感知的现实世界的场景，预期的（典型的）行为模式（例如，来源于用户之前记录的交互历史）是通过存在于设备上或通过设备可访问的游戏应用，用户以最大声音等级玩游戏。因此，用于这个场景和交互的场景模型采用对应于这个情节的输入和输出设计。在另外的一个例子中，给定用户在工作日的早上乘坐公交车的场景，所预期的行为模式是通过在设备上的或通过设备可访问的媒体播放器应用用户收听摇滚音乐。再次，用于这个场景和交互的场景模型也采用对应于这个情节的输入和输出来设计。在另外的一个例子中，给定用户在假日的下午在公园里行走的场景，所预期的行为模式是通过存在于设备上的或通过设备可访问的图像捕捉应用用户捕捉图像。像之前一样，场景模型部分地基于历史的或所预期的数据和模式表征这个交互和场景。
因此，客观预期（典型的或历史的）行为数据可用来产生初始的场景模型，该模型为所讨论的唯一场景的表示。用这种方法，如果由用户所需响应于不同的场景事件来自动地调用设备动作（例如播放音乐），该设备可以像初始定义的场景模型一样基于当前时刻的场景信息来动作。当然，设备执行动作的能力仅与它正确地将感知的场景信息与恰当的场景模型相关联的能力一样好。给定如场景信息的可限定的数据类型的复杂事物，未限定的数据类型的事件通过与给定的已定义的场景（例如，正被检测的未定义的声音数据或运动数据）和说明区分场景、正确地配置或训练设备以准确地响应的复杂性是艰巨的任务。
为了解决这个问题，图1的系统100使设备能够响应分别对用户，物体或设备的场景信息，无论该场景信息是标记的（已知的或预期数据类型）或未标记的（未知的或不可预期数据类型），其都与用户定义的场景相关联。系统100包括用户设备（UE）101，其具有经由通信网络105到场景信息平台103的连通性。在图1的示例中，场景信息平台103收集如由UE101记录或检测的与用户定义的场景相关联的场景信息。平台103也分析场景信息以执行一个或多个如下步骤：1）确定特定集合的所监测的未标记场景信息是否与特定的场景模型相关联；2）记录与指定的场景模型相关的场景信息；3）保持场景数据用于进一步的训练/改善与给定场景相关联的场景模型。
在某个实施例中，UE 101可包括用于与场景信息平台103交互的行为应用107以执行一个或多个场景信息平台103的功能。例如，行为应用107可监测或记录由场景信息平台103使用的场景信息。更具体地，行为应用107可以与一个或多个传感器111交互并控制该一个或多个传感器111，其中所述控制对于特定的用户定义的场景模型是有利的。因此，例如，在产生旨在表示或表征特定场景的场景模型中，可以指定一个或多个传感器以提供对应于所定义的输入数据类型的输入数据。典型的传感器111可以包括但不限于录音机，光传感器，全球定位系统（GPS）设备，温度传感器，运动传感器，加速计，陀螺仪和/或用于感知感官现象的任何其他设备。传感器111还可包括可通过其检测无线通信信号数据的内部天线。基于接收或检测，UE 101则能够存储所收集到的数据在例如符合具有由场景模型定义的指定数据类型的数据结构的数据存储器109中。
在一个实施例中，行为应用107和场景信息平台103根据客户端‑服务器（client‑server）模型交互。需要注意的是计算机过程交互的客户端‑服务器模型被广泛了解和使用。根据客户端‑服务器模型，客户端过程发送包括请求的消息到服务器过程，以及服务器过程通过提供服务来响应。服务器过程也可以返回带有对客户端过程的相应的消息。通常客户端过程和服务器端过程在不同的计算机设备（所谓的主机）上执行，并经由使用一个或多个网络通信协议的网络进行通信。术语“服务器”传统上用于指提供服务的过程，或过程在其上运行的主机计算机。相类似，术语“客户端”传统上用于指作出请求的过程，或在其上运行过程的主机计算机。正如在此所使用的，术语“客户端”和“服务器”指所述过程，而不是主机计算机，除非从上下文中其他方式是清楚的。另外，可以打断由服务器执行的过程以在多个主机上作为多过程运行（有时候称为层（tier）），其原因包括可靠性，可扩展性和尤其是冗余。
在另一实施例中，行为应用107可以独立于或无需场景信息平台103的存在运行。用这种方法，行为应用107在没有传输任何场景信息到平台103的情况下能够执行场景信息平台103的所有功能，从而减少场景数据和交互数据到外部实体的任何潜在的暴露。因此，尽管关于场景信息平台103描述了多个实施例，但是可以预期的是平台103的功能也可以由行为应用107或系统100的类似组件来执行。在由行为应用107执行的所述平台的功能示例中，不需要从外部传输通过一个或多个传感器111a‑11‑n检测感官输入（场景信息）。
在一个实施例中，场景信息平台103和/或行为应用107具有例如从服务平台113到场景信息的连通性，所述服务平台113包括一个或多个服务115a‑115n（例如，天气服务，地点服务，地图服务，媒体服务等）。通过示例，这些服务115能够提供关于环境条件（例如天气），行为（例如玩在线游戏），参数选择（例如音乐参数选择），地点（例如地点追踪服务）等可提供与UE 101或UE 101的用户相关联的相关场景信息的附加信息。
通过示例，系统100的通信网络105包括一个或多个网络，例如数据网络（未示出）、无线网络（未示出）、电话网络（未示出）或其任意组合。可预期的是，数据网络可以是任何局域网（LAN）、城域网（MAN）、广域网（WAN）、公共数据网（例如Internet）、近距离无线网络或任何其他适合的分组交换网络，例如商业所有、私有分组交换网，例如私有电缆或光纤网络等，或其任意组合。此外，无线网络例如可以是蜂窝网络并且可采用各种技术，包括用于全球演进的增强数据速率（EDGE）、通用分组无线业务（GPRS）、全球移动通信系统（GSM）、Internet协议多媒体子系统（IMS）、通用移动电信系统（UMTS）等、以及任意其他适合的无线介质，例如全球微波互联接入（WiMAX）、长期演进（LTE）网络、码分多址联接（CDMA）、宽带码分多址联接（WCDMA）、无线保真（WiFi）、无线LAN（WLAN）、蓝牙Internet协议（IP）数据广播、卫星、移动ad‑hoc网络（MANET）和类似的，或其任意组合。
UE 101是任意类型的移动终端、固定终端、或便携式终端，包括移动手机、站、单元、设备、多媒体计算机、多媒体平板、Internet节点、通信器、台式计算机、膝上型计算机、个人数字助理（PDA）、音频/视频播放器，数字照相机/摄像机，定位设备，电视接收机，无线广播接收机，电子书设备，游戏设备，或其任意组合。还可预期的是，UE 101可支持到用户的任意类型的接口（例如“可佩戴”电路等）。
通过示例，UE 101，场景信息平台103和服务平台113使用熟知的、新的或开发中的协议彼此以及与通信网络105的其他组件通信。在这种情况下，协议包括定义在通信网络105内的网络节点如何基于在通信链路上发送的信息相互交互的一组规则。所述协议在每个节点内的不同操作层都是有效的，从产生和接收多种类型的物理信号，到选择用于传送这些信号的链路，到由那些信号指示的信息格式，到识别在计算机系统上执行的哪个软件应用发送或接收信息。用于在网络上交换信息的协议在概念上的不同的层在开放式系统互联（OSI）参考模型中描述。
在网络节点之间的通信典型地通过交换数据的离散分组来实现。每个分组典型地包括（1）与特定协议相关联的报头信息；和（2）有效载荷信息，其跟随报头信息并且包含可独立于该特定协议处理的信息。在一些协议中，分组包括（3）尾信息，其跟随有效载荷并且指示有效载荷信息的末端。报头包括例如分组的源、其目的地、有效载荷的长度和由协议使用的其他属性的信息。通常，用于特定协议的有效载荷中的数据包括与OSI参考模型的不同的、更高层相关联的不同协议的报头和有效载荷。特定协议的报头典型地指示在其有效载荷中包含的下一协议的类型。较高层协议认为是封装在较低层协议中。贯穿多个异构网络（例如Internet）的分组中包括的报头典型地包括如由OSI参考模型所定义的物理（层1）报头、数据链路（层2）报头、网络间（层3）报头和传输（层4）报头、和各个应用报头（层5、层6和层7）。
图2是根据一个实施例的场景信息平台103的组件的图。通过示例，场景信息平台103包括一个或多个用于保持如与用户定义的场景相关联的UE 101所记录或监测的场景信息的组件。可预期的是这些组件的功能可以组合在一个或多个组件中或由具有等同功能的其它组件执行。在这个实施例中，场景信息平台103包括控制器201、输入模块203、计算模块205、呈现模块207以及通信模块209。控制器201监视由所述系统的所述部件执行的任务，该任务包括通过多个数据存储设备109a‑109n的使用以及其自身的与其他所述部件203‑207交互的调节来便于数据交换和场景信息的存储。输入模块203管理由UE 101感知和提供的感官输入，其包括由传感模块111a‑111n获得的场景信息。进入UE 101的输入可以是包括按压在UE 101上的物理按钮，触摸触摸屏面板，通过转盘或键盘滚动等的多种形式。由传感模块111a‑111n获得的信息通常可以符合最终转换成能够由输入模块203数据处理的数据类型的电脉冲。在所感知的输入符合所定义的场景模型的实例中，该数据可存储为场景信息。
计算模块205执行关于一个或多个规则或条件的场景信息的计算和分析。此外，计算模块205执行一个或多个用于处理场景信息以影响关于给定场景的设备行为的算法。例如，计算模块205可接收已获得的场景信息，解析该场景信息以识别所关注的具体数据元素，然后将所述元素与关联特定场景的规则库相比较。至少部分地符合规则或条件以后，计算模块205则可以触发一个或多个动作以产生在其中规则分别所属的场景，所述场景包括与设备自身相关的动作，设备的应用或设备可访问的服务。触发器可根据阈值或可信度值来定义以影响设备和/或对已感知的输入的服务的灵敏度和响应度。
由计算模块205执行的附加任务也可以包括数据建模产生和场景模型训练。特别地，计算模块205可以实现用于给定场景的初始场景模型的产生和保持。这可以包括建立用于关于要定义的用户所需场景的场景模型的名字（例如，“打高尔夫球”），处理用户定义的输入数据类型，将用于提供所述的输入的一个或多个传感器111相关联，使一个或多个输出数据类型相关，条件设定等。至少部分地基于最初“标记的”数据集合构建最初的场景模型。在另一个实例中，它可以基于“历史的”数据交互。用户可以与计算模块205交互并且影响计算模块205以执行通过数据交换或上传过程，或可选择地通过设备输入机构（例如触摸屏，键盘或类似的）使用来执行他们喜欢的用户定义的场景。关于在这里提出的实施例，任何熟知的用于产生场景模型的部件都是可用的。
用户定义的场景模型训练，或训练，与部件有关，在上述部件中场景模型由计算模块205进一步完善以建模要表示的系统，物体，用户，设备，交互或过程的行为。通常地，训练过程最小化意味着，对应于已定义的数据类型的附加数据的采样，从而扩大数据集合的品质并且因此扩大场景模型的“经验”程度。更多与用户定义的场景相联系的数据可用，当感知和响应可在开始或在给定的用户定义的场景期间发生的不同的场景信息时，设备可作出更多响应。计算模块205可单独或组合采用多种已知的训练方法。一个实施例考虑的是模式识别技术或行为识别的使用以识别由用户定义的场景。
关于行为或模式识别，多个设备的传感器信号（例如，加速计）可以基于模式识别技术来定义以向场景模型提供输入，该场景模型使用不同的分类器类型，物体类型，定义的数据类型等。与行为或模式识别处理相联系使用的技术可包括但不限于决策树分析，支持向量机处理，神经网络等。另一个实施例考虑的是高斯混合模型和光谱特征提取计算的执行。这样的技术通常使用在包括语音识别领域的数据建模中。
另一实施例考虑的是半监督学习技术的使用，其中可通过使用未标记的场景数据加强场景模型。“未标记的场景信息”，与“标记的场景信息”或简单的“场景信息”形成对比，指的是任何传感到的数据（例如，由一个或多个设备的传感器传感的），其不容易符合场景模型的已定义的分类或数据类型。在传统上，场景训练通过非监督的处理技术（例如，聚类，异常值检测）来执行，在其中假定没有关于感知的感官数据的现有知识；所有要最终与场景模型相关联的数据是未标记的。可选择地，场景训练通过监督的处理技术（例如，分类，回归分析）执行，在其中所有数据被标记。在这里提到的“半监督处理技术”包括在影响场景产生，识别和响应决策中标记的和未标记的数据的使用就像采用（可预期的或不可预期的数据的）组合的算法设计一样。计算模块205执行计算可预期的/已定义的（标记的）性质和不可预期的/未定义的（未标记的）性质的传感的场景信息这样的算法。
标记的/可记录的场景信息和未标记的场景信息两者的使用便于用于更加复杂的场景的传感的场景信息的适当建模和求解。与具有标记的场景信息相联系或一致地检测的未标记的场景信息可被重新利用（leverage）以重新定义或适应所述场景模型。例如，在场景执行期间的不可预期的场景信息的一致出现可指示在模型内包含这样的数据类型的需求。另外，可处理（例如，启发式地）未标记的场景信息用于实现标记的场景信息和模型数据集合的变形（texturing）。
更进一步，某个场景信息有益于关于增强数据集的包含和记录，而其他场景信息在可观测/可监测的同时不能增强场景模型。例如，更复杂的行为诸如“打高尔夫球”由一序列的基本动作和在此的场景的数据类型组成，其可以包括关于站立，行走，摆动球杆等的分类。通过半监督处理的使用，计算模块可以在第二通道数据处理方案中建模并逐步地训练这样的复杂动作，该处理方案具有基于方法或隐马尔可夫模型的规则，重新利用未标记的数据以进一步通知或改进目前记录的数据集合。在用户在参加“打高尔夫球”的场景（例如，过程标记）的同时传感的更基本的动作和现象的同时可观测，除非不需要记录。
在一个实施例中，在场景模型产生的执行和通过计算模块205训练以后，控制器201可与呈现模块207交互。呈现模块207对于调节和显示与上述的训练技术相联系的用户接口是可执行的。这包括但不限于基于传感的输入数据（标记的和非标记的）对用户的训练结果呈现，场景模型相关的数据输入类型和分类的定义，由给定的要调用的场景的用户的选择，一个或多个规则库的定义或选择，一个或多个触发动作的定义或选择，通过用户初始化训练和数据记录处理的启动等。特别地，用户可选择性地初始化与用户定义的场景相联系的训练过程的能力加强计算模块205的在关于不同的场景细微差别的传感数据类型之间分辨的能力。
在其他实施例中，不直接向用户显示所确定的行为模式或场景训练结果的呈现。对于这种方法，用户仍然定义并说明场景和因此从该场景运行的场景模型。然而，行为应用107或平台103配置为基于训练结果来做出推荐、建议等以制定用户的个性化服务，为用户获取场景、调用程序等。确定的行为模式还可用于目标服务提供或更可能是用户感兴趣或与用户相关的广告。例如，关于高尔夫球的目标应用或广告可以从服务平台获得以响应“打高尔夫球”的用户定义的场景。越正确地训练场景模型，在打高尔夫球中所提供的服务可与场景越精确相关。
UE 101也可连接到存储介质（例如数据存储介质109a‑109n）以使场景信息平台103可相应地访问或存储场景信息。如果数据存储介质109a‑109n不在平台103的本地，则可经由通信网络105访问存储介质109a‑109n。UE 101还可经由通信网络105连接到服务平台113以访问由服务115a‑115n提供的场景信息。如上所述，在前述的段落中关于场景信息平台103描述的功能同样应用于与在设备上可运行的行为应用107。可提供不同的应用以符合不同的需求。
关于图3做出参考，图3是根据一个实施例，示出用于将用户，物体或设备场景信息与代表真实世界场景的用户定义的场景模型相关联的过程的高级流程图。通过真实世界场景，意味着在此呈现的步骤可以通过设备合适地执行，该设备可访问场景信息平台103或固有行为应用107以影响和改变实时的场景事件。在一个实施例中，场景信息平台103和/或行为应用107执行过程300并在例如包括如图9所示的处理器和存储器的芯片组中实现。在最初步骤301，场景信息平台103或行为应用107接收在用于指定场景的设备上的输入。如之前提到的，所接收的场景信息的类型将取决于与场景模型相关联的数据类型的类型而变化，该场景模型由用户关于他们的设备来调用。在接下来的步骤303中，当场景信息由一个或多个设备的传感器传感到时记录场景信息。记录的场景信息与设备，设备的用户，物体（例如，接近设备或用户的物体）或其组合相关联。如最终的步骤305，所记录的场景信息则与已经定义的场景相关－例如，所记录的数据用于改进或更新相关的场景模型。
图4A和4B是根据一个实施例，采用代表真实世界场景的用户定义的场景模型，分别用于关联场景信息和未标识的场景信息的过程的流程图。关于附图4A的用户场景训练和步骤，场景信息是那些容易被定义，关于给定的数据类型可识别的，并且因此关于与场景模型相关联的数据集合的包含可记录的场景信息。相反，关于图4B的用户场景训练和步骤，未标识的场景信息通常是那些未定义的，关于给定的数据类型不可识别的，并且因此关于与场景模型关联的数据集合在包含之前必须被监控的场景信息。关于给定的用户指定的场景合并或单独地执行的这两个过程使得当传感场景信息时标识的或未标识的场景信息的处理成为可能。在分别呈现的同时，可以理解为了容纳不同的场景基本并行地调用这些处理。
在附图4A中，在场景关联过程400的最初步骤401涉及通过设备用户指定与设备、物体、用户或其组合相关联的场景。例如，用户可选择特定场景以执行或训练，例如选自在附图7A中示出的选择菜单701。指定场景以后，设备的各个传感器则用于检测与指定的场景相关的场景信息。这对应于步骤403。由于使用了传感器，记录了基于与用于指定场景的指定场景模型的关联的场景信息，并且更新了由行为应用107和/或场景信息平台103维护的场景信息数据集合。先前的步骤分别对应于步骤405和407，其中为了训练的目的改善或更新场景模型。
如在步骤409中（与401相同），附图4B的过程400还需要选择用户指定的场景。具有指定的场景，设备的多种传感器检测未标识的场景信息，结果是信息可以或不可以与指定的场景相关。这对应于步骤411。因此，则监控未标记的场景信息－即，对应于步骤413，用于一段时间或一直到指定数据阈值。执行监控过程以便于积累/采样足够相关的未标记的场景信息数据点以采用如在步骤415中的分析来确定相关的结构模式或推论出监控过程所应用的场景模型。由行为应用107或平台103执行的该分析的功能，至少包括至少部分地未标记的场景模型与已记录的场景信息的比较（如关于图4A所记录的）。
当分析至少部分地不提出任何比较417时，用于解释和解析未标记的场景信息的过程408结束。但是，如在步骤417和419中的，当通过未标记的场景信息的分析所推论或提取的相关的数据模式或结构充分地至少部分包括与所记录的场景信息相关联的场景模型（例如，到预定程度或置信度内）时，因此识别未标记的场景信息的场景。特别地，虽然未初始标记，但识别场景信息以对应于步骤409（401）的指定的用户场景。具有与用户定义的场景相关联的场景信息，最终的步骤421需要用未标记的场景信息来更新所记录的场景信息。该最终步骤421有效地对应于用于训练目的的场景模型的改进或更新，在这里未标记的场景信息变成所记录的（标记的）数据集合的一部分。
图5是根据一个实施例，用于基于用于指定的用户场景的如图4A中的已记录的场景信息的处理或如图4B中的所监控的未标记的场景信息来触发一个或更多动作的过程500的流程图。至少部分基于对应于用户定义的场景的场景信息来相应地更新场景模型，然后针对规则库分析场景信息。这对应于步骤501和503。如之前指出的，规则库可以是由用户或系统定义以包括一个或多个规则/条件505，当所述规则/条件满足时，对应于特定设备动作或服务115的调用。在条件或规则505不满足的实例中，假设存在可用于改善模型的附加场景信息，继续根据步骤501更新场景模型。
然而，如步骤507中，如果满足规则或条件505，根据指定的规则/条件触发一个或多个指定的动作，功能，程序或其组合。这个步骤507需要服务115的或常驻在设备上的应用的由行为应用107或场景信息平台103的自动激活。例如，如果用户指定的场景是“烹饪”，与“烹饪”场景模型和数据集合相关联的规则库可以包括通过烹饪服务应用，采购单结构，食品的自动订购等下载配方内容。的确，相关于不同的真实世界场景的自动触发动作，功能，程序或其组合的能力加强了用户设备的有效性。这也实现了在设备和用户之间要促进的目标性的基于交互的场景的方法。
图6A‑6B是根据多个实施例，在包括在图4A，4B和5中的过程的数据挖掘中使用的分别在客户端和服务器之间的交互600和630的图。图6A示出从移动设备603（例如，UE 101a‑101n）在客户端601取回的诸如场景记录的数据，上述数据可以通过Internet（例如，通信网络105）上传到服务器端605。在一个实施例中，服务器端605可以包括场景信息平台103和/或服务平台113。在服务器端605，上传的数据保存在用户场景数据库607中。同样，移动设备603可以减少他们的与到服务器609的数据挖掘相关联的计算负担。需要指出服务器609通常具有比处理这类计算的移动设备更多的处理能力和相关资源（例如，带宽，存储器等）。
可选择地，如图6B中所示，由在客户端631的移动设备633取回的数据可以保存在各自的移动设备633的存储介质（未示出）中。移动设备633则可以在本地执行用于确定例如来自数据的场景模式的计算。那么，计算（例如场景模式）的结果可以上传到包括服务器639和用户场景模式数据库637的服务器端635。同样，数据保持在各自的移动设备633中并且没有用户的允许不上传到其他设备或服务器。因此，建立了隐私保护级别。另外，对于在图5A和5B中的实施例，移动设备的用户可以配置隐私设置以确定是否从移动设备上取回的任何数据能够发送到服务器端635。进一步，尽管没有示出，根据本发明的行为模式的多数分析甚至当移动设备633未连接到服务器639时可以在移动设备633内执行。只要移动设备633具有数据和足够的处理能力以分析数据，那么服务器639可无需执行所述分析。
图7A‑7D是根据多个实施例，在图4A，4B和5的过程中使用的设备的用户接口的图。在图7A中，接口700展示场景选择菜单701，在场景选择菜单中设备用户可以选择一个或多个用户定义的场景703以执行或训练。通过用户定义，每个场景具有与之相关联的场景模型，上述场景模型由行为应用107或场景信息平台103相应地保持。例如目的，假设用户从选项703中的列表中选择“慢跑”场景705。
接口706展示在“慢跑”场景705之下的场景模型的一个或多个特征707，上述特征包括但不限于与场景，分类或其组合相关联的物体类型和/或数据类型。通过呈现模块207展示数据以对应于与场景模型相关的如保存（例如，如数据文件）到数据存储器109a‑109n一样的数据。由于接口，用户可以配置，调整或添加特征到用于指定的用户场景“慢跑”705的场景模型。同样，表征场景模型的数据文件响应于由设备用户授权的配置变化来动态更新。因此，例如，用户可以修改与路线监控需求相联系的路标设置709a或GPS设置709c。在这个特定的典型的场景中感兴趣的也是数据类型“心率”709c，即在慢跑期间与代表用户心率的信号相关联的数据类型的实现。用于产生用于该分类的输入的手段可以包括心率监控设备，该心率监控设备对于用户的移动设备和用户的身体，可配置可连接到设备和用户或任何与讨论的场景相关的任何其他物体的即插即用脉搏传感器。
图7C示出使用户能够选择用于场景信息收集的数据源或传感器的用户接口730。传感器菜单731示出场景特征或场景源列表，场景记录可以从该场景特征或场景源收集。在图7C示出的范例中，选择加速计，当前状态和心脏监视器。这样，通过移动设备取回的场景信息将包括代表这些场景特征和数据类型的数据。
图7D示出使用户能够经由场景训练菜单741开始记录指定场景的过程的用户接口740。所述接口也具有动作菜单745的特征，在这个经由相同的接口740展示的例子中，通过该动作菜单745用户可以指定响应触发条件的要调用的特定动作。场景训练菜单741具有用于激活图7C中的多个传感器的记录按钮743的特征。同样，用户主动地执行记录相应地与“慢跑”场景703或监控的未标记的场景信息相关的场景信息。通过这个特征，用户可以主动地收集用于训练与所需的指定的场景相关的场景模型所必须的数据。
除了训练之外，用户还可以选择一个或多个设备动作，在记录和监控期间或场景信息期间自动调用的应用或服务或场景信息。这通过动作菜单745的使用来执行，该菜单具有与“慢跑”场景703相关的可用应用，服务，功能，程序等的列表的特征。因此，例如用户可以选择“水站”服务，该服务从指出沿着用户的慢跑路线或在他们展示的地理位置附近内的一个或多个休息站和饮水机的服务115下载内容。用户可以通过选择“选项”按钮605配置规则库，该按钮提供额外的可配置的选项（例如，规则配置，服务或应用查找等）。另外，可以选择“更多”按钮607以示出能够由用户配置的附加的场景模型特征。
在此描述的用于将用户，物体或设备场景信息与代表现实世界场景的用户定义的场景模型相关联的过程可有利地经由软件、硬件、固件或软件和/或固件和/或硬件的组合来实现。例如，在此所描述的过程，包括用于向用户接口提供与服务可用性相关联的导航信息，可有利地经由（多个）处理器、数字信号处理器（DSP）芯片、专用集成电路（ASIC）、现场可编程门阵列（FPGA）等来实现。用于执行所描述的功能的这样的示例性硬件在下面详细描述。
图8示出可在其上面实现本发明实施例的计算机系统800。尽管关于特定设备或装备描绘了计算机系统800，可预期的是在图8内的其它设备或装备（例如网络元件、服务器等）可部署图示的系统800的硬件和组件。将计算机系统800编程（例如经由计算机程序代码或指令）以如在此描述地将用户，物体或设备场景信息与代表现实世界场景的用户定义的场景模型相关联，并且包括例如总线810的用于在计算机系统800的其它内部和外部组件之间传递信息的通信机构。信息（也称为数据）表示为可测量现象的物理表达，典型地为电压，但在其他实施例中包括例如磁的、电磁的、压力、化学的、生物的、分子的、原子的、亚原子的和量子的交互的现象。例如，南北磁场、或零和非零电压，表示二进制数字（位）的两个状态（0，1）。其他现象可表示更高基数的数字。在测量之前的多个同时的量子状态的重叠表示量子位（qubit）。一个或多个数字的序列构成用于表示字符的数目或代码的数字数据。在一些实施例中，称为模拟数据的信息通过在特定范围内的可测量值的接近连续区域来表示。计算机系统800，或其一部分，构成用于执行将用户，物体或设备场景信息与代表现实世界场景的用户定义的场景模型相关联的一个或多个步骤的部件。
总线810包括一个或多个并行的信息导体，从而在耦合至总线810的设备之间快速传送信息。用于处理信息的一个或多个处理器802与总线810耦合。
处理器（或多处理器）802如由关于将用户，物体或设备场景信息与代表现实世界场景的用户定义的场景模型相关联的计算机程序代码所指定的执行关于信息的一组操作。计算机程序代码是提供用于要执行指定功能的处理器和/或计算机系统的操作的指令的一组指令或语句。例如代码可用编译成处理器的原始指令集的计算机编程语言编写。代码还可使用原始指令集（例如机器语言）直接编写。该组操作包括从总线810带入信息并且将信息置于总线810上。该组操作还典型地包括比较两个或多个信息单元，移动信息单元的位置，并且合并两个或多个信息单元（例如通过加或乘或逻辑运算，如或（OR），异或（XOR）和与（AND））。可由处理器执行的该组操作的每个操作由称为指令的信息向处理器表示，例如一个或多个数字的操作代码。要由处理器802执行的操作序列（例如操作代码序列）构成处理器指令，也称为计算机系统指令，或简单地称为计算机指令。处理器可在其中单独地或组合地实现为机械的、电的、磁的、光的、化学的或量子的组件。
计算机系统800还包括耦合至总线810的存储器804。存储器804（例如随机存取存储器（RAM）或其他动态存储设备）存储包括用于将用户，物体或设备场景信息与代表现实世界场景的用户定义的场景模型相关联的处理器指令的信息。动态存储器允许在其中存储的信息由计算机系统800改变。RAM允许在称为存储器地址的位置存储的信息单元独立于在相邻地址的信息存储和提取。存储器804还由处理器802使用以存储在处理器指令的执行期间的临时值。计算机系统800还包括耦合至总线810的只读存储器（ROM）806和其他静态存储设备，用于存储不可由计算机系统800改变的包括指令的静态信息。一些存储器包括易失性存储器，当失去供电时所述存储器丢失在其上存储的信息。耦合至总线810的还有非易失性（永久性）存储设备808，例如磁盘、光盘或闪存卡，用于存储即使当计算机系统800关闭或在其它情况下失去供电时持续的包括指令的信息。
将信息（包括用于将用户，物体或设备场景信息与代表现实世界场景的用户定义的场景模型相关联的指令）提供给总线810用于供处理器从外部输入设备812（例如包含由人工用户操作的字母数字键的键盘，或传感器）使用。传感器检测其附近的条件并且将那些检测转换成物理表达，该物理表达与用于表示在计算机系统800中的信息的可测量现象兼容。耦合至总线810的其他外部设备（主要用于与人交互）包括显示器设备814，例如阴极射线管（CRT）或液晶显示器（LCD）、或用于呈现文本和图像的等离子屏幕或打印机，以及定点设备816，例如鼠标或轨迹球或指针定向键、或运动传感器，用于控制在显示器814上呈现的小光标图像的位置以及发出与在显示器814上呈现的图形元素相关联的命令。例如在一些实施例中，在实施例中计算机系统800自动执行所有功能而无需人输入，忽略外部输入设备812、显示设备814和定点设备816中的一个或多个。
在所示实施例中，专用硬件（例如专用集成电路（ASIC）820）耦合至总线810。专用硬件配置为为了专用目的而足够快速地执行并未由处理器802执行的操作。专用IC的范例包括用于产生用于显示器814的图像的图形加速器卡，用于加密和解密在网络上发送的消息的密码板，语音识别以及到特定外部设备的接口，例如重复执行在硬件中更加有效地实施的操作的一些复杂序列的机械臂和医学扫描设备。
计算机系统800还包括耦合至总线810的通信接口870的一个或多个示例。通信接口870提供耦合到用他们自己的处理器操作的各种外部设备（例如打印机、扫描仪和外部盘）的单向或双向通信。通常耦合为连接到具有他们自己的处理器的各种外部设备所连接到的局域网络880的网络链路878。例如，通信接口870可以是在个人计算机上的并行端口或串行端口或通用串行总线（USB）端口。在某些实施例中，通信接口870是向对应类型的电话线路提供信息通信连接的集成服务数字网络（ISDN）卡或数字订户线路（DSL）卡或电话调制解调器。在某些实施例中，通信接口870是将在总线810上的信号转换成用于在同轴电缆上的通信连接的信号或转换成用于在光纤电缆上的通信连接的光学信号的电缆调制解调器。作为另一示例，通信接口870可以是向兼容LAN（例如以太网）提供数据通信连接的局域网（LAN）卡。也可实施无线链路。对于无线链路，通信接口870发送或接收或既发送又接收电的、声学的或电磁信号，包括红外和光学信号，其携载例如数字数据的信息流。例如，在无线手持设备（例如像蜂窝电话的移动电话）中，通信接口870包括称为无线电收发器的无线频带电磁发送器和接收器。在某些实施例中，通信接口870实现到用于将用户，物体或设备场景信息与代表现实世界场景的用户定义的场景模型相关联的通信网络105到UE 101的连接。
在此使用的术语“计算机可读介质”指参与向处理器802提供信息（包括用于执行的指令）的任意介质。这样的介质可采用许多形式，包括但不限于计算机可读介质（例如非易失性介质、易失性介质）和传输介质。例如非易失性介质的非临时介质例如包括光或磁盘，例如存储设备708。易失性介质例如包括动态存储器804。传输介质例如包括同轴电缆、铜线、光纤电缆、和无需电线或电缆的通过空间行进的载波，例如声波和电磁波，包括无线电、光和红外波。信号包括通过传输介质以振幅、频率、相位、极性或其他物理属性发送的人工瞬时变化。计算机可读介质的通用形式例如包括软盘、柔性盘、硬盘、磁带和任意其他磁介质，CD‑ROM、CDRW、DVD、任意其他光学介质，穿孔卡、纸带、光学标记表、具有孔或其他光学可识别标记的图形的任意其他物理介质，RAM、PROM、EPROM、FLASH‑EPROM、任意其他存储器芯片或盒式磁带、载波或计算机可从中读取的任意其它介质。在这里使用术语计算机可读存储介质以指代除了传输介质外的任何计算机可读介质。
在一个或多个有形介质中编码的逻辑包括在计算机可读存储介质上的处理器指令和专用硬件（例如ASIC 820）中的一个或两者。
网络链路878典型地使用通过一个或多个网络的传输介质向使用或处理信息的其它设备提供信息通信。例如，网络链路878可向由Internet服务提供商（ISP）操作的主机计算机882或设备884提供通过局域网880的连接。ISP设备884依次通过网络的公共的、世界分组交换通信网络的网路（现在统称为Internet 890）提供数据通信服务。
称为连接至Internet的服务器主机892的计算机主管响应于在Internet上接收的信息来提供服务的过程。例如，服务器主机892主管提供表示用于在显示器814的呈现的视频数据的信息的过程。可预期的是系统800的组件可部署在其它计算机系统，例如主机882和服务器892内的各个配置中。
本发明的至少一些实施例涉及用于实现在此所述的一些或全部技术的计算机系统800的用途。根据本发明的一个实施例，响应于执行在存储器804中所包含的一个或多个处理器指令的一个或多个序列的处理器802，由计算机系统800执行那些技术。这样的指令（也称为计算机指令、软件和程序代码）可从另一计算机可读介质（例如存储设备808或网络链路878）读入存储器804。在存储器804中所包含的指令序列的执行使处理器802执行在此所述的一个或多个方法步骤。在替代实施例中，可使用硬件（例如ASIC 820）代替软件或与软件结合来实现本发明。因此，本发明的实施例不限于硬件和软件的任意特定组合，除非在此明确阐述。
通过通信接口870在网络链路878和其他网络上发送的信号携载信息到计算机系统800和从计算机系统800携载信息。计算机系统800可通过网络880、890之外，通过网络链路878和通信接口870发送和接收包括程序代码的信息。在使用Internet 890的示例中，服务器主机892通过Internet890、ISP设备884、本地网络880和通信接口870发送用于特定应用的由从计算机800发送的消息所请求的程序代码。接收到的代码可当它被接收时由处理器802执行，或者可存储于存储器804中或存储设备808中或其它非易失性存储设备用于随后执行，或两者。这样，计算机系统800可以以在载波上的信号的形式获得应用程序代码。
各种形式的计算机可读介质可包含携载指令或数据或两者的一个或多个序列到处理器802用于执行。例如，指令和数据可初始携载在例如主机882的远程计算机的磁盘上。远程计算机将指令和数据加载至其动态存储器中，并使用调制解调器在电话线上发送指令和数据。计算机系统800本地的调制解调器在电话线上接收指令和数据，并使用红外发送器将指令和数据转换成在用作网络链路878的红外载波上的信号。用作通信接口870的红外检测器接收在红外信号中携载的指令和数据，并将表示指令和数据的信息放在总线810上。总线810将信息携载至存储器804，处理器802从存储器804中提取并使用与指令一起发送的一些数据执行指令。在由处理器802执行之前或之后，在存储器804中接收的指令和数据可选地可存储在存储设备808上。
图9示出在其上可实现本发明实施例的芯片组或芯片900。将芯片组900编程以如在此所描述的将用户，物体或设备场景信息与代表现实世界场景的用户定义的场景模型相关联，并且包括例如合并在一个或多个物理封装（例如芯片）中关于图8所描述的处理器和存储器部件。通过示例，物理封装包括在结构组件（例如基板）上的一个或多个材料、部件和/或线路的布置以提供例如物理强度、尺寸保持和/或电相互作用的限制的一个或多个特性。可预期的是在某些实施例中，芯片组900可以在单一芯片中实现。进一步预期，在某个实施例中芯片组或芯片900可以实现为单个“片上系统”。进一步预期在某个实施例中，例如不使用分离的ASIC，并且在此公开的所有相关功能将由处理器或多个处理器实现。芯片组或芯片900或其一部分构成用于执行提供与服务的有效性相关联的用户接口导航信息的一个或多个步骤的部件。芯片组或芯片900或其一部分构成用于执行将用户，物体或设备场景信息与代表现实世界场景的用户定义的场景模型相关联的一个或多个步骤的部件。
在一个实施例中，芯片组或芯片900包括例如用于在芯片组900的部件之间传递信息的总线901的通信机构。处理器903具有到总线901的连通性以执行例如存储在存储器905中的指令和过程信息。处理器903可包括一个或多个具有处理核心，其每个核心配置为独立执行。多核处理器实现在单个物理封装中的多处理。多核处理器的范例包括两个、四个、八个或更多数目的处理核心。备选地或额外地，处理器803可包括一个或多个微处理器，其经由总线901串联配置以实现指令、流水线和多线程的独立执行。处理器903还可伴随有一个或多个专用部件以执行某些处理功能和任务，例如一个或多个数字信号处理器（DSP）907、或一个或多个专用集成电路（ASIC）909。DSP 907典型地配置为独立于处理器903实时处理真实世界的信号（例如声音）。类似地，ASIC 909可配置为执行由更通用的处理器不容易执行的特定功能。在此所述的辅助执行发明的功能的其他专用部件可包括一个或多个现场可编程门阵列（FPGA）（未示出）、一个或多个控制器（未示出）、或一个或多个其他专用计算机芯片。
在一个实施例中，芯片组或芯片900仅包括一个或多个处理器和支持和/或关于和/或用于该一个或多个处理器的一些软件和/或固件。
处理器903和伴随部件具有经由总线901到存储器905的连通性。存储器905包括用于存储当执行时执行在此描述的发明步骤以将用户，物体或设备场景信息与代表现实世界场景的用户定义的场景模型相关联的可执行指令的动态存储器（例如RAM、磁盘、可写光盘等）和静态存储器（例如ROM、CD‑ROM等）两者。存储器905还存储相关于或由发明步骤的执行产生的数据。
图10是根据一个实施例，能够在图1的系统中操作的用于通信的移动终端（例如手机）的示例性部件的视图。在某些实施例中，移动终端1000或其部分构成用于执行将用户，物体或设备场景信息与代表现实世界场景的用户定义的场景模型相关联的一个或多个步骤的部件。一般地，无线电接收器通常按照前端和后端特征定义。接收器的前端涵盖所有射频（RF）电路，然而后端涵盖所有基带处理电路。如在本申请中使用的，术语“电路”指以下两者：（1）仅硬件的实现（例如仅在模拟和/或数字电路中的实现）；以及（2）电路和软件（和/或固件）的组合（例如，如果可用于特定情境，共同工作以使装置（例如移动电话或服务器）执行各个功能的包括数字信号处理器的处理器、软件和存储器的组合）。“电路”的这个定义应用于在本申请中这个方面的所有应用，包括在任意权利要求中。作为其他示例，如在本申请中所使用的，并且如果可用于特定情境，术语“电路”也将覆盖仅处理器（或多个处理器）及其（或它们的）所附软件/固件的实现。术语“电路”还将覆盖如果可用于特定情境，例如在移动电话中的基带集成电路或应用处理器集成电路或在蜂窝网络设备或其他网络设备中的类似集成电路。
电话的相关内部部件包括主控制单元（MCU）1003、数字信号处理器（DSP）1005和包括麦克风增益控制单元和扬声器增益控制单元的接收器/发射器单元。主显示单元1007在执行或支持将用户，物体或设备场景信息与代表现实世界场景的用户定义的场景模型相关联的步骤的各个应用和移动终端功能的支持下向用户提供显示。显示器10包括配置为显示移动终端（例如移动电话）的用户接口的至少一部分的显示电路。此外，显示器1007和显示电路配置为便于移动终端的至少一些功能的用户控制。音频功能电路1009包括麦克风1011和放大来自麦克风1011的语音信号输出的麦克风放大器。将经放大的来自麦克风1011的语音信号输出馈送至编码器/解码器（CODEC）1013。
无线电部分1015放大功率和转换频率以经由天线1017与包括在移动通信系统中的基站通信。功率放大器（PA）1019和发射器/调制电路采用来自耦合到本领域已知的双工器1021或循环器或天线开关的PA1019的输出操作地响应于MCU 1003。PA 1019还耦合到电池接口和功率控制单元1020。
在使用中，移动终端1001的用户向麦克风1011讲话，并且他或她的语音与任意检测到的背景噪声一起转换成模拟电压。模拟电压然后通过模数转换器（ADC）1023转换成数字信号。控制单元1003将数字信号传送至DSP 1005中用于其中的处理，例如语音编码、信道编码、加密和交织。在一个实施例中，由未单独示出的单元使用蜂窝传输协议（例如全球演进（EDGE）、通用分组无线业务（GPRS）、全球移动通信系统（GSM）、Internet协议多媒体子系统（IMS）、通用移动电信系统（UMTS）等）以及任意其它适合的无线介质（例如微波接入（WiMAX）、长期演进（LTE）网络、码分多址联接（CDMA）、宽带码分多址联接（WCDMA）、无线保真（WiFi）、卫星和类似的）来编码处理后的语音信号。
然后，经编码的信号传送至均衡器1025，用于在穿过空气的传输期间发生的任意频率相关的损害（例如相位和振幅失真）。在均衡比特流之后，调制器1027将信号与在RF接口1029中生成的RF信号结合。调制器1027通过频率或相位调制生成正弦波。为了准备用于传输的信号，上变频器1031将来自调制器1027的正弦波输出与由合成器1033生成的另一正弦波结合以获得所需的传输频率。然后，信号通过PA 1019发送以将信号增强至适当的功率水平。在实际系统中，PA 1019用作可变增益放大器，其增益由DSP 1005根据从网络基站接收的信息来控制。然后，信号在双工器921内滤波并且可选地发送到天线耦合器1035以匹配阻抗来提供最大功率传送。最后，信号经由天线1017发送至本地基站。可提供自动增益控制（AGC）以控制接收器的最后阶段的增益。信号可从那里转发到可以是另一蜂窝电话、其他移动电话或连接到公共交换电话网（PSTN）的陆上线路、或其他电话网络的远程电话。
向移动终端1001发送的语音信号经由天线1017接收并由低噪声放大器（LNA）1037立即放大。下变频器1039降低载波频率，同时解调器1041剥离RF，仅留下数字比特流。然后，信号经过均衡器1025并由DSP 1005处理。数模转换器（DAC）1043转换信号并且得到的输出通过扬声器1045发送至用户，所有都在主控制单元（MCU）1003的控制下——其可作为中央处理单元（CPU）（未示出）来实现。
MCU 1003从键盘1047接收包括输入信号的各种信号。键盘1047和/或与其他用户输入部件（例如麦克风1011）结合的MCU1003，包括用于管理用户输入的用户接口电路。MCU 1003运行用户接口软件以便于移动终端1001的至少一些功能的用户控制以将用户，物体或设备场景信息与代表真实世界场景的用户定义的场景模型相关联。MCU 1003还将显示命令和切换命令分别传送至显示器1007和语音输出切换控制器。此外，MCU1003与DSP 1005交换信息，并且可访问可选地并入的SIM卡1049和存储器1051。此外，MCU 1003执行终端所需的各种控制功能。DSP 1005可取决于实现方式，在语音信号上执行各种传统数字处理功能中的任一个。此外，DSP 1005从由麦克风1011检测的信号确定本地环境的背景噪声水平，并将麦克风1011的增益设置为选择以补偿移动终端1001的用户的自然倾向的水平。
CODEC 1013包括ADC 1023和DAC 1043。存储器1051存储包括呼叫输入音调数据的各种数据，并且能够存储包括经由例如全球Internet接收的音乐数据的其他数据。软件模块可位于RAM存储器、闪存、寄存器或本领域已知的任意其它形式的可写存储介质中。存储器设备1051可以是但不限于，单个存储器、CD、DVD、ROM、RAM、EEPROM、光存储器、或能够存储数字数据的任意其他非易失性存储介质。
可选地并入的SIM卡1049例如携载重要信息，如蜂窝电话号码、载波提供服务、订购细节和安全信息。SIM卡1049主要用于在无线电网络上识别移动终端1001。卡1049还包含用于存储个人电话号码登记、文本消息和用户指定的移动终端设置的存储器。
尽管结合多个实施例和实现描述了本发明，但是本发明不限于此，而是覆盖落入所附权利要求范围内的各种明显修改和等同配置。尽管在权利要求中以某些组合表示本发明的特征，但是可预期的是这些特征可以任意组合和顺序布置。