用于无线返回信道的用户输入装置.pdf

本发明的方面涉及一种方法，其在一实例中包含由源装置将显示数据发送到汇点装置以供在所述汇点装置上再现。所述方法还包含由所述源装置接收在与所述源装置相关联的触敏屏幕的第一显示位置处的用户输入的指示，其中所述用户输入指定对在所述汇点装置处再现的所述显示数据的至少一部分的修改，其中所述显示数据的所述部分在所述汇点装置的第二显示位置处再现。所述方法还包含响应于接收到所述指示由所述源装置发送第二配置数据，以至少部分基于所述第一显示位置到所述第二显示位置的映射来修改在所述第二显示位置处再现的所述显示数据的所述部分。

1.   一种方法，其包括：
由源装置将显示数据发送到汇点装置以供在所述汇点装置上再现；
由所述源装置接收在与所述源装置相关联的触敏屏幕的第一显示位置处的用户输入的指示，其中所述用户输入指定对在所述汇点装置处再现的所述显示数据的至少一部分的修改，其中所述显示数据的所述部分在所述汇点装置的第二显示位置处再现；以及
响应于接收到所述指示，由所述源装置发送第二配置数据，以至少部分基于所述第一显示位置到所述第二显示位置的映射来修改在所述第二显示位置处再现的所述显示数据的所述部分。

2.   根据权利要求1所述的方法，其中所述映射进一步至少部分基于与触敏显示器相关联的第一显示分辨率到所述汇点装置的第二显示分辨率的映射。

3.   根据权利要求1所述的方法，其进一步包括：
在所述源装置的所述触敏屏幕处接收用户输入的第二指示；
响应于接收到所述第二指示，由所述源装置至少部分基于所述第二指示产生与第一时间戳相关联的第一事件；
由所述源装置且从所述汇点装置接收与第二时间戳相关联的第二事件；
由所述源装置确定所述第二时间戳是否表示比所述第一时间戳早的时间；以及
当所述第二时间戳表示所述比所述第一时间戳早的时间时，在至少部分基于所述第一事件修改所述显示数据之前至少部分基于所述第二事件修改所述显示数据。

4.   根据权利要求1所述的方法，其进一步包括响应于接收到用户输入的第二指示由所述源装置抑制显示所述显示数据。

5.   根据权利要求1所述的方法，其中在所述第二显示位置处再现的所述显示数据的所述部分包括图形指向对象。

6.   一种无线源装置，其包括：
存储指令的存储器；
经配置以执行所述指令的一个或一个以上处理器，其中在执行所述指令时，所述一个或一个以上处理器致使：
将显示数据发送到汇点装置以供在所述汇点装置上再现；
接收在与所述源装置相关联的触敏屏幕的第一显示位置处的用户输入的指示，其中所述用户输入指定对在所述汇点装置处再现的所述显示数据的至少一部分的修改，其中所述显示数据的所述部分在所述汇点装置的第二显示位置处再现；
以及
响应于接收到所述指示，发送第二配置数据，以至少部分基于所述第一显示位置到所述第二显示位置的映射来修改在所述第二显示位置处再现的所述显示数据的所述部分。

7.   根据权利要求6所述的无线源装置，其中所述映射进一步至少部分基于与触敏显示器相关联的第一显示分辨率到所述汇点装置的第二显示分辨率的映射。

8.   根据权利要求6所述的无线源装置，其中在执行所述指令时，所述一个或一个以上处理器进一步致使：
在所述源装置的所述触敏屏幕处接收用户输入的第二指示；
响应于接收到所述第二指示，至少部分基于所述第二指示产生与第一时间戳相关联的第一事件；
从所述汇点装置接收与第二时间戳相关联的第二事件；
确定所述第二时间戳是否表示比所述第一时间戳早的时间；以及
当所述第二时间戳表示所述比所述第一时间戳早的时间时，在至少部分基于所述第一事件修改所述显示数据之前至少部分基于所述第二事件修改所述显示数据。

9.   根据权利要求6所述的无线源装置，其中在执行所述指令时，所述一个或一个以上处理器进一步致使：
响应于接收用户输入的第二指示由所述源装置抑制显示所述显示数据。

10.   根据权利要求6所述的无线源装置，其中在所述第二显示位置处再现的所述显示数据的所述部分包括图形指向对象。

11.   一种存储指令的计算机可读存储媒体，所述指令当由无线源装置的一个或一个以上处理器执行时致使所述一个或一个以上处理器：
将显示数据发送到汇点装置以供在所述汇点装置上再现；
接收在与所述无线源装置相关联的触敏屏幕的第一显示位置处的用户输入的指示，其中所述用户输入指定对在所述汇点装置处再现的所述显示数据的至少一部分的修改，其中所述显示数据的所述部分在所述汇点装置的第二显示位置处再现；以及
响应于接收到所述指示，发送第二配置数据，以至少部分基于所述第一显示位置到所述第二显示位置的映射来修改在所述第二显示位置处再现的所述显示数据的所述部分。

12.   根据权利要求11所述的计算机可读存储媒体，其中所述映射进一步至少部分基于与触敏显示器相关联的第一显示分辨率到所述汇点装置的第二显示分辨率的映射。

13.   根据权利要求11所述的计算机可读存储媒体，其存储在由所述无线源装置的一个或一个以上处理器执行时进一步致使所述一个或一个以上处理器进行以下操作的指令：
在所述无线源装置的所述触敏屏幕处接收用户输入的第二指示；
响应于接收到所述第二指示，由所述无线源装置至少部分基于所述第二指示产生与第一时间戳相关联的第一事件；
由所述无线源装置且从所述汇点装置接收与第二时间戳相关联的第二事件；
由所述无线源装置确定所述第二时间戳是否表示比所述第一时间戳早的时间；以及
当所述第二时间戳表示所述比所述第一时间戳早的时间时，在至少部分基于所述第一事件修改所述显示数据之前至少部分基于所述第二事件修改所述显示数据。

14.   根据权利要求11所述的计算机可读存储媒体，其存储在由所述无线源装置的一个或一个以上处理器执行时进一步致使所述一个或一个以上处理器进行以下操作的指令：响应于接收到用户输入的第二指示，由所述无线源装置抑制显示所述显示数据。

15.   根据权利要求11所述的计算机可读存储媒体，其中在所述第二显示位置处再现的所述显示数据的所述部分包括图形指向对象。

16.   一种无线源装置，其包括：
用于将显示数据发送到汇点装置以供在所述汇点装置上再现的装置；
用于接收在与所述源装置相关联的触敏屏幕的第一显示位置处的用户输入的指示的装置，其中所述用户输入指定对在所述汇点装置处再现的所述显示数据的至少一部分的修改，其中所述显示数据的所述部分在所述汇点装置的第二显示位置处再现；以及
用于响应于接收到所述指示发送第二配置数据，以至少部分基于所述第一显示位置到所述第二显示位置的映射来修改在所述第二显示位置处再现的所述显示数据的所述部分的装置。

17.   根据权利要求16所述的无线源装置，其中所述映射进一步至少部分基于与触敏显示器相关联的第一显示分辨率到所述汇点装置的第二显示分辨率的映射。

18.   根据权利要求16所述的无线源装置，其进一步包括：
用于在所述源装置的所述触敏屏幕处接收用户输入的第二指示的装置；
用于响应于接收到所述第二指示至少部分基于所述第二指示产生与第一时间戳相关联的第一事件的装置；
用于从所述汇点装置接收与第二时间戳相关联的第二事件的装置；
用于确定所述第二时间戳是否表示比所述第一时间戳早的时间的装置；以及
用于当所述第二时间戳表示所述比所述第一时间戳早的时间时在至少部分基于所述第一事件修改所述显示数据之前至少部分基于所述第二事件修改所述显示数据的装置。

19.   根据权利要求16所述的无线源装置，其进一步包括：
用于响应于接收到用户输入的第二指示抑制显示所述显示数据的装置。

20.   根据权利要求16所述的无线源装置，其中在所述第二显示位置处再现的所述显示数据的所述部分包括图形指向对象。

21.   一种方法，其包括：
由无线汇点装置接收用于在所述无线汇点装置上再现的显示数据；
由所述无线汇点装置接收用以修改在所述无线汇点装置的第一位置处再现的所述显示数据的一部分的配置数据，其中所述显示数据的所述部分在无线源装置的第二显示位置处再现；以及
由所述无线汇点装置至少部分基于所述第一显示位置与所述第二显示位置的映射在所述第一位置处再现所述显示数据的所述部分。

22.   根据权利要求21所述的方法，其进一步包括：
由所述无线汇点装置将所述无线汇点装置的显示分辨率发送到所述无线源装置。

23.   根据权利要求21所述的方法，其进一步包括：
在所述无线汇点装置的触敏屏幕处接收用户输入的指示；
响应于接收到所述指示，由所述无线汇点装置产生与时间戳相关联的事件，所述时间戳指示接收到用户输入的所述指示的至少一时间；以及
由所述无线汇点装置且向所述无线源装置发送所述事件。

24.   根据权利要求21所述的方法，其中在所述第一位置处再现的所述显示数据的所述部分包括图形指向对象。

25.   一种无线汇点装置，其包括：
存储指令的存储器；
经配置以执行所述指令的一个或一个以上处理器，其中在执行所述指令时，所述一个或一个以上处理器致使：
由无线汇点装置接收用于在所述无线汇点装置上再现的显示数据；
由所述无线汇点装置接收用以修改在所述无线汇点装置的第一位置处再现的所述显示数据的一部分的配置数据，其中所述显示数据的所述部分在无线源装置的第二显示位置处再现；以及
由所述无线汇点装置至少部分基于所述第一显示位置与所述第二显示位置的映射在所述第一位置处再现所述显示数据的所述部分。

26.   根据权利要求25所述的无线汇点装置，其中在执行所述指令时，所述一个或一个以上处理器进一步致使：
将所述无线汇点装置的显示分辨率发送到所述无线源装置。

27.   根据权利要求25所述的无线汇点装置，其中在执行所述指令时，所述一个或一个以上处理器进一步致使：
在所述无线汇点装置的触敏屏幕处接收用户输入的指示；
响应于接收到所述指示，产生与时间戳相关联的事件，所述时间戳指示接收到用户输入的所述指示的至少一时间；以及
向所述无线源装置发送所述事件。

28.   根据权利要求25所述的无线汇点装置，其中在所述第一位置处再现的所述显示数据的所述部分包括图形指向对象。

29.   一种存储指令的计算机可读存储媒体，所述指令当由无线汇点装置的一个或一个以上处理器执行时致使所述一个或一个以上处理器：
接收用于在所述无线汇点装置上再现的显示数据；
接收用以修改在所述无线汇点装置的第一位置处再现的所述显示数据的一部分的配置数据，其中所述显示数据的所述部分在无线源装置的第二显示位置处再现；
以及
至少部分基于所述第一显示位置与所述第二显示位置的映射在所述第一位置处再现所述显示数据的所述部分。

30.   根据权利要求29所述的计算机可读存储媒体，其存储在由所述汇点装置的一个或一个以上处理器执行时进一步致使所述一个或一个以上处理器进行以下操作的指令：
将所述无线汇点装置的显示分辨率发送到所述无线源装置。

31.   根据权利要求29所述的计算机可读存储媒体，其存储在由所述汇点装置的一个或
一个以上处理器执行时进一步致使所述一个或一个以上处理器进行以下操作的指令：
在所述无线汇点装置的触敏屏幕处接收用户输入的指示；
响应于接收到所述指示，产生与时间戳相关联的事件，所述时间戳指示接收到用户输入的所述指示的至少一时间；以及
向所述无线源装置发送所述事件。

32.   根据权利要求29所述的计算机可读存储媒体，其中在所述第一位置处再现的所述显示数据的所述部分包括图形指向对象。

33.   一种无线汇点装置，其包括：
用于接收用于在所述无线汇点装置上再现的显示数据的装置；
用于接收用以修改在所述无线汇点装置的第一位置处再现的所述显示数据的一部分的配置数据的装置，其中所述显示数据的所述部分在无线源装置的第二显示位置处再现；以及
用于至少部分基于所述第一显示位置与所述第二显示位置的映射在所述第一位置处再现所述显示数据的所述部分的装置。

34.   根据权利要求33所述的无线汇点装置，其进一步包括：
用于将所述无线汇点装置的显示分辨率发送到所述无线源装置的装置。

35.   根据权利要求33所述的无线汇点装置，其进一步包括：
用于接收用户输入的指示的装置；
用于响应于接收到所述指示产生与时间戳相关联的事件的装置，所述时间戳指示接收到用户输入的所述指示的至少一时间；以及
用于向所述无线源装置发送所述事件的装置。

36.   根据权利要求33所述的无线汇点装置，其中在所述第一位置处再现的所述显示数据的所述部分包括图形指向对象。

用于无线返回信道的用户输入装置
本申请案主张2011年2月4日申请的标题为“WI‑FI显示反向信道设置和输入数据封装(WI‑FI DISPLAY REVERSE CHANNEL SETUP AND INPUT DATAENCAPSULATION)”的第61/439,809号美国临时申请案以及2011年12月22日申请的标题为“用于无线返回信道的用户输入装置(USER INPUT DEVICE FOR WIRELESSBACK CHANNEL)”的第61/579,056号美国临时申请案的优先权，所述临时申请案的全部内容以全文引用的方式并入本文中。
技术领域
本发明涉及用于在无线源装置与无线汇点装置之间发射数据的技术。
背景技术
无线显示(WD)或Wi‑Fi显示(WFD)系统包含源装置和一个或一个以上汇点装置。所述源装置和所述汇点装置的每一者可为移动装置或具有无线通信能力的有线装置。作为移动装置，举例来说，源装置和汇点装置中的一者或一者以上可包括移动电话、具有无线通信卡的便携式计算机、个人数字助理(PDA)、便携式媒体播放器，或具有无线通信能力的其它快闪存储器装置，包含所谓的“智能”电话和“智能”平板电脑或平板计算机，或其它类型的无线通信装置。作为有线装置，举例来说，源装置和汇点装置中的一者或一者以上可包括包含无线通信能力的电视机、台式计算机、监视器、投影仪等。
源装置将例如音频视频(AV)数据等媒体数据发送到参与特定媒体共享会话的汇点装置中的一者或一者以上。可在源装置的本地显示器以及汇点装置的每一显示器处重放媒体数据。更特定来说，参与的汇点装置中的每一者都在其屏幕和音频设备上再现所接收的媒体数据。
发明内容
本发明的技术大体涉及无线源装置与无线汇点装置之间的通信。更特定来说，本发明描述可使无线源装置能够充当控制在无线汇点装置处再现的视频数据的输入装置的技术。举例来说，根据本发明的方面，无线源装置可将视频数据发送到无线汇点装置以供再现和显示。另外，无线源装置可发送用于控制所再现的视频数据的用户输入。
在一实例中，无线源装置可包含用于将用户输入提供到无线源装置的触摸显示器。即，无线源装置的触摸显示器可充当类似于膝上型计算机上的触摸板的触摸板或鼠标垫。在此实例中，根据本发明的方面，无线源装置可发送待由无线汇点装置再现的视频数据以及来自触摸显示器的用户输入。因此，当用户在无线源装置的触摸显示器处提供用户输入时，无线源显示器可产生对应于用户输入的一个或一个以上事件且将此类事件发送到无线汇点装置。另外，根据本发明的方面，无线源装置可将在无线源装置处的用户输入的位置映射到无线汇点装置处的适当位置。
在一实例中，本发明的方面涉及一种方法，其在一实例中包含由源装置将显示数据发送到汇点装置以供在所述汇点装置上再现。所述方法还包含由所述源装置接收在与所述源装置相关联的触敏屏幕的第一显示位置处的用户输入的指示，其中所述用户输入指定对在所述汇点装置处再现的所述显示数据的至少一部分的修改，其中所述显示数据的所述部分在所述汇点装置的第二显示位置处再现。所述方法还包含响应于接收所述指示由所述源装置发送第二配置数据，以至少部分基于所述第一显示位置到所述第二显示位置的映射来修改在所述第二显示位置处再现的所述显示数据的所述部分。
在另一实例中，本发明的方面涉及一种无线源装置，其包括存储指令的存储器；经配置以执行所述指令的一个或一个以上处理器，其中在执行所述指令时，所述一个或一个以上处理器致使：将显示数据发送到汇点装置以供在所述汇点装置上再现；接收在与所述源装置相关联的触敏屏幕的第一显示位置处的用户输入的指示，其中所述用户输入指定对在所述汇点装置处再现的所述显示数据的至少一部分的修改，其中所述显示数据的所述部分在所述汇点装置的第二显示位置处再现；以及响应于接收所述指示发送第二配置数据，以至少部分基于所述第一显示位置到所述第二显示位置的映射来修改在所述第二显示位置处再现的所述显示数据的所述部分。
在另一实例中，本发明的方面涉及一种存储指令的计算机可读存储媒体，所述指令当由无线源装置的一个或一个以上处理器执行时致使所述一个或一个以上处理器：将显示数据发送到汇点装置以供在所述汇点装置上再现；接收在与所述无线源装置相关联的触敏屏幕的第一显示位置处的用户输入的指示，其中所述用户输入指定对在所述汇点装置处再现的所述显示数据的至少一部分的修改，其中所述显示数据的所述部分在所述汇点装置的第二显示位置处再现；以及响应于接收所述指示发送第二配置数据，以至少部分基于所述第一显示位置到所述第二显示位置的映射来修改在所述第二显示位置处再现的所述显示数据的所述部分。
在另一实例中，本发明的方面涉及一种无线源装置，其包括：用于将显示数据发送到汇点装置以供在所述汇点装置上再现的装置；用于接收在与所述源装置相关联的触敏屏幕的第一显示位置处的用户输入的指示的装置，其中所述用户输入指定对在所述汇点装置处再现的所述显示数据的至少一部分的修改，其中所述显示数据的所述部分在所述汇点装置的第二显示位置处再现；以及用于响应于接收所述指示发送第二配置数据，以至少部分基于所述第一显示位置到所述第二显示位置的映射来修改在所述第二显示位置处再现的所述显示数据的所述部分的装置。
在另一实例中，本发明的方面涉及一种方法，其包括：由无线汇点装置接收用于在所述无线汇点装置上再现的显示数据；由所述无线汇点装置接收用以修改在无线汇点装置的第一位置处再现的显示数据的一部分的配置数据，其中所述显示数据的所述部分在无线源装置的第二显示位置处再现；以及由所述无线汇点装置至少部分基于所述第一显示位置与所述第二显示位置的映射在所述第一位置处再现所述显示数据的所述部分。
在另一实例中，本发明的方面涉及一种无线汇点装置，其包括存储指令的存储器；经配置以执行所述指令的一个或一个以上处理器，其中在执行所述指令时，所述一个或一个以上处理器致使：由无线汇点装置接收用于在所述无线汇点装置上再现的显示数据；由所述无线汇点装置接收用以修改在无线汇点装置的第一位置处再现的显示数据的一部分的配置数据，其中所述显示数据的所述部分在无线源装置的第二显示位置处再现；以及由所述无线汇点装置至少部分基于所述第一显示位置与所述第二显示位置的映射在所述第一位置处再现所述显示数据的所述部分。
在另一实例中，本发明的方面涉及一种存储指令的计算机可读存储媒体，所述指令当由无线汇点装置的一个或一个以上处理器执行时致使所述一个或一个以上处理器：接收用于在所述无线汇点装置上再现的显示数据；接收用以修改在无线汇点装置的第一位置处再现的显示数据的一部分的配置数据，其中所述显示数据的所述部分在无线源装置的第二显示位置处再现；以及至少部分基于所述第一显示位置与所述第二显示位置的映射在所述第一位置处再现所述显示数据的所述部分。
在另一实例中，本发明的方面涉及一种无线汇点装置，其包括：用于接收用于在所述无线汇点装置上再现的显示数据的装置；用于接收用以修改在无线汇点装置的第一位置处再现的显示数据的一部分的配置数据的装置，其中所述显示数据的所述部分在无线源装置的第二显示位置处再现；以及用于至少部分基于所述第一显示位置与所述第二显示位置的映射在所述第一位置处再现所述显示数据的所述部分的装置。
一个或一个以上实例的细节陈述于附图及以下描述中。其它特征、目标及优势将从描述及附图和从权利要求书中显而易见。
附图说明
图1A是说明可实施本发明的技术的源/汇点系统的实例的框图。
图1B是说明可实施本发明的技术的具有两个汇点装置的源/汇点系统的实例的框图。
图2是展示可实施本发明的技术的源装置的实例的框图。
图3是展示可实施本发明的技术的汇点装置的实例的框图。
图4是展示可实施本发明的技术的发射器系统和接收器系统的实例的框图。
图5是可实施本发明的技术的汇点装置和源装置的概念图。
图6展示说明可使无线源装置能够充当在无线汇点装置处再现的数据的输入装置的实例方法的流程图。
图7展示说明可使无线汇点装置能够基于来自无线源装置的用户输入再现显示数据的实例方法的流程图。
具体实施方式
无线显示(WD)系统可包含无线显示(WD)源和至少一个无线显示汇点。另外，无线显示系统可包含多个无线显示汇点。无线显示源可将音频视频(AV)数据发送到无线显示汇点，所述无线显示汇点可在终端装置处即刻再现所接收的AV数据。在一些实例中，音频视频数据包括快速连续播放的帧(或图片)的序列，其还可包含相关联音频帧，但有时不包含音频帧。
在一些情况下，无线显示源可被提示以响应于在无线显示汇点处施加的用户输入。在此交互应用中，在无线显示汇点处施加的用户输入可被发送回到无线显示源。在一个实例中，可实施反向信道架构来使无线显示系统能够将在无线显示汇点处施加的用户输入发射到无线显示源。反向信道架构可包含用于传送用户输入的上层消息，和用于协商无线显示汇点和无线显示源处的用户接口能力的下层帧。
无线显示反向信道可驻留在因特网协议(IP)传送层上方、在无线显示汇点与无线显示源之间。为了促进可靠地发射且连续递送到用户输入，无线显示反向信道可配置为基于TCP/IP运行。在一些情况下，无线显示汇点和无线显示源处的用户输入接口之间可存在失配。为了解决此失配引起的问题并促进此类情形下的良好用户体验，在无线显示汇点与无线显示源之间发生用户输入接口能力协商。
本发明的技术大体涉及无线源装置与无线汇点装置之间的通信。更特定来说，本发明描述可使无线源装置能够充当将视频数据递送到汇点装置且还控制在无线汇点装置处再现的视频数据的输入装置的技术。举例来说，根据本发明的方面，无线源装置可将视频数据发送到无线汇点装置以供再现和显示。另外，无线源装置可发送用于控制所再现的视频数据的用户输入。
在一实例中，无线源装置可包含用于将用户输入提供到无线源装置的触摸显示器。即，无线源装置的触摸显示器可充当类似于膝上型计算机上的触摸板的触摸板或鼠标垫。在此实例中，根据本发明的方面，无线源装置可发送待由无线汇点装置再现的视频数据以及来自触摸显示器的用户输入。因此，当用户在无线源装置的触摸显示器处提供用户输入时，无线源显示器可产生对应于用户输入的一个或一个以上事件且将此类事件发送到无线汇点装置。另外，根据本发明的方面，无线源装置可将在无线源装置处的用户输入的位置映射到无线汇点装置处的适当位置。
图1A是说明可实施本发明的技术的示范性源/汇点系统100的框图。如图1A所示，系统100包含经由通信信道150而与汇点装置160通信的源装置120。源装置120可包含存储音频/视频(A/V)数据121的存储器、显示器122、扬声器123、音频/视频编码器124(也称为编码器124)、音频/视频控制模块125，以及发射器/接收器(TX/RX)单元126。汇点装置160可包含显示器162、扬声器163、音频/视频解码器164(也称为解码器164)、发射器/接收器单元166、用户输入(UI)装置167，以及用户输入处理模块(UIPM)168。所说明的组件仅组成一个实例，且其它实例可包含比那些所说明的组件少的组件或额外组件。
在图1A的实例中，源装置120可在显示器122上显示音频/视频数据121的视频部分，且可在扬声器122上输出音频/视频数据121的音频部分。音频/视频数据121可存储在源装置120本地，从例如文件服务器、蓝光光盘或DVD等外部存储媒体存取，或可经由例如因特网等网络连接串流到源装置120。在一些例子中，可经由源装置120的相机和麦克风实时地俘获音频/视频数据121。音频/视频数据121可包含例如电影、电视节目或音乐等多媒体内容，但也可包含由源装置120产生的实时内容。此实时内容可例如由在源装置120上运行的应用程序产生。在一个实例中，此实时内容还可包含可供用户选择的用户输入选项的视频帧。在一些例子中，音频/视频数据121可包含为不同类型内容的组合的视频帧，例如具有覆盖在视频帧上的用户输入选项的电影或TV节目的视频帧。
除了经由显示器122和扬声器123在本地再现音频/视频数据121外，源装置120的音频/视频编码器124也可编码音频/视频数据121，且发射器/接收器单元126可经由通信信道150将经编码数据发射到汇点装置160。汇点装置160的发射器/接收器单元166接收经编码数据，且音频/视频解码器164解码经编码数据并经由显示器162和扬声器163输出经解码数据。以此方式，正由显示器122和扬声器12再现的音频和视频数据可同时由显示器162和扬声器163再现。音频数据和视频数据可布置为帧，且当再现时音频帧可与视频帧时间同步。
音频/视频编码器124和音频/视频解码器164可实施任何数目的音频和视频压缩标准，例如ITU‑T H.264标准(或者称为MPEG‑4，第10部分，高级视频译码(AVC))，或新兴的高效视频译码(HEVC)标准(有时称为H.265标准)。一般来说，音频/视频解码器164经配置以执行音频/视频编码器124的互逆译码操作。尽管图1A未图示，但在一些方面中，A/V编码器124和A/V解码器164可各自与音频编码器和解码器集成，且可包含适当的MUX‑DEMUX(多路复用‑多路分用)单元或其它硬件和软件来处置共同数据流或单独数据流中的音频和视频两者的编码。
尽管图1A展示通信信道150单独携载音频有效负载数据和视频有效负载数据，但应理解，在一些例子中，视频有效负载数据和音频有效负载数据可为共同数据流的一部分。如果适用，MUX‑DEMUX单元可符合ITU H.223多路复用器协议或例如用户数据报协议(UDP)等其它协议。音频/视频编码器124和音频/视频解码器164可各自实施为一个或一个以上微处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、离散逻辑、软件、硬件、固件或其任何组合。音频/视频编码器124和音频/视频解码器164中的每一者可包含在一个或一个以上编码器或解码器中，其任一者可集成作为组合式编码器/解码器(CODEC)的一部分。
显示器122和显示器162可包括例如阴极射线管(CRT)、液晶显示器(LCD)、等离子体显示器、有机发光二极管(OLED)显示器或另一类型的显示装置等多种视频输出装置的任一者。扬声器123可包括例如头戴式耳机、单扬声器系统、多扬声器系统或环绕声系统等多种音频输出装置的任一者。另外，尽管显示器122和扬声器123被展示为源装置120的一部分，且显示器162和扬声器163被展示为汇点装置160的一部分，但源装置120和汇点装置160可实际上为装置的系统。作为一个实例，显示器162可为电视机，扬声器163可为环绕声系统，且解码器164可为以有线或无线方式连接到显示器162和扬声器163的外部盒的一部分。在其它例子中，汇点装置160可为单一装置，例如平板计算机或智能电话。在另外其它情况下，源装置160和汇点装置120为类似装置，例如两者均为智能电话、平板计算机等。在此情况下，一个装置可作为源操作且另一装置可作为汇点操作。这些角色可甚至在后续通信会话中颠倒。
发射器/接收器单元126和发射器/接收器单元166可各自包含各种混频器、滤波器、放大器和经设计用于信号调制的其它组件，以及一个或一个以上天线和经设计用于发射与接收数据的其它组件。通信信道150通常表示任何适宜的通信媒体，或不同通信媒体的集合，其用于将视频数据从源装置120发射到汇点装置160。通信信道150通常为相对短程通信信道，类似于WiFi、蓝牙等。然而，通信信道150在此方面不必受限制，且可包括例如射频(RF)频谱或一个或一个以上物理发射线等任何无线或有线通信媒体，或无线与有线媒体的任何组合。在其它实例中，通信信道150可甚至形成例如局域网、广域网或全球网络(例如，因特网)等基于包的网络的一部分。源装置120和汇点装置160可使用例如来自IEEE802.11标准系列的标准等通信协议经由通信信道通信。
除了解码和再现从源装置120接收的数据外，汇点装置160还可接收来自用户输入装置167的用户输入。用户输入装置167可例如为键盘、鼠标、跟踪球或跟踪垫、触摸屏、语音命令辨识模块，或任何其它此类用户输入装置。用户输入处理模块168将用户输入装置167接收的用户输入命令格式化为源装置120能够解译的数据包结构。此类数据包由发射器/接收器单元166经由通信信道150发射到源装置120。发射器/接收器单元126接收数据包，且A/V控制模块剖析数据包以解译由用户输入装置167接收的用户输入命令。基于在数据包中接收的命令，A/V控制模块125可改变正编码和发射的内容。以此方式，汇点装置160的用户可远程控制正由源装置120发射的音频有效负载数据和视频有效负载数据，且不必直接与源装置120交互。汇点装置160的用户可发射到源装置120的命令的类型的实例包含用于倒回、快进、暂停和播放音频及视频数据的命令，以及用于缩放、旋转、滚动等的命令。用户还可从例如选项的菜单中进行选择，且将选择发射回到源装置120。
源装置120可响应于在汇点装置160处施加的用户输入。在此交互应用环境中，在汇点装置160处施加的用户输入可经由通信信道150发送回到无线显示源。在一个实例中，可实施反向信道架构(也称为用户接口返回信道(UIBC))以使汇点装置160能够将在汇点装置160处施加的用户输入发射到源装置120。反向信道架构可包含用于传送用户输入的上层消息，和用于协商汇点装置160和源装置120处的用户接口能力的下层帧。UIBC可驻留在因特网协议(IP)传送层上方、在汇点装置160与源装置120之间。为了促进含有用户输入数据的数据包的可靠发射和连续递送，UIBC可被配置为基于例如发射控制协议/因特网协议(TCP/IP)或用户数据报协议(UDP)等其它基于包的通信协议运行。
在一些情况下，在位于源装置120和汇点装置160处的用户输入接口之间可存在失配。为了解决此失配导致的潜在问题并促进此类情形下的良好用户体验，可在建立通信会话之前在源装置120与汇点装置160之间发生用户输入接口能力协商。
UIBC可经设计以传送各种类型的用户输入数据，包含跨平台用户输入数据。举例来说，源装置120可运行操作系统，而汇点装置160运行例如或等另一操作系统。不管平台如何，UIPM168可以A/V控制模块125可理解的形式封装所接收的用户输入。UIBC可支持若干不同类型的用户输入格式以便允许许多不同类型的源和汇点装置利用所述协议。可界定一般输入格式，且也可支持平台特定输入格式，因此提供可由UIBC在源装置120与汇点装置160之间传送用户输入的方式的灵活性。
在图1A的实例中，源装置120可包括智能电话、平板计算机、膝上型计算机、台式计算机、具有WiFi功能的电视机，或能够发射音频和视频数据的任何其它装置。汇点装置160可同样包括智能电话、平板计算机、膝上型计算机、台式计算机、具有WiFi功能的电视机，或能够接收音频和视频数据以及接收用户输入数据的任何其它装置。在一些例子中，汇点装置160可包含装置的系统，使得显示器162、扬声器163、UI装置167和A/V编码器164均为单独但交互操作装置的部分。源装置120可同样为装置的系统而非单一装置。在许多情况下，源装置120和汇点装置160可为类似或相同装置，其中一个装置作为源操作且另一装置作为汇点操作。此外，这些角色可在不同通信会话中颠倒。
本发明的实例技术可使源装置120能够充当输入装置，其可控制在汇点装置160处再现的视频数据。即，举例来说，源装置120可将视频数据发送到汇点装置160以供在显示器162处再现和显示。以此方式，源装置120的视频数据可经扩展以供在汇点装置160上显示。
源装置120还可包含触摸显示器。举例来说，显示器122可为触摸显示器。即，在一些实例中，显示器122可为允许用户将用户输入提供到源装置120的电容性、电阻性或其它类型的触摸面板。以此方式，源装置120的显示器122可充当类似于膝上型计算机上的触摸板的触摸板或鼠标垫。因此，当用户在显示器122处提供用户输入时，源装置120可产生对应于用户输入的一个或一个以上事件。
在一个实例中，所述一个或一个以上事件可包含进一步描述例如用户输入的类型、用户输入所选择的图形对象等事件的特性的参数。在产生事件后，源装置120可即刻将所述一个或一个以上事件发送到汇点装置160。在一些实例中，源装置120可使用实时传送协议(RTP)和用户数据报协议(UDP)将事件发送到汇点装置160。在其它实例中，源装置120可使用发射控制协议(TCP)和因特网协议(IP)来发送事件。在任何情况下，汇点装置160可接收所述一个或一个以上事件，且基于所述事件修改在汇点装置160处再现的视频数据。举例来说，可产生或修改在汇点装置160处显示的图形指向对象(例如，鼠标指针)的位置或外观。在其它情况下，源装置120可修改在源装置120处再现的显示数据，且源装置120可将表示对显示数据的任何修改的数据发送到汇点装置160。
以此方式，源装置120的显示器122可用作可在汇点装置160处操作的鼠标垫。因此，在一个情境中，源装置120可为再现显示数据的智能电话。显示数据可扩展到汇点装置160，所述汇点装置160可为较大显示器，例如LED电视机。根据本发明的一些方面，如下文参看图5更详细描述，显示器122的显示功能性可被关闭以节省电力，同时可跟踪用户的触摸/手指移动，且可在汇点装置160处再现对应的动作。举例来说，显示器122可不显示任何视频数据，同时可在汇点装置160处显示指针。在一些实例中，源装置120当作为用户输入装置操作时可允许实现汇点装置160上的触摸交互性，所述汇点装置160可不具有触敏显示器而是再现从源装置120接收的显示数据。以此方式，可在源装置120与汇点装置160之间互换地使用用户接口能力。
本发明的方面进一步提供用以将无线汇点装置120的分辨率映射到无线源装置160的分辨率的技术。映射无线装置的分辨率使得能够将源装置120处产生的事件转译到汇点装置160。举例来说，当源装置120和汇点装置160初始通信时，所述装置可交换显示分辨率信息。
此类映射可允许源装置的显示器122上的相对位置对应于汇点装置160的显示器162上的相同相对位置，而不管显示器122是否具有与显示器162不同的分辨率和/或大小。举例来说，如果用户稍后在源装置120的显示器122的左上角提供用户输入，那么源装置120可产生事件。所述事件可指定显示器122上的用户输入的位置和事件的类型。响应于产生事件，源装置120可基于源装置分辨率与汇点装置分辨率的映射确定对应于无线源装置120的显示器122的所述位置的在汇点装置160的显示器162处的位置。因此，如果在显示器122的左上角提供用户输入，那么所述输入可映射到显示器162的左上角。
在一些实例中，源装置120可基于所述映射和用户输入来修改由源装置120再现的显示数据。指示所述修改的数据可接着由源装置120发送到汇点装置160以更新在汇点装置160处再现的显示数据。在替代实例中，源装置120可将事件发送到汇点装置160，且汇点装置160可基于所述事件和源装置分辨率与汇点装置分辨率的映射来修改显示数据。
在一些例子中，源装置120的显示器122可作为输入装置和输出装置两者操作。举例来说，显示器122可使用电容性、电阻性或其它耦合来确定何时用户在显示器122处执行触摸示意动作而充当输入装置。显示器122还可通过使用液晶显示器(LCD)显示器或其它显示格式来显示显示数据而充当输出装置。在本发明的一些方面中，当源装置120被用作输入装置来修改在汇点装置160处再现的显示数据时，源装置120可停用显示器122的输出装置功能性。举例来说，源装置120可在电容性耦合功能性保持启用的同时停用或关闭触摸显示器的LCD显示器以节省电力。
在一些实例中，可在源装置120和汇点装置160两者处接收不同用户输入。因此，当将表示用户输入的事件从一个装置传送到另一装置时，可发生同步问题。举例来说，由源装置120再现的显示数据可被发送到汇点装置160以供再现。用户可在汇点装置160处提供用户输入，所述汇点装置160可产生发送到源装置120的事件。在源装置120接收所述事件之前，另一用户可在源装置120处提供用户输入。在此类实例中，可将时间戳施加到每一用户输入，以使用户输入被施加到由源装置120再现的显示数据的方式同步。举例来说，可在具有较迟时间戳的第二用户输入之前施加具有较早时间戳的第一用户输入。
在另一实例中，在从汇点装置160接收事件之前，由源装置120再现的显示数据的位置可能已归因于在源装置120处接收的用户输入而改变。因为在汇点装置160处产生的事件是基于显示数据的先前位置，所以源装置120可评估与事件相关联的时间戳，且进一步识别显示数据的经更新位置。基于所述事件，源装置120可使用图形对象的经更新位置来修改显示数据。以此方式，本发明的技术提供显示数据在多个装置上的同步。
因此，图1A提供源/汇点系统100的实例，其可由源装置120将显示数据发送到汇点装置160以供在汇点装置160上再现；由源装置120接收在与源装置120相关联的触敏屏幕的第一显示位置处的用户输入的指示，其中所述用户输入指定对在汇点装置160处再现的所述显示数据的至少一部分的修改，其中所述显示数据的所述部分在汇点装置160的第二显示位置处再现；以及响应于接收所述指示，由源装置120发送第二配置数据，以至少部分基于所述第一显示位置到所述第二显示位置的映射来修改在所述第二显示位置处再现的所述显示数据的所述部分。
图1B是说明可实施本发明的技术的示范性源/汇点系统101的框图。源/汇点系统101包含源装置120、汇点装置160A和汇点装置160B(统称为汇点装置160)。在一些实例中，源装置120和汇点装置160可按上文参看图1A描述的方式起作用和操作。即，以与关于图1A所示的汇点装置160描述的方式类似的方式，汇点装置160A和160B可从源装置120接收音频和视频数据。举例来说，在一些配置中，源装置120处的音频和视频输出可同时在汇点装置160A和汇点装置160B处输出。另外，根据本发明的方面，在源装置120处提供的用户输入可被发送到汇点装置160A和汇点装置160B。
因此，一般来说，应理解，本发明的技术可扩展以支持多个源和/或汇点装置。即，根据本发明的方面，源装置120可充当输入装置，其可控制在汇点装置160A、160B以及已建立与源装置120的连接的任何其它汇点装置处再现的视频数据。
因此，源装置120可执行针对每一所连接汇点装置160的映射。举例来说，当源装置120初始与汇点装置160的每一者通信时，所述装置可交换显示分辨率信息。此映射可允许源装置120的显示器上的相对位置对应于汇点装置160中的每一者的显示器上的相同相对位置，而不管源装置120的显示器是否具有与汇点装置160的显示器不同的分辨率和/或大小。
在一些实例中，源装置120可基于所述映射和用户输入来修改由源装置120再现的显示数据。指示所述修改的数据可接着由源装置120发送到汇点装置160以更新在汇点装置160处再现的显示数据。在替代实例中，源装置120可将事件发送到汇点装置160，且汇点装置160可基于所述事件和源装置分辨率与汇点装置分辨率的映射来修改显示数据。此外，可维持时间戳(或跟踪用户输入的其它方式)以避免同步问题，如上文参看图1A所描述。
虽然汇点装置160A和汇点装置160B已被指派得到相同数字，但应理解，在一些实例中，汇点装置160A和汇点装置160B可具有不同能力和/或执行不同功能。举例来说，在一些配置中，汇点装置160A可为主要汇点装置，且汇点装置160B可为次要汇点装置。在此配置中，汇点装置160A与汇点装置160B可耦合，且汇点装置160A可显示视频数据而汇点装置160B输出对应的音频数据。
图2是展示可实行本发明的某些技术的源装置220的一个实例的框图。在一些实例中，可类似于参看图1A展示和描述的源装置120而配置源装置220。在图2所示的实例中，源装置220包含本地显示器222、本地扬声器223、一个或一个以上处理器231、存储器232、传送模块233和无线调制解调器234。
图2的处理器231通常表示广泛多种处理器中的任一者，包含(但不限于)一个或一个以上数字信号处理器(DSP)、通用微处理器、专用集成电路(ASIC)、现场可编程逻辑阵列(FPGA)、其它等效集成或离散逻辑电路，或其某一组合。图2的存储器232可包括广泛多种易失性或非易失性存储器中的任一者，包含(但不限于)随机存取存储器(RAM)(例如，同步动态随机存取存储器(SDRAM))、只读存储器(ROM)、非易失性随机存取存储器(NVRAM)、电可擦除可编程只读存储器(EEPROM)、快闪存储器等。存储器232可包括用于存储音频/视频数据以及其它种类的数据的计算机可读存储媒体。存储器232可额外存储指令和程序代码，其由处理器231执行，作为执行本发明描述的各种技术的一部分。
在操作中，源装置220的处理器231可编码和/或解码A/V数据以供传送、存储和显示。A/V数据可例如存储在存储器232处。存储器232可存储整个A/V文件，或可包括仅存储例如从另一装置或源串流的A/V文件的一部分的较小缓冲器。传送模块233可处理经编码A/V数据以供网络传送。举例来说，经编码A/V数据可由多媒体处理器231处理且由传送模块233封装到网络接入层(NAL)单元中以供在网络上传送。NAL单元可由无线调制解调器234经由网络连接发送到无线汇点装置。
源装置220还可在本地处理和显示A/V数据。特定来说，显示处理器235可处理待在本地显示器222上显示的视频数据，音频处理器236可处理用于在扬声器223上输出的音频数据。
在图2所示的实例中，源装置220包含触摸显示器接口237。在一些实例中，触摸显示器接口237可为允许用户提供用户输入的电容性、电阻性，或其它类型的触摸面板。举例来说，用户可将一个或一个以上触摸示意动作提供到触摸显示器接口237，触摸显示器接口237可产生对应于用户输入的一个或一个以上事件。
在一个实例中，所述一个或一个以上事件可包含进一步描述例如用户输入的类型、用户输入所选择的图形对象等事件的特性的参数。在产生事件后，源装置220可即刻将所述一个或一个以上事件发送到汇点装置(例如，比如图1所示的汇点装置160)。即，源装置220可封装事件数据，所述事件数据接着可经由WiFi调制解调器234发射到汇点装置。在一些实例中，源装置220可使用实时传送协议(RTP)和用户数据报协议(UDP)将事件发送到汇点装置。在其它实例中，源装置220可使用发射控制协议(TCP)和因特网协议(IP)来发送事件。
在任何情况下，源装置可接收所述一个或一个以上事件，且基于所述事件修改在汇点装置处再现的视频数据。举例来说，可产生或修改在汇点装置处显示的图形指向对象(例如，鼠标指针)的位置或外观。在其它情况下，源装置220可修改在源装置220处再现的显示数据，且源装置220可将表示对显示数据的任何修改的数据发送到汇点装置。
如上文参考图1A的源装置120描述，源装置220也可接收来自汇点装置的用户输入命令。以此方式，源装置220的无线调制解调器234接收经封装数据包(例如，NAL单元)，且将经封装数据单元发送到传送单元233以供解封装。举例来说，传送单元233可从NAL单元提取数据包，且处理器231可剖析数据包以提取用户输入命令。基于用户输入命令，处理器231可调整正由源装置220发射到汇点装置的经编码A/V数据。
图3展示可实行本发明的某些技术的汇点装置360的实例。在一些实例中，可类似于关于图1A展示和描述的汇点装置160来配置汇点装置360。在图3所示的实例中，汇点装置360包含一个或一个以上处理器331、存储器332、传送单元333、无线调制解调器334、显示处理器335、本地显示器362、音频处理器336、扬声器363和触摸显示器接口337。
图3的处理器331可包括广范围处理器中的一者或一者以上，例如一个或一个以上数字信号处理器(DSP)、通用微处理器、专用集成电路(ASIC)、现场可编程逻辑阵列(FPGA)、其它等效集成或离散逻辑电路，或其某一组合。图3的存储器332可包括广泛多种易失性或非易失性存储器中的任一者，包含(但不限于)随机存取存储器(RAM)(例如，同步动态随机存取存储器(SDRAM))、只读存储器(ROM)、非易失性随机存取存储器(NVRAM)、电可擦除可编程只读存储器(EEPROM)、快闪存储器等。存储器232可包括用于存储音频/视频数据以及其它种类的数据的计算机可读存储媒体。存储器332可额外存储指令和程序代码，其由处理器331执行，作为执行本发明描述的各种技术的一部分。
根据本发明的方面，汇点装置360可在无线调制解调器334处接收从源装置(例如，比如源装置120(图1A)或源装置220(图2))发送的经封装数据单元。传送单元333可对经封装数据单元解封装。举例来说，传送单元333可从经封装数据单元提取经编码视频数据，且将经编码A/V数据发送到处理器331以进行解码和再现以供输出。显示处理器335可处理待在本地显示器362上显示的经解码视频数据，且音频处理器336可处理经解码音频数据以供在扬声器363上输出。
除了再现音频和视频数据外，无线汇点装置360还可经由触摸显示器接口337接收用户输入。尽管图3的实例利用触摸显示器接口作为实例输入装置，但例如键盘、鼠标或语音命令模块等其它输入装置全部与本发明的技术兼容。经由触摸显示器接口337接收的用户输入可由处理器331处理。此处理可包含根据本发明中描述的技术产生包含所接收的用户输入命令的数据包。一旦产生，传送模块333就可处理所述数据包以供在UIBC上网络传送到无线源装置。
图4展示实例发射器系统410和接收器系统450的框图，所述发射器系统410和接收器系统450可由图1A的发射器/接收器126和发射器/接收器166使用以用于在通信信道150上通信。在发射器系统410处，将若干数据流的业务数据从数据源412提供到发射(TX)数据处理器414。可在相应发射天线上发射每一数据流。TX数据处理器414基于针对每一数据流选择的特定译码方案对所述数据流的业务数据格式化、译码和交错。
可使用正交频分多路复用(OFDM)技术将每一数据流的经译码数据与导频数据多路复用。还可使用广泛多种其它无线通信技术，包含(但不限于)时分多址(TDMA)、频分多址(FDMA)、码分多址(CDMA)，或OFDM、FDMA、TDMA和/或CDMA的任何组合。
依据图4，导频数据通常为以已知方式处理的已知数据模式，且可在接收器系统处使用以估计信道响应。每一数据流的经多路复用的导频和译码数据接着基于针对所述数据流选择的特定调制方案(例如，二进制相移键控(BPSK)、正交相移键控(QPSK)、M‑PSK或M‑QAM(正交振幅调制)，其中M可为2的幂)而被调制(例如，符号映射)以提供调制符号。可通过由可与存储器432耦合的处理器430执行的指令确定每一数据流的数据速率、译码和调制。
数据流的调制符号接着被提供到TX MIMO处理器420，TX MIMO处理器420可进一步处理调制符号(例如，针对OFDM)。TX MIMO处理器420可接着将NT个调制符号流提供到NT个发射器(TMTR)422a到422t。在某些方面中，TX MIMO处理器420将波束成形权重应用到数据流的符号且应用到正从其发射符号的天线。
每一发射器422可接收并处理相应符号流以提供一个或一个以上模拟信号，且进一步调节(例如，放大、滤波和升频转换)模拟信号以提供适于在MIMO信道上发射的经调制信号。接着分别从NT个天线424a到424t发射来自发射器422a到422t的NT个经调制信号。
在接收器系统450处，所发射的经调制信号由NR个天线452a到452r接收，且来自每一天线452的所接收的信号被提供到相应接收器(RCVR)454a到454r。接收器454调节(例如，滤波、放大和降频转换)相应所接收信号，数字化经调节信号以提供样本，且进一步处理样本以提供对应的“所接收”符号流。
接收(RX)数据处理器460接着接收并基于特定接收器处理技术处理来自NR个接收器454的NR个所接收符号流以提供NT个“经检测”符号流。RX数据处理器460接着解调制、解交错并解码每一所检测符号流以恢复数据流的业务数据。RX数据处理器460进行的处理与发射器系统410处的TX MIMO处理器420和TX数据处理器414执行的处理互补。
可与存储器472耦合的处理器470周期性确定应使用哪一预译码矩阵。反向链路消息可包含关于通信链路和/或所接收的数据流的各种类型的信息。反向链路消息接着由TX数据处理器438(其还接收来自数据源436的若干数据流的业务数据)处理，由调制器480调制，由发射器454a到454r调节，且发射回到发射器系统410。
在发射器系统410处，来自接收器系统450的经调制信号由天线424接收，由接收器422调节，由解调器440解调制，且由RX数据处理器442处理以提取由接收器系统450发射的反向链路消息。处理器430接着确定应使用哪一预译码矩阵来确定波束成形权重，接着处理所提取的消息。
图5是可实施本发明的技术的汇点装置和源装置的概念图。虽然参考源装置120和汇点装置160(图1A)描述图5，但应理解，图5的技术可由多种装置执行，包含其它源和汇点装置。
在图5所示的实例中，源装置120的显示器122被配置为触敏显示器。即，举例来说，显示器122可为允许用户将用户输入提供到源装置120的电容性、电阻性或其它类型的触摸面板。因此，当用户500在显示器122处提供用户输入时，源装置120可产生对应于用户输入的一个或一个以上事件。在一些实例中，此类用户输入可称为“触摸示意动作”。触摸示意动作可对应于用户500在一个或一个以上点处与显示器122接触。即，显示器122可经设计以同时辨识一个以上点处的触摸，这是通常称为“多触摸”的特征。多触摸显示器可单独识别和解译在屏幕的不同区域中的触摸。因此，同时在一个以上位置处触摸显示器122可向用户提供与源装置120交互的额外方式(例如，与单一触摸形成对比)。
如上所述，本发明的实例技术可使源装置120能够充当输入装置，所述输入装置可控制在汇点装置160处再现的视频数据。举例来说，源装置120可将视频数据发送到汇点装置160以供在显示器162处再现和显示(图5中展示为一系列立方体504)以此方式，源装置120的视频数据可经扩展以供在汇点装置160上显示。
另外，根据本发明的方面，源装置120可将一个或一个以上事件发送到汇点装置160。举例来说，所述一个或一个以上事件可包含进一步描述例如用户输入的类型(例如，触摸示意动作的类型)、用户输入所选择的图形对象等事件的特性的参数。在一些实例中，源装置120可使用实时传送协议(RTP)和用户数据报协议(UDP)将事件发送到汇点装置160。在其它实例中，源装置120可使用发射控制协议(TCP)和因特网协议(IP)将事件发送到汇点装置160。
在任何情况下，汇点装置160可接收所述一个或一个以上事件，且基于所述事件修改在汇点装置160处再现的视频数据。在一个实例中，可产生或修改在汇点装置160处显示的图形指向对象(例如，鼠标指针)508的位置或外观。在其它实例中，源装置120可修改在源装置120处再现的显示数据，且源装置120可将表示对显示数据的任何修改的数据发送到汇点装置160。
以此方式，源装置120的显示器122可用作可在汇点装置160处操作的鼠标垫。因此，在一个情境中，源装置120可为再现显示数据的智能电话。显示数据可扩展到汇点装置160，所述汇点装置160可为较大显示器，例如LED电视机。
根据本发明的一些方面，可关闭显示器122的显示功能性以节省电力，同时可跟踪用户的触摸/手指移动，且可在汇点装置160处再现对应的动作。在图5所示的实例中，用户500可提供从显示器122的左下角到显示器122的相对中心的触摸输入(例如，轻扫触摸示意动作，在此期间用户500维持与显示器122的接触)，如虚线512所指示。在此实例中，在汇点装置160的显示器162上显示的图形指向对象508可从显示器162的左下角向显示器162的中心移动，遵循实质上类似于在源装置120处提供的输入的路径516。另外，根据本发明的方面，图形指向对象508可不在源装置120的显示器122上显示，而是可在汇点装置160的显示器162上显示。
本发明的方面进一步提供用以将无线汇点装置120的分辨率映射到无线源装置160的分辨率的技术。映射无线装置的分辨率使得能够将在源装置120处产生的事件转译到汇点装置160。举例来说，当源装置120和汇点装置160初始通信时，所述装置可交换显示分辨率信息。
此类映射可允许源装置的显示器122上的相对位置对应于汇点装置160的显示器162上的相同相对位置，而不管显示器122是否具有与显示器162不同的分辨率和/或大小。即，如上所述，如果用户500在源装置120的显示器122的左下角提供用户输入，那么所述输入也可提供在汇点装置160的显示器162的左下角。另外，如果用户在显示器122处提供朝向显示器122的相对中心的轻扫示意动作(如虚线512所指示)，那么可在汇点装置160上实行朝向显示器162的中心的轻扫示意动作。源装置120与汇点装置160的分辨率可经映射使得当用户500到达显示器122的相对中心时，图形指向对象508也到达显示器162的相对中心，而不管显示器122具有与显示器162不同的分辨率。
在一些实例中，源装置120可基于所述映射和用户输入来修改由源装置120再现的显示数据。指示所述修改的数据可接着由源装置120发送到汇点装置160以更新在汇点装置160处再现的显示数据。在替代实例中，源装置120可将事件发送到汇点装置160，且汇点装置160可基于所述事件和源装置分辨率与汇点装置分辨率的映射来修改显示数据。
图6是说明可使无线源装置能够充当输入装置的实例方法的流程图。即，根据图6所示的实例，源装置可控制在无线汇点装置处再现的视频数据。虽然可出于阐释的目的参考源装置120和汇点装置160描述图6所示的方法，但应理解，图6的方法可由多种装置执行，包含其它源和/或汇点装置。
如图6所示，源装置120可初始将显示数据发送到汇点装置160以供在汇点装置160上再现(600)。显示数据可包含(例如)快速连续播放以模拟全运动视频的再现的帧(或图片)序列。在一些实例中，源装置120可在将显示数据发送到汇点装置160之前编码显示数据。响应于接收显示数据，汇点装置160可再现显示数据。举例来说，汇点装置160可解码显示数据且进一步致使显示器162显示所述显示数据的视觉表示。
根据使无线源装置能够充当输入装置的本发明的技术，源装置120可接收在与源装置120相关联的触敏屏幕的第一显示位置处的用户输入的指示(602)。举例来说，用户输入的指示可包含用户在触敏屏幕的第一显示位置处执行示意动作，所述示意动作可由源装置120检测到。
所述用户输入可指定对在汇点装置160处再现的显示数据的至少一部分的修改。举例来说，用户可将图形指向对象从显示器162上的一个位置移动到显示器162上的另一位置。在另一实例中，用户可选择显示器162上的图形对象。在汇点装置160处再现的所述显示数据的所述部分可在汇点装置160的第二显示位置处再现。
在一些实例中，源装置120可响应于接收到用户输入的指示发送第二配置数据，以修改在汇点装置160的第二显示位置处再现的所述显示数据的所述部分(604)。在一些实例中，第二配置数据可至少部分基于所述第一显示位置到所述第二显示位置的映射。举例来说，所述映射可为与源装置120的显示器122相关联的第一显示分辨率到汇点装置160的显示器162的第二显示分辨率的映射。
图7展示说明可使无线汇点装置能够基于来自无线源装置的用户输入来再现显示数据的实例方法的流程图。虽然可出于阐释的目的参考源装置120和汇点装置160描述图7所示的方法，但应理解，图7的方法可由多种装置执行，包含其它源和/或汇点装置。
如图7所示，汇点装置160可从源装置120接收用于在汇点装置160上再现的显示数据(700)。显示数据可包含(例如)快速连续播放以模拟全运动视频的再现的帧(或图片)序列。在一些实例中，汇点装置160可从源装置120接收经编码显示数据。因此，汇点装置160可解码显示数据且进一步致使显示器162显示所述显示数据的视觉表示。
根据本发明的方面，汇点装置160还可接收用以修改在汇点装置160的第一位置处再现的显示数据的一部分的配置数据(702)。所述显示数据的所述部分可对应于在源装置120的第二显示位置处再现的数据。即，根据本发明的方面，汇点装置160可至少部分基于从源装置120处的第二显示位置到汇点装置160处的第一显示位置的映射在所述第一位置处再现所述显示数据的所述部分(704)。
在一个或一个以上实例中，所描述的功能可以硬件、软件、固件或其任何组合来实施。如果实施在软件中，所述功能可作为一个或一个以上指令或代码存储在计算机可读媒体上或在计算机可读媒体上发射，且由基于硬件的处理单元执行。计算机可读媒体可包含：计算机可读存储媒体，其对应于例如数据存储媒体等有形媒体；或通信媒体，其包含促进例如根据通信协议将计算机程序从一处转移到另一处的任何媒体。以此方式，计算机可读媒体通常可对应于(1)非瞬时的有形计算机可读存储媒体，或(2)例如信号或载波等通信媒体。数据存储媒体可为可由一个或一个以上计算机或一个或一个以上处理器存取以检索用于实施本发明中描述的技术的指令、代码和/或数据结构的任何可用媒体。计算机程序产品可包含计算机可读媒体。
借助实例而非限制，此类计算机可读存储媒体可包括RAM、ROM、EEPROM、CD‑ROM，或其它光盘存储装置、磁盘存储装置，或其它磁性存储装置、快闪存储器，或可用于存储呈指令或数据结构形式的所要程序代码且可由计算机存取的任何其它媒体。同样，可恰当地将任何连接称作计算机可读媒体。举例来说，如果使用同轴电缆、光缆、双绞线、数字订户线(DSL)或例如红外线、无线电及微波等无线技术从网站、服务器或其它远程源发射软件，则同轴电缆、光缆、双绞线、DSL或例如红外线、无线电及微波等无线技术包括于媒体的定义中。然而，应理解，计算机可读存储媒体和数据存储媒体不包含连接、载波、信号或其它瞬时媒体，而是针对非瞬时有形存储媒体。如本文中所使用，磁盘及光盘包括紧密光盘(CD)、激光光盘、光学光盘、数字多功能光盘(DVD)、软磁盘及蓝光光盘，其中磁盘通常磁性地复制数据，而光盘使用激光光学地复制数据。上文的组合也应包括在计算机可读媒体的范围内。
指令可由例如一个或一个以上数字信号处理器(DSP)、通用微处理器、专用集成电路(ASIC)、现场可编程逻辑阵列(FPGA)、或其它等效集成或离散逻辑电路等一个或一个以上处理器执行。因此，如本文中所使用的术语“处理器”可指上述结构或适合于实施本文中所描述的技术的任一其它结构中的任一者。另外，在一些方面中，本文描述的功能性可提供在经配置用于编码和解码的专门硬件和/或软件模块内，或并入在组合式编解码器中。并且，可将所述技术完全实施于一个或一个以上电路或逻辑元件中。
本发明的技术可实施在广泛多种装置或设备中，包含无线手持机、集成电路(IC)或IC组(例如，芯片组)。本发明描述各种组件、模块或单元以强调经配置以执行所揭示的技术的装置的功能方面，但不一定要求通过不同硬件单元实现。事实上，如上文描述，各个单元可组合在编解码器硬件单元中或由与适宜的软件和/或固件结合的交互操作的硬件单元的集合提供，所述硬件单元包含如上文描述的一个或一个以上处理器。
已描述各个实例。这些及其它实例属于所附权利要求书的范围内。