对相关申请的引用
该申请要求2013年10月24日提交的日本优先权专利申请JP 2013-221287的权益,其全部内容通过引用合并于此。
技术领域
本公开涉及一种信息处理装置、记录介质和信息处理方法。
背景技术
摄像装置或配备有摄像装置的装置已变得普及,因此,用户的图像(静 止图像或运动图像)现在一般是在各种场景中拍摄的。在这样的情况下, 期望许多图像捕获所谓的重要时刻。例如,当图像是在体育比赛期间捕获 的时,用户可能想要记录许多重要的时刻作为图像,诸如击球时刻、跳跃 时刻、落地时刻和技术判定时刻。作为用于将这样的重要时刻记录为图像 的技术,例如,PTL1公开了用于从通过图像(throughimage)检测作为 快门按钮(releasetrigger)的主体的表情或动作(姿势)以及在检测到表 情或动作时动态地进行拍摄的技术。
引用列表
专利文献
PTL1:JP2010-273280A
发明内容
技术问题
然而,例如,体育比赛包含多种连续运动,因此从通过图像表征重要 时刻是不容易的。此外,与表情等不同,在许多情况下,重要时刻的持续 时间非常短。在该情况下,难以通过应用例如PTL1中公开的技术以及 从通过图像检测主体的表情或动作而正确地检测重要时刻。
期望提供一种新颖且改进的信息处理装置,新颖且改进的记录介质以 及新颖且改进的信息处理方法,其能够准确地指定主体的连续运动当中的 重要时刻以及提取该重要时刻作为图像。
问题的解决方案
以下是这里描述的针对关于传统系统和方法的问题的解决方案的示 例。
根据一种非暂态计算机可读存储装置实施例,存储介质中存储有应用 程序。该应用程序具有当被处理电路执行时将处理电路配置为执行以下处 理的指令:
接收来自传感器的传感器数据,该传感器附接到人或者附接到人使用 的物品;以及
分析传感器数据中的运动模式以识别该运动模式中的预定事件,该预 定事件是图像捕获装置在图像或一系列图像中捕获的。
一种信息处理系统,包括:
电路,该电路由计算机可读指令配置为:
接收由附接到人或附接到人使用的物品的传感器收集的传感器数 据;以及
分析传感器数据中的运动模式以识别该运动模式中的预定事件,该预 定事件是图像捕获装置在图像或一系列图像中捕获的。
根据上述本公开的实施例,可以准确地指定主体的连续运动当中的重 要时刻以及提取该重要时刻作为图像。
上述有利效果不一定是限制性的,而是伴随上述有利效果或者取代上 述有利效果,可获得期望在本说明书中获得的任何有利效果或者从本说明 书理解的其它有利效果。
附图说明
图1是示出根据本公开的实施例的系统的总体配置的图。
图2是示出根据本公开的实施例的智能电话的总体功能配置的图。
图3是用于描述根据本公开的实施例的选择单个静止图像的示例的图。
图4是用于描述根据本公开的实施例的选择连续照片的示例的图。
图5是用于描述根据本公开的实施例的设置运动图像的区间的示例的 图。
图6是用于描述根据本公开的实施例的基于连续运动模式选择图像的 示例的图。
图7是示出击球诊断应用的开始屏幕的图。
图8是示出击球诊断应用中的测量期间的屏幕的图。
图9是示出击球诊断应用中的分析期间的屏幕的图。
图10是示出击球诊断应用的结果屏幕的图。
图11是示出击球诊断应用的连续照片屏幕的图。
图12是示出击球诊断应用的再现控制屏幕的图。
图13是示出连续照片生成应用的开始屏幕的图。
图14是示出连续照片生成应用中的拍摄期间的屏幕的图。
图15是示出连续照片生成应用中的生成期间的屏幕的图。
图16是示出连续照片生成应用的生成结果屏幕的图。
图17是示出根据本公开的实施例的信息处理装置的硬件配置的示例的 框图。
具体实施方式
在下文中,将参照附图详细描述本公开的优选实施例。在本说明书和 附图中,相同的附图标记被给予具有基本上相同的配置的构成元件,并且 将省略重复描述。
将按以下顺序进行描述。
1.系统配置
2.功能配置
3.图像选择的示例
3-1.选择单个静止图像的示例
3-2.选择连续照片的示例
3-3.设置运动图像的区间的示例
3-4.检测连续运动模式的示例
4.应用的示例
4-1.击球诊断应用
4-2.连续照片生成应用
5.硬件配置
6.补充
(1.系统配置)
图1是示出根据本公开的实施例的系统的总体配置的图。参照图1, 系统10包括传感器装置100、智能电话200、摄像装置300和服务器400。 尽管在该实施例中示出了智能电话200,但是也可使用可穿戴计算机,诸 如智能眼镜(诸如索尼智能眼镜(SONYSMARTEYEGLASS))、智能手 表(诸如索尼智能手表(SONYSMARTWATCH2))、运动型摄像装置(诸 如索尼(SONY)POVHD)、活动跟踪器(诸如索尼智能手环(SONY SMARTBAND))等。
传感器装置100是安装在用户或者与用户接触的物体上的传感器。在 该上下文中,“用户”也可以是动物或机器。在所示出的示例中,用户正 在进行运动(网球)。在该示例中,例如,传感器装置100可以插入到用 户握住的网球拍的把手部分中,或者可以缠绕在轴部分上。网球拍是与用 户接触的物体。替选地,传感器装置100可具有手环形状并且可安装在用 户的腕部上。作为另一示例,传感器装置100可安装在例如用户的其他部 位上,诸如手臂或踝部。当传感器装置100安装在诸如网球拍的物体上时, 传感器装置100可以是物体,例如,诸如球拍的打球工具或者诸如衣服、 鞋子或护腕的运动工具。在该情况下,传感器装置100可缠绕在物体上、 缝在物体上、附接到物体或者置于物体中以预先安装。
例如,传感器装置100包括获取指示用户的行为的传感器数据的传感 器、对传感器数据进行处理的处理电路以及与智能电话200通信的通信装 置。例如,传感器获取关于加速度、角速度、振动、温度、时间、位置(例 如,纬度和经度指示的地面上的位置或者相对于球场等的相对位置)的传 感器数据。处理电路根据需要而对传感器数据进行预处理。通信装置与智 能电话200进行例如无线通信(诸如蓝牙(注册商标))。通过无线通信, 例如,传感器数据(包括处理电路预处理的数据)从传感器装置100传送 到智能电话200。通过无线通信,控制信号可从智能电话200传送到传感 器装置100。在该情况下,传感器和/或处理电路根据通信装置接收的控制 信号进行操作。
智能电话200是用户使用的信息处理装置的示例。在所示出的示例 中,智能电话200放在正进行运动(网球)的用户附近。例如,用户在运 动期间使用智能电话200以使用以下要描述的运动支持应用。在用户没有 使用智能电话200时,即,用户正在进行运动时,智能电话200可以通过 与传感器装置100或摄像装置300的链接操作而执行各种处理。例如,智 能电话200可基于从传感器装置100接收的传感器数据而控制摄像装置 300拍摄的图像的记录。智能电话200可通过将基于传感器数据生成的控 制信号传送到摄像装置300而控制摄像装置300的拍摄操作。智能电话 200还可以以相同方式将控制信号传送到传感器装置100。智能电话200 可将从传感器装置100接收的传感器数据或者摄像装置300拍摄的图像上 载到服务器400。智能电话200可对服务器400请求与对于传感器装置100 或摄像装置300的链接操作有关的处理的一部分或全部。
例如,智能电话200包括对传感器数据或图像执行处理的处理器、存 储传感器数据、图像和各种中间数据的存储器或存储装置、显示对于用户 的运动支持应用等的屏幕的显示器、获取用户的操纵输入的操纵单元(诸 如触摸板)以及与传感器装置100、摄像装置300和服务器400进行通信 的通信装置。例如,通信装置可以包括与传感器装置100和摄像装置300 进行无线通信(诸如蓝牙(注册商标))的通信装置和与服务器400进行 网络通信的通信装置。以下将描述该硬件配置实现的功能。以下还将描述 能够实现智能电话200的信息处理装置的更具体硬件配置的示例。
摄像装置300是能够拍摄包含作为主体的用户的图像的成像装置的 示例。所拍摄的图像可以是静止图像或运动图像。在所示出的示例中,摄 像装置300位于可以拍摄正进行运动(网球)的用户的位置,例如,球场 周边等。在实施例中,摄像装置300执行与智能电话200的链接操作。例 如,摄像装置300可将所拍摄的图像的一部分或全部传送到智能电话200。 例如,摄像装置300可根据从智能电话200接收的控制信号而执行拍摄。 以下将描述摄像装置300与智能电话200之间的链接操作的更具体示例。
例如,摄像装置300包括诸如成像元件和透镜的光学系统、控制成像 元件和光学系统的控制单元、暂时或永久存储拍摄图像的存储器或存储装 置、对拍摄图像进行处理的处理器以及与智能电话200进行通信的通信装 置。例如,通信装置与智能电话200进行无线通信(诸如蓝牙(注册商标))。 通过无线通信,例如,拍摄图像从摄像装置300传送到智能电话200。通 过无线通信,控制信号可从智能电话200传送到摄像装置300。在该情况 下,控制单元和/或处理器根据通信装置接收的控制信号而进行操作。摄 像装置300还可由以下要描述的信息处理装置的硬件配置实现。
服务器400经由网络与智能电话200通信以接收传感器数据或图像的 上载,或者响应于来自智能电话200的请求而执行处理。例如,对于单个 用户,系统10可以不包括服务器400而完成。相反,当存在多个用户时, 数据或图像可以上载到服务器400,以使得可以在用户之间共享图像或者 可以基于多个用户的数据而学习传感器数据的模式。当服务器400响应于 来自智能电话200的请求而执行处理时,可以减轻智能电话200的处理负 荷。无论处理软件容纳在服务器400中还是智能电话200中(或者在这两 者之间分配),软件可被下载为对在服务器400和/或智能电话200中运行 的处理器进行配置的编程应用。
例如,服务器400由一个或多个服务器装置实现,这一个或多个服务 器装置每个均包括:执行对传感器数据或图像的处理以及智能电话200 请求的其它处理的处理器,存储上载的传感器数据或图像以及各种中间数 据的存储器或存储装置,以及与智能电话200进行通信的通信装置。通信 装置与智能电话200进行网络通信。如上所述,通过网络通信,例如,传 感器数据或图像从智能电话200上载到服务器400。通过网络通信,智能 电话200从服务器400请求的数据或者服务器400根据智能电话200的请 求执行的处理的结果可从服务器400传送到智能电话200。以下将描述能 够实现配置服务器400的服务器装置的信息处理装置的更具体硬件配置。
系统10的上述配置仅是示例,并且可以实现系统的各种其它配置。 例如,摄像装置300可置于智能电话200中。在该情况下,上述在系统 10中摄像装置300与智能电话200之间通过无线通信的数据交换被经由 智能电话200的内部总线等的数据交换替换。在该情况下,智能电话200 可被具有拍摄功能、处理功能和通信功能的各种终端装置(例如,平板终 端或游戏机)替换。当摄像装置300与智能电话200分开时,智能电话 200可以被具有处理功能和通信功能的各种终端装置(例如,各种个人计 算机)替换。
作为另一示例,上述智能电话200的功能的一部分可由摄像装置300 实现。例如,传感器装置100可与摄像装置300通信,并且摄像装置300 可基于从传感器装置100接收的传感器数据而控制拍摄。在该情况下,摄 像装置300可以用作根据本公开的实施例的信息处理装置。在该情况下, 系统10可不包括智能电话200。摄像装置300可与服务器400通信,并 且将图像直接上载到服务器400。同样地,传感器装置100可将传感器数 据直接上载到服务器400。在该情况下,传感器装置100可不与摄像装置 300直接通信,并且可以由服务器400基于从传感器装置100传送到服务 器400的传感器数据而控制摄像装置300。在该情况下,服务器400可以 认为用作根据本公开的实施例的信息处理装置。
(2.功能配置)
图2是示出根据本公开的实施例的智能电话的总体功能配置的图。参 照图2,智能电话200包括传送单元201、接收单元203、传感器装置控 制单元205、传感器数据分析单元207、分析结果处理单元209、摄像装 置控制单元211、图像保持单元213、图像选择单元215、静止图像记录 单元217、运动图像记录单元219、数据保持单元221、显示控制单元223、 显示单元225和时间信息保持单元227作为功能配置。在下文中,将进一 步描述功能配置。
传送单元201和接收单元203由通信装置实现。传送单元201将控制 信号传送到传感器装置100。控制信号可包括例如用于开始/结束传感器数 据的检测和传感器数据到智能电话200的传送的命令。控制信号可包括用 于调整传感器装置100关联于传感器数据的时间的命令。如以下将描述 的,当基于在传感器装置100中获取的传感器数据和摄像装置300拍摄的 图像执行处理时,智能电话200参照时间对传感器数据与图像进行同步。 因此,在实施例中,智能电话200可以将用于调整时间的命令传送到装置 以使得与传感器装置100中的传感器数据相关联的时间和与摄像装置300 中的图像相关联的时间匹配。在另一实施例中,当传感器数据和图像可以 同步而与装置中关联的时间无关时,控制信号可不包括用于调整时间的命 令。接收单元203从传感器装置100接收传感器数据和与传感器数据对应 的时间信息。
传感器装置控制单元205由处理器实现。传感器装置控制单元205 经由传送单元201和接收单元203而控制传感器装置100,并且获取传感 器装置100提供的传感器数据和与传感器数据对应的时间信息。传感器装 置控制单元205将所接收的传感器数据和时间信息提供到传感器数据分 析单元207。传感器装置控制单元205从时间信息保持单元227获取要经 由传送单元201传送到传感器装置100的时间调整命令中包括的时间。
传感器数据分析单元207由处理器实现。传感器数据分析单元207 分析从传感器装置控制单元205提供的传感器数据,并且将分析结果提供 到分析结果处理单元209。更具体地,基于传感器数据和与传感器数据对 应的时间信息,传感器数据分析单元207指定在安装传感器装置的用户或 者物体中发生预定运动模式的时间。这里,预定运动模式可以包括例如在 另一物体撞击安装传感器装置100的用户或者物体时发生的模式。例如, 当用户正进行运动并且由用户的身体或打球工具产生对球的撞击时,可以 发生这样的模式。
分析结果处理单元209由处理器来实现。分析结果处理单元209将将 基于从传感器数据分析单元207获取的分析结果的信息提供给摄像装置 控制单元211和/或图像选择单元215。例如,基于分析结果的拍摄开始/ 结束命令可以被输出到摄像装置控制单元211。例如,基于分析结果并且 指定用作图像选择参考的时间的信息可以被输出到图像选择单元215。
摄像装置控制单元211由处理器来实现。摄像装置控制单元211基于 从分析结果处理单元209获取的信息而控制摄像装置300,并且获取从摄 像装置300提供的图像。例如,摄像装置控制单元211根据从分析结果处 理单元209获取的拍摄开始/结束命令而将拍摄开始/结束命令传送到摄像 装置300。例如,摄像装置300可响应于拍摄开始/结束命令而开始/结束 成像元件的图像生成。替选地,摄像装置300可响应于拍摄开始/结束命 令而开始/结束将成像元件生成的图像到智能电话200的传送。摄像装置 300可响应于拍摄开始/结束命令而开始/结束摄像装置300中的图像的记 录。
摄像装置控制单元211基于从时间信息保持单元227获取的时间而将 时间调整命令传送到摄像装置300。时间调整命令是如在对传感器装置 100的传送中一样用于调整摄像装置300关联于图像的时间的命令。如上 所述,通过基于从时间信息保持单元227获取的共同时间而生成要传送到 摄像装置300的时间调整命令和要传送到传感器装置100的时间调整命 令,与图像相关联的时间可以和与传感器数据相关联的时间匹配。根据时 间调整命令调整的时间可以与摄像装置控制单元211从摄像装置300接收 的图像相关联。摄像装置控制单元211将所接收的图像和与图像相关联的 时间存储在图像保持单元213中。
图像保持单元213由存储器或存储装置来实现。图像保持单元213 保持摄像装置控制单元211从摄像装置300获取的图像以及与图像相关联 的时间。这里,图像保持单元213可以用作具有预定大小并且继续循环保 持连续图像的缓冲器。即,在图像从图像保持单元213提供到图像选择单 元215之后,例如,当图像选择单元215的容量小于预定阈值时,图像可 能被破坏。存储在图像保持单元213中的图像可被处理为静止图像或运动 图像,并且在两种情况下均是以预定间隔(或帧速率)连续拍摄的图像。
图像选择单元215由处理器来实现。图像选择单元215基于从分析结 果处理单元209提供的信息而选择存储在图像保持单元213中的图像当中 的一个或多个图像。更具体地,图像选择单元215根据传感器数据分析单 元207指定的并且在用户或物体中发生预定运动模式的时间,从以预定间 隔拍摄的包括用户或物体的一系列图像中选择一个或多个图像。在该情况 下,图像选择单元215可以以预定帧速率选择图像以配置运动图像或者可 选择每个独立图像作为静止图像。以下将描述图像选择单元215选择图像 的更具体示例。
静止图像记录单元217和运动图像记录单元219由处理器来实现。静 止图像记录单元217将图像选择单元215选择的一个或多个图像记录为静 止图像。运动图像记录单元219将图像选择单元215选择的一个或多个图 像记录为运动图像。静止图像和运动图像永久地记录在数据保持单元221 中。数据保持单元221由存储器或存储装置来实现。
显示控制单元223由处理器来实现。显示控制单元223在显示单元 225上显示保持在数据保持单元221中的静止图像或运动图像。显示单元 225由液晶显示器(LCD)、有机电致发光(EL)显示器等来实现。例如, 静止图像或运动图像可加载在智能电话200中提供的运动支持应用上以 进行显示。例如,静止图像可单独被显示为摘要图像、缩略图图像等,或 者多个静止图像可被组合和显示为如示出一系列动作的连续照片一样。
(3.图像选择的示例)
在实施例中,如上所述,例如,由于时间调整命令是基于对于传感器 装置100和摄像装置300共同的时间信息而传送的,因此传感器数据的时 间与图像的时间匹配。在各种方案中可以用此来选择图像,并且例如,所 谓的重要时刻的图像可以被提取并呈现给用户。在下文中,将参照图3至 图6描述图像的选择的多个示例。
在实施例中,由于传感器装置100与智能电话200之间以及摄像装置 300与智能电话200之间的通信将引起时间误差,因此不采用基于在智能 电话200中接收传感器数据和图像的时间的同步。例如,当传感器装置 100和摄像装置300距智能电话200的距离不同,通信方案不同(例如, 当一方利用蓝牙(注册商标)进行通信而另一方经由服务器进行网络通信 时)或者传送和接收的数据(传感器数据和图像数据)的容量不同时,可 能发生通信引起的时间误差。
因此,在另一实施例中,例如,当传感器装置和摄像装置位于基本上 距智能电话相同距离或者通信方案相同并且由于通信引起的时间误差可 允许时,可采用基于接收传感器数据和图像的时间的同步。甚至在该情况 下,也可以仅在精度略微劣化的情况下(如上所述,在可允许范围内)同 样地执行以下要描述的图像选择。
(3-1.选择单个静止图像的示例)
图3是用于描述根据本公开的实施例的选择单个静止图像的示例的 图。参照图3,在该示例中,图像选择单元215在传感器数据指示的撞击 发生时间处选择单个图像作为静止图像。例如,撞击发生时间可以被指定 为在被获取为传感器数据的加速度传感器的检测结果中发生高频的大幅 度的加速度的改变的时间。
在以下要描述的图像选择的示例中,为了进行描述,编号01至18 被给与摄像装置控制单元211从摄像装置300接收的并且暂时保持在图像 保持单元213中的一系列图像。图像01至18是以预定时间间隔(帧速率) 拍摄的。图像编号没有含义,并且例如,在图像01之前以及在图像18 之后也可从摄像装置300接收图像。
在所示出的示例中,作为传感器数据和图像的时间之间的匹配结果, 图像14被指定为在基于传感器数据检测的撞击发生时间拍摄的图像。因 此,图像选择单元215选择图像14作为捕获撞击时刻的静止图像。例如, 在网球中,球对球拍的撞击发生时刻(诸如发球、一击或扣球)作为重要 时刻的概率高。因此,捕获撞击时刻的图像14作为重要时刻的最佳镜头 的概率高。
不限于网球的情况,在其它球类比赛中,球对打球工具(诸如球拍或 球棒)的撞击或者球对用户身体的撞击发生时刻作为重要时刻的概率也 高。在除球类比赛之外的比赛中,相对于地面、地板等在用户的身体或仪 器上发生的撞击作为重要时刻的概率也高。因此,在许多情况下,如上所 述,通过选择与在安装传感器的用户或物体上发生撞击的时间对应的图像 作为静止图像,有可能获得捕获重要时刻的最佳镜头。
(3-2.选择连续照片的示例)
图4是用于描述根据本公开的实施例的选择连续照片的示例的图。参 照图4,在该示例中,如在图3的示例中,图像选择单元215选择在基于 传感器数据检测的撞击发生时间之前和之后的预定区间中拍摄的多个图 像作为形成连续照片的一系列图像。
在所示出的示例中,作为传感器数据和图像的时间之间的匹配结果, 图像14被指定为在撞击发生时间拍摄的图像,该撞击发生时间是基于传 感器数据检测的。图像选择单元215在撞击发生时间之前和之后的预定区 间中选择跳过一些图像的多个图像,以便生成示出撞击之前和之后的用户 运动的连续照片。更具体地,图像选择单元215选择所示出的范围中的图 像04、08、11、13、14、15、17等(继续选择图像,但是没有示出图像 17之后的图像)。这里,例如,如在以下要描述的运动图像的示例中,可 根据预定时间确定选择图像的预定区间。替选地,可根据预定数量的一系 列图像(即,预定数量的帧)而确定该区间。
这里,图像选择单元215不是以相等时间间隔选择图像。更具体地, 图像选择单元215根据与撞击时刻(图像14)的时间间隔而选择图像以 延长跳过的间隔。例如,在撞击时刻(图像14)之前选择的图像是紧挨 在撞击时刻之前的图像13。跳过的间隔从图像13开始朝向过去逐渐扩大, 以使得跳过一个图像并选择图像11,跳过两个图像并选择图像08,然后 跳过三个图像并选择图像04。
例如,当用户利用球拍击球时,在球撞击时刻之前和之后的用户和球 拍的运动中时间位移增加最大,并且时间位移趋于根据距撞击的时间间隔 而减小。因此,如上所述,图像选择单元215可以通过参考撞击时刻以不 等间隔选择图像而选择当被观看为连续照片时的自然图像。
作为附加配置,图像选择单元215可通过使得撞击之前和之后的预定 区间的长度不同而使得撞击之前和之后选择的图像的数量不同。在所示出 的示例中,图像选择单元215选择撞击时刻的一个图像(图像14)和撞 击之前的四个图像(图像04、08、11和13),而图像选择单元215可仅 选择撞击之后的三个图像(图像15、17、20(图像20未示出))。例如, 当用户利用球拍击球并且撞击之前的运动(拉拍(take-back))趋于比撞 击之后的运动(跟进动作(follow-through))更令人关注时,上述附加配 置可以是有效的。
(3-3.设置运动图像的区间的示例)
图5是用于描述根据本公开的实施例的设置运动图像的区间的示例 的图。参照图5,在该示例中,如在图3的示例中,图像选择单元215选 择在基于传感器数据检测的撞击发生时间之前和之后的预定区间中拍摄 的多个图像作为形成运动图像的一系列帧图像。
在所示出的示例中,作为传感器数据和图像的时间之间的匹配结果, 图像14被指定为在基于传感器数据检测的撞击发生时间拍摄的图像。图 像选择单元215选择包括图像14的预定区间的图像作为形成运动图像的 帧图像,以便生成包括撞击时刻的运动图像。更具体地,图像选择单元 215选择撞击时刻之前和之后的预定时间t的范围中的图像作为形成运动 图像的帧图像。虽然在图中仅示出了撞击时刻之前的图像,但是这同样适 用于撞击时刻之后的图像。替选地,取代预定时间t,可使用一系列预定 数量的图像(即,预定数量的帧)。
在实施例中,如上所述,图像保持单元213可以用作具有预定大小并 且循环记录一系列图像的缓冲器。静止图像记录单元217或运动图像记录 单元219从缓冲器读取图像选择单元215选择的图像并且将图像永久记录 在数据存储单元中,以使得可以在使用具有有限大小的缓冲器的情况下存 储捕获重要时刻的图像而不会错过图像。该示例是有利的在于,例如,与 当暂时存储在整个比赛时间期间捕获的图像,稍后执行图像分析等,并且 检索重要时刻的区间时相比,缓冲器的大小可以较小,并且在于,可不执 行诸如对于运动图像的长期图像分析的重负荷处理。
作为附加配置,如在图4的示例中的附加配置中一样,图像选择单元 215可将用于确定运动图像的区间的预定时间t的值设置为在撞击时刻之 前和之后不同。
(3-4.检测连续运动模式的示例)
图6是用于描述根据本公开的实施例的基于连续运动模式选择图像的 示例的图。参照图6,在该示例中,图像选择单元215选择基于从传感器 数据检测的连续运动模式的开始时间和/或结束时间而确定的区间中拍摄 的多个图像作为形成运动图像的一系列帧图像。
在实施例中,与由于撞击发生的模式一起或者取代由于撞击发生的模 式,传感器数据分析单元207检测的预定运动模式可以包括在撞击之前发 生的或者在撞击之后发生的连续运动模式。在所示出的示例中,例如,与 在用户或物体(球拍等)中发生的连续运动对应的模式可以定义在作为传 感器数据获取的加速度传感器的检测结果中。连续运动与诸如撞击的瞬间 运动的不同之处在于,连续运动在一定程度上具有时间长度。连续运动可 以包括例如与球对球拍的撞击相关联地发生的运动(诸如在撞击之前发生 的“拉拍”或者在撞击之后发生的“跟进动作”)。与该运动对应的运动模 式在本说明书中被称为连续运动模式。
在所示出的示例中,从在撞击之前发生并且由传感器数据分析单元 207检测的“拉拍”的运动模式的开始时间到在传感器数据分析单元207 检测的撞击之后发生的“跟进动作”的运动模式的结束时间的区间被设置 为预定区间,并且图像选择单元215选择在该区间中拍摄的一系列帧图 像。在该情况下,在时间上指定撞击时刻的信息可不一定被提供到图像选 择单元215。
如在图4所示的示例中一样,如在上述示例中基于连续运动模式的开 始时间或结束时间的预定区间的选择也可以应用于例如形成连续照片的 一系列图像的选择。通过使用在撞击之前和之后发生的连续运动模式来选 择图像,与例如当基于预定时间或帧的数量来确定预定区间时相比,可以 更准确地提取与撞击相关联的有意义区间的图像。
与诸如撞击的瞬间运动模式不同,在连续运动模式的情况下,传感器 数据分析单元207可以在根据某一模式的运动持续一定时间时实时地确 定运动模式的开始。因此,例如,当实时地检测到在撞击之前发生的连续 运动模式(例如,拉拍)的开始时,可以基于分析结果处理单元209提供 给摄像装置控制单元211的信息而控制摄像装置300,以开始拍摄或者开 始将拍摄图像传送到智能电话200。
在连续运动模式的情况下,当根据某一模式的运动持续一定时间时, 可以指定运动的发生。因此,当根据该模式的运动结束时,传感器数据分 析单元207还可以实时地确定运动模式的结束。因此,例如,当实时地检 测到在撞击之后发生的连续运动模式(例如,跟进动作)的结束时,分析 结果处理单元209还可以基于分析结果处理单元209提供到摄像装置控制 单元211的信息而控制摄像装置300,以结束拍摄或者结束将拍摄图像传 送到智能电话200。
在运动模式结束时的摄像装置300的控制中,在开始时实时不是必须 的(略微延迟是允许的)。因此,也可以对例如由于撞击引起的瞬间运动 模式以及连续运动模式执行相同的处理。即,当检测到由于撞击引起的运 动模式的结束时,可控制摄像装置300以结束拍摄或者结束将拍摄图像传 送到智能电话200。然而,在许多情况下,撞击之后的运动(例如,跟进 动作)也是有意义的。因此,在瞬间运动模式的情况下,在运动模式结束 然后预定时间过去之后,可在运动模式结束时控制摄像装置300。
例如,在图3至图5所示的示例中,在基于传感器数据检测到撞击时 刻之后,基于撞击时刻的时间而检测一个或多个图像。由于仅基于对撞击 时刻的检测来实现处理,因此摄像装置300至少需要连续执行拍摄以及临 时将一系列拍摄图像累积在图像保持单元213或摄像装置300中。然而, 例如,当需要减少摄像装置300或智能电话200的电池消耗时,不期望连 续执行拍摄或传送。如上所述,当可以基于传感器数据检测与撞击时刻之 前或之后的运动对应的运动模式时,拍摄或传送可以根据运动模式的检测 而开始和结束,因此可以减少电池消耗。作为另一示例,当摄像装置300 可以拍摄具有高分辨率和低分辨率的两种图像时(例如,摄像装置300 可包括多个图像传感器或者可切换对拍摄图像的图像处理),要提供到智 能电话200的图像可根据对运动模式的检测而从具有低分辨率的图像切 换到具有高分辨率的图像。
可独立于撞击来检测运动模式。例如,当甚至对于运动中伴随撞击的 预定运动也可以定义运动模式时,图像选择单元215可参考该运动模式的 开始时间和结束时间而检索一个或多个图像。
在以上描述中,加速度传感器的检测结果已被例示为传感器数据的示 例。然而,伴随检测结果或者取代检测结果,陀螺仪传感器或角速度传感 器的检测结果可用作传感器数据。此外,也可以根据用户的动作的种类(不 限于运动)而使用地磁传感器、大气传感器、声音传感器、光学传感器等。
(4.应用的示例)
接下来,将参照图7至图16描述根据本公开的实施例的应用的示例。 例如,以下要描述的应用的屏幕由智能电话200的显示控制单元223显示 在显示单元225上。
(4-1.击球诊断应用)
首先,将参照图7至图12描述用于网球的击球诊断应用的示例。
图7是示出击球诊断应用的开始屏幕的图。参照图7,屏幕2000显 示在智能电话200的显示器上。屏幕2000包括通过图像2010、测量开始 按钮2020、传感器波形2030和信息按钮2040。
通过图像2010是摄像装置300实时拍摄的图像。在该示例中,摄像 装置300安装在球场周边的预定位置处,并且拍摄包括正发球的用户的图 像。替选地,当摄像装置300置于智能电话200中时,智能电话200可布 置在球场周边的预定位置处的三角架等上。通过布置摄像装置300以使得 球场与用户之间的位置关系变为预定关系,可以基于图像而诊断用户的击 球。
测量开始按钮2020是用于开始用于击球诊断的测量的按钮。例如, 当经由触摸板按压了测量开始按钮2020时,智能电话200可控制传感器 装置100以使得在传感器装置100中开始传感器数据的获取和传感器数据 到智能电话200的传送。传感器波形2030被显示用于例如视觉效果。当 测量没有开始时,波形可不显示在传感器波形2030中。信息按钮2040是 用于显示关于击球诊断应用的手册、指南等的信息的按钮。
图8是示出击球诊断应用中的测量期间的屏幕的图。当在图7所示的 开始屏幕上按压了测量开始按钮2020时,测量开始。测量期间的屏幕2000 包括通过图像2010、传感器波形2030、取消按钮2050和测量时间指示 2060。
作为传感器波形2030,可实际显示基于传感器装置100的传感器检 测的传感器数据的波形。然而,在所示出的示例中,当基于传感器数据检 测到对球的撞击时,指示撞击的波形被显示为传感器波形2030。即,传 感器波形2030可以是指示传感器数据的改变的示意波形。用户可以通过 按压取消按钮2050来中断测量。测量时间指示2060指示在按压测量开始 按钮2020并且测量开始之后的逝去时间。
图9是示出击球诊断应用中的分析期间的屏幕的图。当显示图8所示 的测量期间的屏幕并且用户进行击球(发球)时,测量自动结束并且分析 开始。此时,在智能电话200中,通过传感器数据分析单元207对传感器 数据的分析检测由于击球而导致的对球的撞击的发生。例如,传感器数据 分析单元207参考撞击发生的时间而设置分析目标区间,并且提取关于击 球的各种信息,例如,关于旋转速度、球速、球旋转等的信息。尽管图2 未示出,但是传感器数据分析单元207可不仅使用传感器数据而且还使用 摄像装置控制单元211从摄像装置300获取的图像进行分析。
在传感器数据分析单元207执行分析时,显示图9所示的屏幕2100。 屏幕2100包括进度条2110、取消按钮2120和背景图像2130。进度条2110 指示分析进度状态。用户可以通过按压取消按钮2120来中断分析。例如, 背景图像2130可以是如所示出的以下要描述的击球之前和之后的连续照 片,或者可以是捕获击球时刻的单个图像。
图10是示出击球诊断应用的结果屏幕的图。参照图10,屏幕2200 包括击球图像2210、击球信息2220、击球位置指示2230和所有击球显示 按钮2240。
击球图像2210是指示击球的形式的图像。击球图像2210可以是静止 图像或运动图像。击球图像2210可包括球轨迹指示2250。例如,球轨迹 指示2250基于在由于击球导致的对球撞击之前和之后的预定区间的图像 而连续表示击球时的球轨迹,该预定区间是图像选择单元215基于传感器 数据选择的。在球轨迹指示2250中,从击球开始到击球结束的整个轨迹 可同时显示,或者轨迹可作为动画逐渐显示。
在所示出的示例中,击球信息2220包括旋转速度、球速和球旋转。 例如,信息可基于对摄像装置300拍摄的图像的分析来计算,可基于传感 器装置100获取的传感器数据来计算,或者可基于分析和传感器数据两者 来计算。被显示为击球信息2220的项不限于所示出的示例,而是可显示 诸如击球力量的其它项。
击球位置指示2230显示在球拍上发生对球的撞击的位置以及球拍的 图像。例如,可以通过基于传感器装置100检测的传感器数据识别在撞击 时在球拍中发生的振动模式来估计撞击位置。所有击球显示按钮2240是 用于转变为显示关于包括先前分析的其它击球的所有击球的信息的屏幕 的按钮。
图11是示出击球诊断应用的连续照片屏幕的图。参照图11,屏幕2300 包括连续照片2310、击球信息2220、击球位置指示2230和所有击球显示 按钮2240。例如,屏幕2300可以通过向左滑动图10所示的结果屏幕上 的击球信息2220等的结果信息显示部分来显示。显示可通过向右滑动屏 幕2300上的结果信息显示部分而返回到结果屏幕。击球信息2220、击球 位置指示2230和所有击球显示按钮2240是与图10所示的屏幕2200上的 指示相同的指示。以下将在连续照片生成应用的描述中描述连续照片 2310。即,击球诊断应用的连续照片屏幕是图10所示的结果屏幕与以下 要描述的连续照片相组合的屏幕。
图12是示出击球诊断应用的再现控制屏幕的图。参照图12,屏幕2400 包括击球屏幕2210、击球信息2220、击球位置指示2230、所有击球显示 按钮2240和再现控制2410。例如,屏幕2400可以通过点击图10所示的 结果屏幕上的击球图像2210来显示。显示可通过点击击球图像220而再 次返回到屏幕2400上的结果屏幕。可以通过经由再现控制2410的操纵而 在屏幕2400上控制击球图像2210的再现。对于再现控制2410,例如, 可如在正常再现控制中一样执行诸如开始、停止、搜索等的操纵,或者可 限制一些操纵。对于再现控制2410,例如,可仅执行暂停、重新开始、 逐帧播放(frameadvance)以及跳到击球图像2210的运动图像开始的操 纵。
在上述击球诊断应用中,根据用户的击球执行来自动控制测量的结束 和分析的开始。因此,用户可以在执行开始测量的操纵之后像平常一样继 续比赛。由于图像选择单元215基于传感器数据自动选择要用于分析的图 像,因此,分析目标区间被限制为由于击球而导致的撞击之前和之后的部 分,可以快速获得分析结果。作为另一示例,可基于传感器数据分析单元 207对运动模式的检测结果而自动开始测量,无需用户的操纵。
(4-2.连续照片生成应用)
接下来,将参照图13至图16描述连续照片生成应用的示例。
图13是示出连续照片生成应用的开始屏幕的图。参照图13,屏幕2500 包括通过图像2510、拍摄开始按钮2520、传感器波形2530和信息按钮 2540。
通过图像2510是摄像装置300实时拍摄的图像。与击球诊断应用的 情况不同,在该示例中,摄像装置300可以安装在任何位置。当摄像装置 300置于智能电话200中时,智能电话200可布置在球场周边的任何位置 处的三脚架等上。替选地,摄像装置300或智能电话200可由除正在打网 球的用户之外的用户持有。
拍摄开始按钮2520是用于开始拍摄的按钮。例如,当经由触摸板按 压拍摄开始按钮2520时,智能电话200可控制传感器装置100以使得在 传感器装置100中开始传感器数据的获取和传感器数据到智能电话200 的传送。如以下将描述的,图像选择单元215基于传感器数据而选择形成 连续照片的多个图像。因此,当按压拍摄开始按钮2520时,通过图像2510 不一定包括连续照片。如在击球诊断应用的情况下,传感器波形2030被 显示用于例如视觉效果。信息按钮2540是用于显示关于连续照片生成应 用的手册、指南等的信息的按钮。
图14是示出连续照片生成应用中的拍摄期间的屏幕的图。当在图13 所示的开始屏幕上按压拍摄开始按钮2520时,拍摄准备状态开始。在拍 摄准备状态中,当用户执行击球时,传感器装置100获取传感器数据,并 且传感器数据被传送到智能电话200,以使得根据击球之前和之后的图像 生成连续照片。拍摄准备状态下的屏幕2500包括通过图像2510、传感器 波形2530、取消按钮2550和拍摄时间指示2560。用户可以通过按压取消 按钮2550而中断拍摄。拍摄时间指示2560指示在按压拍摄开始按钮2520 之后的逝去时间。
图15是示出连续照片生成应用中的生成期间的屏幕的图。参照图15, 屏幕2600包括进度条2610。当显示图14所示的拍摄期间的屏幕并且用 户进行击球(发球)时,拍摄自动结束并且连续照片的生成开始。此时, 在智能电话200中,通过传感器数据分析单元207对传感器数据的分析来 检测由于击球导致的对球的撞击的发生。图像选择单元215参考撞击发生 的时间来设置连续照片的区间,并且选择该区间中的多个图像来生成连续 照片。如上所述,被选择为生成连续照片的图像的时间间隔可以不是均匀 的。传感器数据分析单元207可通过对传感器数据的分析而检测之前和之 后的伴随撞击的运动模式,并且图像选择单元215可根据运动模式的开始 或结束时间而设置连续照片的区间。
图16是示出连续照片生成应用的生成结果屏幕的图。参照图16,屏 幕2700包括连续照片2710。
通过从图像选择单元215通过上述处理选择的多个图像中剪裁具有 相同大小的正比赛的用户的区域以及布置所剪裁的图像来生成连续照片 2710。在所示出的示例中,例示了从左到右以时间顺序发生的连续照片, 但是连续照片的示例不限于此。例如,照片可以以两个或更多个级垂直地 布置,或者水平布置的照片的数量可大于或小于在示例中示出的照片的数 量。
在上述连续照片生成应用中,根据用户的击球执行而自动控制拍摄的 结束和连续照片生成的开始。因此,用户可以在执行了用于开始拍摄的操 纵之后像平常一样继续比赛。图像选择单元215基于传感器数据自动选择 形成连续照片的图像,因此,可以快速地生成捕获击球之前和之后的部分 的连续照片。
(5.硬件配置)
接下来,将参照图17描述根据本公开的实施例的信息处理装置的硬 件配置。图17是示出根据本公开的实施例的信息处理装置的硬件配置的 示例的框图。例如,可以通过所示出的信息处理装置900来实现根据上述 实施例的智能电话、摄像装置和服务器。
信息处理装置900包括中央处理单元(CPU)901、只读存储器(ROM) 903和随机存取存储器(RAM)905。另外,信息处理装置900可包括主 机总线907、桥909、外部总线911、接口913、输入装置915、输出装置 917、存储装置919、驱动器921、连接端口923和通信装置925。信息处 理装置900还可根据需要包括成像装置933和传感器935。取代CPU901 或者除了CPU901之外,信息处理装置900可包括称为数字信号处理器 (DSP)或专用集成电路(ASIC)的处理电路。
CPU901用作算术处理装置和控制装置,并且根据记录在ROM903、 RAM905、存储装置919或可拆卸记录介质927中的各种程序而控制信息 处理装置900中的所有或部分操作。ROM903存储CPU901使用的程序、 算术参数等。RAM905主要存储在CPU901的执行中使用的程序和在程 序的执行中适当地改变的参数等。CPU901、ROM903和RAM905通过 包括诸如CPU总线的内部总线的主机总线907连接到彼此。此外,主机 总线907经由桥909连接到诸如外围部件互连/接口(PCI)的外部总线 911。
输入装置915是例如用户操纵的操作单元,诸如鼠标、键盘、触摸板、 按钮、开关和控制杆。另外,输入装置915可以是例如使用红外线或其它 无线电波的远程控制装置,或者可以是例如与信息处理装置900的操纵对 应的外接装置929(诸如移动电话)。另外,输入装置915包括例如输入 控制电路,该输入控制电路基于用户输入的信息而生成输入信号并且将该 信号输出到CPU901。用户通过操纵输入装置915将各种数据输入到信息 处理装置900或者指示信息处理装置900执行处理操作。
输出装置917包括能够在视觉上或听觉上向用户通知所获取的信息 的装置。输出装置917的示例包括诸如液晶显示器(LCD)、等离子显示 面板(PDP)和有机电致发光(EL)显示器的显示装置,诸如扬声器和 耳机的音频输出装置,以及打印机装置。输出装置917将通过信息处理装 置900的处理获得的结果作为图片(诸如文本或图像)输出或者作为音频 (诸如语音或声音)而输出该结果。
存储装置919是被配置为信息处理装置900的存储单元的示例的数据 存储装置。存储装置919包括例如诸如硬盘驱动器(HDD)的磁存储装 置、半导体存储装置、光学存储装置或磁光存储装置。存储装置919存储 CPU901执行的程序或各种数据以及从外部获取的各种数据。
驱动器921是用于诸如磁盘、光盘、磁光盘或半导体存储器的可拆卸 记录介质927的读取器/写入器,并且置于信息处理装置900中或者附接 在其外部。驱动器921读取记录在所安装的可拆卸记录介质927上的信息 并且将该信息输出到RAM905。另外,驱动器921将记录写在所安装的 可拆卸记录介质927上。
连接端口923是被配置成将装置直接连接到信息处理装置900的端 口。连接端口923的示例包括通用串行总线(USB)端口、IEEE1394端 口和小型计算机系统接口(SCSI)端口。连接端口923的其它示例包括 RS-232C端口、光学音频端子和高清多媒体接口(HDMI)(注册商标) 端口。当外接装置929连接到连接端口923时,可以在信息处理装置900 与外接装置929之间交换各种数据。
通信装置925是例如包括连接到通信网络931的通信装置的通信接 口。通信装置925的示例包括用于有线或无线局域网(LAN)、蓝牙(注 册商标)和无线USB(WUSB)的通信卡。另外,通信装置925可以是 用于光学通信的路由器、用于异步数字用户线路(ADSL)的路由器或者 用于各种通信的调制解调器。例如,通信装置925根据诸如TCP/IP的预 定协议而将信号等传送到因特网或其它通信装置以及从因特网或其它同 学装置接收信号等。另外,连接到通信装置925的通信网络931包括以有 线或无线方式连接的网络,并且包括例如因特网、家庭LAN、红外线通 信、无线电波通信或卫星通信。
成像装置933的示例包括诸如电荷耦合器件(CCD)或互补金属氧 化物半导体(CMOS)的图像传感器以及使用控制在图像传感器中的主体 图像形成的各种构件(诸如透镜)对实际空间进行成像并且生成捕获图像 的装置。成像装置933可以是捕获静止图像的装置或者可以是捕获运动图 像的装置。
传感器935的示例包括各种传感器,诸如加速度传感器、陀螺仪传感 器、地磁传感器、光学传感器或音频传感器。传感器935获取例如关于信 息处理装置900的姿态(诸如信息处理装置900的壳体的姿势)的信息或 者关于信息处理装置900的周围环境(诸如信息处理装置900周围的亮度 或噪声)的信息。另外,传感器935可包括接收GPS信号并且测量装置 的纬度、经度和高度的全球定位系统(GPS)传感器。
以上已描述了信息处理装置900的硬件配置的示例。每个上述组成元 件可使用通用构件来配置或者可由专用于各个组成元件的功能的硬件来 配置。配置可以根据实现实施例时的技术水平而适当地进行修改。
(6.补充)
本技术的实施例可以包括例如上述信息处理装置(智能电话、摄像装 置、服务器等)、系统、信息处理装置、信息处理装置或系统执行的信息 处理方法、使得信息处理装置起作用的程序以及其中存储有程序的非暂态 型介质。
已参照附图详细描述了本公开的优选实施例,但是本公开的技术范围 不限于这些示例。本领域技术人员应理解,在所附权利要求或其等同方案 的范围内,根据设计要求和其它因素,可进行各种修改、组合、子组合和 变更。
本说明书中描述的有利效果仅是描述性的和示例性的而非限制性的。 即,根据与本公开有关的技术的实施例,与上述有利效果一起或者取代上 述有利效果,可以从本说明书的描述中获得对本领域技术人员来说明显的 其它有利效果。
(1)根据非暂态计算机可读存储装置实施例,所述存储介质其中存 储有应用程序。该应用程序具有指令,所述指令在由处理电路执行时将所 述处理电路配置为执行以下操作:
接收来自传感器的传感器数据,所述传感器附接到人或者附接到所述 人使用的物品;以及
分析所述传感器数据中的运动模式以识别所述运动模式中的预定事 件,所述预定事件是图像捕获装置在图像或一系列图像中捕获的。
(2)根据(1)所述的非暂态计算机可读存储装置,其中,所述指令 还将所述处理电路配置为:生成用于控制所述图像捕获装置中的图像捕获 处理的控制信号,以选择所述图像或一系列图像,其中,所述物品是物体。
(3)根据(2)所述的非暂态计算机可读存储装置,其中,所述控制 信号包括基于所述运动模式的分析结果的图像捕获开始命令和/或结束命 令。
(4)根据(2)所述的非暂态计算机可读存储装置,其中,所述指令 还将所述处理电路配置为:生成具有指定用作图像选择参考的时间的信息 的所述控制信号。
(5)根据(4)所述的非暂态计算机可读存储装置,其中,所述指令 还将所述处理电路配置为:生成具有时间调整命令的所述控制信号,以调 整与所述传感器数据相关联的时间从而与图像捕获时间匹配。
(6)根据(1)所述的非暂态计算机可读存储装置,其中,所述指令 还将所述处理电路配置为:接收来自所述图像捕获装置的图像,其中,所 述物品是物体。
(7)根据(6)所述的非暂态计算机可读存储装置,其中,所述指令 还将所述处理电路配置为:根据从所述图像捕获装置接收的图像学习所述 运动模式。
(8)根据(4)所述的非暂态计算机可读存储装置,其中,所述时间 与所述运动模式中的预定事件对应。
(9)根据(8)所述的非暂态计算机可读存储装置,其中,所述预定 事件与所述人或所述人使用的物品对物体的撞击对应。
(10)根据(2)所述的非暂态计算机可读存储装置,其中,所述指 令还将所述处理电路配置为:将所述控制信号传送到其它装置,并且从所 述其它装置接收所述传感器数据,所述其它装置是智能电话或可穿戴计算 机。
(11)根据(10)所述的非暂态计算机可读存储装置,其中,所述图 像捕获装置是与所述其它装置不同的装置。
(12)根据(11)所述的非暂态计算机可读存储装置,其中,所述图 像捕获装置将图像直接上载到所述处理电路,并且所述其它装置将所述传 感器数据转发到所述处理电路。
(13)根据(1)所述的非暂态计算机可读存储装置,其中,所述应 用程序是下载的应用程序,并且所述物品是物体。
(14)根据(2)所述的非暂态计算机可读存储装置,其中,所述指 令还将所述处理电路配置为:使得所述传感器数据与所述图像捕获装置捕 获的图像或一系列图像同步。
(15)根据(1)所述的非暂态计算机可读存储装置,其中,所述指 令还将所述处理电路配置为:将撞击发生检测为所述预定事件,并且选择 在所述撞击发生之前和之后捕获的一系列连续图像的一部分。
(16)根据(15)所述的非暂态计算机可读存储装置,其中,所述指 令还将所述处理电路配置为:通过跳过所述撞击发生之前和之后的所述一 系列连续图像的预定区间中的一些图像来选择所述一系列连续图像的所 述一部分。
(17)根据(16)所述的非暂态计算机可读存储装置,其中,图像跳 过间隔随着相对于所述撞击发生的时间分隔增加而增加。
(18)一种信息处理系统,包括:
电路,所述电路由计算机可读指令配置为:
接收附接到人或附接到所述人使用的物品的传感器收集的传感器数 据;以及
分析所述传感器数据中的运动模式以识别所述运动模式中的预定事 件,所述预定事件是图像捕获装置在图像或一系列图像中捕获的。
(19)根据(18)所述的系统,其中,
所述电路包括布置在第一装置中的第一部件和布置在第二装置中的 第二部件,所述第一装置分析所述运动模式,所述第二装置将所述传感器 数据发送到所述第一装置,以及
所述第一装置和所述第二装置是分开的装置,其中,所述物品是物体。
(20)根据(19)所述的系统,其中,
所述第一装置包括在智能电话和可穿戴计算机之一中。
附图标记列表
10系统
100传感器装置
200智能电话
201传送单元
203接收单元
205传感器装置控制单元
207传感器数据分析单元
209分析结果处理单元
211摄像装置控制单元
213图像保持单元
215图像选择单元
217静止图像记录单元
219运动图像记录单元
221数据保持单元
223显示控制单元
225显示单元
227时间信息保持单元
300摄像装置
400服务器