《数据同步重放装置、数据同步重放方法以及数据同步控制程序.pdf》由会员分享，可在线阅读，更多相关《数据同步重放装置、数据同步重放方法以及数据同步控制程序.pdf（31页珍藏版）》请在专利查询网上搜索。
1、10申请公布号CN104204982A43申请公布日20141210CN104204982A21申请号201280071331322申请日20120312G05B23/02200601H04N7/1820060171申请人东芝三菱电机产业系统株式会社地址日本东京72发明人野岛章74专利代理机构上海专利商标事务所有限公司31100代理人张鑫54发明名称数据同步重放装置、数据同步重放方法以及数据同步控制程序57摘要本发明的目的在于提供一种能高速地同步重放图像帧和数值数据的数据同步重放装置。因此，本发明的数据同步重放装置1包括存储有包含照相机313N拍摄监视对象物616P而得到的多个图像帧的图像数据。
2、和包含按时间序列从监视对象物取得的多个数值数据的过程数据的数据存储部113B；存储有数据同步控制程序的程序存储部113A，该数据同步控制程序用于在重放图像数据的同时，基于图像帧的帧号和帧周期、数值数据的采样间隔以及记录号，来对图像数据和数值数据进行同步重放等；以及执行该数据同步控制程序等的CPU111。85PCT国际申请进入国家阶段日2014091186PCT国际申请的申请数据PCT/JP2012/0562352012031287PCT国际申请的公布数据WO2013/136406JA2013091951INTCL权利要求书3页说明书15页附图12页19中华人民共和国国家知识产权局12发明专利申。
3、请权利要求书3页说明书15页附图12页10申请公布号CN104204982ACN104204982A1/3页21一种数据同步重放装置，其特征在于，包括图像数据存储部，该图像数据存储部将照相机拍摄监视对象而得到的多个图像帧与所述图像帧的帧周期一起作为图像数据进行存储，其中，对各所述图像帧按时间序列附加帧号；过程数据存储部，该过程数据存储部将从所述监视对象取得的具有随时间的变化的数据与从基准时点开始的经过时间一起作为过程数据进行存储；图像数据重放部，该图像数据重放部将所述图像数据存储部中存储的所述图像数据输出至监视器进行重放，并且还输出重放的图像帧的帧号；以及数据同步重放控制部，该数据同步重放控制。
4、部基于所述帧周期，计算出与所述图像数据重放部输出的所述帧号相对应的所述图像帧的从起始帧开始的相对时间，并基于该计算出的从起始帧开始的相对时间，在所述监视器中重放所述数据。2如权利要求1所述的数据同步重放装置，其特征在于，所述数据同步重放控制部在所述监视器所显示的所述过程数据的特定的时刻被指定的情况下，计算出从所述基准时点开始到所述指定的时刻为止的相对时间，基于该计算出的相对时间和所述图像帧的帧周期，计算出所述帧号，将该计算出的所述帧号输出至所述图像数据重放部，从而对具有计算出的所述帧号的所述图像数据进行重放。3如权利要求1或2所述的数据同步重放装置，其特征在于，还包括同步图像帧选择部，该同步图。
5、像帧选择部在所述监视器所显示的所述过程数据中作为其它文件来存储的数据的时间通过外部输入被指定的情况下，基于该指定的时间的起始以及末尾的从所述基准时点开始的相对时间和所述图像帧的帧周期，计算出与所述指定的时间相对应的所述图像帧的帧号，选择与该计算出的帧号相对应的图像帧；以及同步保存控制部，该同步保存控制部将与外部输入所指定的时间相对应的所述数据与所述同步图像帧选择部所选择的所述图像帧作为同一个文件进行存储。4如权利要求1至3的任一项所述的数据同步重放装置，其特征在于，还包括画面布局设定部，该画面布局设定部基于外部输入，在所述监视器上设定通过所述图像数据重放部显示所述图像数据的图像数据重放区域和通。
6、过所述数据同步重放控制部显示所述过程数据的过程数据重放区域，并且在所述图像数据重放区域的规定条件内，设定要重放的图像数据的数量以及大小。5一种数据同步重放方法，其特征在于，包括如下步骤图像数据存储步骤，在该图像数据存储步骤中，将照相机拍摄监视对象而得到的多个图像帧与所述图像帧的帧周期一起作为图像数据存储到图像数据存储部中，其中，对各所述图像帧按时间序列附加帧号；过程数据存储步骤，在该过程数据存储步骤中，将从所述监视对象取得的具有随时间的变化的数据与从基准时点开始的经过时间一起作为过程数据存储到过程数据存储部中；图像数据重放步骤，在该图像数据重放步骤中，将所述图像数据存储部中存储的所述图像数据输。
7、出至监视器进行重放，并且还输出重放的图像帧的帧号；以及数据同步重放控制步骤，在该数据同步重放控制步骤中，基于所述帧周期，计算出与由所述图像数据重放步骤输出的所述帧号相对应的所述图像帧的从起始帧开始的相对时间，权利要求书CN104204982A2/3页3基于该计算出的从起始帧开始的相对时间，在所述监视器中重放所述数据。6如权利要求5所述的数据同步重放方法，其特征在于，所述数据同步重放控制步骤中，在所述监视器所显示的所述过程数据的特定的时刻被指定的情况下，计算出从所述基准时点开始到所述指定的时刻为止的相对时间，基于该计算出的相对时间和所述图像帧的帧周期，计算出所述帧号，并输出该计算出的所述帧号，利。
8、用所述图像数据重放步骤对具有计算出的所述帧号的所述图像数据进行重放。7如权利要求5或6所述的数据同步重放方法，其特征在于，还包括同步图像帧选择步骤，在该同步图像帧选择步骤中，在所述监视器所显示的所述过程数据中作为其它文件来存储的数据的时间通过外部输入被指定的情况下，基于该指定的时间的起始以及末尾的从所述基准时点开始的相对时间和所述图像帧的帧周期，计算出与所述指定的时间相对应的所述图像帧的帧号，选择与该计算出的帧号相对应的图像帧；以及同步保存控制步骤，在该同步保存控制步骤中，将与外部输入所指定的时间相对应的所述数据与所述同步图像帧选择步骤中所选择的所述图像帧作为同一个文件进行存储。8如权利要求5。
9、至7的任一项所述的数据同步重放方法，其特征在于，还包括画面布局设定步骤，在该画面布局设定步骤中，基于外部输入，在所述监视器上设定通过所述图像数据重放步骤显示所述图像数据的图像数据重放区域和通过所述数据同步重放控制步骤显示所述过程数据的过程数据重放区域，并且在所述图像数据重放区域的规定条件内，设定要重放的图像数据的数量以及大小。9一种数据同步控制程序，其特征在于，在计算机中执行如下步骤图像数据存储步骤，在该图像数据存储步骤中，将照相机拍摄监视对象而得到的多个图像帧与所述图像帧的帧周期一起作为图像数据存储到图像数据存储部中，其中，对各所述图像帧按时间序列附加帧号；过程数据存储步骤，在该过程数据存储。
10、步骤中，将从所述监视对象取得的具有随时间的变化的数据与从基准时点开始的经过时间一起作为过程数据存储到过程数据存储部中；图像数据重放步骤，在该图像数据重放步骤中，将所述图像数据存储部中存储的所述图像数据输出至监视器进行重放，并且还输出重放的图像帧的帧号；以及数据同步重放控制步骤，在该数据同步重放控制步骤中，基于所述帧周期，计算出与由所述图像数据重放步骤输出的所述帧号相对应的所述图像帧的从起始帧开始的相对时间，基于该计算出的从起始帧开始的相对时间，在所述监视器中重放所述数据。10如权利要求9所述的数据同步控制程序，其特征在于，所述数据同步重放控制步骤中，在所述监视器所显示的所述过程数据的特定的时刻。
11、被指定的情况下，计算出从所述基准时点开始到所述指定的时刻为止的相对时间，基于该计算出的相对时间和所述图像帧的帧周期，计算出所述帧号，输出该计算出的所述帧号，利用所述图像数据重放步骤重放具有计算出的所述帧号的所述图像数据。11如权利要求9或10所述的数据同步控制程序，其特征在于，还执行如下步骤同步图像帧选择步骤，在该同步图像帧选择步骤中，在所述监视器所显示的所述过程数据中作为其它文件来存储的数据的时间通过外部输入被指定的情况下，基于该指定的时间的起始以及末尾的从所述基准时点开始的相对时间和所述图像帧的帧周期，计算出与所权利要求书CN104204982A3/3页4述指定的时间相对应的所述图像帧的帧。
12、号，选择与该计算出的帧号相对应的图像帧；以及同步保存控制步骤，在该同步保存控制步骤中，将与外部输入所指定的时间相对应的所述数据与所述同步图像帧选择步骤所选择的所述图像帧作为同一个文件进行存储。12如权利要求9至11的任一项所述的数据同步控制程序，其特征在于，还执行如下步骤画面布局设定步骤，在该画面布局设定步骤中，基于外部输入，在所述监视器上设定通过所述图像数据重放步骤显示所述图像数据的图像数据重放区域和通过所述数据同步重放控制步骤显示所述过程数据的过程数据重放区域，并且在所述图像数据重放区域的规定条件内，设定要重放的图像数据的数量以及大小。权利要求书CN104204982A1/15页5数据同步。
13、重放装置、数据同步重放方法以及数据同步控制程序技术领域0001本发明涉及同步显示包含照相机拍摄监视对象的多个图像帧的图像数据和包含按时间序列从监视对象取得的多个数值数据的过程数据的数据同步重放装置、数据同步重放方法以及数据同步控制程序。背景技术0002作为数据同步重放装置，例如提出了如下现有技术在车间发生异常的情况下，在利用车间监视用的监视器来显示异常发生时的车间的数值数据和图像帧的同时，将该数值数据和图像帧作为其他文件存储在存储装置中，并为了判明异常而展开历史记录信息画面时，能够同时显示该异常发生时的数值数据和图像帧，从而能够精细地监视车间例如，参照专利文献1。现有技术文献专利文献0003专。
14、利文献1日本专利特开平534181号公报发明内容发明所要解决的技术问题0004然而，上述的专利文献1的数据同步重放装置中，只有在车间发生异常的场合，在显示车间的数值数据和图像帧的同时存储数据，因此存在以下问题无法在事后确认异常发生时以外的正常运行时的数值数据和图像帧。0005特别是，在上述的专利文献1的数据同步重放装置中存在以下问题在事后确认异常发生时的车间的数值数据和图像帧的情况下，由于基于各数值数据的记录和附加在各图像帧的日期时间信息来进行同步重放，因此在监视对象增加、或也存储正常运行时的数值数据以及图像帧的情况下，文件数以及文件的存储容量会增加，因此在存储较长期间的数据，并在事后同步重放。
15、图像帧和数值数据的情况下，必须要有非常大的容量的存储装置。0006另外，在专利文献1的数据同步重放装置中还存在以下问题由于通过在数值数据和图像帧上附加日期时间信息来进行同步重放，因此在图像保存时不能利用MPEG4等图像帧的压缩解码技术，在图像重放时不能利用QUICKTIME注册商标播放器等通用的图像数据重放程序，因此开发成本会增加。0007并且，还具有如下问题在同步重放图像帧和数值数据的情况下，由于边对照各数值数据的记录与附加在各图像帧上的日期时间信息边进行重放，因此难以进行高速的同步重放和片头提示。0008本发明是鉴于上述问题而完成的，其目的在于，提供一种能高速地对图像数据所包含的图像帧和过。
16、程数据所包含的数据进行同步重放的数据同步重放装置、数据同步重放方法以及数据同步控制程序。说明书CN104204982A2/15页6解决技术问题的技术方案0009为了达到上述目的，本发明所涉及的数据同步重放装置的第一特征在于，包括图像数据存储部，该图像数据存储部将照相机拍摄监视对象而得到的多个图像帧与所述图像帧的帧周期一起作为图像数据进行存储，其中，对各所述图像帧按时间序列附加帧号；过程数据存储部，该过程数据存储部将从所述监视对象取得的具有随时间的变化的数据与从基准时点开始的经过时间一起作为过程数据进行存储；图像数据重放部，该图像数据重放部将所述图像数据存储部中存储的所述图像数据输出至监视器进行。
17、重放，并且还输出重放的图像帧的帧号；以及数据同步重放控制部，该数据同步重放控制部基于所述帧周期，计算出与从所述图像数据重放部输出的所述帧号相对应的所述图像帧的从起始帧开始的相对时间，基于该计算出的从起始帧开始的相对时间，在所述监视器中重放所述数据。0010本发明所涉及的数据同步重放装置的第二特征在于，在所述监视器所显示的所述过程数据的特定的时刻被指定的情况下，所述数据同步重放控制部计算出从所述基准时点开始到所述指定的时刻为止的相对时间，基于该计算出的相对时间和所述图像帧的帧周期，计算出所述帧号，将该计算出的所述帧号输出至所述图像数据重放部，重放具有计算出的所述帧号的所述图像数据。0011本发明。
18、所涉及的数据同步重放装置的第三特征在于，还包括同步图像帧选择部，该同步图像帧选择部在所述监视器所显示的所述过程数据中，通过外部输入作为其它的文件指定存储的数据的时间的情况下，基于从该指定的时间的起始以及末尾的所述基准时点开始的相对时间和所述图像帧的帧周期，计算出与所述指定的时间相对应的所述图像帧的帧号，选择与该计算出的帧号相对应的图像帧；以及同步保存控制部，该同步保存控制部将与所述外部输入所指定的时间相对应的所述数据与所述同步图像帧选择部所选择的所述图像帧作为同一个文件进行存储。0012本发明所涉及的数据同步重放装置的第四特征在于，还包括画面布局设定部，该画面布局设定部基于外部输入，在所述监视。
19、器上设定通过所述图像数据重放部显示所述图像数据的图像数据重放区域和通过所述数据同步重放控制部显示所述过程数据的过程数据重放区域，并且在所述图像数据重放区域的规定条件内，设定要重放的图像数据的数量以及大小。0013本发明所涉及的数据同步重放方法的第一特征在于，包括如下步骤图像数据存储步骤，在该图像数据存储步骤中，对于照相机拍摄监视对象而得到的多个图像帧，对各图像帧按时序列附加帧号，并将该多个图像帧与所述图像帧的帧周期一起作为图像数据存储在图像数据存储部中；过程数据存储步骤，在该过程数据存储步骤中，将从所述监视对象取得的具有随时间的变化的数据与从基准时点开始的经过时间一起作为过程数据存储在过程数据。
20、存储部中；图像数据重放步骤，在该图像数据重放步骤中，在监视器中输出并重放所述图像数据存储部中存储的所述图像数据，并且输出重放的图像帧的帧号；以及数据同步重放控制步骤，在该数据同步重放控制步骤中，基于所述帧周期，计算出与由所述图像数据重放步骤输出的所述帧号相对应的所述图像帧的从起始帧开始的相对时间，基于该计算出的从起始帧开始的相对时间，在所述监视器中重放所述数据。0014本发明所涉及的数据同步重放方法的第二特征在于，在所述监视器所显示的所述过程数据的特定的时刻被指定的情况下，所述数据同步重放控制步骤计算出从所述基准时说明书CN104204982A3/15页7点开始到所述指定的时刻为止的相对时间，。
21、基于该计算出的相对时间和所述图像帧的帧周期，计算出所述帧号，输出该计算出的所述帧号，由所述图像数据重放步骤重放具有计算出的所述帧号的所述图像数据。0015本发明所涉及的数据同步重放方法的第三特征在于，还包括同步图像帧选择步骤，在该同步图像帧选择步骤中，在所述监视器所显示的所述过程数据中作为其它文件来存储的数据的时间通过外部输入被指定的情况下，基于该指定的时间的起始以及末尾的从所述基准时点开始的相对时间和所述图像帧的帧周期，计算出与所述指定的时间相对应的所述图像帧的帧号，选择与该计算出的帧号相对应的图像帧；以及同步保存控制步骤，在该同步保存控制步骤中，将与外部输入所指定的时间相对应的所述数据与所。
22、述同步图像帧选择步骤所选择的所述图像帧作为同一个文件进行存储。0016本发明所涉及的数据同步重放方法的第四特征在于，还包括画面布局设定步骤，在该画面布局设定步骤中，基于外部输入，在所述监视器上设定通过所述图像数据重放步骤显示所述图像数据的图像数据重放区域和通过所述数据同步重放控制步骤显示所述过程数据的过程数据重放区域，并且在所述图像数据重放区域的规定条件内，设定要重放的图像数据的数量以及大小。0017本发明所涉及的数据同步控制程序的第一特征在于，在计算机中执行如下步骤图像数据存储步骤，在该图像数据存储步骤中，将照相机拍摄监视对象而得到的多个图像帧与所述图像帧的帧周期一起作为图像数据存储到图像数。
23、据存储部中，其中，对各所述图像帧按时间序列附加帧号；过程数据存储步骤，在该过程数据存储步骤中，将从所述监视对象取得的具有随时间的变化的数据与从基准时点开始的经过时间一起作为过程数据存储到过程数据存储部中；图像数据重放步骤，在该图像数据重放步骤中，将所述图像数据存储部中存储的所述图像数据输出至监视器进行重放，并且还输出重放的图像帧的帧号；以及数据同步重放控制步骤，在该数据同步重放控制步骤中，基于所述帧周期，计算出与由所述图像数据重放步骤输出的所述帧号相对应的所述图像帧的从起始帧开始的相对时间，基于该计算出的从起始帧开始的相对时间，在所述监视器中重放所述数据。0018本发明所涉及的数据同步控制程序。
24、的第二特征在于，在所述监视器所显示的所述过程数据的特定的时刻被指定的情况下，所述数据同步重放控制步骤计算出从所述基准时点开始到所述指定的时刻为止的相对时间，基于该计算出的相对时间和所述图像帧的帧周期，计算出所述帧号，输出该计算出的所述帧号，由所述图像数据重放步骤重放具有计算出的所述帧号的所述图像数据。0019本发明所涉及的数据同步控制程序的第三特征在于，还执行如下步骤同步图像帧选择步骤，在该同步图像帧选择步骤中，在所述监视器所显示的所述过程数据中作为其它文件来存储的数据的时间通过外部输入被指定的情况下，基于该指定的时间的起始以及末尾的从所述基准时点开始的相对时间和所述图像帧的帧周期，计算出与所。
25、述指定的时间相对应的所述图像帧的帧号，选择与该计算出的帧号相对应的图像帧；以及同步保存控制步骤，在该同步保存控制步骤中，将与外部输入所指定的时间相对应的所述数据与所述同步图像帧选择步骤所选择的所述图像帧作为同一个文件进行存储。0020本发明所涉及的数据同步控制程序的第四特征在于，还执行如下步骤画面布局设定步骤，在该画面布局设定步骤中，基于外部输入，在所述监视器上设定通过所述图像数说明书CN104204982A4/15页8据重放步骤显示所述图像数据的图像数据重放区域和通过所述数据同步重放控制步骤显示所述过程数据的过程数据重放区域，并且在所述图像数据重放区域的规定条件内，设定要重放的图像数据的数量。
26、以及大小。发明效果0021根据本发明的数据同步重放装置、数据同步重放方法以及数据同步控制程序，不基于时刻信息，而是基于图像数据包含的图像帧的帧号、过程数据的从基准时点开始的经过时间，同步并重放图像帧和数据，因此无需在数据以及图像帧上附加时刻信息。0022因此，能减少文件数量和文件的存储容量，利用与以往一样存储容量的存储设备就能进行比以往更长期间的存储和同步重放。0023由于存储从监视对象取得的具有随时间的变化的数据，因此，在连续的长时间下没有随时间的变化的情况下，能大幅度削减数据容量。0024并且，在图像保存时能利用MPEG4等图像帧的压缩解码技术，因此能在图像重放时利用QUICKTIME注册。
27、商标播放器等通用的图像数据重放程序，由此能降低开发成本。0025此外，能在不使用时刻信息的情况下，高速地对数据和图像帧进行同步和重放、或者进行片头提示。附图说明0026图1是表示包含本发明所涉及的数据同步重放装置的在线数据管理系统的结构例的图。图2是表示本发明所涉及的数据同步重放装置的结构例的框图。图3A是表示存储于数据同步重放装置的数据存储部中的图像数据和过程数据的文件格式的一个示例的图。图3B是表示图像数据的数据结构的一个示例的图。图3C是表示过程数据的数据结构的一个示例的图。图4是表示实施方式1的数据同步重放装置所进行的数据同步显示处理的步骤的流程图。图5是表示进行从图像数据到数值数据的。
28、同步重放处理时的具体例的图。图6是表示实施方式1的数据同步重放装置的数据同步显示处理的步骤的流程图。图7是表示进行从数值数据到图像数据的同步重放处理时的具体例的图。图8是表示实施方式1的数据同步重放装置的监视器中所显示的显示画面的一个示例的图。图9是表示实施方式1的数据同步重放装置的监视器中所显示的显示画面的其他示例的图。图10是表示实施方式1的数据同步重放装置的监视器中所显示的显示画面的其他示例的图。图11是表示实施方式1的数据同步重放装置的监视器中所显示的显示画面的其他示例的图。图12是表示实施方式1的数据同步重放装置的监视器中所显示的显示画面的其他示例的图。说明书CN104204982A。
29、5/15页9具体实施方式0027实施方式1下面，对本发明所涉及的数据同步重放装置，数据同步重放方法以及数据同步控制程序的实施方式1进行说明。0028图1是表示包含本发明所涉及的数据同步重放装置的在线数据管理系统的结构例的图。0029该在线数据管理系统是在例如利用轧机对加热后的铁、不锈钢、铝的板坯坯料进行轧制，将其精轧成厚度为几MM十几MM的热轧线圈的热轧车间系统、在为了将通过热轧车间或冷轧车间制造而成的线圈精加工成最终产品，进行酸洗、退火、镀覆、涂装、切断等的生产线车间系统等中，在监视器上同步显示对各监视对象进行拍摄而得到的图像数据和从各监视对象取得的过程数据，并对这些数据进行管理的在线数据管。
30、理系统。0030图1所示的在线数据管理系统是通过将本发明所涉及的数据同步重放装置1、多台ITVINDUSTRIALTELEVISION工业电视照相机212MM为自然数。、照相机切换器3、数字图像转换单元4、可编程逻辑控制器PLC等控制设备515NN为自然数。相连接而构成，是利用多台ITV照相机212M拍摄到的图像数据和控制设备515N取得的过程数据来对轧机、冲压机、驱动这些设备的电动机、活塞等各监视对象物616PP为自然数。的动作状态、控制状态等进行监视的系统。0031这里，例如数据同步重放装置1和数字图像转换单元4利用以太网注册商标等LAN7相连接，另一方面，数据同步重放装置1和控制设备51。
31、5N利用LAN7以外的其他控制用网络8相连接。在控制设备515N可与LAN7相连接的情况下，控制用网络8可以置换成LAN7。0032此外，本发明所涉及的数据同步重放装置1是由装置主体11与监视器显示器12、键盘13、鼠标14等连接而成的计算机装置构成的。于是，该数据同步重放装置1中，输入利用数字图像转换单元4从模拟视频信号转换成数字视频信号的来自多台ITV照相机212M的图像数据、和包含从控制设备515N取得的多个数值数据的过程数据，并在监视器12上正常显示，或进行同步显示处理等。本发明所涉及的数据同步重放装置1的结构、动作、图像数据、过程数据的结构等将在下文阐述。0033ITV照相机212M。
32、是拍摄多个监视对象物616P，并输出PAL或NTSC等格式的模拟视频信号的设备，可以是固定式的照相机，也可以是能够通过发送控制信号，进行平移、倾斜、缩放等远距离操作的照相机。在ITV照相机212M中可以设置语音麦克风也可以不设置语音麦克风。此外，ITV照相机212M可以针对各监视对象物616P进行一对一的设定，也可以设定多台。0034照相机切换器3从多台ITV照相机212M的视频信号中对在监视器12中显示的规定个数在本实施方式1中例如设定为4台。的视频信号进行切换并输出。另外，在不限制监视器12中显示的视频信号的数量的情况下、在ITV照相机212M的台数在该规定个数以下的情况下、以及在使数字图。
33、像转换单元4、数据同步重放设备1具备该切换功能的情况下，照相机切换器3当然也可以被省略。说明书CN104204982A6/15页100035数字图像转换单元4用于将从多台ITV照相机212M输出的NTSC、PAL格式的模拟视频信号压缩编码成为MPEG4等数字图像数据并输出到数据同步重放装置1。另外，在多台ITV照相机212M可在照相机内部对所拍摄的视频信号进行A/D转换，输出数字格式的图像数据的情况下，数字图像转换单元4可以省略。0036由于控制设备515N利用程序分别对电动机、或加热机、液压机等各监视对象物616P的动作进行控制，从而经由各自的I/O输入输出单元5115N1从各监视对象物61。
34、6P取得包含后述的以规定的采样间隔按时间序列检测出的数值数据的过程数据。0037图2是表示本发明所涉及的数据同步重放装置1的结构例的框图。0038如上所述，该数据同步重放装置1由装置主体11与监视器显示器12、键盘13、鼠标14等连接而成的计算机装置构成。0039如图2所示，装置主体11通过利用内部总线117将CPU111、存储器112、HDD或大容量存储器等存储部113、外部设备接口下面简称为I/F。部114、控制网络I/F部115、LANI/F部116等相连接而构成。0040CPU111通过在存储于存储部113的程序存储部113A中的各种应用程序中，执行图像数据重放程序从而起到本发明的图像。
35、数据重放部的功能，并且，通过执行数据同步控制程序而起到本发明的数据同步重放控制部，同步图像帧选择部，同步保存控制部，以及画面布局设定部的功能。0041存储器112用作在CPU111执行各种应用程序时，对数据进行暂时存储或展开等的运算区域等。0042存储部113包括程序存储部113A、以及数据存储部113B。0043程序存储部113A存储有OS操作系统、用于使CPU111起到本发明的图像数据重放部的功能的图像数据重放程序、用于使CPU111起到本发明的数据同步重放控制部、同步图像帧选择部、同步保存控制部、以及画面布局设定部的功能的数据同步控制程序等应用程序。在本实施方式1中，作为图像数据重放程序。
36、，可以使用专门为本装置编写而成的图像数据重放程序，或者也可以使用QUICKTIME注册商标播放器等通用的图像数据重放程序。0044数据存储部113B作为本发明的图像数据存储部，存储包含由多台ITV照相机212M对多个监视对象物616P进行拍摄并进行A/D转换而得到的多个图像帧的图像数据，并且作为本发明的过程数据存储部，存储包含由控制设备515N从多个监视对象物616P按时间序列取得的多个数值数据的过程数据。0045另外，在本实施方式1中，在一个存储部113中设有程序存储部113A和数据存储部113B，但也可以将程序存储部113A和数据存储部113B分别作为不同的存储部来构成。0046外部设备I。
37、/F部114是用于将监视器12、键盘13、鼠标14等外部设备与装置主体11相连接的接口。0047控制网络I/F部115是用于连接控制网络19和装置主体11的接口。0048LANI/F部116是用于连接LAN7和装置主体11的接口。0049图3A图3C分别是表示存储于数据同步重放装置1的数据存储部113B的图像数据和过程数据的文件格式，以及图像数据和过程数据的数据结构的一个示例的图。0050如图3A所示，在数据同步重放装置1的存储部113的数据存储部113B中，将包含说明书CN104204982A107/15页11由多台ITV照相机212M对多个监视对象物616P进行拍摄而得到的多个图像帧的图像。
38、数据D1、以及包含由控制设备515N从多个监视对象物616P按时间序列取得的多个数值数据的过程数据D2存储在1个数据文件DF内的两个部分S1、S2。这里，图像数据D1和过程数据D2当然也可以存储在不同文件的不同部分。0051图3B是表示存储在数据存储部113B中的图像数据D1的数据结构的图。0052如图3B所示，图像数据D1是通过将分别从多台ITV照相机212M输出的模拟视频信号经数字图像转换单元4转换成MPEG4编码方式等的数字图像数据而得到的，由图像头文件信息D11和各ITV照相机212M对作为对象的监视对象物616P进行拍摄而得到的帧号为1QQ是自然数。的多个图像帧D12构成。此处，为了。
39、方便说明，只表示一个图像数据D1，实际上，多台ITV照相机212M的每台都有图像数据D1。0053在本实施方式1的情况下，如图3B所示，图像头文件信息D11至少包含构成该图像数据D1的图像帧D12的每1帧的时间即帧周期TF和构成图像数据D1的多个图像帧D12的全部帧数Q。在该图像头文件信息D11中，当然也可以包含用于识别输出图像数据D1的ITV照相机212M的照相机识别信息，即使是来自同一个ITV照相机212M的图像数据D1，也可以包含用于识别不同日期时间的图像数据D1的日期时间识别信息。并且，该图像头文件信息D11中当然也可以包含用于与对应的过程数据D2相关联的关联信息等。0054这里，本实。
40、施方式1中，图像帧D12的帧周期TF例如为1帧1/30秒。另外，1/30秒只是一个例子，图像帧D12的帧周期TF也可以是1/60秒，当然也可以是1/50秒。0055图像帧D12是用数字图像转换单元4以MPEG4等的动态图像压缩方式将ITV照相机212M拍摄得到的模拟格式的视频信号高效率压缩编码而得到的数据，也可以是例如H264编码方式、不进行帧与帧之间的预测的MOTIONJPEG等，关键在于只要是能通过LAN7传输的数字图像数据的格式即可。另外，可以分别在多个图像帧D12里附加上通常的解码重放用的解码时刻信息DTS、重放时刻信息PTS等时刻情报，在本实施方式1中，与过程数据同步的重放处理中，不。
41、使用解码时刻信息DTS和重放时刻信息PTS等时刻情报。0056由此，在本实施方式1中，图像数据D1不具有时刻信息，或者即使具有时刻信息也不在与过程数据D2的同步重放中使用。因此，在本实施方式1中，在进行图像数据D1和过程数据D2的同步重放处理时，将存储在与图像数据D1相对应的过程数据D2的过程数据头文件信息D21中的采样开始时刻TS1作为图像数据D1的起始时刻基准时点、即帧号1的图像帧D12的重放开始情报来使用。然后，对于帧号1的图像帧D12以后的帧号2P的图像帧D12的帧重放开始时刻，基于作为帧号1的图像帧D12的重放开始时刻来使用的采样开始时刻TS1和各图像帧D12的帧号等按下述方式来计算。
42、。因此，在本实施方式1中，在与过程数据D2的同步重放处理中，不需要各图像帧D12的时刻信息，即使包含时刻信息等也不使用参照该时刻信息。由此，因为没有使用参照各图像帧D12的时刻信息，而是基于帧号来进行重放，由此能使重放和片头提示高速化。0057图3C是表示存储在数据存储部113B中的过程数据D2的数据结构的图0058过程数据D2是由控制设备515N从多个监视对象物616P获得的随时间变化的数值数据D23构成的二进制数据，如图3C所示，包括过程数据头文件信息D21；在具有随时间的变化的情况下的控制设备515N从监视对象物616P获得的记录号为1RR是自然数。的多个数值数据D23；从与该数值数据D。
43、23相对应的采样开始时刻TS1基说明书CN104204982A118/15页12准时点开始的经过时间号为1RR是自然数。的经过时间D22。0059在本实施方式1的情况下，过程数据头文件信息D21至少存储有开始取得该过程数据D2的时刻即采样开始时刻TS1和从监视对象物616P取得的多个数值数据D23的全部记录数R。另外，经过时间号1的经过时间D22是“0”，即表示采样开始时刻TS1时点，记录号1存储有采样开始时刻TS1时点的从监视对象物616P取得的数值数据D23。0060因为仅在具有随时间的变化的情况下从监视对象物616P取得数值数据D23，在没有随时间的变化的情况下不会取得数值数据D23。因。
44、此，在连续地经过长时间而数值数据D23中没有随时间的变化的情况下，能大幅度地削减过程数据D2的数据容量。0061由此，在进行记录的时候，无法同步获得构成图像数据D1的多个图像帧D12和构成过程数据D2的多个数值数据D23。因此，本实施方式1的数据同步重放装置1为了在不使用解码时刻信息DTS和重放时刻信息PTS等图像数据D1的时刻信息、表示过程数据D2的数据取得时的时刻信息的情况下，对构成图像数据D1的图像帧D12和构成过程数据D2的数值数据D23进行同步重放处理，在进行同步重放时需要同步处理。0062因此，在本实施方式1的数据同步重放装置1中，不使用或参照时刻信息，而使用帧号和经过时间，并使用。
45、图像帧和数值数据来进行同步重放处理。0063接着，参照流程图对本实施方式1的数据同步重放装置1的数据同步显示处理进行说明。0064从图像数据D1到过程数据D2的同步重放动作的说明首先，参照流程图对本实施方式1的数据同步重放装置1的基于图像数据的过程数据的同步重放动作进行说明。0065图4是表示本实施方式1的数据同步重放装置1所进行的数据同步显示处理的步骤的流程图。0066首先，若用户操作数据同步重放装置1的键盘13、鼠标14等，点击选择同步重放按钮未图示。等，对装置主体11输入图像数据D1和过程数据D2的同步重放指示S400“是”，则CPU111启动存储在程序存储部113A中的图像数据重放程序。
46、和数据同步控制程序并开始同步重放处理。0067也就是说，装置主体11的CPU111首先通过执行图像数据重放程序来起到图像数据重放部的作用，读取出存储在数据存储部113B中的图像数据D1的图像数据头文件信息D11和过程数据D2的过程数据头文件信息D21，暂时保存到存储器112中，取得包含在图像数据头文件信息D11中的帧周期TFS410。这里，如上所述，CPU111取得的帧周期TF例如为1/30秒。0068另外，CPU111也可以在S400的处理之前，利用该S410的处理预先取得帧周期TF。另外，在图像数据头文件信息D11所包含的帧周期TF是已知的情况下，CPU111不需要取得图像数据头文件信息D。
47、11所包含的帧周期TF。0069接着，CPU111通过执行图像数据重放程序来起到本发明的图像数据重放部的作用，利用OS的计时器未图示。，以图像数据D1的帧周期TF即1/30秒为间隔产生定时事件信号S420。0070然后，若CPU111以帧周期TF即1/30秒为间隔产生定时事件信号S430“是”，说明书CN104204982A129/15页13则起到本发明的图像数据重放部的作用，读取出存储在数据存储部113B中的构成图像数据D1的图像帧D12，若该图像帧D12利用MPEG4格式等来编码，则以MPEG4格式等对该图像帧D12进行解码，在监视器12中重放，并且输出重放后的图像帧D12的帧号S440。。
48、此时，在用户利用帧号等指定重放开始的图像帧的情况下，会从被指定的图像帧开始进行重放。另外，图像帧D12的指定并不限于帧号等，也可以由键盘13、鼠标14在监视器12所显示的显示画面上利用光标来进行指定，在不指定图像帧D12的情况下，从图像数据D1的起始的图像帧D12、即帧号为1的图像帧D12开始进行重放。另外，在这个阶段，图像数据D1和过程数据D2并非同步重放。0071与此同时，CPU111通过执行本发明所涉及的数据同步控制程序来起到本发明的数据同步重放控制部的作用，首先，取得当前正在重放的图像帧D12的帧号和帧周期TFS450。此处，该S450的处理也和S410的处理相同，在图像数据头文件信息。
49、D11所包含的帧周期TF是已知的情况下，CPU111使用已知的帧周期TF。0072接着，CPU111作为本发明的数据同步重放控制部，基于当前正在重放的图像帧D12的帧号和帧周期TF，根据下式1计算出“从起始图像帧开始的相对时间”S460。0073从起始图像帧开始的相对时间帧号帧周期TF1接着，CPU111作为本发明的数据同步重放控制部，将根据上式1求得的“从起始图像帧开始的相对时间”与暂时存储在存储器112等中的过程数据D2的经过时间D22进行比较，提取与当前正在显示的图像帧D12同步的数值数据D23S470。由于经过时间D22以及数值数据D23是仅在具有随时间的变化的情况下从监视对象物616P获得的，因此不一定存在与“从起始图像帧开始的相对时间”一致的经过时间D22。因此，CPU111通过将经过时间D22的值按经过时间号1R的顺序与“从起始图像帧开始的相对时间”进行比较，提取出在不超过“从起始图像帧开始的相对时间”的范围中的与最长经过时间D22相对应的数值数据D23。0074然后，CPU111基于提取出的数值数据D23来进行显示S480。由此，CPU111能够在不参照时刻信息的情况下，基于图像帧D12的帧号和经过时间D22来同步重放与当前正显示的图像帧D12在时间上。