图像编辑装置、图像编辑程序及图像编辑方法 技术区域
本发明涉及一种图像编辑装置、图像编辑程序及图像编辑方法,特别涉及对多个图像按时间连接的部分进行图像变换后的图像效果进行连接的图像编辑装置、图像编辑程序及图像编辑方法。
背景技术
目前,具有动画记录功能的数字相机逐渐商品化,它可以简单地生成动画数据。去掉生成的多个动画数据中不需要的部分,只把必要的部分连接起来,生成新的动画数据的动画编辑功能,已经可以靠市场流通地多种应用软件实现了。因此,不管输入源,对于数字化的图像,能够实施自由自在地编辑处理了。
通常,由于任意的镜头与镜头连接的结点部分,前一个镜头的末了部分和下一个镜头的开始部分的图像,在时间轴上是不连续的,当简单地把某个镜头的动画文件与别的镜头的动画文件连接时,就成了生硬的转换。因此,作为编辑经常用到的功能,有大家所熟悉的过渡等图像效果。
过渡等图像效果是,例如使镜头与镜头连接的结点重复数秒钟,随着前一个镜头渐隐,下一个镜头渐显,使图像镜头的转换部分看起来没有不协调地连接起来。也有不光是按图像的时间连接,而且还能看出图像的演出效果的,仅基本的过渡型式,就有数十种以上的图像效果处理。
过去,使用这种过渡编辑图像时,编辑者对所有的镜头与镜头的结点部分,都必须设定使用什么样的过渡。因此,虽然可以实现过渡效果,但编辑工作很费工夫,不方便。
过去的图像处理系统是由自动录像系统、自动编辑系统构成的。自动录像系统读出被拍摄物,把拍摄该读出的被拍摄物的动画图像符号化,与符号化的动画文件一起生成该动画文件和该被拍摄物相关的信息,依次输出。自动编辑系统把由上述自动录像系统输出的该动画文件及该控制信息,相应取出,同时把取出的多个动画文件结合起来,生成组合动画文件。在这种图像处理系统中,就多个动画数据记录的特定的被拍摄物,可以自主生成具有连贯性的新动画数据(参照特开平10-215434号专利公报第1-3页,图1)。
过去的图像处理系统的特征是在镜头的转换点,在分隔开的镜头中利用特定时间中的帧合并,自动编辑、制作动画图像数据汇编动画的方法。这种方法包括计算动画图像数据的多个图像帧之间的类似度的计算设备和基于上述计算设备算出的类似度,决定镜头转换点帧的决定设备。利用该图像处理系统对动画图像也可以在短时间内准确确认所希望的图像内容(参照特开2000-235637号第1-3页,图1)。
在特开平10-215434号专利公报中,就多个动画数据记录的特定被拍摄物,说明了自主生成具有连续性的新的动画数据,使多个动画图像数据连接的发明。这个发明的主要着眼点在于连结图像数据本身的自动选择结构,没有涉及关于改善图像连接方面。因此,在进行动画编辑时,编辑者必须对所有镜头与镜头连接点部分设定使用什么样的过渡,使编辑工作很费工夫,不方便。
特开2000-235637号文件中记载了自动生成高品质汇编动画的自动编辑的发明。虽然是关于在动画数据的标题或FAT等数据范围大小有限制的场合也可以生成可接受的汇编动画的发明,但在涉及动画与动画连结部分的处理方面,编辑者必须决定过渡的使用,因此仍然不方便。
【发明内容】
本发明的目的是提供一种使用者只要选择连接的图像,就可以自动设定动画数据间连结点部分的图像效果(过渡处理等)的图像编辑装置、图像编辑程序及图像编辑方法。
为实现上述目的,本发明采取下述的技术方案:
在多个图像按时间连接的装置上配备有:记录与多个图像及其图像的摄影日期、摄影条件、摄影场所或使用者姓名等相关的图像附属信息的记录设备;记录与图像附属信息的范围和图像转换时的图像效果相关的图像效果记录设备;读出记录设备中记录的第一个图像的第一个图像附属信息和记录设备中记录的第二个图像的第二个图像附属信息,比较两者的图像附属信息的比较设备;上述比较结果,当存在两者的图像附属信息类似的图像信息时,有在类似的图像附属信息的基础上,以上述图像效果记录设备读出图像转换时的图像效果的图像选择设备;读出上述记录设备记录的第一个图像和第二个图像,再把两者的图像按时间连接的部分,施以图像效果选择设备读出的图像转换时的图像效果,使两者的图像连接的图像连接设备;把上述连接的图像输出的输出设备。上述输出设备,有把连接的图像输出到显示设备的、有输出到记录媒体的、有输出到其它通信仪器的设备。
本发明的优点是:由于图像编辑装置是读出记录设备中记录的第一个图像的第一个图像附属信息和第二个图像的第二个图像附属信息,比较两者的图像附属信息,上述比较结果,当两者的图像附属信息中在所定的范围内存在类似的图像信息时,在类似的图像附属信息的基础上,以上述图像效果记录设备读出图像转换时的图像效果,用该图像效果,在从记录设备读出的第一个图像和第二个图像的转换部分,施以图像效果,把由此生成的图像输出显示设备、记录媒体或其它通信仪器,所以通过本发明,使用者只需选择连接的图像,就能自动设定动画数据间连结点部分的图像效果。
【附图说明】
图1为本发明所述图像编辑装置信号处理系统的框图。
图2为记录在记录设备中的第一个图像文件的结构图。
图3为记录在记录设备中的第二个图像文件的结构图。
图4为图像效果记录设备中记录的同一个图像附属信息和图像转换时的图像效果的图表。
图5为图像效果记录设备中记录的类似图像附属信息和图像转换时的图像效果的图表。
图6为用图像编辑装置实施时图像效果选择处理的程序框图。
图7为第一个图像和第二个图像连接时交叉衰减时间的说明图。
图8为用半透明合成的图像效果进行图像连接而获得的图像。
图9为用消除角的图像效果进行图像连接而获得的图像。
图10为用消除上部的图像效果进行图像连接而获得的图像。
【具体实施方式】
下面根据附图详细说明与本发明相关的图像编辑装置、图像编辑程序及图像编辑方法的优选实施形态。
图1为本发明所述的图像编辑装置信号处理系统的框图。
在配置了摄像设备的一种图像编辑装置电子摄像机10的图像处理部分设置有摄影设备150、图像处理设备153和A/D转换器154。摄影设备150把被拍摄物的影像通过可变焦距透镜在受光面成像,经过光电变换,作为图像信号输出;图像处理设备153对模拟图像信号进行图像大小变换、锐度校正、轮廓处理、对比度补偿等处理;A/D转换器154把模拟图像信号变成数字图像数据。
通过图像文件等信息的传递与其它通信仪器传输信息的电子摄像机10的通信设备是由信息传输设备157、天线156和通信插座162构成的。信息传输设备157(也可以包含把图像输出到其它通信仪器的输出设备的功能)是把图像文件等信息载入电波等载波,达到发送或接受信息目的的信息传输设备;天线156是发送接受载波及图像文件等的天线。通信插座162是通过通信电缆,与其它通信仪器传递图像文件等信息的插座。
在电子摄像机10中还设置有图像数据等的压缩扩展设备167、OSD169、信息处理设备170、帧存储器171、D/A变换器172、插座173。压缩扩展设备167是把图像数据等信息用JPEG或动画JPEG中具有代表性的方法进行压缩处理或间隔处理,把压缩的图像数据等进行解压缩处理;OSD169是把在显示设备168上的各种文字及信息的数据等和图像同时在屏幕上显示;信息处理设备170(也可以包含图像连接设备的功能)是把拍摄到的数字图像数据进行白色平衡处理、γ变换、YC变换处理、像素数变换处理、图像电子放大处理、整饰处理、色调变换处理等;
帧存储器171暂时存储显示用的图像数据;D/A变换器172把数字图像数据变换为显示用的合成信号等(也可以包含把图像输出到显示设备的输出设备的功能);插座173把显示用的信号输出到各部分的显示仪器。
在电子摄像机10中还设置有输入设备174、I/O接口175、记录媒体安装部178、记录媒体接口I/F179。输入设备174是由电源开关和断路器按钮、通信按钮、发送按钮、操作开关、十字按钮、确定开关、设备转换开关构成的;I/O接口175是把通过输入设备1 74输入的信息及LED等显示设备用的信息输入或输出;记录媒体安装部178能够拆装自如地安装记录媒体177(也可以含有记录设备、图像效果记录设备的功能);记录媒体接口179对记录媒体177进行图像数据等信息记录或读取(也可以含有把图像输出到记录媒体的输出功能);记录媒体177是能拆装的,以存储插件等半导体及MO或硬盘等为代表的磁记录式、光记录式等的记录媒体。
在电子摄像机10中还设置有信息处理设备180、非易失性存储器182、ROM183、RAM184。信息处理设备180在对电子摄像机10进行全面控制的同时,进行图像数据的选样控制、图像数据的记录控制、图像数据的图形识别、电子摄像机10的机种信息或机器固有的识别信息的读出处理、通信控制、关于图像及声音记录的控制、显示控制等控制的信息处理设备(也可以包含比较设备、图像效果选择设备、图像连接设备的功能);非易失性存储器182是可以改写信息,同时,在断电以后也可以继续存储调整用的种种常数等信息的记录设备(也可以包含记录设备、图像效果记录设备的功能);ROM183是存储电子摄像机10的机种名称、制造批号等固有识别信息、操作程序、各种常数、与显示相关的信息等的记录设备;RAM184是在程序执行时作业区域的可以高速读写的存储设备。
在电子摄像机10中还设置有带钟表的日历计时器190、供给驱动电子摄像机10的各种电能的电源191、接受外部电源供电的电源192、摄影时使被拍摄物发光,然后补充光量的发光设备193、调节发光设备193的发光时间及光量的发光控制设备194。
在电子摄像机10中还设置有对使用者发出声音或嘟嘟声通知的扬声器195、把从信息处理设备180获得的数字音频信息转换为模拟声音信号,放大后传达到扬声器195的D/A转换器196、集中周围声音的麦克风197、把经麦克风197集音后的模拟声音信息转换为数字音频信息的A/D转换器198。
如图所示,电子摄像机10的信息处理设备180与它周围的各个电路是用总线连接的,可以快速进行相互间的信息传达,同时可以根据信息处理设备180执行的处理程序控制周围的各个电路。在它周围的各个电路还可以由ASIC等大规模集成电路(LSI)构成。
下面就上述结构的电子摄像机10的摄影处理进行说明:
拍摄的影象通过可变焦距透镜在摄影设备150的受光面成像,成像的被拍摄物经光电变换输出到图像处理设备153。在图像处理设备153对这个图像信号实施相关双选样及放大、降低噪音处理等图像处理,用A/D转换器154转换成数字信号。变换为数字信号的图像数据通过信息处理设备180的指令,输送到信息处理设备170,经过图像的白色平衡及图像灰度校正、YC变换、图像电子放大处理、像素数变换处理等图像处理后,暂时存储在VRAM等帧存储器171。
由信息处理设备180发出指令,把存储在帧存储器171的图像数据依次传送到D/A转换器172,和OSD169产生的字符等信息同时在显示设备168显示。
使用者一按输入设备174上设置的摄影指示断路器按钮,信息处理设备180就进入拍摄被拍摄物的状态,于是信息处理设备180通过A/D转换器154把转换成数字信号的静止图像或动画图像数据记录到RAM184。
把图像记录到记录媒体177时,上述存储在RAM184的图像被顺序读出传送到信息处理设备170,对图像进行白色平衡及γ校正、YC变换、图像电子放大、象素数变换处理等图像处理,在实施了各种色彩的色调变换、图像大小的变换处理等之后,传送到压缩扩展设备167。
由压缩扩展设备167按所定的条件实施压缩处理的图像数据,根据信息处理设备180的指示,再度暂时存储到RAM184的文件用工作区域,变换成记录图像数据之后,向记录媒体接口179输出,记录到顺序记录媒体177中。另外,在非易失性存储器182的记录容量大的情况下,也可以把图像记录在非易失性存储器182。
下面,就电子摄像机10的录音处理进行说明:
周围的声音被集音在麦克风197,变换为音频信号。获得得该音频信号由图中未示的初级放大器放大后输出到A/D变换器198。由A/D变换器198变换成数字音频数据暂存到RAM184,根据需要由压缩扩展设备167实施压缩处理或间隔处理后,再度通过RAM184的文件用工作区域,变换成记录用的音频数据后,传送到记录媒体接口179,记录为记录媒体177等的记录设备。
在上述说明中说明了配备了图像编辑装置、摄影装置的电子摄像机的具体形态,但本发明并不限定于此,若是从外部仪器或记录设备获取图像,配备有把静止图像或动画按时间接续的编辑处理设备的装置,个人计算机、便携电话、PDA等装置也可以达到本发明的目的。
图2为记录在记录设备中的第一个图像文件的结构。
如图所示,在图像文件12中,设立了以下部分:记录着用Motion-JPEG或MPEG等图像记录格式记录的动画的主图像14(静止图像也可以)的部分;对主图像14进行一览显示用的缩略图样15(代表图像)的部分;记录主图像14的附属信息13(图像附属信息)的部分。
在记录附属信息13的部分设立了以下区域:记录主图像14拍摄日期的区域、记录拍摄时间的区域、记录拍摄用的摄像机名称的区域、记录关于拍摄的图像画面及当时图像电子放大的位置的信息的区域、记载摄影者或电子摄像机10的所有者相关信息的使用者姓名记录区域。
图3为记录在记录设备中的第二个图像文件的结构。
如图所示,在图像文件22中,设立了以下部分:记录着用Motion-JPEG或MPEG等图像记录格式记录的动画的主图像24(静止图像也可以)的部分;对主图像24进行一览显示用的缩略图样25(代表图像)的部分;记录主图像24的附属信息23(图像附属信息)的部分。
在记录附属信息23的部分设立了以下区域:记录主图像24拍摄日期的区域、记录拍摄时间的区域、记录拍摄用的摄像机名称的区域、记载摄影者或电子摄像机10的所有者相关信息的使用者姓名记录区域。
在上述记录媒体177或者非易失性存储器182等记录设备中,可以记录相关的多个图像及其图像的摄影日期、摄影条件、摄影场所或使用者名称等图像附属信息。
在上述记录媒体177或者非易失性存储器182等的图像效果记录设备中,还可以记录相关的图像附属信息和图像转换时的图像效果,或者图像附属信息的范围和图像转换时的图像效果。
上述信息处理设备180(比较设备)可以读出记录媒体177或者非易失性存储器182等记录设备中记录的第一个图像的第一个图像附属信息和第二个图像的第二个图像附属信息,比较两者的图像附属信息。
当上述比较的结果为存在与两者的图像附属信息一致的图像附属信息时,根据其一致的图像附属信息,信息处理设备180(图像选择设备)可以从记录媒体177或者非易失性存储器182等的图像效果记录设备读出图像转换时的图像效果。
当上述比较的结果为,两者的图像附属信息中,在所定的范围内存在类似的图像附属信息时,在所定的范围内根据其类似的图像附属信息,信息处理设备180(图像选择设备)可以从记录媒体177或者非易失性存储器182等的图像效果记录设备读出图像转换时的图像效果。
当上述比较的结果,不存在与两者的图像附属信息一致的图像附属信息时,根据其不一致的图像附属信息,信息处理设备180(图像选择设备)可以从记录媒体177或者非易失性存储器182等的图像效果记录设备读出图像转换时的图像效果。
上述信息处理设备180或者信息处理设备170等的图像连接设备可以读出记录媒体177或者非易失性存储器182等记录设备中记录的第一个图像和第二个图像,把两者的图像按时间连接的部分,施以图像效果选择设备读出的图像转换时的图像效果,对两者的图像实施连接处理。
上述D/A变换器172等的输出设备可以把上述连接的图像输出到显示设备168。
上述记录媒体接口179等的输出设备可以把上述连接的图像输出到记录媒体177。
上述信息传输设备157等的输出设备可以把上述连接的图像输出到其它的通信仪器。
图4为图像效果记录设备中记录的同一个图像附属信息和图像转换时的图像效果的图表。
连接多个图像时,使用者操作电子摄像机10的输入设备174,把电子摄像机10的处理设备设定为图像编辑的设备。接着,使用者为了选择编辑的图像,把记录媒体177等记录设备中记录的显示图像的一览信息,通过输入设备174输入。于是在设备168上显示出记录在记录媒体177等记录设备中记录的多个图像的底样图像的一览信息。
使用者通过输入设备174输入,从一览显示的多个图像中选择编辑的第一个图像和第二个图像的信息。于是信息处理设备180(比较设备、图像效果选择设备)就读出记录在记录媒体177等记录设备中记录的第一个图像的第一个图像附属信息和第二个图像的第二个图像附属信息,比较两者的图像附属信息。这时候,两者的图像附属信息中存在一致的图像附属信息时,从图4所示的图表中,根据其一致的同一图像附属信息,读出图像转换时的图像效果。
然后,信息处理设备180或信息处理设备170等图像连接设备,读出记录媒体177或非易失性存储器182等记录设备中记录的第一个图像和第二个图像,在两者的图像按时间连结的部分,施以从上述图4所示的图表中读出的图像转换时的图像效果,进行两者的图像连接处理。
信息处理设备180根据使用者的指示,把上述连接的图像通过信息处理设备170、帧存储器171、D/A变换器172(输出设备)输出到显示设备168。
当把上述连接的图像记录在记录媒体177等记录设备中时,信息处理设备180把上述连接的图像变换成记录用的图像文件后,通过记录媒体接口179及记录媒体安装部分178(输出设备),输出记录到记录媒体177的指示。
当把上述连接的图像输出到其它通信仪器上时,信息处理设备180把上述连接的图像变换成传送用的图像文件后,通过传输设备157(输出设备)及天线156进行向其它通信仪器输出的处理。
由于本发明象上述那样,可以自动设定连接多个图像时的交叉衰减时间及图像效果,使用者不需要设定图像转换时的复杂图像效果。
图5是图像效果记录设备记录的相关类似图像附属信息和图像转换时的图像效果的图表。类似图像附属信息表示第一个图像附属信息和第二个图像附属信息在所定的范围类似的条件。
使用者通过输入设备174输入选择编辑的第一个图像和第二个图像的信息,信息处理设备180(比较设备、图像效果选择设备),就读出记录在记录媒体177等记录设备的第一个图像的第一个图像附属信息和第二个图像的第二个图像附属信息,比较两者的图像附属信息。这时候,两者的图像附属信息中,在所定的范围内存在类似的图像附属信息时,根据所定的范围内类似的图像附属信息,从图5所示的图表中读出图像转换时的图像效果。
然后,信息处理设备180或信息处理设备170等图像连接设备,读出记录媒体177或非易失性存储器182等记录设备中记录的第一个图像和第二个图像,在两者的图像按时间连结的部分,施以从上述图5所示的图表中读出的图像转换时的图像效果,进行两者的图像连接处理。
由于本发明象上述那样,可以自动设定连接多个图像时的交叉衰减时间及图像效果,使用者不需要设定图像转换时的复杂图像效果。
图6为用图像编辑装置实施的图像效果选择处理的程序框图。
使用者要连接多个图像时,把电子摄像机10的处理设备设定为图像编辑设备,通过输入设备174向显示设备168输入从一览显示的多个图像中选择编辑的第一个图像和第二个图像的信息,于是,信息处理设备180(比较设备、图像效果选择设备)进行读出记录媒体177等记录设备记录的第一个图像的第一个图像附属信息和第二个图像的第二个图像附属信息的处理。然后,进到比较两者的图像附属信息的S100“图像效果选择处理”,进到下一步的S102“摄影时间相差1小时以内?”。
在S102,信息处理设备180把从记录媒体177等记录设备读出的包含在第一个图像的第一个图像附属信息中的摄影时间和包含在第二个图像的第二个图像附属信息的摄影时间进行比较处理。该比较的结果,两者的摄影时间差判断为1小时以内时,读出图5所示的类似图像附属信息中与“摄影时间差1小时以内”相关的记录“1秒钟交叉衰减半透明合成”的图像效果处理,信息处理设备180实施的处理分支到S104“1秒钟交叉衰减半透明合成”的处理。
在S104,信息处理设备180读出记录在记录媒体177等记录设备或非易失性存储器182等记录设备中的第一个图像和第二个图像,在两者的图像按时间连接的部分,施以上述读出的“1秒钟交叉衰减半透明合成”的图像效果,进行两者的图像连接处理。在S104图像连接处理完成后,信息处理设备180实施的处理就进到S124“结束”,完成了图像效果选择处理。
在S102比较的结果,两者摄影时间差判断为非1小时以内时,信息处理设备180实施的处理进到S106“摄影日期不同?”的比较处理。
以后同样按照S106、S110、S114、S118的顺序进行比较,根据图像附属信息自动设定图像效果。仍然是第一个图像的第一个图像附属信息和第二个图像的第二个图像附属信息比较,类似图像附属信息的任何一个中都不存在该图像附属信息时,信息处理设备180实施的处理进到S122“普通转换”,因为没有第一个图像和第二个图像交叉衰减时间,所以进行直接连接处理,在下一步的S124中完成图像效果选择处理。
图7为第一个图像和第二个图像连接时交叉衰减时间的说明图。
如该图所示,第一个图像是人物图像,在所定的交叉衰减时间中用所定的图像效果和第二个图像(风景图像)进行合成处理。
图8为第一个图像和第二个图像连接时,用半透明合成的图像效果连接而获得的图像。
如该图所示,第一个图像和第二个图像连接时,用半透明合成的图像效果的情况下,对第一个图像(人物图像)在交叉衰减时间内实施半透明的渐隐处理。进而,第二个图像(风景图像),在交叉衰减时间内实施半透明的渐显处理而合成。
图9是在第一个图像和第二个图像连接时,用消除角的图像效果连接而获得的图像。
用消除角的图像效果连接“A”字母表示的第一个图像和“B”字母表示的第二个图像时,如图所示,在交叉衰减时间内,把第二个图像从右下角向左上角渐渐向上扩大,实现第二个图像转换的图像效果。
图10是在第一个图像和第二个图像连接时,用消除上部的图像效果连接而获得的图像。
用消除上部的图像效果连接“A”字母表示的第一个图像和“B”字母表示的第二个图像时,如图所示,在交叉衰减时间内,把第一个图像和第二个图像从下向上移动,对第二个图像施以图像转换。
图像转换时的图像效果消除样式有:半透明消除、两个图像消除、三个图像消除、左消除、右消除、上消除、下消除、镶嵌消除、方窗消除、圆窗消除、角消除、门消除、快门消除、百叶窗消除、分割消除、跳跃消除、旋涡消除等。
另外,其它图像转换效果还有如下的效果样式和重迭样式:半透明合成、镶嵌效果、使色调旋转的压纹效果、球面效果、波形效果、变形效果、白色衰减、黑色衰减、交叉衰减、点衰减等。
如以上说明的那样,由于利用本发明相关的图像编辑装置、图像编辑程序及图像编辑方法,读出记录设备记录的第一个图像的第一个图像附属信息和第二个图像的第二个附属信息,比较两者的图像附属信息,当上述比较的结果在图像附属信息中,在所定的范围内存在类似的图像附属信息时,在其所定的范围内,根据类似的图像附属信息,从上述图像效果记录设备中读出图像转换时的图像效果,用该图像效果在从记录设备读出的第一个图像和第二个图像的转换部分,施以图像效果,把连接的图像输出到显示设备、输出到记录媒体、或者其它通信仪器,所以使用者只要选择连接的图像,就可以自动设定动画数据间连结点部分的图像效果。
利用本发明只要选择两种静止图像或动画图像,就能自动生成有过渡效果的动画GIF等图像文件。因此,如果对电子摄像机10读出的图像自动设定过渡,就能轻松地制成效果很好的影像集。