交互式冰箱系统的操作方法.pdf

一种交互式冰箱系统的操作方法，包括：显示关于对应于由用户输入的语音的存储项目的信息；生成并输出关于存储项目的信息的响应消息；检查存储项目的储存期是否到期；以及输出关于存储项目的储存期的到期信息或关于存储项目的储存期的预想的到期信息。

1.  一种交互式冰箱系统的操作方法，包括：
显示关于对应于由用户输入的语音的存储项目的信息；
生成并输出关于所述存储项目的所述信息的响应消息；
检查所述存储项目的储存期是否到期；以及
输出关于所述存储项目的储存期的到期信息或关于所述存储项目的储存期的预想的到期信息。

2.  根据权利要求1所述的方法，还包括：
如果由所述用户输入的所述语音是冷冻/冷藏操作控制命令，则控制冰箱的相应的冷冻/冷藏操作，并通过语音回应所述控制的操作结果。

3.  根据权利要求1所述的方法，其中，通过考虑由所述用户针对所述存储项目的所述储存期的到期日而预设的期限，关于所述存储项目的储存期的所述预想的到期信息计算所述储存期的预想的到期日。

4.  根据权利要求1所述的方法，其中关于所述存储项目的所述信息包括存储项目的名称、数量、储存期和有效期中的至少一个或更多个。

5.  根据权利要求1所述的方法，还包括：
如果感测到用户的接近，则将关于具有到期的有效期的食物的信息转换为预设的语音信号并输出所述转换的信息。

6.  根据权利要求1所述的方法，还包括：
辨别语音信号，如果所述辨别的语音信号是与食物相关的信息，则分析所述与食物相关的信息，生成并显示预存的具有符合分析结果的特征的形状或姿势的体现形式。

7.  根据权利要求1所述的方法，还包括：
将从冰箱输出的所述语音信号转换成无线或有线通信信号，并将所述转换的信号传送给用户；或者
通过无线或有线通信信号接收来自于所述用户的与冰箱有关的控制命令，并将所述接收到的控制命令输入到冰箱。

8.  一种交互式冰箱系统的操作方法，包括：
通过语音信号输入关于所存储的食物的信息，并显示关于对应于所述输入的语音信号的存储项目的信息；
从关于所述存储项目的所述信息中提取有效期，并检查所述提取的有效期是否到期；以及
基于所述有效期是否到期来生成并显示食物信息列表窗口，以便显示相应的与食物相关的信息。

9.  根据权利要求8所述的方法，还包括：
如果感测到用户的接近，则将关于具有到期的有效期的食物的信息转换成预设的语音信号并输出所述转换的信息。

10.  根据权利要求8所述的方法，其中所述食物信息列表窗口包括所述存储项目的所述名称、数量、储存期和有效期中的至少一个或更多个。

11.  根据权利要求8所述的方法，还包括：
辨别所述语音信号，如果所述辨别的语音信号是所述与食物相关的信息，则分析所述与食物相关的信息，生成并显示预存的具有符合所述分析结果的特征的形状或姿势的体现形式。

12.  根据权利要求8所述的方法，还包括：
将从所述冰箱输出的所述语音信号转换成无线或有线通信信号，并将所述转换的信号传送给用户；或者
通过无线或有线通信信号接收来自于所述用户的与冰箱有关的控制命令，并将所述接收到的控制命令输入到所述冰箱。

交互式冰箱系统的操作方法
技术领域
本发明涉及冰箱，尤其涉及交互式冰箱系统的操作方法。
背景技术
一般而言，用户必须通过输入单元如键盘来手动输入多个食物名称，以至于输入关于要被存储在冰箱中的食物的信息，然后冰箱基于由用户手动收入的食物名称来存储关于相应食物的信息。另外，用户可以通过输入单元来手动输入食物名称，以便获得关于被保存在冰箱中的食物的信息，然后基于如此人工输入的食物名称来获得关于相应食物的信息。
然而，相关技术的冰箱在要求用户通过输入单元如键盘来手动输入多个食物名称这方面存在不便之处。
此外，相关技术的冰箱要求输入单元如键盘被设置在冰箱中，因此增加了冰箱的制造成本。
而且，在相关技术的冰箱中，通过输入单元如键盘来执行输入，这样增加了执行输入操作所需的时间。
发明内容
因此，本发明的一个目的在于提供交互式冰箱系统的操作方法，其使得用户能够通过语音来输入信息。
本发明的另一个目的在于提供交互式冰箱的操作方法，其借助于通过采用特定形状或做出特定姿势的体现形式(avatar)来向用户提供对应于语音输入的响应消息而使得用户能够容易地识别语音辨别结果。
本发明的又一个目的在于提供交互式冰箱系统的操作方法，其借助于通过采用特定形状或做出特定姿势的体现形式预先向用户提供关于存储项目的信息而使得用户能够容易地管理所存储的项目。
为了实现这些和其它优点以及根据本发明的目的，如这里所体现和广泛描述的，提供了一种交互式冰箱系统的操作方法，包括：显示关于对应于由用户输入的语音的存储项目的信息；生成并输出针对关于存储项目的信息的响应消息；检查存储项目的储存期是否到期；以及输出关于存储项目的储存期的到期信息或关于存储项目的预想的储存期的到期信息。
还提供了一种交互式冰箱系统的操作方法，包括：通过语音信号输入关于所存储的食物的信息，并显示关于对应于所输入的语音信号的存储项目的信息；从关于存储项目的信息中提取有效期，并检查所提取的有效期是否到期；以及基于有效期是否到期来生成并显示食物信息列表窗口，以便显示相应的与食物相关的信息。
附图说明
图1是示出了根据本发明的一个实施例的应用于冰箱的信息管理设备的结构的示意性框图；
图2是图1中的冰箱的正视图以及该图的一部分的放大图；
图3是示出了根据本发明的第一实施例的交互式冰箱系统的操作方法的流程图；
图4是示出了根据本发明的第二实施例的交互式冰箱系统的操作方法的流程图；
图5是示出了根据本发明的第三实施例的交互式冰箱系统的操作方法的流程图；
图6和图7示出了图3到图5中的信息管理服务的初始用户接口的实施例；
图8到图10示出了信息存储模式的实施例；
图11和图12示出了信息搜索模式的实施例；以及
图13和图14示出了信息通知模式的实施例。
具体实施方式
以下将结合图1到图14详细描述交互式冰箱系统的操作方法的优选实施例，该交互式冰箱系统的操作方法输出对应于语音输入的响应消息或执行对应于语音输入的控制功能，以便于通过口语声音来回答执行结果，这样使得用户能够容易地管理存储项目。
图1是示出了根据本发明的一个实施例的应用于冰箱的信息管理设备的结构的示意性框图。图2是图1中的冰箱的正视图以及该图的一部分的放大图。
如图1所示，根据本发明的冰箱100包括：用于输入来自于用户的某个语音的输入装置10；用于识别对应于用户的输入语音的信息的语音辨别模块20；用于显示将针对信息管理服务来显示的画面(例如用户接口等)、信息等的显示装置30；用于设置日期和/或时间的日期/时间计数装置40；用于存储将针对信息管理服务来显示的画面、信息等的存储装置50；用于生成感测用户接近的信号的传感器装置60；控制装置70，用于控制上述部件和将在下文描述的通信装置80，通过用户的语音被输入关于保存在冰箱中的存储项目的信息，以及识别所输入的信息，以使得用户能够检查、存储和管理所输入的信息；用于将从冰箱100输出的语音信号传送给用户、或接收来自于用户的与冰箱有关的控制命令的通信装置80。此外，控制装置70可以执行冰箱100的冷冻和/或冷藏控制操作。另外，冰箱100可以包括电源装置(未示出)以供应每个部件所需的电力。
输入装置100是用于输入来自用户的命令(例如针对冰箱的普通操作控制、启动和停止语音辨别模式、信息增加、信息搜索、信息删除、体现形式选择等)的装置。
输入装置10包括：通过显示装置30显示画面等的选择装置10a，其中显示装置30例如为按钮型、触摸板型或静电型；用于感测来自于用户的语音信号的麦克风10b。
如图2所示，选择装置10a包括：用于设置冷冻室和冷藏室的温度的温度设置装置11；用于设置分配器的服务类型(方冰块、水、冰片等)的分配器设置装置12；用于激活和选择在显示装置30上显示的用户接口的菜单装置13；用于启动或停止语音辨别模式的语音辨别选择装置14；用于其它选项(例如冰箱灯的激活，输入装置10的锁定/解锁)的选择装置15、16、17；以及用于检查和选择在显示装置30上显示的信息的菜单/选择按钮18。
麦克风10b被安装在冰箱100的前表面上，以易于获得用户的语音。此外，考虑到用户在安装有显示装置30的区域中执行操作，如信息输入，麦克风10b可以被安装在显示装置30的一侧。
在控制装置70的控制下，语音辨别模块20被提供来自于麦克风10b的用户语音(或语音信号)，以便将该语音转换成对应于所提供的语音的信息(例如文本、数字、字符等)，由此来识别所提供的语音。语音辨别模块20可以由硬件实现、软件实现和固件实现中的一种或更多种来实现。语音辨别模块20向控制装置70传送所识别的信息，然后在控制装置70的控制下，将所传送的信息在显示装置30上显示为文本或数字，或通过将对应于所传送的信息的响应消息转换为语音来将所传送的信息输出在显示装置30上。
优选地，显示装置30是用于显示用户接口、体现形式和信息中的至少一种或更多种的彩色薄膜晶体管液晶显示器(TFT LCD)。用户接口可以是其上显示有体现形式的背景。此外，用户接口可以与体现形式一起或与体现形式分离地附加显示关于冰箱状况的信息。也就是说，图如2所示，显示装置30显示作为待机屏的体现形式(熊的图画)30a和冰箱的基本信息31，以及附加显示天气信息(或该日的天气状况)32。
显示装置30还可以包括音频输出装置33以及如上所述的视觉显示装置。也就是说，对于音频输出装置33，可以使用扬声器。此外，当用户点击按钮(未示出)以请求冰箱的当前状态信息时，除了显示在显示装置30上的体现形式信息之外，音频输出装置33还通过音频输出装置33来输出对应于冰箱的预存状态信息的语音。
此外，当预设的时间间隔逝去或冰箱的状态信息改变时，除了显示在显示装置30上的体现形式信息之外，音频输出装置33还可以输出对应于冰箱的预存状态信息的语音，以便通知用户冰箱的当前状态信息。
当传感器装置60感测到从冰箱周围接近的用户时，音频输出装置33可以被配置成输出对应于冰箱的预存状态信息的语音，以便通知冰箱的当前状态信息。
音频输出装置33可以使用预存的会话语句或词语的组合来输出对应于控制装置70对冰箱的控制结果或对应于通过麦克风10b输入的语音的响应消息。
当从麦克风10b输入语音或当接收到来自于用户的例如用于存储的控制命令时，日期/时间计数装置40计算与时间相关的信息，如日期和/或时间等。而且，如果控制装置70请求与时间相关的信息，当该请求被接收到时，日期/时间计数装置40向控制装置70提供与时间相关的时间点信息。
存储装置50存储以下信息中的至少一种或更多种：要被显示以向用户提供由冰箱100提供的信息管理服务的画面(用户接口)、由控制装置70合成的信息、与冰箱的状态信息对应的体现形式数据和声音消息。画面是指用户接口屏，其帮助用户容易地管理信息。这里，信息包括存储项目的名称、存储或储存期/天数或有效期的起始日期、数量等。此外，存储装置50存储要被显示在初始屏上的体现形式图像等，以使得用户能够从中进行选择。存储装置50还存储代表存储项目的体现形式图像，以帮助用户容易地识别存储项目。
传感器装置60是用于感测用户接近冰箱的传感器，如图2所示，传感器装置60安装在冰箱的前表面上的显示装置30的附近。传感器装置60向控制装置70传送感测结果。
控制装置70控制整个冷冻/冷藏过程，且附加地提供信息管理服务，如下文所述。控制装置70包括至少一个或更多个中央处理单元(未示出)，而且可以包括存储装置50或可以仅包括处理器，如中央处理单元等。这里，控制装置70和存储装置50在本说明书中被解释为分立的元件，以便于详细描述存储在存储装置50中的数据。
为了管理关于存储项目的信息，控制装置70执行语音辨别模式，并通过麦克风10b获取用户的语音，从而获得对应于通过控制语音辨别模块20而得到的用户语音的信息。控制装置70提供信息管理服务，如信息存储模式、信息搜索模式、信息删除模式和信息通知模式。该信息管理服务以语音辨别模式来执行，并可以被配置成响应于通过选择装置10a而不是通过语音来执行的用户输入来执行信息管理服务。
信息存储模式是指控制装置70存储通过麦克风10b获得的信息的模式。信息搜索模式是指控制装置70读取存储于存储装置50中的信息以使得用户能够在如此读取的信息中找到想要的信息的模式。信息删除模式是指使得用户能够删除存储在存储装置50中的信息之中的至少一部分的模式。信息通知模式是这样的模式：控制装置70读取存储在存储装置50中的信息，并基于通过日期/时间计数装置40获得的与时间相关的信息来向用户提供有关具有已经到期的有效储存期的存储项目的信息。上述信息存储模式、信息搜索模式和信息删除模式依赖于用户的输入来执行。信息通知模式是一种服务，在用户选择信息通知模式之后或在该信息通知模式被自动选择之后，通过控制装置70来自动提供该服务。
例如，语音辨别选择装置14可以被选择以启动语音辨别模式。然后，如果要被存储在冰箱中的项目是奶，则用户可以对着麦克风10b说话，说<奶>或<首尔奶>及其品牌名称。通过输入词语达到用户可以识别存储项目的程度来执行语音输入。这里，不局限于用于输入的词语，可以通过各种修改输入词语。
输入的语音<奶>可以被转换成<奶>的字符信息，该字符信息是对应于通过语音辨别模块20输入的语音的信息，该信息然后被传送给控制装置70。控制装置70在显示装置30上显示被传送的<奶>的字符信息。此外，对应于<奶>的字符信息的语音可以在控制装置70的控制下通过音频输出装置33来输出。
当用户对显示在显示装置30上的字符进行检查并选择<取消>按钮(未示出)时，要求用户重新输入语音的文本或语音提示在控制装置70的控制下通过显示装置30或音频输出装置33输出。
而且，当用户对显示在显示装置30上的字符进行检查、然后选择<菜单/选择>按钮18时，控制装置70将显示在显示装置30上的字符存储到存储装置50中。这里，存储装置50还可以存储由日期/时间计数装置40提供的当前时间和字符。
在<菜单/选择>按钮18被选择后，在控制装置70的控制下通过显示装置30或音频输出装置33来提示用户输入存储项目的储存期和/或有效期。如果用户通过说话来输入储存期和/或有效期，则通过语音辨别模块20转换的信息被传送给控制装置70。因此，控制装置70通过显示装置30或音频输出装置33来输出被传送的信息。在所输出的信息经历了用户确认过程(在用户选择<菜单/选择>按钮18的情况下)之后，控制装置70将显示在显示装置30上的字符存储到存储装置50中。然后，通过输入装置10输入数量信息，随后，在输入的数量被检查之后，该数量信息被存储到存储装置50中。
一旦特定存储项目的存储项目选择过程和储存期以及/或有效期设置过程完成，控制装置70就管理关于存储在存储装置50中的项目的信息(例如：食物名称：<奶>，数量：<1>，储存期：30天，有效期：2007年7月31日)。
控制装置70在关于储存期的预定通知期限之前，通过显示装置30向用户提供关于储存期的到期日的至少一个或更多个通知。
例如，如果直到2007年7月31日储存期有效，以及预定通知期限被设置为7天，则在2007年7月31日之前7天，即在2007年7月24日，通过显示装置30向用户提供指示存储项目的储存期将在7天内到期的通知。
例如，说<请注意自2007年7月1日开始存储的奶的储存期还剩7天>的语音通过显示装置30或音频输出装置33输出。这里<2007年7月1日>和<奶>是在以语音辨别模式被输入之后存储在存储装置50中的信息，<7天>是在存储装置50中作为由用户预定的通知期限的预存值，<自...开始存储>、<的储存期>和<请注意...还剩...>是默认的预存在存储装置50中的短语。
通信装置80可以将从冰箱100输出的语音信号转换成无线或有线通信信号，并将如此转换的信号传送给第三方用户。
而且，通信装置80还可以被配置成通过无线或有线通信信号接收来自于用户的、与冰箱有关的控制命令，并将接收到的信号输入到冰箱100。控制装置70对输入到冰箱100的信号进行分析，执行对应于所分析的信息的控制操作，然后通过显示装置30输出对应于执行结果的语音信号。
下面将参考图1和图2对根据本发明的第一实施例的交互式冰箱系统的操作方法进行详细描述。
图3是示出了根据本发明的第一实施例的交互式冰箱系统的操作方法的流程图。
首先，附着于冰箱100的传感器装置60感测是否有用户接近该冰箱。根据感测结果，如果传感器装置60没有感测到用户的接近，则保持待机模式，但如果传感器装置60感测到用户的接近(S101)，则用户接近的感测结果被传送给控制装置70。然后，控制装置70将有关具有到期的储存期的任何食物的信息转换成预设的语音信号，以便通过音频输出装置33来将该信息的通知输出为语音信号，或者通过显示装置30来可视地显示该信息的通知。
此外，当输出关于食物的信息时，可以配置成通过显示装置30向用户输出关于具有一定剩余的由用户预设的有效储存期的食物信息，以及关于储存期已经到期的任何食物的信息(S102)。
然后，控制装置70确定语音辨别模式是否通过由用户的操纵进行的对语音辨别选择装置14的输入而被选择(S103)。
根据确定结果，如果语音辨别模式被选择，则控制装置70在显示装置30上显示信息管理服务的初始用户接口。该初始用户接口可以使用预定的体现形式，该体现形式显示文本，如短语<语音辨别模式将启动>，或输出预存的对应于该短语的语音(S104)。
然后，通过麦克风10b将用户的语音输入给控制装置70。
为了检查在用户输入的语音中是否存在错误，所输入的语音通过语音辨别模块20被转换成相应的信息(例如：文本、数字、字符等)。如果该转换能够被正常执行，则确定用户输入的语音不存在错误，然后执行下一个步骤(S107)。如果该转换不能被正常执行，则确定用户输入的语音存在错误。控制装置70通过显示装置30向用户显示文本<请再说一遍>，使用体现形式显示该文本或输出对应于该文本的预存语音(S106)，以便要求用户再次输入语音。
此外，控制装置70可以通过体现形式的形状或姿势来向用户显示该用户输入的语音是否存在错误。例如，可以配置成微笑的体现形式代表该用户输入的语音中不存在错误，而哭泣的体现形式代表该用户输入的语音中存在错误(S105)。
当用户输入的语音中不存在错误时，语音辨别模块20将用户的语音输入转换成对应于该语音的信息。基于如此转换的信息，可以分析关于存储在冰箱中的项目的信息，然后分析结果可以通过通信装置80被传送到外部。
另外，控制装置70对通过语音辨别模块20转换的信息或通过通信装置80从用户那里接收的、然后被传送给控制装置70的与冰箱有关的控制命令进行分析。
这里，输入的语音消息可以包括存储项目的名称、数量、有效期、储存期和与冰箱有关的控制命令中的至少一个和更多个数据(S107)。
根据分析结果，确定所传送的信息或者控制命令是否是冷冻/冷藏操作控制命令或信息(S108)。
根据确定结果，如果所传送的信息或控制命令是冷冻/冷藏操作控制命令或信息，则对应于冷冻/冷藏操作控制命令或信息的控制功能被执行。控制功能执行的结果被转换成预存的、对应于该控制功能执行的结果的语音或文本，然后通过显示装置30输出。
例如，如果所传送的信息或控制命令是<存储>，则控制装置70存储当前的状况，并将存储结果转换为对应于该存储结果的语音或文本，然后通过显示装置30输出该结果(S109)。
作为确定的结果，如果所传送的信息或控制命令不是冷冻/冷藏操作控制命令或信息，则确定所传送的信息是否是普通的会话消息。
这里，控制命令涉及对冰箱的冷冻/冷藏循环的控制、信息管理服务的控制等，如<存储>、<搜索>、<删除>、<取消>、<完成>、<存储全部>、<查看全部>、<存储完成>、<确认>等。而且，不是控制命令的普通会话消息涉及存储项目的名称、数量、有效期、储存期等，如<冷冻室>、<冷藏室>、<草莓>、<3天>、<2007年7月1日>、<牛肉>、<2千克>等(S110)。
根据以上步骤(S110)的确定结果，如果所传送的信息或控制命令不是普通会话消息，则生成对应于输入消息的语音或文本，并通过显示装置30输出，如此以便于操作进行到语音输入步骤(S105)(S111)。
否则，根据步骤(S110)的确定结果，如果所传送的信息是普通会话消息，则对应于该输入消息的响应消息被生成为语音或文本，由此通过显示装置30输出所生成的语音或文本。
这里，为了生成对应于输入消息的响应消息，在存储装置50中预先存储至少一个或更多个会话语句或词语。控制装置70通过使用存储装置50中存储的至少一个或更多个会话语句或词语来生成作为对应于输入消息的适当的响应消息的语音或文本。
另外，当生成对应于输入消息的响应消息时，控制装置70基于分析结果来计算存储项目的储存期或有效期，并在显示装置30上显示计算结果。控制装置70然后检查存储项目的储存期/有效期是否到期，随后在存储到期日或有效期到期日通过显示装置30可视地显示相应存储项目的储存期或有效期的到期信息，或通过音频输出装置33将该信息输出为语音信号。
此外，控制装置70检查存储项目的储存期/有效期是否已经到期。考虑到由用户针对存储项目的储存期/有效期而预设的预想的到期通知日，在由用户根据存储项目的储存期/有效期预设的预想的到期通知日之前，控制装置70通过显示装置30可视地显示相应存储项目的储存期或有效期的到期信息，或者通过音频输出装置33将该信息输出为语音信号。
例如，如果由用户预设的预想的到期通知日被设置为7天，则在距离存储项目的有效期的到期日7天之前的日子，相应存储项目的有效期到期信息通过显示装置30被可视地显示给用户，或通过音频输出装置33输出为语音信号。这样，在有效期的到期日之前预先对用户进行通知，由此有助于对存储项目的管理。
此外，对用户输入的语音进行辨别，作为辨别的结果，如果输入的语音是与食物相关的信息，则对该与食物相关的信息进行分析。然后，预存的具有符合分析结果的特征的形状或姿势的体现形式被生成为通过显示装置30来可视地显示(S112)。
在步骤(S101)到(S112)中，通过显示装置30显示的信息可以通过通信装置80被传送到外部。
之后，控制装置70根据用户是否已经通过输入装置10完成了输入或在预设时间段内是否存在来自于用户的语音输入来确定输入完成(S113)。
作为步骤(S113)的确定结果，如果确定来自于用户的输入在继续，则执行语音输入步骤(S105)。
然而，作为步骤(S113)的确定结果，如果确定来自于用户的输入已经完成，则控制装置70停止信息管理服务，然后在显示装置30上显示预设的初始屏(S114)。
下面将参考图1和图2对根据本发明的第二实施例的交互式冰箱系统的操作方法进行详细描述。
图4是示出了根据本发明的第二实施例的交互式冰箱系统的操作方法的流程图。
步骤(S201)到(S207)对应于图3中的步骤(S101)到(S107)。
基于步骤(S207)中的分析结果，如果所传送的信息涉及存储项目，则控制装置70控制输入装置10接收关于相应存储项目的附加的输入数据，并通过语音辨别模块20将输入的数据转换为相应的信息，然后将转换的信息存储到存储装置50中。
基于步骤(S207)中的分析结果，如果所传送的信息是控制命令或控制信息，或者如果通过通信装置80接收的信息是控制命令，则可以配置成执行对应于控制命令/信息的控制，并通过显示装置30输出对应于执行结果的语音。
这里，附加输入的数据可以包括存储项目的名称、储存期、有效期和数量中的至少一个和多个数据(S208)。
然后，对应于用户的语音输入的响应消息或对应于附加输入的关于存储项目的数据的响应消息被生成为语音或文本以通过显示装置30来输出。
这里，为了生成对应于用户的语音输入的响应消息或对应于附加输入的关于存储项目的数据的响应消息，预先在存储装置50中存储至少一个或更多个会话语句或词语。控制装置70通过使用存储在存储装置50中的至少一个或更多个会话语句或词语来生成语音或文本，作为对应于输入消息的适当的响应消息、或对应于附加输入的关于存储项目的数据的适当的响应消息。
另外，当生成对应于语音输入的响应消息或对应于附加输入的关于存储项目的数据的响应消息时，控制装置70计算并显示输入的存储项目的储存期或有效期。控制装置70检查存储项目的储存期/有效期是否到期，然后在存储到期日或有效期到期日通过显示装置30可视地显示相应存储项目的储存期或有效期的到期信息，或通过音频输出装置33输出为语音信号。
控制装置70检查存储项目的储存期/有效期是否到期。考虑到由用户针对存储项目的储存期/有效期而预设的预想的到期通知日，在由用户根据存储项目的储存期/有效期预设的预想的到期通知日之前，控制装置70通过显示装置30可视地显示相应存储项目的储存期或有效期的到期信息，或者通过音频输出装置33输出语音信号。
此外，对输入的语音进行辨别，作为该辨别的结果，如果输入的语音是与食物相关的信息，则对该与食物相关的信息进行分析。然后，预存的具有符合分析结果的特征的形状或姿势的体现形式被生成为通过显示装置30来可视地显示(S209)。
在步骤(S201)到(S209)中，通过显示装置30显示的信息可以通过通信装置80传送到外部。
之后，控制装置70根据用户是否已经通过输入装置10完成了输入或在预设时间段内是否存在来自于用户的语音输入来确定输入完成(S210)。
作为步骤(S210)的确定结果，如果确定来自于用户的输入在继续，则执行语音输入步骤(S205)。
作为步骤(S210)的确定结果，如果确定来自于用户的输入已经完成，则控制装置70停止信息管理服务，然后在显示装置30上显示预设的初始屏(S211)。
下面将参考图1和图2对根据本发明的第三实施例的交互式冰箱系统的操作方法进行详细描述。
图5是示出了根据本发明的第三实施例的交互式冰箱系统的操作方法的流程图。
步骤(S301)到(S304)与图3中的步骤(S101)到(S104)相同。
之后，通过麦克风10b将存储的与食物相关的信息作为语音信号输入给控制装置70。
为了检查在输入的用户语音中是否存在错误，所输入的语音通过语音辨别模块20而被转换成相应的信息。如果该转换能够被正常执行，则确、定用户的语音输入不存在错误，然后执行下一个步骤(S307)。如果该转换不能被正常执行，则确定用户的语音输入存在错误。控制装置70通过显示装置30向用户显示文本，如<请再说一遍>，使用体现形式显示该文本或输出预存的对应于该文本的语音(S306)，以便要求用户再次输入语音。
此外，控制装置70可以通过体现形式的形状或姿势来向用户显示该用户输入的语音是否存在错误。例如，可以配置成微笑的体现形式代表用户输入的语音中不存在错误，而哭泣的体现形式代表用户输入的语音中存在错误(S305)。
当用户输入的语音中不存在错误时，语音辨别模块20将用户的语音转换成对应于该语音的信息。基于如此转换的信息，可以分析关于存储在冰箱中的项目的信息，然后分析结果可以通过通信装置80被传送到外部。
另外，控制装置70对通过语音辨别模块20转换的信息进行分析，或对通过通信装置80从用户那里接收的、然后被传送给控制装置70的与冰箱有关的控制命令进行分析。
控制装置70从所辨别的与食物相关的信息中提取有效期或储存期，并根据所提取的有效期/储存期是否到期来生成与食物相关的信息列表窗口，以便显示相应的与食物相关的信息。然后，控制装置70将相应的与食物相关的信息转换为语音或文本，以便于通过显示装置30输出。
这里，在食物信息列表窗口上显示的信息包括相应食物的名称、储存期、有效期、数量以及代表相应食物的体现形式中的至少一种或更多种。
基于分析结果，如果所传送的信息是控制命令或控制信息，或者如果从通信装置80接收的信息是控制命令，则可以配置成执行对应于该控制命令/信息的控制，然后从显示装置30输出对应于执行结果的语音(S307)。
之后，对应于针对所输入的与食物相关的信息的语音消息的响应消息被生成为语音或文本，以便通过显示装置30输出。
这里，为了生成对应于所输入的语音消息的响应消息，预先在存储装置50中存储至少一个或更多个会话语句或词语。控制装置70通过使用存储在存储装置50中的至少一个或更多个会话语句或词语来生成语音或文本，作为对应于输入消息的适当的响应消息。
另外，当对应于输入消息的响应消息生成时，控制装置70计算并显示所输入的存储项目的储存期或有效期。控制装置70检查存储项目的储存期/有效期是否到期，然后在存储到期日或有效期到期日通过显示装置30可视地显示相应存储项目的储存期或有效期的到期信息，或者通过音频输出装置33输出语音信号。
控制装置70检查存储项目的储存期/有效期是否到期。考虑到用户针对存储项目的储存期/有效期而预设的预想的到期通知日，在由用户根据存储项目的储存期/有效期预设的预想的到期通知日之前，控制装置70通过显示装置30可视地显示相应存储项目的储存期或有效期的到期信息，或者通过音频输出装置33输出语音信号。
此外，对输入的语音进行辨别，作为该辨别的结果，如果输入的语音是与食物相关的信息，则对该与食物相关的信息进行分析。然后，预存的具有符合分析结果的特征的形状或姿势的体现形式被生成以通过显示装置30来可视地显示(S308)。
在步骤(S301)到(S308)中，通过显示装置30显示的信息可以通过通信装置80被传送到外部。
之后，控制装置70根据用户是否已经通过输入装置10完成了输入或在预设时间段内是否存在来自于用户的语音输入来确定输入完成(S309)。
作为步骤(S309)的确定结果，如果确定来自于用户的输入在继续，则执行语音输入步骤(S305)。
作为步骤(S309)的确定结果，如果确定来自于用户的输入已经完成，则控制装置70停止信息管理服务，然后在显示装置30上显示预设的初始屏(S310)。
图6和图7示出了根据图3到图5的信息管理服务的初始用户接口的实施例。
参考图6和图7，根据用户通过选择装置10a的语音辨别选择装置14的输入，控制装置70在图3的步骤S103和S104、图4的步骤S203和S204、图5的步骤S303和S304中从存储装置50中读取对应于语音辨别模式的用户接口并显示该用户接口。以上实施例旨在管理作为存储项目的存储食物。
图6示出了控制装置70通知用户关于语音识别模式的启动。
如图7所示的初始用户接口可以是信息管理服务的初始屏或语音辨别模式的初始屏。用户可以管理有关存储在冷冻室和冷藏室中的项目的信息。该信息管理包括如下功能，如信息存储、信息搜索和信息删除。以下将描述的所有用户接口以及初始用户接口包括有关用户在每个步骤中以什么顺序(命令顺序)如何执行语音输入的指令。另外，在用户接口中，如果用户说<冷藏室存储>，则控制装置70准备执行信息存储模式。
此外，显示<取消>按钮用以取消用户的语音输入，显示<停止>按钮用以停止当前过程中的用户接口。特别地，由于<取消>和<停止>按钮涉及控制信息，因此根据每个这种按钮的控制被执行。显示装置30针对所执行的控制结果，向用户显示预存的对应于该执行的控制结果的语音或文本。
初始用户接口还显示体现形式(熊)，以向用户提供亲近的感觉。
可以通过语音或通过选择装置10a来选择初始用户接口。
图8到图10示出了信息存储模式的实施例。图8到图10显示了当用户选择信息存储模式时的情况。
参考图8，当用户按顺序输入<3份色拉3天2007年7月1日>、<3个胡萝卜7天2007年7月8日>以及<1盒草莓3天>时，控制装置70在显示装置30上显示该输入的信息。例如，当输入<3份色拉3天2007年7月1日>时，控制装置70首先被输入语音<色拉>，然后通过图3中的步骤S105到S111、图4中的步骤S205到S208以及图5中的步骤S305到S307在显示装置30上显示对应于输入消息的响应消息。接下来，<3份>、<3天>和<2007年7月1日>遵循同样的过程。这里，用户可以允许在每个单独的词语之间有时间间隔，使得控制装置70可以确认这4个语音被分离地输入。也就是说，可以通过图3中的步骤S113、图4中的步骤S210以及图5中的步骤S309来区分语音。另外，用户可以选择输入储存期或有效期中的至少一个或更多个。换句话说，可以输入储存期和有效期两者，或者可以输入储存期或有效期。
在图9中，在步骤S106中，当控制装置70不能正确地执行来自用户的语音辨别时，该辨别导致显示皱眉的体现形式，以及错误消息，如<请再说一遍>。
图10示出了当图8正在显示时用户输入<存储完成>时的情况。也就是说，如果控制装置70通过选择装置10a或麦克风10b获得输入<存储完成>，则控制装置70将通过图3中的步骤S105到S112、图4中的步骤S205到S209以及图5中的步骤S305到S308显示的信息存储在存储装置50中。这里，控制装置70从日期/时间计数装置40请求关于何时获取或存储信息的与时间相关的信息，然后将由日期/时间计数装置40提供的与时间相关的信息(例如日期和/或时间)与显示的信息一起存储在存储装置50中。所提供的与时间相关的信息是指存储项目的存储起始日期。以及，控制装置70可以通过音频输出装置33输出针对用户输入的存储完成。例如，可以输出音频信号如<一盒草莓被存储>。
图11和图12示出了信息搜索模式的实施例。图11到图12示出了当用户选择信息搜索模式时的情况。也就是说，在图6和图7的用户接口中，信息搜索模式的实施例是通过图3中的步骤S105到S112、图4中的步骤S205到S209以及图5中的步骤S305到S308显示的用户接口的类型。
如图11所示，控制装置70通过图3中的步骤S105到S112、图4中的步骤S205到S209以及图5中的步骤S305到S308读取关于存储在存储装置50中的项目的信息，并在显示装置30上显示该信息。这里，当计算和显示每个存储项目的储存期时，控制装置70从存储装置50读取关于存储项目的信息，并从日期/时间计数装置40获取当前日期和时间(日期和/或时间)，由此计算并显示每个存储项目的储存期。通过从当前日期减去存储的起始日期来计算储存期。
而且，控制装置70可以基于存储的起始日期或基于距离有效期的剩余天数来显示储存期，以使得用户能够容易地辨别存储项目。
图12示出了控制装置70在信息搜索模式中获取和显示图11中来自于用户的输入如<鲭鱼>或<2条鲭鱼>，然后输出对应于该信息的详细信息的情况。
图13和14示出了信息通知模式的实施例。
图13示出了控制装置70经由显示装置30通过使用体现形式(具有异常大的鼻子)通知用户存在被长时间存储的项目。
图14示出了控制装置70通过显示装置30详细显示关于被长时间存储的项目的信息。
如详细描述的本发明的信息管理方法还可以被应用于信息修改和信息的外部传送等情况，以及信息的存储、搜索和删除。
工业适用性
如到目前为止的描述，本发明允许用户存储和管理存储项目的名称和其它信息，而不是直接将该信息输入到键盘等，由此有助于信息管理。
在本发明中，用户可以通过语音输入信息，通过体现形式识别对输入信息的辨别结果，并检查对应于输入信息的执行结果的识别结果，由此使得能够通过语音来进行控制和信息管理。
另外，本发明可以通过体现形式或通过语音来预先通知用户关于存储项目的信息，由此有助于通过用户来进行对存储项目的状况的管理。