笔记本型信息处理器和图像读取方法.pdf

一种笔记本型信息处理器，包括图像拍摄单元、显示器、键盘、存储单元和控制单元，其中，该控制单元包括：实况视图显示单元，其在显示器上显示通过拍摄在图像拍摄单元的拍摄区域内的至少一部分键盘而获取的实况视图；静止图像获取单元，在接收到开始拍摄放在键盘上的文档的静止图像的拍摄开始信号时，其从由实况视图显示单元在显示器上显示的实况视图获取静止图像；和图像处理单元，其对由静止图像获取单元获取的静止图像执行投影变换以获取从正面方向拍摄的图像，执行图像处理从而执行裁剪以剪裁文档，并在存储单元中存储文档的经图像处理之后的已变换的图像。

1.  一种包括图像拍摄单元、显示器、键盘、存储单元和控制单元的笔记本型信息处理器，其中，
该控制单元包括：
实况视图显示单元，其在显示器上显示通过拍摄在图像拍摄单元的拍摄区域内的键盘的至少一部分而获得的实况视图；
静止图像获取单元，其在接收到开始拍摄放在键盘上的文档的静止图像的拍摄开始信号时，从由实况视图显示单元在显示器上显示的实况视图获取静止图像；和
图像处理单元，其对由静止图像获取单元获取的静止图像执行投影变换以获取从正面方向拍摄的图像，执行图像处理从而执行裁剪以剪裁文档，并在存储单元中存储文档的经图像处理之后的已变换的图像。

2.  一种包括图像拍摄单元、显示器、键盘、存储单元和控制单元的笔记本型信息处理器，其中，
该控制单元包括：
实况视图显示单元，其获取通过拍摄在图像拍摄单元的拍摄区域内的键盘的至少一部分而获得的实况视图，并对所获取的实况视图执行投影变换以获取从正面方向拍摄的实况视图，由此在显示器上显示投影变换之后的实况视图；
静止图像获取单元，其在接收到开始拍摄放在键盘上的文档的静止图像的拍摄开始信号时，从由实况视图显示单元在显示器上显示的实况视图获取静止图像；和
图像处理单元，其对由静止图像获取单元获取的静止图像执行图像处理从而执行裁剪以剪裁文档，并在存储单元中存储文档的经图像处理之后的已变换的图像。

3.  根据权利要求1的笔记本型信息处理器，其中，
该控制单元进一步包括：
拍摄开始信号发生单元，其通过比较由图像拍摄单元获取的其中文档不在键盘上的第一图像和其中文档在键盘上的第二图像来确定文档的存在，并且当存在文档时，产生拍摄开始信号以发送该信号到静止图像获取单元。

4.  根据权利要求1的笔记本型信息处理器，其中，
该控制单元进一步包括：
亮度调整单元，在通过静止图像获取单元获取静止图像时调整显示器的亮度。

5.  根据权利要求1的笔记本型信息处理器，其中，
图像处理单元所执行的裁剪通过比较由图像拍摄单元获取的其中文档不在键盘上的第一图像和其中文档在键盘上的第二图像来检测文档的角。

6.  根据权利要求1的笔记本型信息处理器，其中，该图像拍摄单元可拆卸地置于笔记本型信息处理器中，由笔记本型信息处理器供电，且通信地连接到笔记本型信息处理器。

7.  根据权利要求1的笔记本型信息处理器，其中，该图像拍摄单元可旋转地置于笔记本型信息处理器中从而能够改变拍摄方向。

8.  根据权利要求7的笔记本型信息处理器，其中，该笔记本型信息处理器进一步包括旋转角传感器，其检测当旋转图像拍摄单元以改变拍摄方向时的旋转角。

9.  根据权利要求7的笔记本型信息处理器，其中，
该笔记本型信息处理器包括其中至少放置所述图像拍摄单元的盖，和其中至少放置所述键盘的主体，且进一步包括检测所述盖相对于主体的张开角的张开角传感器和调整图像拍摄单元的旋转角的马达，且
该控制单元进一步包括：
旋转角调整单元，其基于由张开角传感器检测的张开角，调整马达的旋转角从而调整图像拍摄单元的拍摄方向。

10.  一种由包括图像拍摄单元、显示器、键盘、存储单元和控制单元的笔记本型信息处理器执行的图像读取方法，
该方法包括：
实况视图显示步骤，其在显示器上显示通过拍摄在图像拍摄单元的拍摄区域内的键盘的至少一部分而获取的实况视图；
静止图像获取步骤，在接收到开始拍摄放在键盘上的文档的静止图像的拍摄开始信号时，其从在实况视图显示步骤在显示器上显示的实况视图获取静止图像；和
图像处理步骤，其对在静止图像获取步骤获取的静止图像执行投影变换以获取从正面方向拍摄的图像，执行图像处理从而执行裁剪以剪裁文档，并在存储单元中存储文档的经图像处理之后的已变换的图像。

11.  一种由包括图像拍摄单元、显示器、键盘、存储单元和控制单元的笔记本型信息处理器执行的图像读取方法，
该方法包括：
实况视图显示步骤，其获取通过拍摄在图像拍摄单元的拍摄区域内的键盘的至少一部分而获得的实况视图，并对获取的实况视图执行投影变换以获取从正面方向拍摄的实况视图，由此在显示器上显示投影变换之后的实况视图；
静止图像获取步骤，在接收到开始拍摄放在键盘上的文档的静止图像的拍摄开始信号时，其从在实况视图显示步骤在显示器上显示的实况视图获取静止图像；和
图像处理步骤，其对在静止图像获取步骤获取的静止图像执行图像处理从而执行裁剪以剪裁文档，并在存储单元中存储文档的经图像处理之后的已变换的图像。

12.  根据权利要求10的图像读取方法，该控制单元进一步包括：
拍摄开始信号发生步骤，其通过比较由图像拍摄单元获取的其中文档不在键盘上的第一图像和其中文档在键盘上的第二图像来确定文档的存在，并且当存在文档时，产生拍摄开始信号以发送该信号到静止图像获取步骤。

13.  根据权利要求10的图像读取方法，该控制单元进一步包括：
亮度调整步骤，当在静止图像获取步骤获取静止图像时调整显示器的亮度。

14.  根据权利要求10的图像读取方法，其中，
在图像处理步骤的裁剪通过比较由图像拍摄单元获取的其中文档不在键盘上的第一图像和其中文档在键盘上的第二图像来检测文档的角。

15.  根据权利要求10的图像读取方法，其中，该图像拍摄单元可拆卸地置于笔记本型信息处理器中，由笔记本型信息处理器供电，且通信地连接到笔记本型信息处理器。

16.  根据权利要求10的图像读取方法，其中，该图像拍摄单元可旋转地置于笔记本型信息处理器中以便能够改变拍摄方向。

17.  根据权利要求16的图像读取方法，其中，该笔记本型信息处理器进一步包括旋转角传感器，其检测当旋转图像拍摄单元以改变拍摄方向时的旋转角。

18.  根据权利要求16的图像读取方法，其中，
该笔记本型信息处理器包括其中至少放置所述图像拍摄单元的盖，和其中至少放置所述键盘的主体，且进一步包括检测所述盖相对于主体的张开角的张开角传感器和调整图像拍摄单元的旋转角的马达，且
该方法进一步包括：
旋转角调整步骤，其基于由张开角传感器检测的张开角，调整马达的旋转角从而调整图像拍摄单元的拍摄方向。

笔记本型信息处理器和图像读取方法
[0001]
技术领域
本发明涉及笔记本型信息处理器和图像读取处理方法。
[0002]
背景技术
对于诸如现有的PDA终端和膝上型PC的笔记本型信息处理器，举例来说，当用户，比如商业人士，不是在他具有良好设备环境的办公室中的书桌处，而是在会议时、在访问客户时、和在商务旅行目的地的旅馆中时，想要扫描文档比如纸张文档时，需要另外携带便携式扫描仪或者数码相机。
[0003]
当另外携带便携式扫描仪时，通常市场上可买到的笔记本型信息处理器和便携式扫描仪分别重大约1到2kg和1.4kg，使得它们总共重大约3kg，这对于用户就太重了而难以携带。此外，用户不得不在扫描时保持笔记本型信息处理器和扫描仪的安放区域。
[0004]
另一方面，当使用数码相机代替便携式扫描仪时，因为紧凑的数码相机重例如大约0.1到0.2kg，其重量增加并不太多。然而，在这种情况下，需要保持笔记本型信息处理器的安放区域和放置要被拍摄的文档诸如纸张文档的空间。此外，难以直接地拍摄文档而不使用三脚架等，需要转换由数码相机拍摄的文档以使得好像其是直接地拍摄的，并执行修剪以从背景剪裁出文档。
[0005]
因此，近年来，已经开发具有扫描仪功能的笔记本型信息处理器作为便携式图像输入装置。
[0006]
例如，日本专利申请特开No.2000-137544公开了一种笔记本型个人计算机，其由具有显示器的盖和具有键盘的主体构成，其中PC卡插槽位于盖侧且PC卡照相机被安装在PC卡插槽上，且PC卡照相机拍摄个人计算机操作者等。
[0007]
日本专利申请特开No.2000-194450公开了一种具有文档呈现装置的信息处理器，其中将照明设备支撑机构、电子照相机、电子照相机支撑机构添加到作为信息处理器的膝上型个人计算机上，以便不改变其机壳的外形和大小，且使用它们拍摄的所呈现的文档的图像被捕捉到膝上型个人计算机中。
[0008]
日本专利申请特开No.2002-539516公开了一种便携式电子设备，其中电荷耦合器件照相机与便携式个人计算机的一个翼部集成，且利用夹子(clip)或者透明带将比如名片的记录文档固定到另一翼部，且该电荷耦合器件照相机拍摄该记录文档。
[0009]
然而，尽管现有的便携式图像输入装置(比如日本专利申请特开Nos.2000-137544，2000-194450，和2002-539516)可用作具有扫描仪功能的笔记本型信息处理器，它们除要求笔记本型信息处理器的安放区域之外，还要求文档等等的安放区域，且在捕捉图像的效率和准确性方面存在问题。
[0010]
具体地说，现有的便携式图像输入装置在捕捉文档时要求文档的安放区域，且存在在捕捉图像之前不能实时调整或者检查拍摄区域的问题。现有的便携式图像输入装置具有不能对捕捉的图像执行图像处理以便获取从正面方向拍摄的且从背景剪裁的文档的图像的问题。就是说，存在用户难以获取其中从背景实时剪裁从正面方向拍摄的文档的所期望的图像的问题。
[0011]
例如，在日本专利申请特开No.2000-137544中公开的技术中，PC卡插槽被放置在显示器(盖)中，以使得插入在PC卡插槽中的PC卡照相机等不妨碍个人计算机操作，但没有考虑在捕捉文档时文档的安放区域和拍摄区域的检查以及用于转换为从正面方向拍摄的图像的图像处理。
[0012]
日本专利申请特开No.2000-194450中公开的技术是，形成文档呈现装置，该文档呈现装置具有照明装置和电子照相机，以便装在膝上型个人计算机中，且在膝上型个人计算机的后表面或者侧面上提供捕捉文档时的安放区域；但没有考虑当捕捉文档时拍摄区域的检查和用以变换为从正面方向拍摄的图像的图像处理。
[0013]
在日本专利申请特开No.2002-539516中公开的技术如下：利用夹子等将要拍摄的书面文档等固定到便携式个人计算机的一个翼部，且用户通过将与另一翼部集成的照相机放置在最优位置以减少图像的散焦，通过该照相机拍摄拍摄对象，从而，这要求被拍摄的文档等的固定操作和照相机的最优距离的定位，且没有考虑当捕捉文档时拍摄区域的检查以及转换为从正面方向拍摄的图像的图像处理。
[0014]
也就是说，在日本专利申请特开Nos.2000-137544、2000-194450和2002-539516中公开的、用以获取用户期望的从正面方向拍摄的且其中剪裁了文档的图像的现有便携式图像输入装置技术中，在效率和准确性上存在问题，当捕捉图像时用户自己不得不手动地调整拍摄方向的设置和照相机的焦点，在拍摄之后检查图像，和当没有获取期望的图像时再次拍摄。
发明内容
[0015]
本发明的目的是至少部分地解决现有技术中的问题。
[0016]
根据本发明一个方面的笔记本型信息处理器包括图像拍摄单元、显示器、键盘、存储单元、和控制单元，其中，该控制单元包括：实况视图(live view)显示单元，其在显示器上显示通过拍摄在图像拍摄单元的拍摄区域内的键盘的至少一部分获取的实况视图；静止图像获取单元，其在接收到用于开始拍摄放在键盘上的文档的静止图像的拍摄开始信号时，从由实况视图显示单元在显示器上显示的实况视图获取静止图像；和图像处理单元，其对由静止图像获取单元获取的静止图像执行投影变换(projective transformation)以获取从正面方向拍摄的图像，执行图像处理以执行裁剪以剪裁文档，并在存储单元中存储文档的经图像处理之后的已变换的图像。
[0017]
根据本发明另一方面的笔记本型信息处理器包括图像拍摄单元、显示器、键盘、存储单元、和控制单元，其中，该控制单元包括：实况视图显示单元，其获取通过拍摄在图像拍摄单元的拍摄区域内的键盘的至少一部分而获取的实况视图，并对获取的实况视图执行投影变换以获取从正面方向拍摄的实况视图，由此在显示器上显示投影变换之后的实况视图；静止图像获取单元，其在接收到用以开始拍摄放在键盘上的文档的静止图像的拍摄开始信号时，从由实况视图显示单元在显示器上显示的实况视图获取静止图像；和图像处理单元，其对由静止图像获取单元获取的静止图像上执行图像处理，从而执行裁剪以剪裁文档，并在存储单元中存储该文档的经图像处理之后的已变换的图像。
[0018]
根据本发明又一方面的图像读取方法由包括图像拍摄单元、显示器、键盘、存储单元、和控制单元的笔记本型信息处理器执行。该方法包括：实况视图显示步骤，其在显示器上显示通过拍摄在图像拍摄单元的拍摄区域内的键盘的至少一部分获取的实况视图；静止图像获取步骤，其在接收到开始拍摄放在键盘上的文档的静止图像的拍摄开始信号时，从在实况视图显示步骤在显示器上显示的实况视图获取静止图像；和图像处理步骤，其对在静止图像获取步骤获取的静止图像执行投影变换从而获取从正面方向拍摄的图像，执行图像处理从而执行裁剪以剪裁文档，并在存储单元中存储文档的经图像处理之后的已变换的图像。
[0019]
根据本发明又一方面的图像读取方法由包括图像拍摄单元、显示器、键盘、存储单元、和控制单元的笔记本型信息处理器执行。该方法包括：实况视图显示步骤，其获取通过拍摄在图像拍摄单元的拍摄区域内的键盘的至少一部分获取的实况视图，并对获取的实况视图执行投影变换从而获取从正面方向拍摄的实况视图，由此在显示器上显示投影变换之后的实况视图；静止图像获取步骤，其在接收到开始拍摄放在键盘上的文档的静止图像的拍摄开始信号时，从在实况视图显示步骤在显示器上显示的实况视图获取静止图像；和图像处理步骤，其对在静止图像获取步骤获取的静止图像执行图像处理从而执行裁剪以剪裁文档，并在存储单元中存储文档的经图像处理之后的已变换的图像。
[0020]
通过结合附图阅读下面本发明当前优选的实施例的详细说明，将更好地理解本发明的上述和其它目的、特征、优点以及技术和工业上的重要性。
附图说明
[0021]
图1是示出了笔记本型信息处理器100的配置的一个实例的略图；
图2是示出了本发明的基本处理过程的一个实例的流程图；
图3是示出了笔记本型信息处理器100的配置的一个实例的逻辑配置框图；
图4是当使用图像拍摄单元116作为WEB照相机时的实例的视图；
图5是使用图像拍摄单元116作为扫描仪(扫描仪模式)的实例的视图；
图6是示出了笔记本型信息处理器100的另外的配置的一个实例的物理配置图；
图7是示出了根据实施例的投影变换的一个实例的视图；
图8是示出了根据实施例的投影变换的一个实例的视图；
图9是示出了根据实施例的在投影变换和裁剪之后的图像的一个实例的视图；
图10是示出了根据实施例的笔记本型信息处理器100的图像读取处理的一个实例的流程图；
图11是示出了根据实施例的笔记本型信息处理器100的拍摄开始信号产生处理过程的一个实例的流程图。
具体实施方式
[0022]
下面参考附图解释根据本发明的笔记本型信息处理器、图像读取方法和程序、以及记录介质的实施例。本发明不局限于上述实施例。
[0023]
本发明的概要
下面将解释本发明的概要。此后，将在下面参考图1和2详细解释本发明的配置、处理过程等。
[0024]
本发明通常具有以下基本特点。
[0025]
如图1所示，笔记本型信息处理器100是高度便携的，且不需要用于捕捉文档等的安放区域，使得整合有图像拍摄单元116(WEB照相机)的笔记本型信息处理器100用作虚拟的扫描仪装置。
[0026]
图1中，图像拍摄单元116(WEB照相机)用作图像输入单元，其具有扫描仪功能。盖1(显示器壳体)用作固定图像拍摄单元116的照相机支承。显示器114(显示器)用作显示将在下面解释的实况视图的监视器屏幕，用作辅助光源，并用来再现存储的图像。主体2上的键盘112用作虚拟的扫描仪装置的文档台。因而，这样配置的笔记本型信息处理器100可具有装置重量和安放区域最小的扫描仪功能。
[0027]
就是说，根据本发明的笔记本型信息处理器100包括：例如，至少包括图像拍摄单元116和显示器114的盖1(显示器壳体)，和至少包括键盘112、存储单元、和控制单元的主体2。
[0028]
在本发明中，图像拍摄单元116可以可拆卸地置于笔记本型信息处理器100中，且其可以由笔记本型信息处理器100供电(electrified)并可通信地连接到笔记本型信息处理器100。图像拍摄单元116可以可旋转地置于笔记本型信息处理器100中以便能够改变其拍摄方向。
[0029]
笔记本型信息处理器100可进一步包括旋转角传感器，检测当旋转图像拍摄单元116以改变其拍摄方向时的旋转角。笔记本型信息处理器100可包括其中至少放置图像拍摄单元116的盖1和其中至少放置键盘112的主体2，且可进一步包括检测盖1相对于主体2的张开角的张开角传感器和调整图像拍摄单元116的旋转角的马达。
[0030]
笔记本型信息处理器100的控制单元可基于由张开角传感器检测的张开角，调整马达的旋转角从而调整图像拍摄单元116的拍摄方向。
[0031]
如图2所示，笔记本型信息处理器100的控制单元在显示器114上显示通过拍摄在图像拍摄单元116的拍摄区域内的键盘112的至少一部分而获取的实况视图(步骤SA-1)。
[0032]
“实况视图”是由图像拍摄单元116拍摄的、在显示器114上显示的运动图像和静止图像，其使得用户可实时检查以调整图像拍摄单元116的拍摄区域。
[0033]
笔记本型信息处理器100的控制单元可获取通过拍摄在图像拍摄单元116的拍摄区域内的键盘112的至少一部分而获取的实况视图，并对获取的实况视图执行投影变换从而获取从正面方向拍摄的实况视图，由此在显示器114上显示投影变换之后的实况视图。
[0034]
笔记本型信息处理器100的控制单元当接收到开始拍摄放在键盘112上的文档的静止图像的拍摄开始信号时，从在显示器114上显示的实况视图获取静止图像(步骤SA-2)。
[0035]
“文档”是图像拍摄单元116的静止图像的拍摄对象(物体)，且不仅包括比如纸张文档的平面的对象而且包括立体的对象。
[0036]
笔记本型信息处理器100的控制单元可通过比较通过图像拍摄单元116获取的其中文档不在键盘112上的第一图像和其中文档在键盘112上的第二图像来确定文档的存在，并且当存在文档时，其可产生拍摄开始信号以发送。
[0037]
当在静止图像获取处理过程(步骤SA-2)中获取静止图像时笔记本型信息处理器100的控制单元可以调整显示器114的亮度。就是说，笔记本型信息处理器100的控制单元在拍摄文档时临时改变显示器114的亮度并使用显示器114作为辅助光源。
[0038]
笔记本型信息处理器100的控制单元对所获取的静止图像上执行投影变换从而获取从正面方向拍摄的图像，执行图像处理从而执行裁剪以剪裁文档，并在存储单元中存储该文档的经图像处理之后的已变换的图像(步骤SA-3)。当在步骤SA-1在显示器114上显示投影变换之后的实况视图时，笔记本型信息处理器100的控制单元可以对所获取的静止图像执行图像处理从而执行裁剪以剪裁文档，并在存储单元中存储文档经图像处理之后的已变换的图像。
[0039]
根据本发明，在图像处理过程(步骤SA-3)中的裁剪中，可以通过比较通过图像拍摄单元116获取的其中文档不在键盘112上的第一图像和其中文档在键盘112上的第二图像来检测文档的角。
[0040]
笔记本型信息处理器100的配置
将参考图3到9解释笔记本型信息处理器100的配置。
[0041]
图3概念地示出了仅与本发明相关的部分。
[0042]
如图3所示，笔记本型信息处理器100通常包括图像拍摄单元116、显示器114、键盘112、存储单元106、控制单元102、旋转角传感器118、张开角传感器120、马达122、输入/输出控制接口单元108、和通信控制接口104。
[0043]
在图3中，控制单元102由总体控制笔记本型信息处理器100的中央处理器(CPU)等形成。通信控制接口104连接到通信装置(未示出)，所述通信装置诸如连接到通信信道的路由器等等，并且输入/输出接口单元108与图像拍摄单元116、显示器114、键盘112、角度传感器118、张开角传感器120、和马达122相连接。存储单元106存储各种数据库和表。构成笔记本型信息处理器100的各单元通过可选的通信信道可通信地连接。另外，笔记本型信息处理器100经由诸如路由器和诸如专用线路的有线或者无线通信线路的通信装置可通信地连接到网络300。
[0044]
图3中，图像拍摄单元116是具有对于通过拍摄在拍摄区域内的键盘112的至少一部分而获取的实况视图拍摄运动图像的功能的摄像机或者数码相机，且由例如电荷耦合器件(CCD)形成。图像拍摄单元116可以被结合在笔记本型信息处理器100中。图像拍摄单元116可以可拆卸地置于笔记本型信息处理器100中，由笔记本型信息处理器100供电，且可通信地连接到笔记本型信息处理器100(例如，USB连接的WEB照相机或者数码相机可以用作图像拍摄单元116)。
[0045]
图像拍摄单元116可以可旋转地置于笔记本型信息处理器100中以使得拍摄方向可变。
[0046]
将参考图4和5解释在笔记本型信息处理器100上可旋转地放置图像拍摄单元116从而能够改变其拍摄方向的实例。
[0047]
图4是使用图像拍摄单元116作为WEB照相机时的实例。如图4所示，图像拍摄单元116(WEB照相机)通常被整合在笔记本型信息处理器100的盖1(显示器框架)的上部中。图像拍摄单元116(WEB照相机)通常用于，例如，电视会议和视频聊天，且其用于投影作为用户的PC操作者。PC操作者通常面对显示器114(显示器)，使得当在盖1(显示器框架)的上部中放置拍摄单元116以使得显示器114(显示器)平面垂直于图像拍摄单元116(WEB照相机)的光轴时(就是说，显示平面和WEB照相机的焦平面彼此平行)时，实现作为WEB照相机的目的，诸如电视会议和视频聊天。此时，显示器114(显示器)平面的张开角θ通常是大约90到135度。
[0048]
图5是使用图像拍摄单元116作为扫描仪(扫描仪模式)的实例。如图5所示，配置使得图像拍摄单元116(WEB照相机单元)仅可以以具有张开角θ的状态旋转，以将光轴指向键盘112。由此，不仅可以拍摄PC操作者，而且可以拍摄文档，诸如放在键盘112上的文档。
[0049]
再次参考图3，笔记本型信息处理器100可进一步具有旋转角传感器118，其检测当旋转以改变图像拍摄单元116的拍摄方向时的旋转角。笔记本型信息处理器100可具有其中至少放置图像拍摄单元116的盖1，和其中至少放置键盘112的主体2，且可进一步具有检测盖1相对于主体2的张开角的张开角传感器120，和调整图像拍摄单元116的旋转角的马达122。
[0050]
将参考图6解释其中笔记本型信息处理器100进一步包括旋转角传感器118、张开角传感器120、和马达122的配置的实例。旋转角传感器118和张开角传感器120具有检测图像拍摄单元116的旋转角γ和笔记本型信息处理器100的张开角θ的功能，并且可以是例如检测角速度和角度的陀螺仪传感器。马达122具有使图像拍摄单元116旋转的功能。
[0051]
如图6所示，当用户旋转被可旋转地置于笔记本型信息处理器100中的图像拍摄单元116(WEB照相机)，从而拍摄键盘112的平面(文档平面)时，旋转角传感器118检测图像拍摄单元116的旋转角γ。笔记本型信息处理器100的控制单元102可自动地启动扫描软件以切换到扫描仪模式。此时，因为由图像拍摄单元116拍摄的运动图像在显示器114(显示器)上作为实况视图实时显示，用户可看着显示器114调整图像拍摄单元116的角度。当诸如编码器的张开角传感器120检测显示器114(显示器)的张开角θ时，笔记本型信息处理器100的控制单元102可基于张开角θ计算图像拍摄单元116(WEB照相机)拍摄键盘112的平面(文档平面)所需的旋转角γ，并控制来通过马达122等旋转图像拍摄单元116(WEB照相机)。假定在本实施例中张开角是θ，则笔记本型信息处理器100的控制单元102可使用公式：γ＝(π-θ)/4来计算旋转角γ。
[0052]
图3中，在存储单元106中存储的各种数据库和各种表(诸如图像数据库106a)是诸如固定磁盘装置(fixed disk device)的存储单元。该存储单元存储用于各种处理过程的各种程序、各种表、各种数据库等。
[0053]
存储单元106的每个元件之外，图像数据库106a存储各种运动图像和静止图像，且例如，除由图像拍摄单元116拍摄的实况视图的运动图像和静止图像之外，还存储由控制单元102进行各种图像处理(诸如投影变换和裁剪)之后的运动图像和静止图像。
[0054]
通信控制接口104控制笔记本型信息处理器100和网络300(或者诸如路由器的通信装置)之间的通信。就是说，通信控制接口104具有通过通信线路将数据传递到另一终端的功能。通信控制接口104可具有通过通信线路将数据传递到可拆卸地连接到笔记本型信息处理器100的图像拍摄单元116的功能。
[0055]
输入/输出控制接口108控制键盘112、显示器114、图像拍摄单元116、旋转角传感器118、张开角传感器120、和马达122。键盘112对应于置于主体2中的键盘，显示器114对应于置于盖1中的显示器(监视器)。
[0056]
控制单元102具有内部存储器，其存储诸如操作系统(OS)的控制程序、定义各种过程的程序、和所需数据。控制单元102执行用于通过程序等执行各种处理的信息处理。控制单元102在功能和概念上包括实况视图显示单元102a、静止图像获取单元102b、图像处理单元102c、拍摄开始信号发生单元102d、亮度调整单元102e、和旋转角调整单元102f。
[0057]
其中，实况视图显示单元102a在显示器114上显示通过拍摄在图像拍摄单元116的拍摄区域内的键盘112的至少一部分而获取的实况视图。实况视图显示单元102a可获取通过拍摄在图像拍摄单元116的拍摄区域内的键盘112的至少一部分而获取的实况视图，并对所获取的实况视图执行投影变换从而获取从正面方向拍摄的实况视图，由此在显示器114上显示后面将解释的投影变换之后的实况视图。
[0058]
静止图像获取单元102b当接收到开始拍摄放在键盘112上的文档的静止图像的拍摄开始信号时，从由实况视图显示单元102a在显示器114上显示的实况视图获取静止图像。
[0059]
图像处理单元102c对由静止图像获取单元102b获取的静止图像执行投影变换从而获取从正面方向拍摄的图像，执行图像处理从而执行裁剪以剪裁文档，并在图像数据库106a中存储该文档的经图像处理之后的已变换的图像。当实况视图显示单元102a在显示器114上显示投影变换之后的实况视图时，图像处理单元102c可对由静止图像获取单元102b获取的静止图像执行图像处理从而执行裁剪以剪裁文档，并在图像数据库106a中存储文档的经图像处理之后的已变换的图像。在裁剪时，图像处理单元102c可通过比较由图像拍摄单元116获取的其中文档不在键盘112上的第一图像和其中文档在键盘112上的第二图像来检测文档的角。
[0060]
将参考图7和8解释由图像处理单元102c和实况视图显示单元102a执行的投影变换。
[0061]
例如，通过使用投影逆变换将由图像拍摄单元116拍摄的图像恢复到初始状态，来执行由图像处理单元102c和实况视图显示单元102a执行的投影变换。下面将解释投影变换的实例。当执行投影变换时，获取作为由图像拍摄单元116拍摄的图像平面的成像平面70上图像的消失点(vanishing point)。例如，当成像平面形状71，其是成像平面70上的图像形状，是矩形时，如图7所示，获得两个消失点S1和S2。消失点是当投影预定形状时，在实际形状中平行形成的两个直线的延伸线彼此交叉的点。通过这样获取消失点，基于消失点获取投影之前的原始大小和作为执行投影变换时的参数的投影变换参数，并且使用下面的[公式1]执行投影变换。就是说，通过[公式1]从投影变换之前的坐标(x，y，1)获取投影变换之后的坐标(u，v，1)来执行投影变换。
[0062]
[公式1]
uv1=1a31x+a32+1a11a12a13a21a22a23a31a321xy1]]>..........(公式1)
[0063]
通过如此对成像平面形状71的坐标(其是投影变换之前的坐标)执行投影变换，可以通过获取投影变换之后的坐标，获取作为投影变换之后的形状的投影变换了的形状75，如图8所示。投影变换了的形状75类似于初始形状76，其是当由图像拍摄单元116从正面方向看原始图像时的形状，就是说，当在垂直方向上看成像平面时的形状。
[0064]
就是说，在本实施例中，因为图像拍摄单元116不从正面方向拍摄诸如纸张文档的文档，文档(诸如纸张文档)的拍摄的图像变形。对于变形的图像，图像处理单元102c和实况视图显示单元102a通过执行投影变换修正该变形，进一步执行裁剪(修整)以从背景剪裁出文档，并在存储单元106中存储文档。此时，图像处理单元102c可在显示器114(显示器)上显示图像处理之后的变换的图像。如上所述，图像处理单元102c的投影变换可以是在由静止图像获取单元102b获取图像之后与后面将解释的裁剪一起执行图像处理，或者由实况视图显示单元102a对从图像拍摄单元116(WEB照相机)传送来的图像连续地执行投影变换处理以在显示器114上显示该图像作为实况视图。在这种情况下，用户可以看着该图像就好像从正面方向拍摄的，使得可以更加自然地设置文档。可以使用除了上述技术之外的各种现有技术来用作投影变换。
[0065]
将参考图9解释由图像处理单元102c执行的裁剪的实例。
[0066]
如图9所示，在该实施例中，图像处理单元102c可通过在显示器114(显示器)上显示通过静止图像获取单元102b获取的静止图像，并由用户利用诸如鼠标的输入单元(未示出)指定文档(诸如纸张文档)的四角来执行投影变换和裁剪(整理)。图像处理单元102c根据从自静止图像获取的亮度信息等提取文档(诸如纸张文档)和键盘112的平面之间的边界线，对提取的边界线执行线性插值等，并计算文档的四角，由此执行投影变换和裁剪(修整)。图像处理单元102c可通过图像拍摄单元116在将文档设置在键盘112上之前预先拍摄键盘112，提取其中该亮度信息等与由静止图像获取单元102b获取的静止图像的亮度信息等中的差值达到一定程度的区域，对提取的边界线执行线性插值等，并计算文档的四角，由此执行投影变换和裁剪(修整)。可以将除了上述技术之外的各种现有技术用作所述裁剪。
[0067]
再次参考图3，拍摄开始信号发生单元102d产生拍摄开始信号以开始拍摄放在键盘112上的文档的静止图像。
[0068]
拍摄开始信号发生单元102d可通过允许用户通过诸如鼠标的输入单元(未示出)，点击在显示器114上显示的诸如“快门”的图标，来产生拍摄开始信号，以发送该信号到静止图像获取单元102b。拍摄开始信号发生单元102d可通过检测由用户通过诸如整合在笔记本型信息处理器100中的麦克风的输入单元(未示出)输入的特定声音，来产生拍摄开始信号，以发送该信号到静止图像获取单元102b。
[0069]
拍摄开始信号发生单元102d通过比较由图像拍摄单元116获取的其中文档不在键盘112上的第一图像和其中文档在键盘112上的第二图像，确定文档的存在，并且当存在文档时，拍摄开始信号发生单元102d可产生拍摄开始信号以发送该信号到静止图像获取单元102b。
[0070]
在通过静止图像获取单元102b获取静止图像时亮度调整单元102e调整显示器114的亮度。
[0071]
在本实施例中，尽管使用环境光，诸如置于办公室等中的内部光，作为照射其上放置文档的键盘112的光，但可以使用其亮度由亮度调整单元102e调整的显示器114(显示器)的光作为辅助光。也就是说，在静止图像获取单元102b接收到由拍摄开始信号发生单元102d产生的拍摄开始信号(图像获取触发器)的时候，亮度调整单元102e将显示器114的整个屏幕设置为一定的图像(诸如具有最大亮度的全白屏幕)，由此照射键盘112上的文档，诸如纸张文档。当显示器114(显示器)的张开角θ是，例如，等于或者大于90度时，显示器114(显示器)的光从不会因被文档(诸如纸张文档)反射而出现(就是说，闪耀)，使得可以使用其亮度由亮度调整单元102e调整的显示器114(显示器)的光作为优良的辅助光源。
[0072]
旋转角调整单元102f可基于由张开角传感器120检测的张开角θ，调整马达122的旋转角γ，从而调整图像拍摄单元116的拍摄方向。
[0073]
在本实施例中，例如，利用具有大约5百万或者更高像素的图像拍摄单元116(照相机)，可以如文档扫描仪那般获取由图像拍摄单元116拍摄的实际上足够质量水平的图像。尽管预想根据该实施例的笔记本型信息处理器100由诸如商业人士的用户在外面使用，诸如在商务旅行目的地的旅馆中和当访问客户时使用，但是当其用于他的办公室中的书桌等处时，在安放区域和操作简单方面仍然具有优点。
[0074]
笔记本型信息处理器100的处理过程
将参考图10和11详细说明根据这样配置的实施例的笔记本型信息处理器100的处理过程的图像读取处理的实例。
[0075]
图像读取处理
将参考图10详细解释图像读取处理。
[0076]
如图10所示，当可旋转地置于笔记本型信息处理器100中的图像拍摄单元116(照相机)在键盘112的平面(文档平面)的拍摄方向旋转时，旋转角传感器118检测图像拍摄单元116的旋转。控制单元102自动地启动扫描应用程序并在显示器114(监视器)上显示该应用程序以切换到扫描仪模式，从而拍摄键盘112的平面(文档平面)(步骤SB-1)。
[0077]
通过实况视图显示单元102a的处理，由图像拍摄单元116拍摄的运动图像在显示器(显示器)114上作为实况视图实时显示。就是说，实况视图显示单元102a在显示器114上显示通过拍摄在图像拍摄单元116的拍摄区域内的键盘112的至少一部分而获取的实况视图。用户在观看显示器114上显示的实况视图的同时调整图像拍摄单元116的角度(步骤SB-2)。实况视图显示单元102a可获取通过拍摄在图像拍摄单元116的拍摄区域内的键盘112的至少一部分而获取的实况视图，并对获取的实况视图执行投影变换从而获取从正面方向拍摄的实况视图，由此在显示器114上显示下面将解释的投影变换之后的实况视图。
[0078]
旋转角调整单元102f可基于由张开角传感器120检测的张开角θ，调整马达122的旋转角γ，从而调整图像拍摄单元116的拍摄方向。
[0079]
拍摄开始信号发生单元102d获取其中文档不在键盘112上的第一图像和其中文档在键盘112上的第二图像作为比较的图像，确定文档的存在，且当存在文档时产生拍摄开始信号以发送该信号到静止图像获取单元102b(步骤SB-3)。以下详细说明拍摄开始信号发生单元102d的拍摄开始信号的产生。
[0080]
当从拍摄开始信号发生单元102d接收到开始拍摄放在键盘112上的文档的静止图像的拍摄开始信号时，静止图像获取单元102b通过从在显示器114上显示的实况视图获取静止图像来获取文档的图像(步骤SB-4)。
[0081]
在通过静止图像获取单元102b获取静止图像时，亮度调整单元102e可调整显示器114的亮度。
[0082]
图像处理单元102c对通过静止图像获取单元102b的处理而获取的静止图像执行投影变换，从而获取从正面方向拍摄的图像，并执行图像处理从而执行裁剪以剪裁文档(步骤SB-5)。图像处理单元102c在显示器114上显示文档的经图像处理之后的已变换的图像，并将其存储在图像数据库106a中(步骤SB-6)。当在步骤SB-2在显示器114上显示投影变换之后的实况视图时，图像处理单元102c可以对通过静止图像获取单元102b的处理而获取的静止图像执行图像处理从而执行裁剪以剪裁文档，并在图像数据库106a中存储文档的经图像处理之后的已变换的图像。
[0083]
图像处理单元102c可通过比较在步骤SB-4通过控制单元102的处理使用由图像拍摄单元116获取的其中文档在键盘112上的第二图像和其中文档不在键盘112上的第一图像来检测文档的角部以执行裁剪。
[0084]
控制单元102通过确定是否在键盘112上设置了下一个文档来确定是否结束图像读取处理(步骤SB-7)。当控制单元102确定不结束图像读取处理时(步骤SB-7中的否)，处理过程返回到步骤SB-4以继续下一个文档的图像读取处理。另一方面，当控制单元102确定结束图像读取处理时(步骤SB-7中的是)，图像读取处理结束。
[0085]
拍摄开始信号产生处理
将参考图11解释拍摄开始信号产生处理过程的细节。
[0086]
拍摄开始信号发生单元102d通过使用图像拍摄单元116拍摄，预先获取在键盘112上设置文档之前的键盘112的图像(第一图像)(步骤SC-1)。
[0087]
拍摄开始信号发生单元102d将计数器B初始化为“0”(步骤SC-2)。
[0088]
拍摄开始信号发生单元102d通过使用图像拍摄单元116拍摄，获取包括设置在键盘112上的文档的图像(第二图像)(步骤SC-3)。
[0089]
拍摄开始信号发生单元102d连续地监控通过图像拍摄单元116(照相机)输入的拍摄的运动图像的亮度信息等，并通过控制单元102的处理确定预先获取的键盘112的图像(第一图像)和包括设置在键盘112上的文档的图像(第二图像)之间亮度值等的差是否达到确定的级别(∑(第一图像的亮度值-第二图像的亮度值)＞阈值A？)，由此确定文档(诸如上述的文档)是否开始被设置在键盘112上(步骤SC-4)。当确定差值等于或者小于阈值A而且文档(诸如上述的文档)没有被设置在键盘112上时(步骤SC-4的否)，拍摄开始信号发生单元102d返回到步骤SC-2的处理。另一方面，当确定差值大于阈值A而且文档(诸如上述的文档)开始被设置在键盘112上时(步骤SC-4的是)，拍摄开始信号发生单元102d进行到下一步骤SC-5的处理。
[0090]
拍摄开始信号发生单元105d将计数器B计数为“1”(步骤SC-5)。
[0091]
拍摄开始信号发生单元102d确定差值的变化是否稳定在确定的级别(∑(第二图像的亮度值-先前的第二图像的亮度值)＜阈值C？)，由此确定文档的设置是否结束(步骤SC-6)。当确定差值等于或者大于阈值C而且差值的变化未稳定在确定的级别时(步骤SC-6的否)，拍摄开始信号发生单元102d返回到步骤SC-2的处理。另一方面，当确定差值等于或者小于阈值C而且差值的变化稳定在确定的级别时(步骤SC-6的是)，拍摄开始信号发生单元102d进行到下一步骤SC-7的处理。
[0092]
拍摄开始信号发生单元102d确定是否经过了预定时间(计数器B＞阈值D？)(步骤SC-7)。当确定计数器B等于或者小于阈值而且没有经过预定时间时(步骤SC-7的否)，拍摄开始信号发生单元102d返回到步骤SC-3的处理。另一方面，当确定计数器B大于阈值而且经过预定时间时(步骤SC-7的是)，拍摄开始信号发生单元102d进行到下一步骤SC-8的处理。
[0093]
拍摄开始信号发生单元102d产生拍摄开始信号(快门触发器)以发送该信号到静止图像获取单元102b(步骤SC-8)。
[0094]
静止图像获取单元102b当从拍摄开始信号发生单元102d接收到开始拍摄放在键盘112上的文档的静止图像的拍摄开始信号时(快门触发器ON)，从在显示器114上显示的实况视图获取静止图像。在通过静止图像获取单元102b的处理获取静止图像之后，控制单元102可以分别通过诸如扬声器的输出单元(未示出)或者显示器114(显示器)通知用户获取声音和静止图像。当要扫描的文档的数目大时，可通过重复该过程进行半自动化操作。
[0095]
其他实施例
上面示出了本发明的一些实施例。然而，本发明不仅可以以该实施例而且可以以多种不同实施例执行，而不脱离本发明的如所附权利要求和其等效所定义的精神和保护范围。
[0096]
在该实施例中，作为实例，解释了以独立模式执行处理的笔记本型信息处理器100。然而，可以根据来自与所述笔记本型信息处理器100的壳体不同的壳体中架构的客户端的请求执行处理，并将处理结果返回到客户端。
[0097]
本实施例中解释的所有自动化过程能够完全地或者部分地手动执行。类似地，本实施例中解释的所有手动处理能够完全地或者部分地由已知的方法自动执行。
[0098]
本说明书和附图中提到的处理过程、控制过程、特定名称、包括每个处理的注册数据和搜索条件的参数等等的信息、显示实例和数据库结构可以根据需要改变，除非另有说明。
[0099]
笔记本型信息处理器100的组成元件仅是概念上的，并且可以不必物理地类似附图示出的结构。例如，该装置并不必须具有示出的结构。
[0100]
例如，由笔记本型信息处理器100执行的处理功能，特别地关于在控制单元102执行的每个处理功能，能够完全地或者部分地由中央处理器(CPU)和由CPU执行的计算机程序或者由使用布线逻辑的硬件实现。记录在记录介质上的计算机程序能够由笔记本型信息处理器100按照情况需要机械地读取。换句话说，记录在记录介质上的计算机程序能够使得诸如只读存储器(ROM)或者硬盘(HD)的存储单元106与操作系统(OS)配合工作以发布命令到CPU并使得CPU执行各种处理。计算机程序被首先加载到随机存取存储器(RAM)，并与CPU合作形成控制单元102。
[0101]
作为选择，计算机程序能够被存储在经由网络300连接到笔记本型信息处理器100的任意应用程序服务器中，且能够被根据情况需要完全地或者部分地加载。
[0102]
其上能够存储计算机程序的计算机可读记录介质可以是诸如软盘、磁光(MO)盘、ROM、可擦除可编程序ROM(EPROM)、电可擦除可编程序ROM(EEPROM)、高密度磁盘只读存储器(CD-ROM)、数字多用途光盘(DVD)的便携式类型，或者用于短期存储计算机程序的通信介质，诸如通信信道或者经诸如局域网(LAN)、广域网(WAN)、和因特网的网络300发送计算机程序的载波。
[0103]
“计算机程序”是指以任意计算机语言写就的数据处理方法，且可以具有任意格式的软件代码和二进制代码。计算机程序可以是以多个模块或者库的形式的分散形式，或者可以与诸如OS的不同程序合作执行各种功能。在根据该实施例的图像读取处理装置中，任意已知的配置能够用于读取记录介质。类似地，能够使用用于读取或者安装计算机程序的任意已知的处理过程。
[0104]
存储单元106(诸如图像数据库106a)是诸如RAM、ROM、和HD或者软盘、光盘的固定的盘装置，且在其中存储各种处理和开放站点所需的各种程序、表、数据库。
[0105]
笔记本型信息处理器100还可以连接到任意现有的个人计算机、工作站等，且能够通过在个人计算机或者工作站中执行实现根据本发明的方法的软件(包括计算机程序，数据等)而工作。
[0106]
此外，装置的分布和集成的特定方式不局限于如附图所述的实例。装置的部分或者全部可以根据各种增添而功能地或物理地以任意单位分配或者集成。
[0107]
根据本发明，因为诸如纸张文档的文档被放在键盘上，不需要等于或者大于该笔记本型信息处理器的区域来作为被拍摄的文档的安放区域，并且可以在捕捉图像之前实时检查从而调整拍摄区域。此外，可以对捕捉的图像实时执行图像处理从而获取从正面方向拍摄和从背景剪裁的文档的图像。由此，存在这样的效果，即实现当捕捉图像时其效率和准确性改进的扫描仪功能并具有最小的装置重量和安放区域。
[0108]
根据本发明，可以确定文档的存在，由此获得拍摄开始信号作为获取静止图像的触发定时。特别地，当文档的数目大时，可以通过重复该过程半自动地获取静止图像。由此，存在这样的效果，即能够实现当捕捉图像时其效率和准确性改进的扫描仪功能。
[0109]
根据本发明，可以在拍摄文档时临时改变显示器的亮度并使用显示器的亮度作为辅助光源。由此，存在这样的效果，即能够实现当捕捉图像时其效率和准确性改进的扫描仪功能。
[0110]
根据本发明，可以正确地和快速地检测文档的边界的角，这对于裁剪处理很重要。由此，存在这样的效果，即能够实现当捕捉图像时其效率和准确性改进的扫描仪功能。
[0111]
根据本发明，例如，其可以形成为现有的笔记本型信息处理器等，其中现有的数码相机等USB连接于其，且可被容易地添加或放置在监视器等上。由此，存在这样的效果，即能够实现当捕捉图像时其效率和准确性改进的扫描仪功能并具有最小的装置重量和安放区域。
[0112]
根据本发明，可以按照需要恰当地改变图像拍摄单元的拍摄方向。由此，存在这样的技术效果，即能够实现当捕捉图像时其效率和准确性改进的扫描仪功能。
[0113]
根据本发明，可以自动地检测到图像拍摄单元的拍摄方向从用作拍摄用户等的WEB照相机的初始位置改变。当检测到改变为拍摄方向时，其可以执行自动化过程从而自动地运行扫描软件以切换到扫描仪模式。由此，存在这样的技术效果，即能够实现当捕捉图像时其效率和准确性改进的扫描仪功能。
[0114]
根据本发明，可以自动地调整图像拍摄单元的拍摄方向从而能够根据用户打开笔记本型信息处理器的张开程度拍摄放在键盘上的文档。由此，存在这样的技术效果，即能够实现当捕捉图像时其效率和准确性改进的扫描仪功能。
[0115]
尽管为了完整和清楚的公开，已经就特定实施例描述了本发明，但所附权利要求并不限于此，而是被认为体现了本领域技术人员可以想到的落在这里所提出基本教导的范围之中的所有修改和替换结构。