车辆操作输入装置和用于车辆操作输入装置的控制方法.pdf

《车辆操作输入装置和用于车辆操作输入装置的控制方法.pdf》由会员分享，可在线阅读，更多相关《车辆操作输入装置和用于车辆操作输入装置的控制方法.pdf（19页珍藏版）》请在专利查询网上搜索。

1、(10)申请公布号 CN 103019524 A (43)申请公布日 2013.04.03 C N 1 0 3 0 1 9 5 2 4 A *CN103019524A* (21)申请号 201210362055.8 (22)申请日 2012.09.25 2011-208806 2011.09.26 JP G06F 3/0482(2013.01) G06F 3/0488(2013.01) B60R 16/02(2006.01) (71)申请人丰田自动车株式会社 地址日本爱知县丰田市 (72)发明人冲田宗史 (74)专利代理机构北京集佳知识产权代理有限 公司 11227 代理人王萍 陈炜 (54)。

2、 发明名称 车辆操作输入装置和用于车辆操作输入装置 的控制方法 (57) 摘要 一种在显示器（14）的屏幕上显示操作菜单 （50）的车辆操作输入装置。该车辆操作输入装置 包括控制单元（12），该控制单元（12）被配置成确 定驾驶员的手是否已从方向盘（90）移开，并且在 确定在屏幕上没有显示操作菜单（50）的情况下 驾驶员的手已从方向盘（90）移开之后，控制显示 器（14），使得操作菜单（50）显示在屏幕上。 (30)优先权数据 (51)Int.Cl. 权利要求书2页 说明书10页 附图6页 (19)中华人民共和国国家知识产权局 (12)发明专利申请 权利要求书 2 页 说明书 10 页 附图 。

3、6 页 1/2页 2 1.一种在显示器（14）的屏幕上显示操作菜单（50）的车辆操作输入装置，其特征在于 包括： 控制单元（12），其被配置成确定驾驶员的手是否已从方向盘（90）移开，并且在确定在 所述屏幕上没有显示所述操作菜单（50）的情况下驾驶员的手已从所述方向盘（90）移开之 后，控制所述显示器（14），使得所述操作菜单（50）显示在所述屏幕上。 2.根据权利要求1所述的车辆操作输入装置，其中所述控制单元（12）被配置成确定驾 驶员的左手和右手中的、与所述显示器（14）更接近的手是否已从所述方向盘（90）移开，并 且在确定在所述屏幕上没有显示所述操作菜单（50）的情况下与所述显示器（14。

4、）更接近的 手已从所述方向盘（90）移开之后，控制所述显示器（14），使得所述操作菜单（50）显示在所 述屏幕上。 3.根据权利要求1或2所述的车辆操作输入装置，其中所述显示器（14）是触摸面板显 示器。 4.根据权利要求1至3中任一项所述的车辆操作输入装置，进一步包括检测单元 （72），所述检测单元（72）检测驾驶员的手和所述方向盘（90）之间的接触状态， 其中所述控制单元（12）被配置成基于所述检测单元（72）检测的驾驶员的手和所述方 向盘（90）之间的接触状态，确定驾驶员的手是否已从所述方向盘（90）移开。 5.根据权利要求1至4中任一项所述的车辆操作输入装置，其中所述控制单元（12）被。

5、 配置成确定驾驶员的面部姿态或视线方向是否朝向所述屏幕，并且在确定在所述屏幕上没 有显示所述操作菜单（50）的情况下驾驶员的手已从所述方向盘（90）移开并且驾驶员的面 部姿态或视线方向朝向所述屏幕之后，控制所述显示器（14），使得所述操作菜单（50）显示 在所述屏幕上。 6.根据权利要求5所述的车辆操作输入装置，进一步包括成像单元（74），所述成像单 元（74）拍摄驾驶员面部的图像， 其中所述控制单元（12）被配置成基于所述成像单元（74）拍摄的图像，确定所述驾驶 员的面部姿态或视线方向是否朝向所述屏幕。 7.根据权利要求1至6中任一项所述的车辆操作输入装置，其中所述控制单元（12）被 配置成。

6、确定本车是否正在直道上行进或者本车的前进方向上的前方的道路是否是直道，并 且在确定在所述屏幕上没有显示所述操作菜单（50）的情况下驾驶员的手已从所述方向盘 （90）移开并且本车正在直道上行进之后，或者在确定在所述屏幕上没有显示所述操作菜单 （50）的情况下驾驶员的手已从所述方向盘（90）移开并且本车的前进方向上的前方的道路 是直道之后，控制所述显示器（14），使得所述操作菜单（50）显示在所述屏幕上。 8.根据权利要求7所述的车辆操作输入装置，其中即使确定了在所述屏幕上没有显示 所述操作菜单（50）的情况下驾驶员的手已从所述方向盘（90）移开，所述控制单元（12）仍 被配置成控制所述显示器（1。

7、4），使得在确定本车正在弯道或转弯上行进之后，或者在确定 本车的前进方向上的前方的道路是弯道或转弯之后，禁止所述操作菜单（50）的显示。 9.根据权利要求7或8所述的车辆操作输入装置，其中所述控制单元（12）被配置成获 得地图信息和本车位置信息，并且基于所获得的地图信息和本车位置信息，确定本车是否 正在直道上行进或者本车的前进方向上的前方的道路是否是直道。 10.根据权利要求1至9中任一项所述的车辆操作输入装置，其中所述控制单元（12） 权 利 要 求 书CN 103019524 A 2/2页 3 被配置成确定驾驶员的驾驶负荷是否处于预定水平或者在所述预定水平以下，并且在确定 在所述屏幕上没有。

8、显示所述操作菜单（50）的情况下驾驶员的手已从所述方向盘（90）移开 并且驾驶员的驾驶负荷处于所述预定水平或者在所述预定水平以下之后，控制所述显示器 （14），使得所述操作菜单（50）显示在所述屏幕上。 11.根据权利要求10所述的车辆操作输入装置，其中即使确定了在所述屏幕上没有显 示所述操作菜单（50）的情况下驾驶员的手已从所述方向盘（90）移开，所述控制单元（12） 仍被配置成控制所述显示器（14），使得在确定驾驶员的驾驶负荷大于所述预定水平之后， 禁止所述操作菜单（50）的显示。 12.根据权利要求10或11所述的车辆操作输入装置，其中所述控制单元（12）被配置 成基于车辆速度信息和转向。

9、角度信息来确定驾驶员的驾驶负荷。 13.一种用于车辆操作输入装置的控制方法，其特征在于包括： 确定驾驶员的手是否已从方向盘（90）移开；以及 在确定在显示器（14）的屏幕上没有显示操作菜单（50）的情况下驾驶员的手已从所述 方向盘（90）移开之后，控制所述显示器（14），使得所述操作菜单（50）显示在所述屏幕上。 权 利 要 求 书CN 103019524 A 1/10页 4 车辆操作输入装置和用于车辆操作输入装置的控制方法 技术领域 0001 本发明涉及一种在显示器的屏幕上显示操作菜单的车辆操作输入装置及其控制 方法。 背景技术 0002 传统的图像显示装置响应于手指朝向设置在显示器屏幕上的。

10、触摸面板的接近 来显示操作菜单以便接收用户操作（参见例如日本专利申请公布第2002-358162号（JP 2002-358162A）。 0003 然而，在JP 2002-358162A中描述的图像显示装置中，在手指接近触摸面板以前 不显示操作菜单，并且因此不可能平滑地对操作菜单上的操作按钮进行操作。此外，在将该 图像显示装置应用于车辆时，驾驶员执行如下操作过程：首先通过使手指接近触摸面板来 显示操作菜单并且随后在查看操作菜单的同时操作期望的操作按钮。在该操作过程中，基 本上需要两个操作（使手指接近的操作和期望的操作按钮的操作）来操作单个操作按钮，并 且因此可操作性劣化。 发 明内容 0004 。

11、本发明提供了一种能够以有利的可操作性在显示器的屏幕上显示操作菜单的车 辆操作输入装置。 0005 本发明的第一方面涉及一种在显示器的屏幕上显示操作菜单的车辆操作输入装 置。该车辆操作输入装置包括控制单元，其被配置成确定驾驶员的手是否已从方向盘移开， 并且在确定在屏幕上没有显示操作菜单的情况下驾驶员的手已从方向盘移开之后，控制显 示器，使得操作菜单显示在屏幕上。 0006 本发明的第二方面涉及一种用于车辆操作输入装置的控制方法。该控制方法包 括：确定驾驶员的手是否已从方向盘移开；以及在确定在显示器的屏幕上没有显示操作菜 单的情况下驾驶员的手已从方向盘移开之后，控制显示器，使得操作菜单显示在屏幕上。

12、。 0007 根据上述配置，获得了一种能够以有利的可操作性在显示器的屏幕上显示操作菜 单的车辆操作输入装置。 附图说明 0008 下文将参照附图描述本发明的示例性实施例的特征、优点以及技术和工业重要 性，在附图中相同的附图标记表示相同的元件，并且其中： 0009 图1是示出了根据第一实施例的车辆操作输入装置10的主要配置的系统示图； 0010 图2是示出了安装有转向触摸传感器72的示例的方向盘90的示意图； 0011 图3A和3B是示出了触摸面板显示器14的屏幕上的显示状态的示例的视图； 0012 图4是示出了根据第一实施例通过控制电子控制单元（ECU）12来执行的、用于在 全屏状态和操作菜单。

13、显示屏幕状态之间切换的切换控制方法的示例的流程图； 说 明 书CN 103019524 A 2/10页 5 0013 图5是示出了根据第二实施例的车辆操作输入装置101的主要配置的系统示图； 0014 图6是示出了根据第二实施例通过控制ECU 12来执行的、用于在全屏状态和操作 菜单显示屏幕状态之间切换的切换控制方法的示例的流程图； 0015 图7是图示了识别观看方向的图像以及其中眉毛和眼睛部位作为面部部位而被 提取的提取图像的方法的说明图； 0016 图8是示出了根据第三实施例的车辆操作输入装置102的主要配置的系统示图； 0017 图9是示出了根据第三实施例通过控制ECU 12来执行的、用。

14、于在全屏状态和操作 菜单显示屏幕状态之间切换的切换控制方法的示例的流程图； 0018 图10是示出了根据第四实施例的车辆操作输入装置103的主要配置的系统示图； 以及 0019 图11是示出了根据第四实施例通过控制ECU 12来执行的、用于在全屏状态和操 作菜单显示屏幕状态之间切换的切换控制方法的示例的流程图。 具体实施方式 0020 下文将参照附图描述本发明的实施例。 0021 图1是示出了根据本发明的第一实施例的车辆操作输入装置10的主要配置的系 统示图。图2是示出了安装有转向触摸传感器72的方向盘90的示意图。 0022 车辆操作输入装置10包括作为主要部件的ECU 12。控制ECU 1。

15、2被配置成微计算 机，其包括经由总线彼此连接的中央处理单元（CPU）、只读存储器（ROM）、随机存取存储器 （RAM）等，这些部件在图中未被示出。由CPU执行的程序以及数据存储在ROM中。 0023 触摸面板显示器14连接到控制ECU 12。触摸面板显示器14被设置在车辆乘员舱 的、其中驾驶员可以容易地观看它的适当位置。例如，触摸面板显示器14可以设置在仪表 板上。触摸面板显示器14用于检测诸如驾驶员的用户（例如通过用户的手）执行的触摸操 作，并且显示各种信息。注意，触摸操作检测方法可以按照需要是压敏方法或者静电方法。 0024 设置在方向盘90（参见图2）上的触摸传感器（以下称为转向触摸传感。

16、器）72连接 到控制ECU 12。如图2中所示，例如，转向触摸传感器72可以设置在由驾驶员的左手和右 手分别握住的方向盘90的部分中。在图2中所示的示例中，转向触摸传感器72包括用于 检测驾驶员的左手和方向盘90之间的接触的转向触摸传感器72L以及用于检测驾驶员的 右手和方向盘90之间的接触的转向触摸传感器72R。 0025 控制ECU 12可以经由适当的总线有线地、或者无线地、或者通过此两者的组合， 连接到触摸面板显示器14和转向触摸传感器72。此外，控制ECU 12的所有或部分功能可 以并入在另一元件中。例如，控制ECU 12的所有或部分功能可以由设置在触摸面板显示器 14中的控制设备实现。

17、。此外，控制ECU 12可以由单个ECU实现或者通过多个ECU（控制设 备）之间的协作来实现。 0026 图3A和3B是示出了触摸面板显示器14的屏幕上的显示状态的示例的视图。图 3A示出了其中操作菜单显示在触摸面板显示器14的屏幕上的状态，并且图3B示出了其中 操作菜单未显示在触摸面板显示器14的屏幕上的状态。 0027 控制ECU 12控制触摸面板显示器14的屏幕上的显示状态。更具体地，控制ECU 12在其中显示操作菜单50的状态（参见图3A）和其中不显示操作菜单50的状态（参见图 说 明 书CN 103019524 A 3/10页 6 3B）之间切换触摸面板显示器14的屏幕上的操作菜单5。

18、0的显示状态。 0028 任何期望的信息可以显示在触摸面板显示器14的屏幕上。例如，导航设备的地 图、TV、车辆外围监视摄像装置拍摄的视频等可以显示在触摸面板显示器14的屏幕上。在 图3中所示的示例中，来自后摄像装置的图像显示在触摸面板显示器14的屏幕上。 0029 以叠加模式在触摸面板显示器14的屏幕上显示操作菜单50。换言之，通过叠加 到后摄像装置图像上来显示操作菜单50。操作菜单50包括至少一个操作按钮，并且如图 3所示，典型地包括两个或更多个操作按钮（触摸开关）52、54、56、58。操作菜单50可以单 独地包括操作按钮52、54、56、58，或者可以包括用于显示其他信息的部分（例如，。

19、用于显示 TV、音频、外部空气温度、诸如燃油效率的行进信息、娱乐信息等的场所）。 0030 可以按照需要设定操作按钮52、54、56、58的类型（功能）。例如，操作按钮可以包 括用于显示（调出）如下菜单或地图（例如包括当前位置的地图）的操作按钮：在触摸面板显 示器14的屏幕上对该菜单或地图执行与导航设备相关的各种设定。操作按钮还可以包括 用于显示如下菜单的操作按钮：在触摸面板显示器14的屏幕上对该菜单执行与空调设备 相关的各种设定。此外，操作按钮可以包括用于显示如下菜单的操作按钮：在触摸面板显示 器14的屏幕上对该菜单执行与音频或TV（音量调整等）相关的各种设定。此外，操作按钮 可以是用于激活。

20、期望的应用的操作按钮（图标或引导程序）。 0031 在图中所示示例中，操作按钮52是用于将导航设备的地图调出到触摸面板显示 器14的屏幕上的按钮。操作按钮54是用于设定空调设备的模式的按钮。操作按钮56和 58是用于调整输出音量的按钮。 0032 操作菜单50可以设置在屏幕上的任何期望的位置。操作菜单50典型地设置在触 摸面板显示器14的屏幕的末端（在图中所示示例中，设置在左端）。例如，操作菜单50可以 设置在触摸面板显示器14的屏幕的左端、右端或下边缘上的单个位置，或者可以在多个位 置之间划分。 0033 因此，在该实施例中，通过在其中操作菜单50未显示在触摸面板显示器14的屏幕 上的状态（。

21、全屏状态）和其中操作菜单50显示在触摸面板显示器14的屏幕的一部分中的状 态（操作菜单显示屏幕状态）之间切换，可以在使通过触摸面板显示器14的屏幕提供给用户 的信息量最大化的同时，对触摸面板显示器14执行操作。 0034 接下来，将描述控制全屏状态和操作菜单显示屏幕状态之间的切换的方法。 0035 图4是示出了根据第一实施例通过控制ECU12来执行的、用于在全屏状态和操作 菜单显示屏幕状态之间切换的切换控制方法的示例的流程图。图4中所示的处理例程可以 例如在车辆的点火开关或ACC接通时按预定的时段间隔重复地执行。 0036 在步骤400中，确定来自转向触摸传感器72的信号是否指示不存在手和方向。

22、盘90 之间的接触。换言之，基于来自转向触摸传感器72的信号确定驾驶员的手是否已从方向盘 90移开。此时，当左手和右手中的较接近触摸面板显示器14的手从方向盘90移开时，可以 确定驾驶员的手已从方向盘90移开。例如，在其中触摸面板显示器14被设置在右手驾驶 车辆中的仪表板的中心的配置中，当基于来自转向触摸传感器72L的信号检测到驾驶员的 左手从方向盘90移开时，可以确定驾驶员的手已从方向盘90移开。在其中触摸面板显示 器14被设置在左手驾驶车辆中的仪表板的中心的配置中，当基于来自转向触摸传感器72R 的信号检测到驾驶员的右手从方向盘90移开时，可以确定驾驶员的手已从方向盘90移开。 说 明 书。

23、CN 103019524 A 4/10页 7 在这两种情况下，出于抑制咔擦声、噪声等的影响的观点，当来自转向触摸传感器72的信 号在预定时间内连续地指示断开状态（没有手接触）时，可以确定驾驶员的手已从方向盘90 移开。 0037 当在步骤400中确定驾驶员的手已从方向盘90移开时，该例程前进到步骤404， 并且在所有其他情况下（即当确定驾驶员的手未从方向盘90移开时），该例程前进到步骤 406。 0038 在步骤404中，针对其中显示操作菜单50的操作菜单显示屏幕状态（参见图3），对 触摸面板显示器14进行控制。 0039 在步骤406中，针对其中未显示操作菜单50的全屏状态，对触摸面板显示器。

24、14进 行控制。 0040 因此，根据图4中所示的处理，当在触摸面板显示器14的屏幕上的显示状态与全 屏状态对应的情况下驾驶员的手从方向盘90移开时，触摸面板显示器14的屏幕上的显示 状态切换到其中显示操作菜单50的操作菜单显示屏幕状态。同时，当驾驶员的手未从方向 盘90移开时，维持其中未显示操作菜单50的全屏状态。因此，当驾驶员希望对触摸面板显 示器14执行操作时，可以通过将他/她的手（在触摸面板显示器14侧的手）从方向盘90移 开来显示操作菜单50。结果，例如，较之其中在手接近触摸面板显示器14之前不显示操作 菜单的配置，可以在较早的定时显示操作菜单50。此外，通过使从方向盘90移开的手接。

25、近 操作菜单50，可以通过一系列操作对期望的操作按钮52、54、56或58进行操作，并且因此实 现了可操作性的改进。换言之，由于不需要用于显示操作菜单50的特殊操作（预操作），因 此可以平滑地对操作菜单50上的期望的操作按钮52、54、56或58进行操作。特别地，在其 中将手从方向盘90移开的定时显示操作菜单50，并且因此驾驶员可以使他/她的手从方向 盘90直接朝向期望的操作按钮52、54、56或58移动。另一方面，例如，在其中在手接近触 摸面板显示器14之前不显示操作菜单的配置中，接近触摸面板显示器14的手必须再次朝 向期望的操作按钮移动。 0041 此外，在其中驾驶员仅希望观看触摸面板显示。

26、器14而不操作触摸面板显示器14 的情况下，驾驶员不太可能将她/他的手从方向盘90移开。在该情况下，根据图4中所示的 处理，触摸面板显示器14维持在全屏状态，并且因此可以向驾驶员提供最大的信息量。换 言之，只要驾驶员的手没有从方向盘90移开，就能确定驾驶员不想要经由操作菜单50对操 作按钮52至58进行操作，并且因此可以在全屏状态下向驾驶员提供最大的信息量。 0042 在图4中所示的处理中，为了抑制操作菜单50的出现和消失之间的咔擦声（即操 作菜单显示屏幕状态和全屏状态之间的切换期间的咔擦声），作为将操作菜单显示屏幕状 态切换到全屏状态的依据的状态可以包括如下状态：例如，操作菜单50的操作按钮。

27、52至 58在预定时间内未被连续操作。 0043 图5是示出了根据本发明的第二实施例的车辆操作输入装置10的主要配置的系 统示图。 0044 第二实施例与上述第一实施例的主要不同之处在于，面部姿态监视摄像装置74 连接到控制ECU 12。 0045 面部姿态监视摄像装置74包括例如彩色或红外敏感电荷耦合器件（CCD）传感器 阵列。面部姿态监视摄像装置74设置在车辆的适当位置以能够拍摄例如驾驶员的正面（例 说 明 书CN 103019524 A 5/10页 8 如从前面拍摄面部部分）。面部姿态监视摄像装置74设置在例如适当的位置，诸如车辆的 后视镜、仪表板的仪表盘或转向柱。面部姿态监视摄像装置7。

28、4可以被配置成实时获得驾驶 员的图像并且按预定的帧时段间隔将获得的图像以流的格式提供给控制ECU 12。此外，面 部姿态监视摄像装置74可以兼用作用于诸如检测瞌睡的另一应用的摄像装置。 0046 控制ECU 12可以经由适当的总线通过导线、或者无线地、或者通过此两者的组 合，连接到面部姿态监视摄像装置74。此外，控制ECU 12的所有或部分功能可以并入到包 括面部姿态监视摄像装置74的另一元件中。 0047 图6是示出了根据第二实施例通过控制ECU 12来执行的、用于在全屏状态和操作 菜单显示屏幕状态之间切换的切换控制方法的示例的流程图。 0048 步骤600、604和606的处理分别与图4中。

29、所示的步骤400、404和406的处理基本 上相同，并且因此省略了该处理的描述。当在步骤600中进行肯定的确定时，该例程前进到 步骤602。 0049 在步骤602中，基于面部姿态监视摄像装置74拍摄的图像通过图像识别获得驾驶 员的面部姿态，并且确定驾驶员的面部姿态是否在触摸面板显示器14的方向上取向。换 言之，通过对面部姿态监视摄像装置74获得的图像执行图像处理来识别驾驶员的面部姿 态，并且确定驾驶员的面部姿态是否在触摸面板显示器14的方向上取向。例如，首先从面 部姿态监视摄像装置74获得的图像提取面部的有代表性的点（特征点）。基于例如主动外 观模型（AAM）的任何适当方法的技术可以用作特征。

30、提取方法。接下来，应用适当的边缘检 测算法（例如Sobel边缘检测算法）以提取指示面部的边缘和面部特征。接下来，如图7中 所示，使用如上文所述提取的边缘和特征点，分离面部部分并且提取面部部分的形状。图7 仅示出了面部的有代表性的部分的图像，在该图像上已提取了眉毛和眼睛部分作为面部部 分。接下来，通过确定面部的提取部分的位置和取向与预先存储的各个面部姿态上的相同 部分的位置和取向匹配的程度来检测当前的面部姿态。可以使用例如当驾驶员处于常规姿 态时的面部的向前的方向作为参考，由水平面中的旋转角度来表示面部姿态。此外，用于确 定驾驶员的面部姿态是否在触摸面板显示器14的方向上取向的条件可以针对驾驶员。

31、进行 调节。例如，可以学习驾驶员实际操作触摸面板显示器14时的面部姿态的范围，使得当检 测到的驾驶员的面部姿态在该范围内时，确定驾驶员的面部姿态在触摸面板显示器14的 方向上取向。可以采用各种方法通过面部识别处理来检测面部姿态，并且本发明不限于上 述方法。例如，可以提取眼球的轮廓线作为面部部分，由此可以基于眼球在眼睛的轮廓内的 位置来检测驾驶员的视线取向。驾驶员的视线取向和驾驶员的面部姿态两者均为用于估计 驾驶员的意图的有效参数，并且因此可以单独地使用或者组合地使用。下文将描述使用驾 驶员的面部姿态切换触摸面板显示器14的屏幕上的显示状态的方法，但是除了面部姿态 之外也可以使用驾驶员的视线取向。

32、，或者使用驾驶员的视线取向替代面部姿态。 0050 当在步骤602中确定经图像识别的驾驶员的面部姿态在触摸面板显示器14的方 向上取向时，例程前进到步骤604，并且当确定面部姿态没有在触摸面板显示器14的方向 上取向时（例如，当面部姿态向前取向时），例程前进到步骤606。 0051 因此，根据图6中所示的处理，当在触摸面板显示器14的屏幕上的显示状态与全 屏状态对应的情况下驾驶员的手从方向盘90移开并且驾驶员的面部姿态在触摸面板显示 器14的方向上取向时，触摸面板显示器14的屏幕上的显示状态被切换到其中显示操作菜 说 明 书CN 103019524 A 6/10页 9 单50的操作菜单显示屏幕。

33、状态。另一方面，当不满足这两个条件中的任一个条件时，维持 其中不显示操作菜单50的全屏状态。因此，当驾驶员希望对触摸面板显示器14执行操作 时，可以通过在查看触摸面板显示器14的同时将触摸面板显示器14侧的手从方向盘90移 开，来显示操作菜单50。结果，可以在较早的定时显示操作菜单50。此外，通过使从方向盘 90移开的手接近操作菜单50，可以通过一系列操作对期望的操作按钮52、54、56或58进行 操作，并且因此实现了可操作性的改进。此外，通过手从方向盘90朝向期望的操作按钮52、 54、56或58的直接移动，可以平滑地对操作菜单50上的期望的操作按钮52、54、56或58进 行操作。此外，只。

34、要驾驶员的手没有从方向盘90移开，就能确定驾驶员不想要经由操作菜 单50对期望的操作按钮52、54、56或58进行操作，并且因此可以在全屏状态下向驾驶员提 供最大的信息量。 0052 在图6中所示的示例中，在其中导航ECU 78正在进行对目的地的路线引导使得地 图显示在触摸面板显示器14的屏幕上并且路线引导消息已被输出，或者本车位置与引导 路线的左/右转弯点接近的情况下，即使在确定驾驶员的手从方向盘90移开并且驾驶员的 面部姿态在触摸面板显示器14的方向上取向时，仍可以维持其中不显示操作菜单50的全 屏状态。其原因在于，在这些情况下，驾驶员很可能转向触摸面板显示器14以便查看地图， 但是不太可。

35、能操作触摸面板显示器14。 0053 图8是示出了根据本发明的第三实施例的车辆操作输入装置102的主要配置的系 统示图。 0054 第三实施例与上述第一实施例的主要不同之处在于驾驶员负荷确定单元76连接 到控制ECU 12。 0055 驾驶员负荷确定单元76确定驾驶员的驾驶负荷状态。驾驶员负荷确定单元76可 以基于来自各种车内传感器和各种ECU的信息来估计（确定）驾驶员的驾驶负荷状态。例 如，驾驶员负荷确定单元76基于转向角度传感器和/或车辆速度传感器来确定驾驶员的驾 驶负荷状态。在该情况下，当转向角度的变化处于预定阈值或在预定阈值以下时和/或当 车辆速度处于预定阈值或在预定阈值以下时，驾驶员。

36、负荷确定单元76可以确定驾驶员的 驾驶负荷是小的。 0056 控制ECU 12可以经由适当的总线通过导线、或者无线地、或者通过此两者的组 合，连接到驾驶员负荷确定单元76。此外，驾驶员负荷确定单元76的所有或部分功能可以 并入在控制ECU 12中。 0057 图9是示出了根据第三实施例通过控制ECU 12来执行的、用于在全屏状态和操作 菜单显示屏幕状态之间切换的切换控制方法的示例的流程图。 0058 步骤900、904和906的处理分别与图4中所示的步骤400、404和406的处理基本 上相同，并且因此省略了该处理的描述。当在步骤900中进行肯定的确定时，该例程前进到 步骤902。 0059 。

37、在步骤902中，基于来自驾驶员负荷确定单元76的确定结果来确定驾驶员的驾驶 负荷是否处于预定水平或在预定水平以下。该预定水平与如下驾驶负荷对应，在该驾驶负 荷以上驾驶员难于操作触摸面板显示器14。例如，当车辆速度处于预定阈值或在预定阈值 以下时（包括车辆速度为零的情况）或者当转向角度或转向速度处于预定阈值或在预定阈 值以下时（包括转向角度为零的情况，或者换言之，在径直前进期间），可以确定驾驶员的驾 说 明 书CN 103019524 A 7/10页 10 驶负荷处于预定水平或在预定水平以下。该预定水平（例如，如上文所述，相对于车辆速度 的预定阈值等）可以针对驾驶员进行调节。例如，可以学习实际操。

38、作触摸面板显示器14时 的车辆速度范围、转向角度范围等，使得当检测到的车辆速度、转向角度等在该范围内时， 确定驾驶员的驾驶负荷处于预定水平或在预定水平以下。 0060 当在步骤902中确定驾驶员的驾驶负荷处于预定水平或在预定水平以下时，该例 程前进到步骤904，并且当驾驶员的驾驶负荷未处于预定水平或不在预定水平以下时，该例 程前进到步骤906。 0061 因此，根据图9中所示的处理，当在触摸面板显示器14的屏幕上的显示状态与全 屏状态对应的情况下驾驶员的手从方向盘90移开并且驾驶员的驾驶负荷处于预定水平或 在预定水平以下时，触摸面板显示器14的屏幕上的显示状态切换到其中显示操作菜单50 的操作。

39、菜单显示屏幕状态。另一方面，当不满足这两个条件中的任一个条件时，维持其中不 显示操作菜单50的全屏状态。因此，当驾驶员希望对触摸面板显示器14执行操作时，可以 在小的驾驶负荷下通过将触摸面板显示器14侧的手从方向盘90移开来显示操作菜单50。 因此，通过使从方向盘90移开的手接近操作菜单50，可以通过一系列操作对期望的操作按 钮52、54、56或58进行操作，并且因此实现了可操作性的改进。此外，通过手从方向盘90 朝向期望的操作按钮52、54、56或58的直接移动，可以平滑地对操作菜单50上的期望的操 作按钮52、54、56或58进行操作。此外，只要驾驶员的手没有从方向盘90移开，就能确定 驾。

40、驶员不想要经由操作菜单50对期望的操作按钮52、54、56或58进行操作，并且因此可以 在全屏状态下向驾驶员提供最大的信息量。此外，由于考虑了驾驶员的驾驶负荷，因此可以 禁止如下情况：其中当驾驶员无意地将他/她的手从方向盘90移开（例如，当在右转或左转 期间在使方向盘90大量转动时切换握持方向盘90的手时，等等），即不想要操作触摸面板 14时，触摸面板显示器14的屏幕上的显示状态切换到操作菜单显示屏幕状态。特别地，当 驾驶员的驾驶负荷大时，驾驶员不太可能操作触摸面板显示器14，并且因此可以按照高度 精确地匹配驾驶员的意图的方式来实现全屏状态和操作菜单显示屏幕状态之间的切换。 0062 在驾驶员。

41、在车辆行进期间希望对触摸面板显示器14执行操作的某些情况下，驾 驶员可以在等待他/她的驾驶负荷下降之后，例如在等待交通信号灯改变时或者在低速行 进期间，开始操作触摸面板显示器14。根据图6中所示的处理，在转移到低驾驶负荷状态之 后，当驾驶员的手从方向盘90移开时触摸面板显示器14的屏幕上的显示状态切换到操作 菜单显示屏幕状态，并且因此可以按照高度精确地匹配驾驶员的意图的方式来实现针对操 作菜单显示屏幕状态的切换。 0063 第三实施例可以与上述第二实施例组合（即考虑驾驶员的面部姿态的配置）。更具 体地，当在其中触摸面板显示器14的屏幕上的显示状态与全屏状态对应的情况下驾驶员 的手从方向盘90移。

42、开，驾驶员的驾驶负荷是小的，并且驾驶员的面部姿态在触摸面板显示 器14的方向上取向时，触摸面板显示器14的屏幕上的显示状态可以切换到其中显示操作 菜单50的操作菜单显示屏幕状态。当不满足这三个条件中的任一个条件时，可以维持其中 不显示操作菜单50的全屏状态。 0064 图10是示出了根据本发明的第四实施例的车辆操作输入装置103的主要配置的 系统示图。 0065 第四实施例与上述第一实施例的主要不同之处在于导航ECU 78连接到控制ECU 说 明 书CN 103019524 A 10 8/10页 11 12。 0066 控制ECU 12基于从导航ECU 78获得的地图信息以及从全球定位系统（G。

43、PS）接 收器（未示出）获得的本车位置信息，针对关于本车的前进方向上的前方的道路或者本车当 前正在其上行进的道路的信息（诸如是否存在直道、弯道、转弯、十字路口等的信息）进行确 定。 0067 控制ECU 12可以经由适当的总线通过导线、或者无线地、或者通过此两者的组 合，连接到导航ECU 78。此外，导航ECU 78的所有或部分功能可以并入在控制ECU 12中， 并且反之，控制ECU 12的所有或部分功能可以并入在导航ECU 78中。 0068 图11是示出了根据第四实施例通过控制ECU 12来执行的、用于在全屏状态和操 作菜单显示屏幕状态之间切换的切换控制方法的示例的流程图。 0069 步骤。

44、1100、1104和1106的处理分别与图4中所示的步骤400、404和406的处理 基本上相同，并且因此省略了该处理的描述。当在步骤1100中进行肯定的确定时，该例程 前进到步骤1102。 0070 在步骤1102中，基于从导航ECU 78获得的地图信息和从GPS接收器获得的本车 位置信息确定本车是否正在直道上行进。注意，直道不需要严格地指示“直线”，并且可以是 具有至少预定值的曲率半径的道路。该预定值可以对应于对方向盘90的握持不必改变的 曲率半径的极限值。当本车正在直道上行进时，该例程前进到步骤1104，并且当本车未在直 道上行进时（在例如弯道、转弯、十字路口等上行进期间），该例程前进到。

45、步骤1106。 0071 因此，根据图11中所示的处理，当在其中触摸面板显示器14的屏幕上的显示状态 与全屏状态对应的情况下驾驶员的手从方向盘90移开并且本车正在直道上行进时，触摸 面板显示器14的屏幕上的显示状态被切换到其中显示操作菜单50的操作菜单显示屏幕状 态。当不满足这两个条件中的任一个条件时，维持其中不显示操作菜单50的全屏状态。因 此，在直道上行进时，当驾驶员希望对触摸面板显示器14执行操作时，可以通过将在触摸 面板显示器14侧的手从方向盘90移开来显示操作菜单50。因此，通过使从方向盘90移开 的手接近操作菜单50，可以通过一系列操作对期望的操作按钮52、54、56或58进行操作。

46、，并 且因此实现了可操作性的改进。此外，通过手从方向盘90朝向期望的操作按钮52、54、56或 58的直接移动，可以平滑地对操作菜单50上的期望的操作按钮52、54、56或58进行操作。 此外，只要驾驶员的手没有从方向盘90移开，就能确定驾驶员不想要经由操作菜单50对期 望的操作按钮52、54、56或58进行操作，并且因此可以在全屏状态下向驾驶员提供最大的 信息量。此外，可以禁止如下情况：其中在例如弯道、转弯、或十字路口、左转或右转等上行 进期间，驾驶员改变他/她对方向盘90的握持以便大量地操作方向盘90时无意地将他/ 她的手从方向盘90移开的情况下，触摸面板显示器14的屏幕上的显示状态切换到。

47、操作菜 单显示屏幕状态。此外，其中需要大量操作方向盘90的情况与其中驾驶员的驾驶负荷大的 情况对应，并且因此驾驶员不太可能在该情况下操作触摸面板显示器14。因此，可以按照高 度精确地匹配驾驶员的意图的方式来实现全屏状态和操作菜单显示屏幕状态之间的切换。 0072 在图11中的步骤1102中，可以确定本车是否正在弯道或转弯上行进，而非确定本 车是否正在直道上行进。在该情况下，可以确定本车是否正在需要驾驶员改变他/她对方 向盘90的握持的弯道或转弯上行进。可以考虑曲率半径和弯道长度、转弯角度等，来确定 驾驶员是否需要改变他/她对方向盘90的握持。当本车正在弯道或转弯上行进时，该例程 说 明 书CN。

48、 103019524 A 11 9/10页 12 可以前进到步骤1106，并且在所有其他情况下，该例程可以前进到步骤1104。 0073 第四实施例可以被视为上述第三实施例的一个方面。换言之，其中本车正在直道 上行进的情况可以被视为其中驾驶员的驾驶负荷处于预定水平或在预定水平以下的情况。 此外，可以与第三实施例的其他条件组合地考虑第四实施例。例如，如果在直道上行进期间 车辆速度是高的，则可以维持全屏状态，即使驾驶员将他/她的手从方向盘90移开。相反， 如果在弯道上行进时车辆速度极低（例如在交通拥堵期间），则当驾驶员将他/她的手从方 向盘90移开时，触摸面板显示器14的屏幕上的显示状态可以切换到。

49、操作菜单显示屏幕状 态。 0074 第四实施例可以与上述第二实施例（即考虑驾驶员的面部姿态的配置）组合。更具 体地，当在触摸面板显示器14的屏幕上的显示状态与全屏状态对应的情况下驾驶员的手 从方向盘90移开，本车正在直道上行进，并且驾驶员的面部姿态在触摸面板显示器14的方 向上取向时，触摸面板显示器14的屏幕上的显示状态可以切换到其中显示操作菜单50的 操作菜单显示屏幕状态。当不满足这三个条件中的任一个条件时，可以维持其中不显示操 作菜单50的全屏状态。 0075 此外，在图11中所示的示例中，基于从导航ECU 78获得的地图信息和从GPS接收 器获得的本车位置信息确定本车是否正在直道上行进，但是作为替换或者除该配置之外， 可以基于偏航率传感器的输出值、加速度传感器的输出值（横向加速度）和车辆速度传感器 的输出值、从外围监视摄像装置拍摄的图像获得的白线图像识别结果（和基于其的道路弯 曲确定结果）等进行相似的确定。此外，在图11中所示的示例中，确定本车当前正在其上行 进的道路的状态，但是。