《化妆辅助装置、化妆辅助方法、以及化妆辅助程序.pdf》由会员分享，可在线阅读，更多相关《化妆辅助装置、化妆辅助方法、以及化妆辅助程序.pdf（33页珍藏版）》请在专利查询网上搜索。
1、10申请公布号CN104203042A43申请公布日20141210CN104203042A21申请号201480000917X22申请日20140120201301826620130201JPA45D44/0020060171申请人松下电器产业株式会社地址日本大阪府72发明人山梨智史浅井理惠子牟田葵西千枝安食香织74专利代理机构北京市柳沈律师事务所11105代理人邸万奎54发明名称化妆辅助装置、化妆辅助方法、以及化妆辅助程序57摘要本发明的化妆辅助装置，即使对于皮肤状态不好的脸部也能够适当地进行化妆辅助。化妆辅助装置100包括图像获取单元220，获取拍摄脸部所得到的图像；脸部器官获取单元23。
2、0，从图像获取脸部的脸部器官的区域；脸部用妆选择单元250，对每个脸部器官，选择脸部用化妆方式即脸部用妆；皮肤状态获取单元260，获取脸部的皮肤状态；皮肤修正用妆选择单元280，基于皮肤状态，选择皮肤修正用化妆方式即皮肤修正用妆或基础化妆方式即皮肤护理；以及妆提示单元290，对用户与对应的脸部器官的区域相关联地提示选择出的脸部用妆，并且提示所选择的皮肤修正用妆或皮肤护理。30优先权数据85PCT国际申请进入国家阶段日2014092686PCT国际申请的申请数据PCT/JP2014/0002442014012087PCT国际申请的公布数据WO2014/119242JA2014080751INTC。
3、L权利要求书2页说明书16页附图12页按照条约第19条修改的权利要求书2页19中华人民共和国国家知识产权局12发明专利申请权利要求书2页说明书16页附图12页按照条约第19条修改的权利要求书2页10申请公布号CN104203042ACN104203042A1/2页21化妆辅助装置，包括图像获取单元，其获取拍摄脸部所得的图像；脸部器官获取单元，其从所述图像获取所述脸部的脸部器官的区域；脸部用妆选择单元，其对每个所述脸部器官，选择脸部用化妆方式即脸部用妆；皮肤状态获取单元，其获取所述脸部的皮肤状态；皮肤修正用妆选择单元，其基于所述皮肤状态，选择皮肤修正用化妆方式即皮肤修正用妆或基础化妆方式即皮肤护。
4、理；以及妆提示单元，其对用户与对应的所述脸部器官的区域相关联地提示选择出的所述脸部用妆，并且提示选择出的所述皮肤修正用妆或所述皮肤护理。2如权利要求1所述的化妆辅助装置，所述皮肤状态获取单元对分割了所述脸部的脸部区域的每个分割脸部区域，获取皮肤状态，所述皮肤修正用妆选择单元基于对所述每个分割脸部区域获取的所述皮肤状态，对所述每个分割脸部区域，选择所述皮肤修正用妆，所述妆提示单元将所述皮肤修正用妆与对应的所述分割脸部区域对应地进行提示。3如权利要求2所述的化妆辅助装置，所述妆提示单元生成仿真图像，并提示所生成的所述仿真图像，该仿真图像是在所述图像重叠表示对所述脸部适用所述脸部用妆和所述皮肤修正用。
5、妆时的所述脸部用妆和所述皮肤修正用妆的状态的图像所得到的图像。4如权利要求2所述的化妆辅助装置，所述皮肤状态获取单元检测皮肤状态达到要适用所述皮肤修正用妆的规定水平的所述分割脸部区域即主要皮肤修正区域，所述皮肤修正用妆选择单元将所述主要皮肤修正区域设为选择所述皮肤修正用妆的对象。5如权利要求4所述的化妆辅助装置，还包括拍摄单元，其拍摄所述用户的脸部的影像；以及显示单元，其对于所述用户显示所述仿真图像，所述图像获取单元获取构成所述影像的图像，所述妆提示单元对于所述影像保持暂时选择出的所述脸部用妆和所述皮肤修正用妆，同时对每个构成所述影像的所述图像，依次生成所述仿真图像并显示在所述显示单元上。6如。
6、权利要求2所述的化妆辅助装置，所述脸部用妆选择单元获取所述脸部的脸部器官特征量，参照使能获取的脸部器官特征量和脸部用妆预先对应而注册的脸部用妆表，选择所述脸部用妆，所述皮肤修正用妆选择单元对每个所述分割脸部区域获取皮肤特征量，参照使能获取的皮肤特征量和皮肤修正用妆预先对应而注册的皮肤修正用妆表，选择所述脸部用妆。7如权利要求2所述的化妆辅助装置，所述皮肤状态包括斑点即斑的状态、皱纹状态、暗淡状态、黑眼圈状态、毛孔状态、水分状态、油分状态、肌理状态、以及血色状态中的至少一个。8如权利要求2所述的化妆辅助装置，权利要求书CN104203042A2/2页3所述脸部用妆和所述皮肤修正用妆至少包括皮肤用。
7、化妆剂的颜色、涂敷浓度、以及涂敷范围，所述妆提示单元还提示与为了适用所选择的所述脸部用妆和所述皮肤修正用妆所需要的化妆品有关的信息。9化妆辅助方法，包括以下步骤获取拍摄脸部所得的图像的步骤；从所述图像获取脸部器官的区域的步骤；对每个所述脸部器官，选择脸部用化妆方式即脸部用妆的步骤；获取所述脸部的皮肤状态的步骤；基于所述皮肤状态选择皮肤修正用化妆方式即皮肤修正用妆或基础化妆方式即皮肤护理的步骤；以及对用户与对应的所述脸部器官的区域相关联地提示选择出的所述脸部用妆，并且提示选择出的所述皮肤修正用妆或所述皮肤护理的步骤。10化妆辅助程序，其使计算机执行以下处理获取拍摄脸部所得的图像的处理；从所述图像。
8、获取脸部器官的区域的处理；对每个所述脸部器官，选择脸部用化妆方式即脸部用妆的处理；获取所述脸部的皮肤状态的处理；基于所述皮肤状态选择皮肤修正用化妆方式即皮肤修正用妆或基础化妆方式即皮肤护理的处理；以及对用户与对应的所述脸部器官的区域相关联地提示选择出的所述脸部用妆，并且提示选择出的所述皮肤修正用妆或所述皮肤护理的处理。权利要求书CN104203042A1/16页4化妆辅助装置、化妆辅助方法、以及化妆辅助程序技术领域0001本发明涉及辅助脸部的化妆MAKEUP的化妆辅助装置、化妆辅助方法以及化妆辅助程序。背景技术0002近年来，脸部化妆方式以下简称为“妆”不断多样化。什么样的妆是适当的，不只是根。
9、据流行或进行化妆的人的喜好而不同，也根据作为化妆对象的脸部的脸部器官眼睛、眉毛、鼻子、颧骨、嘴唇、脸形等的大小、形状以及配置等而不同。0003因此，特别地对于对化妆没有充分知识的人来说，难以选择适当的妆。这是因为，对所有的妆实际进行试验来进行判断和比较，需要大量的时间和工夫。0004因此，例如在专利文献1和专利文献2中记载了生成进行化妆时的脸部的仿真图像并进行提示的技术。专利文献1和专利文献2中记载的技术以下称为“现有技术”获取拍摄作为化妆对象的脸部以下简称为“脸部”而得到的图像。另外，现有技术中，对所获取的图像重叠表示将口红或腮红胭脂等施于脸部时的化妆状态的图像，来生成仿真图像。而且，现有技。
10、术中，使显示装置显示生成的仿真图像。下面，将这样的对脸部器官的特征的印象进行修正以提高审美性的化妆，称为“脸部用化妆”。0005在这样的现有技术中，能够不用实际进行化妆而判断妆的好坏，以更少的时间和工夫选择适当的妆。0006现有技术文献0007专利文献0008专利文献1日本特开2001346627号公报0009专利文献2日本特开200344837号公报0010专利文献3日本特开2007133518号公报发明内容0011发明要解决的问题0012然而，对于化妆，除了上述的脸部用化妆以外，还有用于掩盖眼睛下部的黑眼圈的遮瑕等。下面，将这样的部分修正皮肤状态以提高审美性的化妆称为“皮肤修正用化妆”。另。
11、外，对脸部进行的化妆中，除了彩妆以外还有所谓的基础化妆。基础化妆是指通过涂敷化妆水或美容液等来对皮肤进行保养。0013脸部的印象不只是根据脸部用化妆方式以下称为“脸部用妆”而不同，还根据皮肤修正用化妆方式以下称为“皮肤修正用妆”和基础化妆方式以下称为“皮肤护理”而不同。另外，脸部用妆的效果大多因皮肤修正用妆或皮肤护理而不同。例如，在通过遮瑕而遮盖了眼睛下部的黑眼圈的情况下，脸部印象变得年轻，因此，面向年轻人的妆更好看。另外，在未进行适当的皮肤护理而皮肤状态不好的情况下，由于上妆不好，实际的妆会与仿真图像大不相同。说明书CN104203042A2/16页50014因此，在对于皮肤状态实施了不适当。
12、的皮肤修正用妆或皮肤护理的情况下，或未实施必要的皮肤修正用妆或皮肤护理的情况下，用户会错误地做出脸部用妆的适当与不适当的判断。很多用户未充分地掌握脸部的各部分的皮肤状态，没有关于皮肤修正用妆和皮肤护理的充分的知识。另外，在现有技术中，未考虑皮肤状态。0015本发明的目的在于，提供即使对于皮肤状态不好的脸部也能够适当地进行化妆辅助的化妆辅助装置、化妆辅助方法、以及化妆辅助程序。0016解决问题的方案0017本发明的化妆辅助装置，其包括图像获取单元，其获取拍摄脸部所得到的图像；脸部器官获取单元，其从所述图像获取所述脸部的脸部器官的区域；脸部用妆选择单元，其对每个所述脸部器官，选择脸部用化妆方式即脸。
13、部用妆；皮肤状态获取单元，其获取所述脸部的皮肤状态；皮肤修正用妆选择单元，其基于所述皮肤状态，选择皮肤修正用化妆方式即皮肤修正用妆或基础化妆方式即皮肤护理；以及妆提示单元，对用户与对应的所述脸部器官的区域相关联地提示选择出的所述脸部用妆，并且提示所选择出的所述皮肤修正用妆或所述皮肤护理。0018本发明的化妆辅助方法包括以下步骤获取拍摄脸部所得到的图像的步骤；从所述图像获取脸部器官的区域的步骤；对每个所述脸部器官，选择脸部用化妆方式即脸部用妆的步骤；获取所述脸部的皮肤状态的步骤；基于所述皮肤状态，选择皮肤修正用化妆方式即皮肤修正用妆或基础化妆方式即皮肤护理的步骤，；以及对用户与对应的所述脸部器官。
14、的区域相关联地提示选择出的所述脸部用妆，并且提示选择出的所述皮肤修正用妆或所述皮肤护理的步骤。0019本发明的化妆辅助程序使计算机执行以下的处理获取拍摄脸部所得到的图像的处理；从所述图像获取脸部器官的区域的处理；对每个所述脸部器官，选择脸部用化妆方式即脸部用妆的处理；获取所述脸部的皮肤状态的处理；基于所述皮肤状态，选择皮肤修正用化妆方式即皮肤修正用妆或基础化妆方式即皮肤护理的处理；以及对用户与对应的所述脸部器官的区域相关联地提示选择出的所述脸部用妆，并且提示所选择出的所述皮肤修正用妆或所述皮肤护理的处理。0020发明效果0021根据本发明，即使对于皮肤状态不好的脸部也能够适当地进行化妆辅助。附。
15、图说明0022图1是表示一例本发明实施方式1的化妆辅助装置的结构的方框图。0023图2是表示一例本发明实施方式2的化妆辅助装置的结构的方框图。0024图3是表示一例实施方式2中的脸部用妆ID表的图。0025图4是表示一例实施方式2中的脸部用妆表的图。0026图5是表示一例实施方式2中的脸部用化妆品表的图。0027图6是表示一例实施方式2中的皮肤修正用妆ID表的图。0028图7是表示一例实施方式2中的皮肤修正用妆表的图。0029图8是表示一例实施方式2中的皮肤修正用化妆品表的图。0030图9是表示一例实施方式2的化妆辅助装置的动作的流程图。说明书CN104203042A3/16页60031图10。
16、是表示一例实施方式2中的图像的图。0032图11是表示一例实施方式2中的脸部特征点的配置的图。0033图12是表示一例实施方式2中的脸部器官信息的图。0034图13是表示一例实施方式2中的皮肤状态信息的图。0035图14是表示一例实施方式2中的仿真图像的图。0036图15是表示一例实施方式2中的皮肤护理选择用的皮肤状态信息的图。具体实施方式0037下面，使用附图对本发明的各实施方式详细地进行说明。0038本发明实施方式1是本发明的基本方式的一例。0039图1是表示一例本实施方式的化妆辅助装置的结构的方框图。0040图1中，化妆辅助装置100具有图像获取单元220、脸部器官获取单元230、脸部用。
17、妆选择单元250、皮肤状态获取单元260、皮肤修正用妆选择单元280、以及妆提示单元。0041图像获取单元220获取拍摄脸部所得的图像。0042脸部器官获取单元230从拍摄到的图像获取脸部的脸部器官的区域。0043脸部用妆选择单元250对每个脸部器官选择脸部用妆。这里，所谓脸部用妆是脸部用化妆方式种类。0044皮肤状态获取单元260获取脸部的皮肤状态。0045皮肤修正用妆选择单元280基于获取的皮肤状态，选择皮肤修正用妆/皮肤护理。即，皮肤修正用妆选择单元280根据皮肤状态对皮肤修正用妆和皮肤护理中的至少一者进行选择。这里，所谓皮肤修正用妆是皮肤修正用化妆方式种类。另外，所谓皮肤护理是基础化妆。
18、方式种类。0046妆提示单元290对用户提示与对应的脸部器官的区域相关联的选择出的脸部用妆，并且提示选择的皮肤修正用妆/皮肤护理。0047虽然未图示，但化妆辅助装置100例如具有CPUCENTRALPROCESSINGUNIT，中央处理单元、存储控制程序的ROMREADONLYMEMORY，只读存储器等存储介质、以及RAMRANDOMACCESSMEMORY，随机存取存储器等工作用存储器。在这种情况下，通过CPU执行控制程序来实现上述各单元的功能。0048这样的化妆辅助装置100不只将脸部用妆与对应的区域对应地向用户提示，而且，能够基于皮肤状态提示所选择的皮肤修正用妆/皮肤护理。即，化妆辅助装。
19、置100能够将适当的皮肤修正用妆/皮肤护理与适当的脸部用妆的仿真图像一起进行提示。因此，化妆辅助装置100即使对于皮肤状态不好的脸部也能够适当地进行化妆辅助。0049实施方式20050本发明实施方式2是本发明的具体方式的一例，是将本发明适用于在同一面侧具有数码照相机和带触摸面板的显示器的装置的例子。00510052首先说明本实施方式中使用的术语。0053所谓“脸部器官”是指眼睛、眉毛、鼻子、颧骨、嘴唇、脸形等给脸部的印象赋予特征的部分。说明书CN104203042A4/16页70054所谓“脸部器官的区域”是指在图像上或实际空间上脸部器官所占的区域，包括眼梢等脸部器官的特征点的位置。0055所。
20、谓“脸部器官特征量”是表示脸部特征的规定的参数的值。在此，是指由脸部的长度相对于脸部的宽度之比、鼻子的长度相对于两眼距离之比、以及眼睛的宽度相对于脸部的宽度之比等多个值构成的多变量数据。0056所谓“分割脸部区域”是指分割了脸部的脸部区域所得到的区域。0057所谓“皮肤状态”包括斑点斑状态、皱纹状态、暗淡状态、黑眼圈状态、毛孔状态、水分状态、油分状态、肌理状态、以及血色状态中的至少一个。0058所谓“皮肤状态特征量”是对皮肤状态的特征进行表示的规定参数的值。在此，是由眼睛黑眼圈状态的强度、以及、斑点状态的强度等、多个值构成的多变量数据。在此，所谓强度例如是脸部区域的皮肤颜色与平均值之间的差的大。
21、小。此外，皮肤状态特征量也可以包括与脸部中的相对位置有关的值。0059所谓“主要皮肤修正区域”是皮肤状态达到应该适用皮肤修正用妆的规定的级别LEVEL的分割脸部区域。0060所谓“脸部用妆”表示对脸部器官特征的印象进行修正以提高审美性的化妆方式种类，至少包括皮肤用化妆剂的颜色、涂敷浓度、以及涂敷范围。0061“皮肤修正用妆”表示部分修正皮肤的状态以提高审美性的化妆方式种类，至少包括皮肤用化妆剂的颜色、涂敷浓度、以及涂敷范围。0062“皮肤护理”表示用于整理皮肤状态的基础化妆方式种类，包括基础化妆品的种类、每次的涂敷量、涂敷范围、涂敷频率、进行涂敷的时间段、涂敷方式等。00630064下面，说明。
22、本实施方式的化妆辅助装置的结构。0065图2是表示一例本实施方式的化妆辅助装置的结构的方框图。化妆辅助装置例如是带照相机的触摸面板终端。0066图2中，化妆辅助装置100具有拍摄单元210、图像获取单元220、脸部器官获取单元230、脸部用妆表存储单元240、脸部用妆选择单元250、皮肤状态获取单元260、皮肤修正用妆表存储单元270、皮肤修正用妆选择单元280、妆提示单元290、以及显示单元300。0067拍摄单元210例如是上述的数码照相机，对化妆辅助装置100的用户的脸部影像进行拍摄。而且，拍摄单元210将拍摄到的影像输出到图像获取单元220。影像由时间序列的多个图像帧图像构成。0068。
23、图像获取单元220从输入的影像依次获取构成影像的图像。而且，图像获取单元220将获取的图像输出到脸部器官获取单元230、皮肤状态获取单元260、以及妆提示单元290。0069脸部器官获取单元230从输入的图像获取脸部的脸部器官区域。例如，通过图像的各部分区域和预先准备的各脸部器官的模板图像之间的匹配获取脸部器官区域例如，参照专利文献2。而且，脸部器官获取单元230将所获取的脸部器官的识别信息以及表示区域的信息以下称为“脸部器官信息”输出到脸部用妆选择单元250。0070脸部用妆表存储单元240存储有脸部用妆表。脸部用妆表是预先使从图像获取的脸部器官特征量、和具有该脸部器官特征量的脸部适合的脸部。
24、用妆相对应地注册的表。例说明书CN104203042A5/16页8如通过化妆辅助装置100具备的通信电路未图示，从互联网上的服务器定期地更新脸部用妆表。0071在本实施方式中，设为预先对于过去由化妆技术人员实施了脸部用妆所得到的不确定多数的脸部的脸部用特征量的样本进行了主成分分析。而且，将主成分分析的结果，通过以主成分值是否为1以上等为判定基准的公知的主成分分层法，预先进行了分组。而且，设为在脸部用妆表中对脸部用特征量的每个组，注册了对属于该组的脸部过去实施过的脸部用妆。0072另外，在脸部用妆表中还按每个脸部用妆注册有与适用该脸部用妆而需要的皮肤用化妆品有关的信息以下称为“化妆品信息”。00。
25、73脸部用妆选择单元250获取脸部的脸部器官特征量，并参照脸部用妆表，对每个脸部器官选择脸部用妆。此外，脸部用妆选择单元250也可以根据从脸部器官获取单元230输入的脸部器官信息获取脸部器官特征量，还可以通过对图像获取单元220获取的图像进行解析来从图像获取脸部器官特征量。而且，脸部用妆选择单元250将表示选择的脸部用妆的信息以下称为“脸部用妆信息”输出到妆提示单元290。0074此外，如上所述，在脸部用妆表中，对脸部用特征量的每个组注册有脸部用妆。从而，脸部用妆选择单元250判定从脸部获取的脸部器官特征量属于在脸部用妆表中注册的组中的哪个组，选择与判定出的组对应的脸部用妆。例如通过计算所获取。
26、的脸部器官特征量和各组的代表值质心之间的距离来进行该判定。0075另外，脸部用妆选择单元250从脸部用妆表获取所获取的脸部用妆的化妆品信息。而且，脸部用妆选择单元250将获取的化妆品信息与脸部用妆对应地输出到妆提示单元290。0076皮肤状态获取单元260对脸部的每个分割脸部区域获取皮肤状态。例如，基于脸部器官获取单元230获取的脸部器官的区域，从图像获取皮肤区域，并对获取的皮肤区域的图像进行解析，由此获取皮肤状态例如参照专利文献3。皮肤状态获取单元260对获取的各分割脸部区域的皮肤状态进行数字化，将得到的数值与表示上述规定的级别的值进行比较，由此检测主要皮肤修正区域。而且，皮肤状态获取单元2。
27、60将检测出的主要皮肤修正区域以及表示其皮肤状态的信息以下称为“皮肤状态信息”输出到皮肤修正用妆选择单元280。0077皮肤修正用妆表存储单元270存储有皮肤修正用妆表。皮肤修正用妆表是预先使从图像获取的皮肤状态特征量、和对具有该皮肤状态特征量的皮肤部分适合的皮肤修正用妆对应地注册的表。例如通过化妆辅助装置100具备的通信电路未图示从互联网上的服务器定期地更新皮肤修正用妆表。0078在本实施方式中，设为预先对于从不确定多数的皮肤部分得到的皮肤状态特征量的样本，进行基于最近邻法或者最远邻法等的公知的族分析，该不确定多数的皮肤部分是过去由化妆技术人员实施了皮肤修正用妆的皮肤部分。而且，设为皮肤状态。
28、特征量的样本根据族分析结果分组并注册。而且，设为在皮肤修正用妆表中，对皮肤状态特征量的每个组，注册有对属于该组的皮肤部分过去实施过的皮肤修正用妆。0079另外，设为在皮肤修正用妆表中，对每个皮肤修正用妆，还注册有为了适用该皮肤修正用妆而需要的皮肤用化妆品的化妆品信息。说明书CN104203042A6/16页90080皮肤修正用妆选择单元280以分割脸部区域中的主要皮肤修正区域为对象获取该皮肤状态特征量。而且，皮肤修正用妆选择单元280参照皮肤修正用妆表，对每个主要皮肤修正区域，选择皮肤修正用妆。此外，皮肤修正用妆选择单元280也可以根据从皮肤状态获取单元260输入的皮肤状态信息获取皮肤状态特征。
29、量，还可以通过对图像获取单元220获取的图像进行解析，从而从图像获取皮肤状态特征量。而且，皮肤修正用妆选择单元280将表示所选择的皮肤修正用妆的信息以下称为“皮肤修正用妆信息”输出到妆提示单元290。0081此外，如上所述，在皮肤修正用妆表中，对皮肤状态特征量的每个组注册有皮肤修正用妆。因此，皮肤修正用妆选择单元280判定从分割脸部区域获取的皮肤状态特征量属于在组皮肤修正用妆表中注册的组中的哪个组，选择与判定出的组对应的皮肤修正用妆。例如通过计算获取的皮肤状态特征量和各组的代表值质心之间的距离来进行该判定。0082另外，皮肤修正用妆选择单元280获取从皮肤修正用妆表获取的皮肤修正用妆的化妆品信。
30、息。而且，皮肤修正用妆选择单元280将获取的化妆品信息与皮肤修正用妆对应地输出到上妆提示单元290。0083妆提示单元290将所选择的脸部用妆以及皮肤修正用妆，与对应的脸部器官的区域以及分割脸部区域对应地向用户提示。更具体地，妆提示单元290基于输入的图像、脸部用妆信息、以及皮肤修正用妆信息生成仿真图像，将生成的仿真图像输出到显示单元300。这里，仿真图像是在输入拍摄的图像上重叠对脸部适用选择的脸部用妆以及皮肤修正用妆时的图像所得到的图像。0084此外，例如通过阿尔法混合处理等公知的图像合成处理进行图像的重叠。这种情况下，将阿尔法值设定为与妆的浓度相应的值。例如利用以下的式13表示阿尔法混合处。
31、理。在此，R1、G1、B1是拍摄到的图像的任意区域的RGB值，R2、G2、B2是妆的图像的对应区域的RGB值。而且，R、G、B是仿真图像的对应区域的RGB值。0085RR1R2110086GG1G2120087BB1B2130088另外，对每个妆，设定了在脸部重叠进行涂敷时的顺序以下，称为“涂敷顺序”，并且，适用了妆时的图像是具有与浓度相应的密度的编织网状图像。涂敷顺序例如规定了应该在涂敷粉底后涂敷腮红。这种情况下，也可以对于拍摄到的图像，将各妆的图像按照与涂敷顺序相应的顺序进行重叠涂敷处理，从而进行图像的重叠。0089另外，妆提示单元290按照构成从图像获取单元220获取的影像的每个图像，依。
32、次使用暂时选择的脸部用妆以及皮肤修正用妆，生成仿真图像并输出到显示单元300使其显示。即，对于一个影像，妆提示单元290保持暂时选择的妆来进行提示。0090另外，妆提示单元290还提示关于适用所选择的脸部用妆以及皮肤修正用妆所需要的皮肤用化妆品的信息化妆品信息。更具体地，妆提示单元290在上述仿真图像上重叠或者追加表示输入的化妆品信息的图像或者文本。0091显示单元300例如是带触摸面板的显示器的显示器部分，对化妆辅助装置100的用户显示提示所输入的仿真图像以及化妆品信息。0092此外，虽然未图示，但是化妆辅助装置100例如具有CPU、存储控制程序的ROM等存说明书CN104203042A7/。
33、16页10储介质、以及RAM等工作用存储器。在这种情况下，通过CPU执行控制程序来实现上述的各单元的功能。0093根据以上那样的结构，化妆辅助装置100除了将脸部用妆与对应区域对应地进行提示以外，还能够将基于皮肤状态选择的皮肤修正用妆与需要该妆的区域对应地向用户提示。0094即，化妆辅助装置100能够提示包含适当的皮肤修正用妆的妆的仿真图像。因此，化妆辅助装置100即使对于皮肤状态不好的脸部也能够适当地进行化妆辅助。00950096下面，说明脸部用妆表以及皮肤修正用妆表的例子。0097脸部用妆表例如由脸部用妆ID表、脸部用妆表、以及脸部用化妆品表构成。0098图3是表示一例脸部用妆ID表的图。。
34、0099如图3所示，脸部用妆ID表410例如对脸部器官特征量的每个组411，记载了脸部用妆ID412。在此，所谓“脸部用妆ID”是识别对一个脸部一次进行的一个或多个脸部用妆的模式的信息。0100例如，对于“FG1”这样的脸部器官特征量的组411，对应了“FM1”这样的脸部器官妆ID。因此，脸部用妆选择单元250在从脸部获取的脸部器官特征量属于“FG1”这样的脸部器官特征量的组411的情况下，获取“FM1”这样的脸部器官妆ID412。0101图4是表示一例脸部用妆表的图。0102如图4所示，脸部用妆表420例如对每个脸部器官妆ID421，记载了对应的妆类别422。脸部器官妆ID421与脸部用妆I。
35、D表410的脸部用妆ID412对应。妆类别422在此简化进行图示，但是，具体地是“粉底”、“眼影”、“口红”、以及“腮红”等。0103而且，脸部用妆表420对脸部器官妆ID421和妆类别422的每个组合，记载了颜色423、浓度424、范围425、以及化妆品ID426。颜色423在此简化进行图示，但是，具体地，是RGB值以及光泽度等。浓度424在此简化进行了图示，但是，具体地是在脸部的图像上进行重叠时的透射度以及浓淡方式等。范围425在此简化进行了图示，但是，具体地是距特征点的相对坐标群、中心点相对于特征点的相对位置和半径的组等。即，颜色423、浓度424、以及范围425的组，至少包含图像化所需。
36、要的信息。0104此外，脸部用妆表420也可以还记载皮肤用化妆品的涂抹模式。所谓皮肤用化妆品的涂抹模式例如在是眼影的情况下，是眼窝、眼线、眼下方等表示相对脸部器官的相对范围的信息。0105例如，对于“FM1”这样的妆ID421，对应了“T1”“T4”这样的妆类别422。另外，例如，对于“FM1”这样的妆ID421和“T1”这样的妆类别422的组合，对应了“C1”这样的颜色423、“D1”这样的浓度、“A1”这样的范围、以及“I1”这样的化妆品ID426。因此，脸部用妆选择单元250在所获取的脸部用妆ID421412是“FM1”的情况下，与“T1”这样的妆类别422对应，获取“C1、D1、A1”。
37、作为脸部用妆信息。0106另外，脸部用妆选择单元250，在获取的脸部用妆ID412421为“FM1”的情况下，获取“I1”这样的化妆品ID426。0107并且，脸部用妆选择单元250同样地获取与“T2”“T4”这样的妆类别422对应的脸部用妆信息以及化妆品ID426。说明书CN104203042A108/16页110108图5是表示一例脸部用化妆品表的图。0109如图5所示，脸部用化妆品表430对每个化妆品ID431记载了公司ID432以及产品编号433。化妆品ID431与脸部用妆表420的化妆品ID426对应。公司ID432是皮肤用化妆品的制造或者销售公司的名称或者标识。产品编号433是皮肤。
38、用化妆品的产品编号。0110例如，对于“I1”这样的化妆品ID431，对应了“B1”这样的公司ID432以及“B11”这样的产品编号433。因此，脸部用妆选择单元250在所获取的化妆品ID431426为“I1”的情况下，获取“B1”这样的公司ID432和“B11”这样的产品编号433，作为脸部用妆的化妆品信息。0111此外，也可以将图3图5所示的脸部用妆ID表410、脸部用妆表420、以及脸部用化妆品表430合并为一个表。0112皮肤修正用妆表例如由皮肤修正用妆ID表、皮肤修正用妆表、以及皮肤修正用化妆品表构成。0113图6是表示一例皮肤修正用妆ID表的图。0114如图6所示，皮肤修正用妆ID。
39、表460例如按皮肤状态特征量的每个组461记载了皮肤修正用妆ID462。在此，所谓“皮肤修正用妆ID”是识别对一个分割脸部区域一次进行的一个或多个皮肤修正用妆的模式的信息。0115例如，对“SG2”这样的皮肤状态特征量的组461，对应了“SM2”这样的皮肤修正用妆ID462。因此，皮肤修正用妆选择单元250在从分割脸部区域获取的皮肤状态特征量属于“SG2”这样的皮肤状态特征量的组461的情况下，获取“SM2”这样的皮肤修正用妆ID462。0116图7是表示一例皮肤修正用妆表的图。0117如图7所示，皮肤修正用妆表470例如对每个皮肤修正用妆ID471记载了对应的妆类别472。皮肤修正用妆ID4。
40、71与皮肤修正用妆ID表460的皮肤修正用妆ID462对应。而且，皮肤修正用妆表470对皮肤修正用妆ID471和妆类别472的每个组合，记载了颜色473、浓度474、范围475、以及化妆品ID476。0118例如，对于“SM2”这样的妆ID471，对应了“T6”这样的妆类别472。另外，例如，对于“SM2”这样的妆ID471和“T6”这样的妆类别472的组合，对应了“C4”这样的颜色473、“D3”这样的浓度、“A5”这样的范围、以及“I5”这样的化妆品ID476。因此，皮肤修正用妆选择单元250在所获取的皮肤修正用妆ID471462是“SM2”的情况下，与“T6”这样的妆类别472对应获取“。
41、C4、D3、A5”作为皮肤修正用妆信息。0119另外，皮肤修正用妆选择单元250在获取的皮肤修正用妆ID462471是“SM2”的情况下，获取“I5”这样的化妆品ID476。0120图8是表示一例皮肤修正用化妆品表的图。0121如图8所示，皮肤修正用化妆品表480对每个化妆品ID481记载了公司ID482以及产品编号483。化妆品ID481与皮肤修正用妆表470的化妆品ID476对应。0122例如，对于“I5”这样的化妆品ID481，对应了“B3”这样的公司ID482以及“B32”这样的产品编号483。因此，皮肤修正用妆选择单元250在所获取的化妆品ID481476是“I5”的情况下，获取“B。
42、3”这样的公司ID482以及“B32”这样的产品编号483，作为皮肤修正用妆的化妆品信息。0123此外，也可以将图6图8所示的皮肤修正用妆ID表460、皮肤修正用妆表470、说明书CN104203042A119/16页12以及皮肤修正用化妆品表480合并为一个表。0124另外，也可以将图5所示的脸部用化妆品表430以及图8所示的皮肤修正用化妆品表480合并为一个表。0125另外，在脸部用妆和皮肤修正用妆之间，可以使用粉底等相同的化妆品。并且，在可利用眼影掩盖眼睛的伤痕的情况下等，在脸部用妆和皮肤修正用妆之间，妆本身可以相同。01260127下面，说明化妆辅助装置100的动作。0128图9是表示。
43、一例化妆辅助装置100的动作的流程图。0129首先，在步骤S1100中，拍摄单元210对用户的脸部进行拍摄，图像获取单元220获取构成拍摄到的影像的图像。0130图10是表示一例在图9的步骤S1100中获取的图像的图。0131如图10所示，图像510包含用户的脸部的图像以下称为“脸部图像”511。用户是未化妆的状态，如图10所示，例如设为在两眼下方有黑眼圈512、513，在前额具有斑点514。0132然后，在图9的步骤S1200中，脸部器官获取单元230从图像510获取脸部器官。这时，脸部器官获取单元230例如对图像510进行解析，由此从图像510提取脸部的脸部器官的特征点。而且，脸部器官获取。
44、单元230获取由构成同一脸部器官的特征点形成的区域，作为脸部器官的区域。而且，脸部器官获取单元230根据获取的脸部器官的区域，生成脸部器官信息。0133图11是表示一例在图9的步骤S1200中提取的脸部特征点的配置的图。0134如图11所示，从脸部图像511提取到多个特征点用记号“”表示。例如，第1特征点521第4特征点524构成右眼。因此，脸部器官获取单元230获取由第1特征点521第4特征点524包围的区域525，作为右眼区域。0135图12是表示一例在图9的步骤S1200生成的脸部器官信息的图。0136如图12所示，脸部器官信息530例如对每个脸部器官ID531记载了区域532以及人ID。
45、533。脸部器官ID531是左眼、上嘴唇等脸部器官的识别信息。区域532是表示图像中的脸部器官的区域的范围的信息，例如，是图像上设定的坐标系的坐标值列表。人ID533是人的识别信息。对于人ID533，例如设定为对每次开始拍摄，由用户通过对带触摸面板的显示器操作等指定的值。0137然后，在图9的步骤S1300中，脸部用妆选择单元250获取脸部器官特征量，并选择脸部用妆。脸部器官特征量如上所述是关于表示脸部特征的规定参数的多变量数据。脸部用妆选择单元250例如从图像510参照图10、从脸部的特征点组参照图11、或从脸部器官信息参照图12获取脸部器官特征量。而且，脸部用妆选择单元250从脸部用妆表参。
46、照图3图5获取与所获取的脸部器官特征量对应的脸部用妆信息以及化妆品信息。0138然后，在步骤S1400中，皮肤状态获取单元260对每个分割脸部区域获取皮肤状态。这时，皮肤状态获取单元260例如利用连接脸部器官获取单元230提取出的脸部特征点参照图11的线，将脸部的区域分割为多个分割脸部区域。而且，皮肤状态获取单元260说明书CN104203042A1210/16页13对每个分割脸部区域，将图像进行解析，并判断是否是主要皮肤修正区域。0139作为是否是主要皮肤修正用妆区域的条件，例如是具有表示脸部区域的皮肤的颜色的与平均值之间的差的值比规定的阈值高的部分，且该部分的面积相对于脸部面积的比为规定的。
47、阈值以上。0140而且，皮肤状态获取单元260对每个主要皮肤修正区域生成皮肤状态信息。此外，皮肤状态获取单元260将连续的主要皮肤修正区域作为一个主要皮肤修正区域处理。0141图13是表示一例在图9的步骤S1400中生成的皮肤状态信息的图。0142如图13所示，皮肤状态信息540例如对每个区域ID541记载了区域542、颜色差543、面积比544、以及人ID545。0143区域ID541是主要皮肤修正区域的识别信息。区域542是表示图像中的主要皮肤修正区域的范围的信息，例如是在图像上设定的坐标系的坐标值列表。颜色差543例如是颜色与脸部区域的皮肤的颜色大不相同的部分的与脸部区域的皮肤的颜色的平。
48、均值之间的差，这里简化地图示，但是，具体地是RGB值以及HSV值等。面积比544这里简化地图示，但是，具体地，是颜色与脸部区域的皮肤的颜色大不相同的部分的面积相对于脸部面积的比等。人ID545是人的识别信息，与脸部器官信息530的人ID533参照图12对应。0144然后，在图9的步骤S1500中，皮肤修正用妆选择单元280获取皮肤状态特征量，选择皮肤修正用妆。如上所述，皮肤状态特征量是表示有关皮肤状态的特征的规定的参数的多变量数据。皮肤修正用妆选择单元280例如从皮肤状态信息参照图13获取皮肤状态特征量。而且，皮肤修正用妆选择单元280从皮肤修正用妆表参照图6图8获取与所获取的皮肤状态特征量对。
49、应的皮肤修正用妆信息以及化妆品信息。0145然后，在步骤S1600中，妆提示单元290基于脸部用妆信息以及皮肤修正用妆信息，生成仿真图像，并使显示单元300显示。这时，妆提示单元290也使显示单元300显示化妆品信息。0146图14是表示一例在图9的步骤S1600中生成的仿真图像的图。0147如图14所示，仿真图像550是在脸部图像511上重叠了眉毛、眼影、眼线、腮红、以及口红之类的脸部用妆的图像551555后的图像。0148进而，如图14所示，仿真图像550是在脸部图像511上重叠了斑点用遮瑕膏以及黑眼圈用遮瑕膏之类的皮肤修正用妆的图像556、557后的图像。其结果，在原来的图像511上映出的黑眼圈512、513和斑点514参照图10成为被掩盖的状态。0149即，仿真图像550显示虚拟地适用了适当的皮肤修正用妆、和适当的脸部用妆两者的状态。0150另外，在仿真图像550中追加了表示化妆品信息的信息显示区域558。即，在仿真图像550中，也显示了为了适用所选择的脸部用妆以及皮肤修正用妆而需要的皮肤用化妆品的化妆品信息。用户可以在对显示的仿真图像550表示的妆满意的情况下，基于显示的化妆品信息，得到需要的皮肤用化妆品，可以容易地进行实际的化妆。0151然后，在步骤S1700中，图像获取单元220判断是否继续影像的输入。图像获取单元220在。