基于图像分析的皮肤管理服务提供装置以及方法制造方法及图纸

本发明专利技术涉及基于图像分析的皮肤管理服务提供装置及方法，更详细地，基于深度学习分析用相机拍摄化妆品的容器来获得的图像，从而识别使用中的化妆品，基于深度学习分析使用中的化妆品来预测用户的皮肤类型后，推荐适合用户的皮肤类型的化妆品。本发明专利技术可以仅通过拍摄用户拥有的化妆品的容器来识别用户拥有的化妆品，从而可以提高输入用户拥有的化妆品的便利性，通过基于深度学习的人工智能分析用户拥有的化妆品来预测用户的皮肤类型后，根据该预测的皮肤类型，可以在用户拥有的化妆品中自动挑选提供适合用户的皮肤类型的化妆品，因此不仅可以提高对皮肤管理的用户的便利性及满意度，还可以节省选择适合用户的皮肤类型的化妆品时所需的时间和费用。时所需的时间和费用。时所需的时间和费用。

【技术实现步骤摘要】
基于图像分析的皮肤管理服务提供装置以及方法


[0001]本专利技术涉及一种基于图像分析的皮肤管理服务提供装置以及方法，更详细地，涉及一种如下的基于图像分析的皮肤管理服务提供装置以及方法，基于深度学习分析用相机拍摄化妆品的容器来获得的图像，从而识别使用中的化妆品，基于深度学习分析使用中的化妆品来预测用户的皮肤类型后，推荐适合用户的皮肤类型的化妆品。

技术介绍

[0002]最近，用于保护皮肤免受含有污染物质的大气环境的影响且保持健康皮肤的皮肤管理得到了更多的关注，由于外部环境的持续变化，皮肤过敏的种类也变得多样化，从而用于预防皮肤过敏的化妆品开发也在持续进行中。
[0003]但是，不仅存在用户难以分析自己皮肤类型的问题，而且还存在很难从各种化妆品中挑选适合自己皮肤类型的化妆品的问题。
[0004]由此，用户选择不适合自己皮肤的化妆品来使用，从而使皮肤过敏恶化，并且，在挑选适合自己皮肤的化妆品的过程中，还需要购买不适合皮肤的化妆品，因此存在用户负担相当高的费用的问题。
[0005]现有技术文献
[0006]专利文献
[0007]专利文献1：韩国公开专利第10
‑
2020
‑
0117251号

技术实现思路

[0008]专利技术所要解决的问题
[0009]本专利技术的目的在于，从用户接收拍摄用户使用中的化妆品的容器的图像，将该图像适用于以用于识别化妆品的用途学习的模型，从而识别用户使用中的化妆品，基于深度学习分析使用中的化妆品来预测用户的皮肤类型后，推荐适合用户的皮肤类型的化妆品，从而使选择用于改善皮肤状态的化妆品时所需的用户的时间和费用最小化。
[0010]用于解决问题的方案
[0011]根据本专利技术实施例的基于图像分析的皮肤管理服务提供装置可以包括：通信部，其从用户终端接收包括拍摄使用中的一个以上的化妆品各自的容器的上述化妆品各自的容器图像的委托信息；存储部，其存储互不相同的多个化妆品各自的化妆品信息和互不相同的多个皮肤类型各自的化妆品选择基准的基准信息；容器分析部，其通过将包括在上述委托信息的上述化妆品各自的容器图像适用于以学习上述化妆品的容器图像与对应于上述化妆品的化妆品识别信息之间的相关关系的方式预设的第1学习模型，来获得与上述委托信息对应的一个以上的化妆品识别信息；皮肤类型分析部，其包括学习构成化妆品的成分与皮肤类型之间的相关关系的第2学习模型；以及控制部，其在通过上述通信部接收上述委托信息时，通过上述容器分析部获得与上述委托信息对应的一个以上的化妆品识别信息，基于获得的一个以上的上述化妆品识别信息搜索上述存储部，获得分别与获得的一个
以上的上述化妆品识别信息对应的一个以上的化妆品信息，分别作为用户的拥有化妆品信息，在分别从一个以上的上述拥有化妆品信息中提取成分信息后，通过与上述皮肤类型分析部的联动，将提取的一个以上的上述成分信息适用于上述第2学习模型，来确定对上述用户预测的预料皮肤类型，并将基于与上述预料皮肤类型对应的上述基准信息，判断一个以上的上述拥有化妆品信息各自是否适合上述预料皮肤类型及是否包括需要避讳的避讳对象成分信息的判断结果信息提供给上述用户终端。
[0012]作为与本专利技术相关的一例，上述控制部基于上述判断结果信息，将一个以上的上述拥有化妆品信息中的适合用户的同时不包括避讳对象成分的化妆品信息设置为使用对象化妆品信息，基于一个以上的上述使用对象化妆品信息各自所包括的用量、使用方法以及与属于其他类别的化妆品的组合使用方法中的至少一个，生成对于一个以上的上述使用对象化妆品信息的使用计划表相关的计划表信息后发送至上述用户终端。
[0013]作为与本专利技术相关的一例，上述存储部存储分别与多个化妆品信息中的至少一个匹配的一个以上的化妆工具信息，上述控制部基于上述使用对象化妆品信息搜索上述存储部，如果存在与上述使用对象化妆品信息匹配的特定化妆工具信息，则将上述特定化妆工具信息匹配于上述计划表信息中的与上述特定化妆工具信息匹配的化妆品信息后包括在上述计划表信息中。
[0014]作为与本专利技术相关的一例，上述委托信息包括：皮肤状态信息、拍摄使用于特定身体部位的一个以上的化妆品各自的容器的上述化妆品各自的容器图像以及对于指代上述特定身体部位的名称的身体部位信息，其中，上述皮肤状态信息包括拍摄发生皮肤过敏的特定身体部位的皮肤状态的第1图像或者拍摄未发生皮肤过敏的上述特定身体部位的皮肤状态的第2图像的同时，包括皮肤过敏发生与否，上述服务提供装置还包括：学习部，其仅将包括上述第2图像的委托信息作为对象，将上述第2图像以及上述身体部位信息与通过上述容器分析部获得的一个以上的化妆品识别信息相匹配后，使预设的第3学习模型进行学习，当接收上述委托信息时，上述控制部与上述学习部联动，将包括在上述委托信息的上述第1图像以及第2图像中的任一个和上述身体部位信息适用于上述第3学习模型，由此通过上述第3学习模型，计算出包括预测使用于与用户的皮肤类型相似的皮肤类型的一个以上的化妆品各自的化妆品识别信息的输出信息，基于包括在上述输出信息的一个以上的化妆品识别信息搜索上述存储部，来生成包括与上述输出信息对应的一个以上的化妆品信息的化妆品推荐信息后发送至上述用户终端。
[0015]作为与本专利技术相关的一例，上述控制部通过上述通信部接收与包括上述第2图像的委托信息中提取的上述第2图像对应的一个以上的新化妆品的化妆品组合信息，并将与上述第2图像对应的从委托信息中提取的身体部位信息与上述第2图像以及上述化妆品组合信息相匹配后，使上述第3学习模型进行学习。
[0016]作为与本专利技术相关的一例，如果上述控制部从接收上述化妆品推荐信息的上述用户终端中接收包括上述化妆品推荐信息中所包括的推荐化妆品中的上述用户使用的一个以上的使用化妆品各自的化妆品识别信息的反馈信息，则从与上述反馈信息对应的委托信息中提取上述第1图像或者第2图像和身体部位信息后，与包括在上述反馈信息的使用化妆品各自的化妆品识别信息进行匹配来生成学习数据，并与上述学习部联动，使上述第3学习模型学习与上述反馈信息对应的上述学习数据。
[0017]作为与本专利技术相关的一例，上述控制部确认根据上述反馈信息的推荐分数，只有在推荐分数为预设的基准值以上的情况下，基于上述反馈信息生成上述学习数据后，使上述第3学习模型进行学习。
[0018]作为与本专利技术相关的一例，上述控制部将对应于上述委托信息的一个以上的拥有化妆品信息与对应于上述用户终端的用户的会员信息进行匹配后积累存储在上述存储部，基于积累存储的上述拥有化妆品信息生成上述用户的偏爱信息，当生成上述化妆品推荐信息时，通过反映上述偏爱信息来选择将要包括在上述化妆品推荐信息的一个以上的推荐化妆品。
[0019]作为与本专利技术相关的一例，上述偏爱信息按照化妆品类别包括用户偏爱的品牌、价格以及成分中的至少一个。
[0020]作为与本专利技术相关的一例，上述容器图像包括对于化妆品容器的标签、化妆品容器的模样、化妆品容器的大小、化妆品容器的本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于图像分析的皮肤管理服务提供装置，其特征在于，包括：通信部，其从用户终端接收包括拍摄使用中的一个以上的化妆品各自的容器的所述化妆品各自的容器图像的委托信息；存储部，其存储互不相同的多个化妆品各自的化妆品信息和互不相同的多个皮肤类型各自的化妆品选择基准的基准信息；容器分析部，其通过将包括在所述委托信息的所述化妆品各自的容器图像适用于以学习所述化妆品的容器图像与对应于所述化妆品的化妆品识别信息之间的相关关系的方式预设的第1学习模型，来获得与所述委托信息对应的一个以上的化妆品识别信息；皮肤类型分析部，其包括学习构成化妆品的成分与皮肤类型之间的相关关系的第2学习模型；以及控制部，其在通过所述通信部接收所述委托信息时，通过所述容器分析部获得与所述委托信息对应的一个以上的化妆品识别信息，基于获得的一个以上的所述化妆品识别信息搜索所述存储部，获得分别与获得的一个以上的所述化妆品识别信息对应的一个以上的化妆品信息，分别作为用户的拥有化妆品信息，在分别从一个以上的所述拥有化妆品信息中提取成分信息后，通过与所述皮肤类型分析部的联动，将提取的一个以上的所述成分信息适用于所述第2学习模型，来确定对所述用户预测的预料皮肤类型，并将基于与所述预料皮肤类型对应的所述基准信息，判断一个以上的所述拥有化妆品信息各自是否适合所述预料皮肤类型及是否包括需要避讳的避讳对象成分信息的判断结果信息提供给所述用户终端。2.根据权利要求1所述的基于图像分析的皮肤管理服务提供装置，其特征在于，所述控制部基于所述判断结果信息，将一个以上的所述拥有化妆品信息中的适合用户的同时不包括避讳对象成分的化妆品信息设置为使用对象化妆品信息，基于一个以上的所述使用对象化妆品信息各自所包括的用量、使用方法以及与属于其他类别的化妆品的组合使用方法中的至少一个，生成对于一个以上的所述使用对象化妆品信息的使用计划表相关的计划表信息后发送至所述用户终端。3.根据权利要求1所述的基于图像分析的皮肤管理服务提供装置，其特征在于，所述存储部存储分别与多个化妆品信息中的至少一个匹配的一个以上的化妆工具信息，所述控制部基于所述使用对象化妆品信息搜索所述存储部，如果存在与所述使用对象化妆品信息匹配的特定化妆工具信息，则将所述特定化妆工具信息匹配于所述计划表信息中的与所述特定化妆工具信息匹配的化妆品信息后包括在所述计划表信息中。4.根据权利要求1所述的基于图像分析的皮肤管理服务提供装置，其特征在于，所述委托信息包括：皮肤状态信息、拍摄使用于特定身体部位的一个以上的化妆品各自的容器的所述化妆品各自的容器图像以及对于指代所述特定身体部位的名称的身体部位信息，其中，所述皮肤状态信息包括拍摄发生皮肤过敏的特定身体部位的皮肤状态的第1图像或者拍摄未发生皮肤过敏的所述特定身体部位的皮肤状态的第2图像的同时，包括皮肤过敏发生与否，所述基于图像分析的皮肤管理服务提供装置还包括：学习部，其仅将包括所述第2图像的委托信息作为对象，将所述第2图像以及所述身体部位信息与通过所述容器分析部获得的一个以上的化妆品识别信息相匹配后，使预设的第3学习模型进行学习，
当接收所述委托信息时，所述控制部与所述学习部联动，将包括在所述委托信息的所述第1图像以及第2图像中的任一个和所述身体部位信息适用于所述第3学习模型，由此通过所述第3学习模型，计算出包括预测使用于与用户的皮肤类型相似的皮肤类型的一个以上的化妆品各自的化妆品识别信息的输出信息，基于包括在所述输出信息的一个以上的化妆品识别信息搜索所述存储部，...

【专利技术属性】
技术研发人员：黄载光，
申请(专利权)人：爱飞司可丽雅国际贸易有限公司，
类型：发明
国别省市：