【技术实现步骤摘要】
【国外来华专利技术】
本专利技术涉及一种具有用水家用电器的系统并且涉及一种用于运行用水家用电器的方法。
技术介绍
1、已知的用水家用电器(例如洗碗机)典型地具有多个处理程序，例如，清洁程序或用于冲洗物品(例如餐具)的冲洗程序。
2、传统上，大量家用电器都开发了处理程序。例如，家用电器制造商开发处理程序并将开发的处理程序存储在家用电器的存储器中。在运行中，家用电器的用户可以选择预定义的和预先存储的处理程序中的一个。但是，家用电器的用户或消费者在使用家用电器时的习惯上非常不同。不利地，预定义的处理程序无法涵盖多个不同用户的这些不同习惯。此外，传统的处理程序由手动且明确产生的程序代码表示，这些代码在开发过程中被特别地生成和交付。
技术实现思路
1、本专利技术的一个目的是提供一种改进的用水家用电器。
2、根据第一方面，提出了一种具有用水家用电器(特别是洗碗机)的系统。该系统包括：
3、控制装置，用于执行多个处理程序中的特定处理程序，处理程序中的每一个具有多个子程序和多个换水并且由多个程序参数确定，
4、观察单元，用于通过观察特定处理程序的执行来提供观察结果，解释器单元，用于通过解释所提供的观察结果来提供奖励，
5、提供单元，用于通过使用处理策略和深度强化学习过程来适配特定处理程序来提供适配的处理程序，该深度强化学习过程使用所提供的奖励作为输入，以及
6、接收器单元，用于接收适配的处理程序并且向控制装置提供所接收的适配的处理程序，其中，该控制
7、例如，用水家用电器被实现为洗碗机或洗衣机。该处理程序可以是用于冲洗物品的清洁程序或冲洗程序。例如，冲洗物品是待冲洗或漂洗的物品，例如刀叉餐具、盘子、锅等。
8、有利地，本系统具有提供适配的处理程序的能力。因为本系统使用取决于观察结果和深度强化学习过程(drl)的奖励，所提供的适配的处理程序是用户特定的和用户定制的。特别地，深度强化学习过程的使用为适配处理程序提供了适配的、智能的、自学习的和消费者定制的机制。这种新类型的处理程序(即，适配的处理程序)不再通过经验性方案(如专家知识和试错)产生。
9、使用包括深度强化学习的本机制，这个自学习系统能够使装置的过程保持动态使得在使用期间更好地适应客户的需求。使用当前方案，每个家用电器可以在其整个产品寿命期内独立发展，特别是它可以适应使用特定家用电器的地方的特定习惯。深度强化学习(deep rl)结合了强化学习(rl)和深度学习。
10、在执行特定处理程序期间，可以使用洗涤剂，例如片状洗涤剂。洗涤剂优选包括一个或多个用于自动清洁或冲洗过程的活性成分。如本领域技术人员将理解的是，在这些洗涤剂中使用的一种或多种活性成分的性质将取决于期望的应用而变化。当在洗碗机内使用时，这些洗涤剂可以例如包括一种活性成分，该活性成分执行洗碗机洗涤剂、漂洗助剂、机器吸尘器或洗碗机除臭功能、或支持该清洁过程的其他另外的化学成分、或其他物理或化学过程。在洗衣机的背景下，这些清洁剂例如可能包括执行洗衣液或柔顺剂功能的活性成分。合适的活性成分是技术人员已知的；示例包括漂白剂、漂白活化剂、漂白催化剂、酶、表面活性剂、助剂、ph调节剂、腐蚀抑制剂以及芳香剂。
11、根据实施方式，深度强化学习过程被配置为使用所提供的奖励作为输入来适配处理策略。
12、根据进一步的实施方式，处理策略包括处理结果的向量，它作为处理程序的运行参数的向量的函数。特别地，处理结果的向量可以包括多个向量分量。例如，这些向量分量包括用于期望清理结果的第一向量分量，用于期望干燥结果的第二向量分量，用于期望运行时结果的第三向量分量，和/或用于处理程序的期望能量消耗的第四向量分量。
13、每个向量分量可以包括或者可以由特定间隔表示。例如，期望干燥结果可以由间隔92％至95％表示。
14、根据另一实施方式，处理程序的运行参数包括家用电器的冲洗腔室中的水温、家用电器的泵的泵速、冲洗腔室中的水量、特定处理程序的商品量、该商品量特别包括特定处理程序的洗涤剂剂量、特定处理程序的漂洗剂剂量、特定处理程序的盐量和/或特定处理程序的芳香剂剂量、在处理程序过程中冲洗腔室中的换水次数、用于水软化剂再生的控制参数和/或软化水和自来水之间比例的控制参数。
15、根据另一实施方式，这些可调节的程序参数包括程序持续时间、清洁强度和/或干燥强度。
16、根据另一实施方式，该系统包括用于由用户调节这些可调节的程序参数的用户界面。
17、根据另一实施方式，处理结果包括运行时结果、清洁结果和/或干燥结果。
18、根据另一实施方式，相应处理程序的子程序步骤包括预漂洗、清洁、漂洗和/或干燥。特别地，按顺序执行子程序步骤。在实施方式中，相应处理程序的子程序步骤包括至少两个不同的温度。特别地，至少两个不同的温度都高于家用电器的环境温度。
19、根据进一步的实施方式，该观察单元被配置为提供观察结果，该观察结果包括在特定处理程序的执行期间的家用电器的性能参数和/或性能消耗参数和/或消耗。
20、在实施方式中，性能参数包括：
21、指示特定处理程序的清洗结果的参数，
22、指示特定处理程序的干燥结果的参数，
23、指示特定处理程序的运行时结果的参数，
24、指示由特定处理程序冲洗的冲洗物品的斑点的参数，
25、指示特定处理程序的卫生的参数，
26、指示特定处理程序的声音的参数，和/或
27、指示冲洗物品的玻璃的玻璃腐蚀的参数。
28、在实施方式中，消耗参数特别地包括：
29、指示特定处理程序的功耗的参数，
30、指示特定处理程序的水消耗的参数，
31、指示特定处理程序的盐消耗的参数，
32、指示特定处理程序的洗涤剂剂量的参数，和/或
33、指示特定处理程序的co2消耗的参数。
34、根据另一实施方式，该奖励包括运行时奖励、清洁奖励、干燥奖励、针对由特定处理程序冲洗的冲洗物品上污点去除的奖励、对特定处理程序的卫生的奖励、对特定处理程序的声音的奖励、对这些冲洗物品的玻璃的玻璃腐蚀的奖励、对特定处理程序的功耗的奖励、对特定处理程序的水消耗的奖励，对特定处理程序的洗涤剂剂量的奖励、和/或对于特定处理程序的co2消耗的奖励。
35、根据另一实施方式，提供单元被配置为使用处理策略，深度强化学习过程以及家用电器的环境数据来提供适配处理程序。
36、在实施方式中，环境数据包括与家用电器相关联的用户数据、与家用电器相关联的传感器数据、通过测试家用电器所生成的测试数据、通过使用家用电器的数字孪生模拟家用电器所生成的模拟数据、和/或描述家用电器的本地环境(特别包括温度和湿度)的环境数据。
37、根据另一实施方式，提供单元被配置为额外使本文档来自技高网...
【技术保护点】
1.一种具有用水家用电器(1)的系统(100)，所述用水家用电器特别是洗碗机，所述系统(100)包括：
2.根据权利要求1所述的系统，其中，所述深度强化学习过程(DRL)被配置为使用所提供的奖励(R)作为输入来适配所述处理策略(TP)。
3.根据权利要求1或2所述的系统，其中，所述处理策略(TP)包括处理结果的向量，所述向量作为所述处理程序的运行参数的向量的函数。
4.根据权利要求3所述的系统，其中，所述处理程序的运行参数包括所述家用电器(1)的冲洗腔室(4)中的水温、所述家用电器(1)的泵的泵速、所述冲洗腔室(4)中的水量、所述特定处理程序的商品量、所述商品量特别包括所述特定处理程序的洗涤剂剂量、所述特定处理程序的漂洗剂剂量、所述特定处理程序的盐量和/或所述特定处理程序的芳香剂剂量、在所述处理程序期间所述冲洗腔室(4)中的换水次数、用于水软化剂再生的控制参数和/或软化水与自来水之间比例的控制参数。
5.根据权利要求1至4中任一项所述的系统，其中，可调整程序参数包括程序持续时间、清洁强度和/或干燥强度，所述系统(100)特别包括用于
6.根据权利要求3至5中任一项所述的系统，其中，所述处理结果包括运行时结果、清洁结果和/或干燥结果。
7.根据权利要求1至6中任一项所述的系统，其中，相应处理程序的子程序步骤包括预漂洗、清洁、漂洗和/或干燥，其中，顺序地执行所述子程序步骤，其中，所述相应处理程序的子程序步骤特别包括至少两个不同的温度。
8.根据权利要求1至7中任一项所述的系统，其中，所述观察单元(16)被配置为在所述特定处理程序的执行期间提供包括所述家用电器(1)的性能参数和/或性能消耗参数和/或消耗的观察结果(O)，
9.根据权利要求1至8中任一项所述的系统，其中，所述奖励(R)包括运行时奖励(R1)、清洁奖励(R2)、干燥奖励(R3)、针对由所述特定处理程序冲洗的冲洗物品上的污点去除的奖励、对所述特定处理程序的卫生的奖励、对所述特定处理程序的声音的奖励、对所述冲洗物品的玻璃的玻璃腐蚀的奖励、对所述特定处理程序的功耗的奖励、对所述特定处理程序的水消耗的奖励、对所述特定处理程序的洗涤剂剂量的奖励和/或对于特定处理程序的CO2消耗的奖励。
10.根据权利要求1至9中任一项所述的系统，其中，所述提供单元(18)被配置为使用所述处理策略(TP)、所述深度强化学习过程(DRL)以及所述家用电器(1)的环境数据来提供所述适配的处理程序(AT)，其中，所述环境数据特别包括与所述家用电器(1)相关联的用户数据、与所述家用电器(1)相关联的传感器数据、通过测试所述家用电器(1)所生成的测试数据、通过使用所述家用电器(1)的数字孪生来模拟所述家用电器(1)所生成的模拟数据和/或描述所述家用电器(1)的本地环境的环境数据，所述环境数据特别包括温度和湿度。
11.根据权利要求1至10中任一项所述的系统，其中，所述家用电器(1)包括所述控制装置(15)、所述观察单元(16)、所述解释器单元(17)、所述提供单元(18)和所述接收器单元(19)。
12.根据权利要求1至10中任一项所述的系统，其中，所述系统(100)包括所述家用电器(1)和位于所述家用电器(1)外部的代理装置(200)，
13.根据权利要求1至12中任一项所述的系统，还包括：检查单元(20)，所述检查单元(20)被配置为检查由所述解释器单元(17)提供的奖励(R)是否达到第一预定义阈值，其中，所述检查单元(20)特别被配置为如果所述奖励(R)低于所述第一预定义阈值，则利用所述奖励(R)触发所述深度强化学习过程(DRL)。
14.根据权利要求13所述的系统，其中，所述检查单元(20)被配置为计算提供的奖励(R)与所述第一预定义阈值的差值与应用于所述特定处理程序的深度强化学习过程(DRL)的数量之间的比率，以确定学习进度，其中，所述检查单元(20)还被配置为如果所计算的比率大于第二预定阈值，则适配所述处理策略(TP)和/或所述深度强化学习过程(DRL)。
15.一种用于运行用水家用电器(1)的计算机实现的方法，所述用水家用电器特别为洗碗机，所述方法包括：
16.一种用于运行用水家用电器(1)的计算机程序产品，所述计算机程序产品包括机器可读指令，当所述机器可读指令由一个或多个处理单元执行时，使得所述一个或多个处理单元执行根据权利要求15所述的方法。
17.一种用于运行用水家用电器(1)的计算机实现的装置，所述用水家用电器特别为洗碗机，所述计算机实现的装置包括：<...
【技术特征摘要】
【国外来华专利技术】
1.一种具有用水家用电器(1)的系统(100)，所述用水家用电器特别是洗碗机，所述系统(100)包括：
2.根据权利要求1所述的系统，其中，所述深度强化学习过程(drl)被配置为使用所提供的奖励(r)作为输入来适配所述处理策略(tp)。
3.根据权利要求1或2所述的系统，其中，所述处理策略(tp)包括处理结果的向量，所述向量作为所述处理程序的运行参数的向量的函数。
4.根据权利要求3所述的系统，其中，所述处理程序的运行参数包括所述家用电器(1)的冲洗腔室(4)中的水温、所述家用电器(1)的泵的泵速、所述冲洗腔室(4)中的水量、所述特定处理程序的商品量、所述商品量特别包括所述特定处理程序的洗涤剂剂量、所述特定处理程序的漂洗剂剂量、所述特定处理程序的盐量和/或所述特定处理程序的芳香剂剂量、在所述处理程序期间所述冲洗腔室(4)中的换水次数、用于水软化剂再生的控制参数和/或软化水与自来水之间比例的控制参数。
5.根据权利要求1至4中任一项所述的系统，其中，可调整程序参数包括程序持续时间、清洁强度和/或干燥强度，所述系统(100)特别包括用于由用户调整所述可调整程序参数的用户界面。
6.根据权利要求3至5中任一项所述的系统，其中，所述处理结果包括运行时结果、清洁结果和/或干燥结果。
7.根据权利要求1至6中任一项所述的系统，其中，相应处理程序的子程序步骤包括预漂洗、清洁、漂洗和/或干燥，其中，顺序地执行所述子程序步骤，其中，所述相应处理程序的子程序步骤特别包括至少两个不同的温度。
8.根据权利要求1至7中任一项所述的系统，其中，所述观察单元(16)被配置为在所述特定处理程序的执行期间提供包括所述家用电器(1)的性能参数和/或性能消耗参数和/或消耗的观察结果(o)，
9.根据权利要求1至8中任一项所述的系统，其中，所述奖励(r)包括运行时奖励(r1)、清洁奖励(r2)、干燥奖励(r3)、针对由所述特定处理程序冲洗的冲洗物品上的污点去除的奖励、对所述特定处理程序的卫生的奖励、对所述特定处理程序的声音的奖励、对所述冲洗物品的玻璃的玻璃腐蚀的奖励、对所述特定处理程序的功耗的奖励、对所述特定处理程序的水消耗的奖励、对所述特定处理程序的洗涤剂剂量的奖励和/或对于特定处理程序的co2消耗的奖...
【专利技术属性】
技术研发人员：凯·潘特内尔，库尔迪普·纳拉扬·辛格，迈克尔·鲁普，
申请(专利权)人：BSH家用电器有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。