一种流式数据的检测方法、装置及设备制造方法及图纸

本说明书实施例公开了一种流式数据的检测方法、装置及设备。方法包括：被测程序将所述被测程序第一时间段内生成的待测试流式数据发送至kafka消息中间件服务器；所述待测试流式数据中包括开始切点数据和结束切点数据；所述kafka消息中间件服务器将所述待测试流式数据分发至测试服务器；所述测试服务器检测所述开始切点数据是否满足前置断言，得到第一检测结果；所述测试服务器检测所述结束切点数据是否满足后置断言，得到第二检测结果；若所述第一检测结果表示所述开始切点数据满足所述前置断言，且若所述第二检测结果表示所述结束切点数据满足所述后置断言，确定所述待测试流式数据通过检测。数据通过检测。数据通过检测。

【技术实现步骤摘要】
一种流式数据的检测方法、装置及设备


[0001]本申请涉及数据检测领域，尤其涉及一种流式数据的检测方法、装置及设备。

技术介绍

[0002]流式数据是一组顺序、大量、快速、连续到达的数据序列，一般情况下，流式数据可被视为一个随时间延续而无限增长的动态数据集合，时间跨度在数百毫秒到数秒之间。
[0003]在自动驾驶
，自动驾驶数据均以流式数据进行传输，只有以流式数据的形式才能完整的记录自动驾驶车辆在驾驶过程中的实时动态，被测程序可以每100毫秒发送一条消息到中间件服务器，在自动驾驶车辆运行过程中会产生大量的数据，为了更好的控制自动驾驶车辆，需要对大量的数据进行检测。
[0004]目前程序检测主要以白盒测试为主，在自动化测试过程中，多使用断言的方式对于函数式计算的输出进行校验，函数式方法调用一次只输出一个结果，断言方法无需做到持续检测，但是，流式数据的数据是持续的流，针对流式数据普通断言无法做到实时持续地检测数据流的正确性，并且，现有技术对于流式数据顺序性检测和时延检测只能通过人工检测，检测效率均较低。
[0005]在自动驾驶
，数据均以流式数据类型存在，流式数据经过程序一系列计算之后再以流式形式输出，程序处理过程中的中间状态，可以通过log4j(Apache的一个开源项目)等日志技术，将希望校验的数据进行打印再进行人工对比，或者通过ELK(Elasticsearch、Logstash、Kibana三个开源软件的组合)日志收集工具收集后在kibana(一款开源的数据分析和可视化平台)页面查看日志，或者通过大数据标准件收集日志最后进行分析，现有技术对于自动驾驶车辆在运行过程中产生的流式数据的检测效率较低。
[0006]因此，如何高效地对流式数据进行检测，成为了亟待解决的技术问题。

技术实现思路

[0007]本说明书实施例提供一种流式数据的检测方法、装置及设备，以解决现有的程序检测方法存在的检测效率较低的问题。
[0008]为解决上述技术问题，本说明书实施例是这样实现的：
[0009]本说明书实施例提供的一种流式数据的检测方法，包括：
[0010]被测程序将所述被测程序第一时间段内生成的待测试流式数据发送至kafka消息中间件服务器；所述待测试流式数据中包括开始切点数据和结束切点数据；
[0011]所述kafka消息中间件服务器将所述待测试流式数据分发至测试服务器；
[0012]所述测试服务器检测所述开始切点数据是否满足前置断言，得到第一检测结果；
[0013]所述测试服务器检测所述结束切点数据是否满足后置断言，得到第二检测结果；
[0014]若所述第一检测结果表示所述开始切点数据满足所述前置断言，且若所述第二检测结果表示所述结束切点数据满足所述后置断言，确定所述待测试流式数据通过检测。
[0015]本说明书实施例提供的一种流式数据的检测装置，包括：
[0016]发送模块：被测程序将所述被测程序第一时间段内生成的待测试流式数据发送至kafka消息中间件服务器；所述待测试流式数据中包括开始切点数据和结束切点数据；
[0017]所述kafka消息中间件服务器将所述待测试流式数据分发至测试服务器；
[0018]判断模块：所述测试服务器检测所述开始切点数据是否满足前置断言，得到第一检测结果；
[0019]所述测试服务器检测所述结束切点数据是否满足后置断言，得到第二检测结果；
[0020]确定模块：若所述第一检测结果表示所述开始切点数据满足所述前置断言，且若所述第二检测结果表示所述结束切点数据满足所述后置断言，确定所述待测试流式数据通过检测。
[0021]本说明书实施例提供的一种流式数据的检测设备，包括：
[0022]至少一个处理器；以及，
[0023]与所述至少一个处理器通信连接的存储器；其中，
[0024]所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够：
[0025]被测程序将所述被测程序第一时间段内生成的待测试流式数据发送至kafka消息中间件服务器；所述待测试流式数据中包括开始切点数据和结束切点数据；
[0026]所述kafka消息中间件服务器将所述待测试流式数据分发至测试服务器；
[0027]所述测试服务器检测所述开始切点数据是否满足前置断言，得到第一检测结果；
[0028]所述测试服务器检测所述结束切点数据是否满足后置断言，得到第二检测结果；
[0029]若所述第一检测结果表示所述开始切点数据满足所述前置断言，且若所述第二检测结果表示所述结束切点数据满足所述后置断言，确定所述待测试流式数据通过检测。
[0030]本说明书一个实施例实现了能够达到以下有益效果：被测程序将所述被测程序第一时间段内生成的待测试流式数据发送至kafka消息中间件服务器；所述待测试流式数据中包括开始切点数据和结束切点数据；所述kafka消息中间件服务器将所述待测试流式数据分发至测试服务器；所述测试服务器检测所述开始切点数据是否满足前置断言，得到第一检测结果；所述测试服务器检测所述结束切点数据是否满足后置断言，得到第二检测结果；若所述第一检测结果表示所述开始切点数据满足所述前置断言，且若所述第二检测结果表示所述结束切点数据满足所述后置断言，确定所述待测试流式数据通过检测。将开始切点数据和结束切点数据分别发送至kafka消息中间件服务器，使用测试服务器检测开始切点数据是否满足前置断言，检测结束切点数据是否满足后置断言，从而可以实时连续地检测流式数据的正确性，提高流式数据的检测效率。
附图说明
[0031]为了更清楚地说明本说明书实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请中记载的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
[0032]图1为本说明书实施例中的一种流式数据的检测方法的应用场景示意图；
[0033]图2为本说明书实施例提供的一种流式数据的检测方法的流程示意图；
[0034]图3为本说明书实施例提供的一种流式数据的检测装置的结构示意图；
[0035]图4为本说明书实施例提供的一种流式数据的检测设备的结构示意图。
具体实施方式
[0036]为使本说明书一个或多个实施例的目的、技术方案和优点更加清楚，下面将结合本说明书具体实施例及相应的附图对本说明书一个或多个实施例的技术方案进行清楚、完整地描述。显然，所描述的实施例仅是本说明书的一部分实施例，而不是全部的实施例。基于本说明书中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本说明书一个或多个实施例保护的范围。
[0037]对于本说明书实施例中的用到的术语，先进行解释：
...

【技术保护点】

【技术特征摘要】
1.一种流式数据的检测方法，其特征在于，包括：被测程序将所述被测程序第一时间段内生成的待测试流式数据发送至kafka消息中间件服务器；所述待测试流式数据中包括开始切点数据和结束切点数据；所述kafka消息中间件服务器将所述待测试流式数据分发至测试服务器；所述测试服务器检测所述开始切点数据是否满足前置断言，得到第一检测结果；所述测试服务器检测所述结束切点数据是否满足后置断言，得到第二检测结果；若所述第一检测结果表示所述开始切点数据满足所述前置断言，且若所述第二检测结果表示所述结束切点数据满足所述后置断言，确定所述待测试流式数据通过检测。2.如权利要求1所述的方法，其特征在于，所述方法还包括：若所述第一检测结果表示所述开始切点数据不满足所述前置断言，记录所述第一检测结果，确定所述待测试流式数据未通过检测，停止测试。3.如权利要求1所述的方法，其特征在于，所述方法还包括：若所述第二检测结果表示所述结束切点数据不满足所述后置断言，记录所述第二检测结果，确定所述待测试流式数据未通过检测，停止测试。4.如权利要求1所述的方法，其特征在于，所述方法还包括：判断当前流式数据的第一时间戳是否大于上一流式数据的第二时间戳，得到第一判断结果；若所述第一判断结果表示所述第一时间戳大于所述第二时间戳，确定所述待测试流式数据通过检测；若所述第一判断结果表示所述第一时间戳小于所述第二时间戳，记录所述第一判断结果，确定所述待测试流式数据未通过检测，停止测试。5.如权利要求1所述的方法，其特征在于，所述方法还包括：获取当前流式数据的第一时间戳，以及上一流式数据的第二时间戳；判断所述第一时间戳与所述第二时间戳的差值是否大于预设时间，得到第二判断结果；若所述第二判断结果表示所述差值大于预设时间，记录所述第二判断结果，存储所述差值。6.如权利要求1所述的方法，其特征在于，所述方法还包括：被测程序将所述被测程序第二时间段内生...

【专利技术属性】
技术研发人员：薛野，
申请(专利权)人：云控智行科技有限公司，
类型：发明
国别省市：