System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本专利技术涉及数据处理领域,具体而言,涉及一种计算任务的执行方法、装置、电子设备及存储介质。
技术介绍
1、计算任务执行时需要获取数据文件的地址信息,在文件系统中,文件被分割成一系列的块,每个块具有固定的大小,用来存储文件的内容,数据文件被存储在多个存储空间或者数据单元,即数据块或文件块(block)中,计算任务执行时就需要确定数据文件对应的各数据块的地址信息。
2、由于计算任务所需文件可能存储在多个文件块中,文件块在存储上可能并不连续,目前,相关技术中获取计算任务所需文件块地址信息的方法较为复杂,导致获取计算任务所需文件的时间较长,造成计算任务的执行效率较低。
3、针对上述的问题,目前尚未提出有效的解决方案。
技术实现思路
1、本专利技术实施例提供了一种计算任务的执行方法、装置、电子设备及存储介质,以至少解决相关技术中计算任务的执行效率较低的技术问题。
2、根据本专利技术实施例的一个方面,提供了一种计算任务的执行方法,包括:响应于接收到计算任务的执行指令,获取计算任务所需文件的预设文件名称;确定预设文件名称对应的文件块列表,比对文件块列表中至少一个文件块对应的目标文件名称和预设文件名称,得到第一比对结果,其中,第一比对结果用于表示文件块列表中是否存在计算任务所需的目标文件块;基于第一比对结果执行计算任务,得到执行结果,其中,执行结果用于表示是否成功执行计算任务。
3、可选地,基于第一比对结果执行计算任务,得到执行结果,包括:若第一比
4、可选地,比对文件块列表中至少一个文件块对应的目标文件名称和预设文件名称,得到第一比对结果,包括:利用布隆过滤器判断目标文件名称中是否存在预设文件名称;若确定目标文件名称中不存在预设文件名称,确定第一比对结果为文件块列表中不存在计算任务所需的目标文件块;若确定目标文件名称中存在预设文件名称,根据预设文件名称中包含的分片信息确定第一比对结果,其中,分片信息用于表示预设文件名称对应的文件块所在分片的信息。
5、可选地,根据预设文件名称中包含的分片信息确定第一比对结果,包括:获取分片信息中的分片名称和分片序号;基于分片名称构建预设文件名称的字符信息,其中,字符信息用于表示预设文件名称中所包含的字符的信息;基于分片序号构建字符信息的预设子位图,其中,预设子位图用于通过二进制数据表示字符信息;基于预设子位图和目标文件名称对应的目标子位图确定第一比对结果。
6、可选地,基于预设子位图和目标文件名称对应的目标子位图确定第一比对结果,包括:比对预设子位图和目标文件名称对应的目标子位图,得到第二比对结果,其中,第二比对结果用于表示目标子位图中是否存在与预设子位图相同的子位图;若第二比对结果为目标子位图中存在与预设子位图相同的子位图,确定第一比对结果为文件块列表中存在目标文件块,并确定文件块列表中子位图对应的文件块为目标文件块;若第二比对结果为目标子位图中不存在与预设子位图相同的子位图,确定第一比对结果为文件块列表中不存在目标文件块。
7、可选地,基于分片名称构建预设文件名称的字符信息,包括:若分片名称中包含的目标数值大于预设数值,基于目标数值构建数组,并确定数组为字符信息;若目标数值小于或等于预设数值,基于目标数值构建字符串,并确定字符串为字符信息。
8、可选地,基于目标文件块的主机地址信息调用目标文件块中的目标数据以执行计算任务,得到执行结果,包括:获取计算任务对应的至少一个计算节点,并基于主机地址信息构建主机拓扑图;利用主机拓扑图调用目标文件块中的目标数据,并向至少一个计算节点推送目标数据以执行计算任务,得到执行结果。
9、根据本专利技术实施例的另一方面,还提供了一种计算任务的执行装置,包括:获取模块,用于响应于接收到计算任务的执行指令,获取计算任务所需文件的预设文件名称;确定模块,用于确定预设文件名称对应的文件块列表,比对文件块列表中至少一个文件块对应的目标文件名称和预设文件名称,得到第一比对结果,其中,第一比对结果用于表示文件块列表中是否存在计算任务所需的目标文件块;执行模块,用于基于第一比对结果执行计算任务,得到执行结果,其中,执行结果用于表示是否成功执行计算任务。
10、根据本专利技术实施例的另一方面,还提供了一种电子设备,包括:存储器,存储有可执行程序;处理器,用于运行程序,其中,程序运行时执行本专利技术各个实施例中的方法。
11、根据本专利技术实施例的另一方面,还提供了一种计算机可读存储介质,计算机可读存储介质包括存储的可执行程序,其中,在可执行程序运行时控制计算机可读存储介质所在设备执行本专利技术各个实施例中的方法。
12、根据本专利技术实施例的另一方面,还提供了一种计算机程序产品,包括计算机程序,计算机程序在被处理器执行时实现本专利技术各个实施例中的方法。
13、根据本专利技术实施例的另一方面,还提供了一种计算机程序产品,包括非易失性计算机可读存储介质,所述非易失性计算机可读存储介质存储计算机程序,所述计算机程序被处理器执行时实现本专利技术各个实施例中的方法。
14、根据本专利技术实施例的另一方面,还提供了一种计算机程序,计算机程序被处理器执行时实现本专利技术各个实施例中的方法。
15、在本专利技术实施例中,响应于接收到计算任务的执行指令,获取计算任务所需文件的预设文件名称;确定预设文件名称对应的文件块列表,比对文件块列表中至少一个文件块对应的目标文件名称和预设文件名称,得到第一比对结果,其中,第一比对结果用于表示文件块列表中是否存在计算任务所需的目标文件块;基于第一比对结果执行计算任务,得到执行结果,其中,执行结果用于表示是否成功执行计算任务;容易注意到的是,本申请提出的基于计算任务所需文件的预设文件名称与对应的文件块列表的目标文件名称进行比对,基于比对结果可以确认存在目标文件块的文件块列表,实现对文件块列表的筛选,进而可以确定目标文件块的地址信息,简化了获取目标文件块地址信息的方法,从而可以高效地获取到执行计算任务所需各文件块的地址信息,便于计算任务的顺利执行,进而解决了相关技术中计算任务的执行效率较低的技术问题。
本文档来自技高网...【技术保护点】
1.一种计算任务的执行方法,其特征在于,包括:
2.根据权利要求1所述的方法,其特征在于,基于所述第一比对结果执行所述计算任务,得到执行结果,包括:
3.根据权利要求1所述的方法,其特征在于,比对所述文件块列表中至少一个文件块对应的目标文件名称和所述预设文件名称,得到第一比对结果,包括:
4.根据权利要求3所述的方法,其特征在于,根据所述预设文件名称中包含的分片信息确定所述第一比对结果,包括:
5.根据权利要求4所述的方法,其特征在于,基于所述预设子位图和所述目标文件名称对应的目标子位图确定所述第一比对结果,包括:
6.根据权利要求4所述的方法,其特征在于,基于所述分片名称构建所述预设文件名称的字符信息,包括:
7.根据权利要求6所述的方法,其特征在于,基于所述目标文件块的主机地址信息调用所述目标文件块中的目标数据以执行所述计算任务,得到所述执行结果,包括:
8.一种计算任务的执行装置,其特征在于,包括:
9.一种电子设备,其特征在于,包括:
10.一种计算机可读存储介质,
11.一种计算机程序产品,其特征在于,包括计算机程序,所述计算机程序在被处理器执行时实现根据权利要求1至7中任意一项所述的计算任务的执行方法。
...【技术特征摘要】
1.一种计算任务的执行方法,其特征在于,包括:
2.根据权利要求1所述的方法,其特征在于,基于所述第一比对结果执行所述计算任务,得到执行结果,包括:
3.根据权利要求1所述的方法,其特征在于,比对所述文件块列表中至少一个文件块对应的目标文件名称和所述预设文件名称,得到第一比对结果,包括:
4.根据权利要求3所述的方法,其特征在于,根据所述预设文件名称中包含的分片信息确定所述第一比对结果,包括:
5.根据权利要求4所述的方法,其特征在于,基于所述预设子位图和所述目标文件名称对应的目标子位图确定所述第一比对结果,包括:
6.根据权利要求4所述的方法,其特征在于,基于所述分片名称构建所述预设文件...
【专利技术属性】
技术研发人员:阮宜龙,谢永震,杨磊,燕媛媛,
申请(专利权)人:中电信人工智能科技北京有限公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。