数据通信方法及装置、分布式系统、设备和介质制造方法及图纸

技术编号:34890170 阅读:16 留言:0更新日期:2022-09-10 13:48
本公开提供了一种应用于分布式系统的数据通信方法及装置、设备和介质,涉及计算机技术领域,尤其涉及云计算技术领域。所述分布式系统包括多个节点,每个节点包括多个计算单元和多个通信单元,所述多个通信单元与所述多个计算单元分别通信连接,方法包括:响应于接收到第一节点中的第一计算单元向第二节点发送数据的数据发送请求,并且响应于确定所述第一节点包括与所述第二节点通信连接的第一通信单元,确定所述第一通信单元为目标通信单元;响应于确定所述目标通信单元与所述第一计算单元未处于通信连接状态,将数据转发至与所述目标通信单元通信连接的第二计算单元;以及经由所述目标通信单元,将数据从所述第二计算单元发送至所述第二节点。元发送至所述第二节点。元发送至所述第二节点。

【技术实现步骤摘要】
数据通信方法及装置、分布式系统、设备和介质


[0001]本公开涉及计算机
,尤其涉及云计算
,具体涉及一种应用于分布式系统的数据通信方法、装置、分布式系统、电子设备、计算机可读存储介质和计算机程序产品。

技术介绍

[0002]云计算(cloud computing),指的是通过网络接入弹性可扩展的共享物理或虚拟资源池,资源可以包括服务器、操作系统、网络、软件、应用和存储设备等,并可以以按需、自服务的方式对资源进行部署和管理的技术体系。通过云计算技术,可以为人工智能、区块链等技术应用、模型训练提供高效强大的数据处理能力。
[0003]分布式系统中包含多个节点,为了提升系统的计算能力,每个节点内可以包括多个计算单元,为提升分布式系统中各个计算单元的协同性能,各个计算单元之间需要实现数据通信。
[0004]在此部分中描述的方法不一定是之前已经设想到或采用的方法。除非另有指明,否则不应假定此部分中描述的任何方法仅因其包括在此部分中就被认为是现有技术。类似地,除非另有指明,否则此部分中提及的问题不应认为在任何现有技术中已被公认。

技术实现思路

[0005]本公开提供了一种应用于分布式系统的数据通信方法、装置、电子设备、计算机可读存储介质和计算机程序产品。
[0006]根据本公开的一方面,提供了一种应用于分布式系统的数据通信方法,所述分布式系统包括多个节点,每个节点包括多个计算单元和多个通信单元,所述多个通信单元与所述多个计算单元分别通信连接,所述多个通信单元中的每个通信单元与其他节点所包括的至少一个通信单元通信连接,所述方法包括:响应于接收到第一节点中的第一计算单元向第二节点发送数据的数据发送请求,并且响应于确定所述第一节点包括与所述第二节点通信连接的第一通信单元,确定所述第一通信单元为目标通信单元;响应于确定所述目标通信单元与所述第一计算单元未处于通信连接状态,将所述数据转发至与所述目标通信单元通信连接的第二计算单元;以及经由所述目标通信单元,将所述数据从所述第二计算单元发送至所述第二节点。
[0007]根据本公开的另一方面,还提供一种应用于分布式系统的数据通信方法,所述分布式系统包括多个节点,每个节点包括多个计算单元和多个通信单元,所述多个通信单元与所述多个计算单元分别通信连接,所述多个通信单元中的每个通信单元与其他节点所包括的至少一个通信单元通信连接,所述方法包括:响应于第二节点中的第三计算单元接收到数据,确定用于处理所述数据的目标计算单元;以及响应于所述目标计算单元与所述第三计算单元不同,并且所述第二节点包括所述目标计算单元,将所述数据转发至所述目标计算单元。
[0008]根据本公开的另一方面,提供了一种应用于分布式系统的数据通信装置,所述分布式系统包括多个节点,每个节点包括多个计算单元和多个通信单元,所述多个通信单元与所述多个计算单元分别通信连接,所述多个通信单元中的每个通信单元与其他节点所包括的至少一个通信单元通信连接,所述装置包括:第一确定单元,被配置用于响应于接收到第一节点中的第一计算单元向第二节点发送数据的数据发送请求,并且响应于确定所述第一节点包括与所述第二节点通信连接的第一通信单元,确定所述第一通信单元为目标通信单元;第一转发单元,被配置用于响应于所述目标通信单元与所述第一计算单元未处于通信连接状态,将所述数据转发至与所述目标通信单元通信连接的第二计算单元;以及发送单元,被配置用于经由所述目标通信单元,将所述数据从所述第二计算单元发送至所述第二节点,以使得所述第二节点能够接收所述数据。
[0009]根据本公开的另一方面,还提供一种应用于分布式系统的数据通信装置,所述分布式系统包括多个节点,每个节点包括多个计算单元和多个通信单元,所述多个通信单元与所述多个计算单元分别通信连接,所述多个通信单元中的每个通信单元与其他节点所包括的至少一个通信单元通信连接,所述装置包括:第二确定单元,被配置用于响应于第二节点中的第三计算单元接收到数据,确定用于处理所述数据的目标计算单元;以及第二转发单元,被配置用于响应于所述目标计算单元与所述第三计算单元不同,并且所述第二节点包括所述目标计算单元,将所述数据转发至所述目标计算单元。
[0010]根据本公开的另一方面,还提供一种分布式系统,包括多个节点,其中,所述多个节点中的每个节点包括:多个计算单元;与所述多个计算单元分别通信连接的多个通信单元,所述每个通信单元与其他节点所包括的至少一个通信单元通信连接;以及如上所述的任一种数据通信装置。
[0011]根据本公开的另一方面,提供了一种电子设备,包括:至少一个处理器;以及与所述至少一个处理器通信连接的存储器;其中所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行上述数据通信方法。
[0012]根据本公开的另一方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行上述数据通信方法。
[0013]根据本公开的另一方面,提供了一种计算机程序产品,包括计算机程序,其中,计算机程序在被处理器执行时能够实现上述数据通信方法。
[0014]根据本公开的一个或多个实施例,可以实现跨节点的数据通信,提升分布式系统中数据通信的灵活性。
[0015]应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
[0016]附图示例性地示出了实施例并且构成说明书的一部分,与说明书的文字描述一起用于讲解实施例的示例性实施方式。所示出的实施例仅出于例示的目的,并不限制权利要求的范围。在所有附图中,相同的附图标记指代类似但不一定相同的要素。
[0017]图1示出了根据本公开示例性实施例的数据通信方法的流程图;
[0018]图2示出了根据本公开示例性实施例的数据通信方法的流程图;
[0019]图3示出了根据本公开示例性实施例的数据通信装置的结构框图;
[0020]图4示出了根据本公开示例性实施例的数据通信装置的结构框图;
[0021]图5A

图5B示出了根据本公开示例性实施例的分布式系统的结构框图;
[0022]图6示出了能够用于实现本公开实施例的示例性电子设备的结构框图。
具体实施方式
[0023]以下结合附图对本公开的示范性实施例做出说明,其中包括本公开实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本公开的范围。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
[0024]在本公开中,除非另有说明,否则使用术语“第一”、“第二”等来描述各种要素不意图限定这些要素的位置关系、时序关系或重要性关系,这种术语只是用于将一个元件与另一元件区分开。在一些示本文档来自技高网
...

【技术保护点】

【技术特征摘要】
1.一种应用于分布式系统的数据通信方法,所述分布式系统包括多个节点,每个节点包括多个计算单元和多个通信单元,所述多个通信单元与所述多个计算单元分别通信连接,所述多个通信单元中的每个通信单元与其他节点所包括的至少一个通信单元通信连接,所述方法包括:响应于接收到第一节点中的第一计算单元向第二节点发送数据的数据发送请求,并且响应于确定所述第一节点包括与所述第二节点通信连接的第一通信单元,确定所述第一通信单元为目标通信单元;响应于确定所述目标通信单元与所述第一计算单元未处于通信连接状态,将所述数据转发至与所述目标通信单元通信连接的第二计算单元;以及经由所述目标通信单元,将所述数据从所述第二计算单元发送至所述第二节点。2.如权利要求1所述的方法,还包括:响应于接收到第一节点中的第一计算单元向第二节点发送数据的数据发送请求,并且响应于确定所述第一节点所包括的任一通信单元均不与所述第二节点通信连接,确定与第三节点通信连接的第二通信单元为目标通信单元,其中,所述第三节点能够通过至少一个通信单元与所述第二节点通信连接;以及经由所述目标通信单元,将所述数据从所述第二计算单元发送至所述第三节点,以使得所述第三节点能够将所述数据转发给所述第二节点。3.如权利要求1或2所述的方法,其中,所述每个通信单元包括与所述多个计算单元分别对应的多个通信链路,并且其中,所述经由所述目标通信单元,将所述数据从所述第二计算单元发送至所述第二节点包括:经由所述目标通信单元中与所述第一计算单元对应的通信链路,将所述数据从所述第二计算单元发送至所述第二节点。4.如权利要求1

3中任一项所述的方法,其中,所述多个节点构成N维环面结构。5.一种应用于分布式系统的数据通信方法,所述分布式系统包括多个节点,每个节点包括多个计算单元和多个通信单元,所述多个通信单元与所述多个计算单元分别通信连接,所述多个通信单元中的每个通信单元与其他节点所包括的至少一个通信单元通信连接,所述方法包括:响应于第二节点中的第三计算单元接收到数据,确定用于处理所述数据的目标计算单元;以及响应于确定所述目标计算单元与所述第三计算单元不同,并且确定所述第二节点包括所述目标计算单元,将所述数据转发至所述目标计算单元。6.如权利要求5所述的方法,还包括:响应于确定所述第二节点不包括所述目标计算单元,并且确定所述第二节点包括与包括所述目标计算单元的第四节点通信连接的第三通信单元,确定所述第三通信单元为中转通信单元;将所述数据转发至与所述中转通信单元通信连接的第四计算单元;以及经由所述中转通信单元,将所述数据从所述第四计算单元发送至所述第四节点。7.如权利要求6所述的方法,其中,所述每个通信单元包括与所述多个计算单元分别对应的多个通信链路,并且其中,所述经由所述中...

【专利技术属性】
技术研发人员:李兆耕程钢
申请(专利权)人:北京百度网讯科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1