数据通道的流控方法和调整方法技术

技术编号:20824958 阅读:29 留言:0更新日期:2019-04-10 07:16
本发明专利技术公开了一种数据通道的流控方法和调整方法。其中,流控方法包括:获取待写入数据通道的数据集合中各数据的标识,根据各数据的标识、将各数据写入对应的数据通道以进行数据传输;其中,各数据通道均对应的数据区间形成一个固定的区间范围,各数据中携带有标识,标识对应于一数据区间。本发明专利技术解决了由于现有技术无法自动调整通道数量而导致资源浪费的技术问题。

【技术实现步骤摘要】
数据通道的流控方法和调整方法
本专利技术涉及计算机网络领域,具体而言,涉及一种数据通道的流控方法和调整方法。
技术介绍
随着网络技术的快速发展,人们在日常生活中已离不开网络。在每天的各个时间段,人们使用网络所产生的数据流量是不相同的,而网络数据时通过网络通道来进行传输的,由此可见,在一天中的不同时间段,网络通道对数据的数量也是不同的,例如,在使用网络的高峰时段(例如,19:00至22:00),网络通道需要传输的数据流量比较大,此时需要对网络通道进行扩容处理;而在网络使用的低谷时段(如,22:00至次日7:00),网络通道需要传输的数据量比较少,此时需要对网络通道进行缩容处理。在现有技术中,为实现为网络通道的扩容或缩容,通常是根据API接口来确定在某一业务场景下的网络流量或预先设定的网络流量可能会发生的变化来人工对网络通道进行调整。其中,常见的对网络通道进行调整的方式主要有以下两种:(1)直接调整网络通道的数量,例如,增加网络通道的数量以及减少网络通道的数据,从而实现对网络通道的吞吐量的调整;(2)通过对网络通道进行分裂或合并来达到调整网络通道的吞吐量的目的。但上述两种调整方式需要外部干扰来触发服务器的扩容、缩容功能,即只有在被动接收外部请求的情况下,才能对数据通道的数量进行调整,并且不能主动根据网络通道内部的流量监控信息来对数据通道进行调整,因此,在数据流量突然增加的情况下,如果没有外部的干预或人工处理不及时,服务器可能会因为数据流量增加到最大值而产生故障或异常。针对上述由于现有技术无法自动调整通道数量而导致资源浪费的问题,目前尚未提出有效的解决方案。专利
技术实现思路
本专利技术实施例提供了一种数据通道的流控方法和调整方法,以至少解决由于现有技术无法自动调整通道数量而导致资源浪费的技术问题。根据本专利技术实施例的一个方面,提供了一种数据通道的流控方法,包括:获取待写入数据通道的数据集合中各数据的标识;根据各数据的标识,将各数据写入对应的数据通道;其中,各数据通道均对应有数据区间,各数据通道对应的数据区间形成一个固定的区间范围;各数据中携带有标识,标识对应于一数据区间。根据本专利技术实施例的另一方面,还提供了一种数据通道的调整方法,包括:获取数据通道的数据流量;基于数据流量,确定需要对数据通道进行调整时,获取数据通道对应的数据区间;基于数据区间扩充数据通道或减少数据通道;其中,各数据通道分别对应有数据区间,且各数据通道对应的数据区间形成一个固定的区间范围。根据本专利技术实施例的另一方面,还提供了一种存储介质,该存储介质包括存储的程序,其中,在程序运行时控制存储介质所在设备执行如下步骤:获取待写入数据通道的数据集合中各数据的标识;根据各数据的标识,将各数据写入对应的数据通道,以进行数据的传输;其中,各数据通道均对应有数据区间,各数据通道对应的数据区间形成一个固定的区间范围;各数据中携带有标识,标识对应于一数据区间;或者获取数据通道的数据流量;基于数据流量,确定需要对数据通道进行调整时,获取数据通道对应的数据区间;基于数据区间扩充数据通道或减少数据通道;其中,各数据通道分别对应有数据区间,且各数据通道对应的数据区间形成一个固定的区间范围。根据本专利技术实施例的另一方面,还提供了一种处理器,该处理器用于运行程序,其中,程序运行时执行如下步骤:获取待写入数据通道的数据集合中各数据的标识;根据各数据的标识,将各数据写入对应的数据通道,以进行数据的传输;其中,各数据通道均对应有数据区间,各数据通道对应的数据区间形成一个固定的区间范围;各数据中携带有标识,标识对应于一数据区间;或者获取数据通道的数据流量;基于数据流量,确定需要对数据通道进行调整时,获取数据通道对应的数据区间;基于数据区间扩充数据通道或减少数据通道;其中,各数据通道分别对应有数据区间,且各数据通道对应的数据区间形成一个固定的区间范围。在本专利技术实施例中,采用数据流量和/或标识信息关联度监控的方式,通过根据当前存在的多个数据通道分别对应的标识取值范围对待写入数据集合内包含的数据进行分流,因为对数据通道设置了数据区间,且所有的数据通道的数据区间是一个固定区间范围,因此,可以基于数据区间来进行通道的扩容或缩容的处理,达到了自动对通道进行扩容或缩容的目的,从而实现了提高通道传输数据的效率,并提高通道资源的利用率的技术效果,进而解决了由于现有技术无法自动调整通道数量而导致资源浪费的技术问题。附图说明此处所说明的附图用来提供对本专利技术的进一步理解,构成本申请的一部分,本专利技术的示意性实施例及其说明用于解释本专利技术,并不构成对本专利技术的不当限定。在附图中:图1是根据本专利技术实施例的一种通道数量的流控方法流程图;图2是根据本专利技术实施例的一种可选的数据通道的流控方法流程图;图3是根据本专利技术实施例的一种可选的划分通道的哈希区间的结构示意图;图4是根据本专利技术实施例的一种可选的分发数据后通道的结构示意图;图5是根据本专利技术实施例的一种通道数量的调整方法流程图;图6是根据本专利技术实施例的一种可选的通道数量的调整方法流程图;图7是根据本专利技术实施例的一种可选的通道数量的调整方法流程图;图8是根据本专利技术实施例的一种可选的通道数量的调整方法流程图;图9是根据本专利技术实施例的一种可选的通道数量的调整方法流程图;图10是根据本专利技术实施例的一种可选的分裂通道的方法流程图;图11是根据本专利技术实施例的一种可选的分裂通道的示意图;图12是根据本专利技术实施例的一种可选的合并通道的方法流程图;图13是根据本专利技术实施例的一种可选的合并通道的示意图;图14是根据本专利技术实施例的一种通道数量的流控装置的结构示意图;图15是根据本专利技术实施例的一种通道数量的调整装置的结构示意图;以及图16是根据本专利技术实施例的一种计算机终端的硬件结构框图。具体实施方式为了使本
的人员更好地理解本专利技术方案,下面将结合本专利技术实施例中的附图,对本专利技术实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本专利技术一部分的实施例,而不是全部的实施例。基于本专利技术中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本专利技术保护的范围。需要说明的是,本专利技术的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本专利技术的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。实施例1根据本专利技术实施例,还提供了一种数据通道的流控方法实施例,需要说明的是,本实施例可以应用在分布式的数据通道服务中,通过本申请所提出的方案,可以实现自动调节通道数量的目的,能够实时监控通道内的数据流量,并在通道内的数据流量比较少的情况下,合并通道,进而提高了对通道的利用率,达到了节约资源的目的。随着网络技术的普及,人们可以随时随地的通过网络获取到各种信息,而在每天的不同时刻,使用网络的用户的数量是不同本文档来自技高网
...

【技术保护点】
1.一种数据通道的流控方法,其特征在于,包括:获取待写入数据通道的数据集合中各数据的标识;根据所述各数据的标识,将所述各数据写入对应的数据通道,以进行数据的传输;其中,所述各数据通道均对应有数据区间,所述各数据通道对应的数据区间形成一个固定的区间范围;所述各数据中携带有标识,标识对应于一数据区间。

【技术特征摘要】
1.一种数据通道的流控方法,其特征在于,包括:获取待写入数据通道的数据集合中各数据的标识;根据所述各数据的标识,将所述各数据写入对应的数据通道,以进行数据的传输;其中,所述各数据通道均对应有数据区间,所述各数据通道对应的数据区间形成一个固定的区间范围;所述各数据中携带有标识,标识对应于一数据区间。2.根据权利要求1所述的方法,其特征在于,根据所述各数据的标识,将所述各数据写入对应的数据通道包括:根据所述数据集合中每个数据的标识分别查找对应的数据区间;按照查找到的数据区间将每个数据分发至对应的数据通道。3.一种数据通道的调整方法,其特征在于,包括:获取数据通道的数据流量;基于所述数据流量,确定需要对所述数据通道进行调整时,获取所述数据通道对应的数据区间;基于所述数据区间扩充所述数据通道或减少所述数据通道;其中,各数据通道分别对应有数据区间,且所述各数据通道对应的数据区间形成一个固定的区间范围。4.根据权利要求3所述的方法,其特征在于,基于所述数据区间扩充所述数据通道或减少所述数据通道包括:如果确定所述数据通道中的数据流量超过第一预设阈值,则对所述数据通道执行分裂操作,扩充所述数据通道;如果确定所述数据通道中的数据流量低于第二预设阈值,则对所述数据通道执行合并操作,减少所述数据通道;其中,所述第一预设阈值为所述各数据通道对应的最高流量阈值,所述第二预设阈值为所述各数据通道对应的最低流量阈值,基于所述最高流量阈值和所述最低流量阈值确定所述数据通道中每个数据通道对应的数据区间。5.根据权利要求3所述的方法,其特征在于,基于所述数据区间扩充所述数据通道或减少所述数据通道包括:如果确定所述数据通道中对应同一标识信息或者对应连续标识信息的数据量超过第三预设阈值,则对所述数据通道执行分裂操作,扩充所述数据通道;如果确定所述数据通道中对应同一标识信息或者对应连续标识信息的数据量低于第四预设阈值,则对所述数据通道执行合并操作,减少所述数据通道。6.根据权利要求3所述的方法,其特征在于,基于所述数据区间扩充所述数据通道或减少所述数据通道包括:如果确定所述数据通道中的数据流量超过第一预设阈值且所述数据通道中对应同一标识信息或者对应连续标识信息的数据量超过第三预设阈值,则对所述数据通道执行分裂操作,扩充所述数据通道;如果确定所述数据通道中的数据流量低于第二预设阈值且所述数据通道中对应同一标识信息或者对应连续标识信息的数据量低于第四预设阈值,则对所述数据通道执行合并操作,减少所述数据通道;其中,所述第...

【专利技术属性】
技术研发人员:董骁
申请(专利权)人:阿里巴巴集团控股有限公司
类型:发明
国别省市:开曼群岛,KY

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1