System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 隐私计算中的数据采集模块及数据采集方法技术_技高网

隐私计算中的数据采集模块及数据采集方法技术

技术编号:43367617 阅读:7 留言:0更新日期:2024-11-19 17:49
本说明书实施例提供一种隐私计算中的数据采集模块及数据采集方法,提供一种数据采集框架,单个计算节点可以在本地配置一个数据采集模块,该数据采集模块包括多个采集单元,各个采集单元分别配置为采集网络数据、设备数据、应用数据等。各个采集单元通过配置本地的数据采集端口获取相应数据,之后,通过对外暴露的预定数据端口,向其他计算节点传输所采集到的数据。如此,为隐私计算框架下的数据采集、汇总、错误分析等提供有效可行的技术方案。

【技术实现步骤摘要】

本说明书一个或多个实施例涉及数据安全,尤其涉及隐私计算中的数据采集模块及数据采集方法


技术介绍

1、2016 年发布的《隐私计算研究范畴及发展趋势》正式提出“隐私计算”一词,并将隐私计算定义为:“面向隐私信息全生命周期保护的计算理论和方法,是隐私信息的所有权、管理权和使用权分离时隐私度量、隐私泄漏代价、隐私保护与隐私分析复杂性的可计算模型与公理化系统”。隐私计算本质上是在保护数据隐私的前提下,解决各个数据持有方的数据流通、数据应用等数据服务问题。各个数据持有方可以作为隐私计算中的各个计算节点。隐私计算是跨域计算,计算本身的数据具有不可见性,并且具有跨域的运维难度,在为了维护系统稳定性,或者遇到任务失败等问题需要查找问题根源等情况下,增加问题排查难度。因此,如何实时对各个计算节点的相关数据进行监测,是隐私计算中的重要技术问题。


技术实现思路

1、本说明书一个或多个实施例描述了一种隐私计算中的数据采集模块及数据采集方法,用以解决
技术介绍
提到的一个或多个问题。

2、根据第一方面,提供一种隐私计算中的数据采集模块,用于多方进行隐私计算架构下,单个计算节点采集本地数据;所述数据采集模块包括多个采集单元,各个采集单元分别配置为采集网络数据、设备数据、应用数据;

3、其中,配置为采集应用数据的第一采集单元用于通过预先设置的数据端口采集预定应用的数据,并对业务处理过程中进程被拉起的情况下所配置的端口进行识别,从而对业务处理过程中的应用数据进行实时采集;

4、所述数据采集模块还包括对外暴露的预定数据端口,用于在满足数据交互条件的情况下,向其他计算节点传输所采集到的数据。

5、在一个实施例中,所述第一采集单元经由当前业务框架管理器同步而获取由所述管理器拉起的进程的数据端口。

6、在一个实施例中,所述数据采集模块还包括第一过滤单元,配置为:基于预先设定的第一过滤规则,对所采集的数据进行过滤以供所述数据采集模块汇总过滤后的数据。

7、在一个实施例中,所述数据采集模块还包括第二过滤单元,配置为:接收用户对所采集的数据按照数据项类别进行的选择,从而形成第二过滤规则,以供在通过所述预定数据端口向其他计算节点传输所采集到的数据的情况下,基于所述第二过滤规则进行数据过滤。

8、在一个实施例中,所述数据交互条件包括以下中的一项:采集到新的数据、预定时间间隔到达、接收到其他计算节点的数据同步请求。

9、在一个实施例中,所述多个采集单元还包括配置为获取其他计算节点采集的监测数据的外部采集单元。

10、根据第二方面,提供一种隐私计算中的数据采集方法,用于多方进行隐私计算架构下,单个计算节点采集本地数据;所述方法包括:通过多个采集单元分别采集所述单个计算节点的网络数据、设备数据、应用数据,其中,所述多个采集单元中配置为采集应用数据的第一采集单元用于通过预先设置的数据端口采集预定应用的数据,并对业务处理过程中进程被拉起的情况下所配置的端口进行识别,从而对业务处理过程中的应用数据进行实时采集;在满足数据交互条件的情况下,通过预定数据端口向其他计算节点传输所采集到的数据。

11、在一个实施例中,所述对业务处理过程中进程被拉起的情况下所配置的端口进行识别包括:经由当前业务框架管理器同步而获取由所述管理器拉起的进程的数据端口。

12、在一个实施例中,所述方法还包括:基于预先设定的第一过滤规则,对所采集的数据进行过滤以供所述数据采集模块汇总过滤后的数据。

13、在一个实施例中,通过预定数据端口向其他计算节点传输所采集到的数据包括:基于所述第二过滤规则进行数据过滤后,通过所述预定数据端口向其他计算节点传输过滤得到的数据,其中,所述第二过滤规则经由接收用户对所采集的数据按照数据项类别进行的选择形成。

14、在一个实施例中,所述数据交互条件包括以下中的一项:采集到新的数据、预定时间间隔到达、接收到其他计算节点的数据同步请求。

15、在一个实施例中,所述多个采集单元还包括外部采集单元,所述方法还包括:通过所述外部采集单元请求其他计算节点采集的监测数据。

16、根据第三方面,提供了一种计算机可读存储介质,其上存储有计算机程序,当所述计算机程序在计算机中执行时,令计算机执行第二方面的方法。

17、根据第四方面,提供了一种计算设备,包括存储器和处理器,所述存储器中存储有可执行代码,所述处理器执行所述可执行代码时,实现第二方面的方法。

18、通过本说明书实施例提供的数据采集模块和方法,在隐私计算架构下,单个计算节点可以在本地配置一个数据采集模块,该数据采集模块包括多个采集单元,各个采集单元分别配置为采集网络数据、设备数据、应用数据等。各个采集单元通过配置本地的数据采集端口获取相应数据,之后,通过对外暴露的预定数据端口,向其他计算节点传输所采集到的数据。如此,单个计算节点在本地统一汇总所有的机器指标,以及各引擎指标,对外部监测系统屏蔽内部系统的变化,保护数据来源(或运行的应用)隐私,从而为隐私计算框架下的数据采集、汇总、错误分析等提供有效可行的技术方案。

本文档来自技高网...

【技术保护点】

1.一种隐私计算中的数据采集模块,用于多方进行隐私计算架构下,单个计算节点采集本地数据;所述数据采集模块包括多个采集单元,各个采集单元分别配置为采集网络数据、设备数据、应用数据;

2.如权利要求1所述的数据采集模块,其中,所述第一采集单元经由当前业务框架管理器同步而获取由所述管理器拉起的进程的数据端口。

3.如权利要求1所述的数据采集模块,其中,所述数据采集模块还包括第一过滤单元,配置为:基于预先设定的第一过滤规则,对所采集的数据进行过滤以供所述数据采集模块汇总过滤后的数据。

4.如权利要求1所述的数据采集模块,其中,所述数据采集模块还包括第二过滤单元,配置为:接收用户对所采集的数据按照数据项类别进行的选择,从而形成第二过滤规则,以供在通过所述预定数据端口向其他计算节点传输所采集到的数据的情况下,基于所述第二过滤规则进行数据过滤。

5.如权利要求1所述的数据采集模块,其中,所述数据交互条件包括以下中的一项:采集到新的数据、预定时间间隔到达、接收到其他计算节点的数据同步请求。

6.如权利要求1所述的数据采集模块,其中,所述多个采集单元还包括配置为获取其他计算节点采集的监测数据的外部采集单元。

7.一种隐私计算中的数据采集方法,用于多方进行隐私计算架构下,单个计算节点采集本地数据;所述方法包括:

8.如权利要求7所述的方法,其中,所述对业务处理过程中进程被拉起的情况下所配置的端口进行识别包括:

9.如权利要求7所述的方法,其中,所述方法还包括:

10.如权利要求7所述的方法,其中,通过预定数据端口向其他计算节点传输所采集到的数据包括:

11.如权利要求7所述的方法,其中,所述数据交互条件包括以下中的一项:采集到新的数据、预定时间间隔到达、接收到其他计算节点的数据同步请求。

12.如权利要求7所述的方法,其中,所述多个采集单元还包括外部采集单元,所述方法还包括:

13.一种计算机可读存储介质,其上存储有计算机程序,当所述计算机程序在计算机中执行时,令计算机执行权利要求7-12中任一项的所述的方法。

14.一种计算设备,包括存储器和处理器,其特征在于,所述存储器中存储有可执行代码,所述处理器执行所述可执行代码时,实现权利要求7-12中任一项所述的方法。

...

【技术特征摘要】

1.一种隐私计算中的数据采集模块,用于多方进行隐私计算架构下,单个计算节点采集本地数据;所述数据采集模块包括多个采集单元,各个采集单元分别配置为采集网络数据、设备数据、应用数据;

2.如权利要求1所述的数据采集模块,其中,所述第一采集单元经由当前业务框架管理器同步而获取由所述管理器拉起的进程的数据端口。

3.如权利要求1所述的数据采集模块,其中,所述数据采集模块还包括第一过滤单元,配置为:基于预先设定的第一过滤规则,对所采集的数据进行过滤以供所述数据采集模块汇总过滤后的数据。

4.如权利要求1所述的数据采集模块,其中,所述数据采集模块还包括第二过滤单元,配置为:接收用户对所采集的数据按照数据项类别进行的选择,从而形成第二过滤规则,以供在通过所述预定数据端口向其他计算节点传输所采集到的数据的情况下,基于所述第二过滤规则进行数据过滤。

5.如权利要求1所述的数据采集模块,其中,所述数据交互条件包括以下中的一项:采集到新的数据、预定时间间隔到达、接收到其他计算节点的数据同步请求。

6.如权利要求1所述的数据采集模块,其中,所述多个采集单元还包括配置...

【专利技术属性】
技术研发人员:胡晓龙周政演赵悦贾明阳
申请(专利权)人:蚂蚁科技集团股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1