一种数据处理装置及方法制造方法及图纸

本发明专利技术公开了一种数据处理装置，应用于客户端，所述装置包括：收集模块和处理模块；其中，收集模块，用于针对预设规则，收集不合规数据；处理模块，用于将所述不合规数据发送至服务器，以使所述服务器对所述不合规数据进行处理。本发明专利技术还公开了一种数据处理方法，通过本发明专利技术实施例提供的一种数据处理装置和方法，解决了现有技术中不合规数据直接丢弃，无法从不合规数据中分析并获得客户端的问题。

【技术实现步骤摘要】
一种数据处理装置及方法
本专利技术涉及不合规数据处理
，尤其涉及一种数据处理装置及方法。
技术介绍
首先，当客户端中的应用程序，具有数据采集的功能，具体的，可以通过爬虫进行数据的爬取，以达到数据采集的目的。而实际应用中，采集到的数据不一定完全符合预设的要求，这部分的数据称之为不合规数据。如，数据的时间不符，例如客户端时间错误从而导致爬虫爬取到的数据的时间与规定时间，如北京时间等，不相符合，这部分的不合规数据可能就会直接丢弃。具体的，不合规数据也可以是用户进行自定义的规定，将不合乎规定的数据称之为不合规数据。由于现有技术中，对于不合规数据直接丢弃，而没有分析数据采集端产生不合规数据的原因。
技术实现思路
本专利技术的主要目的在于提出一种数据处理装置及方法，旨在解决现有技术中客户端收集到了不合规数据，对不合规数据进行处理，以实现在统计学的角度去发现客户端可能存在的问题。为实现上述目的，本专利技术提供了一种数据处理装置，应用于客户端，所述装置包括：收集模块，用于针对预设规则，收集不合规数据；处理模块，用于将所述不合规数据发送至服务器，以使所述服务器对所述不合规数据进行处理。可选的，所述不合规数据为：具有时间戳错误的数据、和/或与预设格式不完全匹配的数据、和/或乱码的数据。可选的，处理模块，包括：第一处理子模块，用于将所述不合规数据发送至服务器，以使所述服务器对所述不合规数据进行过滤处理；第二处理子模块，用于将所述不合规数据发送至服务器，以使所述服务器对所述不合规数据进行预设字段的提取处理。可选的，所述第一处理子模块，具体用于：将所述不合规数据发送至服务器，以使所述服务器对所述不合规数据进行预设属性的校验处理，其中，所述预设属性的校验处理包括但不限于：数据采集时间的有效性、数据采集应用标识的有效性；所述第二处理子模块，具体用于：将所述不合规数据发送至服务器，以使所述服务器对所述不合规数据进行用户标识、时间发生时间、采集时间名称、不合规原因、原始日志数据、应用标识以及数据上报字段的提取处理。可选的，所述装置还包括：发送模块，用于发送数据分类指令，以使所述服务器对处理后的数据按照预设分类规则进行分类。相较于现有技术，本专利技术所提出的数据处理装置，通过客户端采集不合规数据，并将采集到的不合规数据发送至服务器进行处理。通过服务器处理后的、大量的不合规数据，以实现在统计学的角度去发现客户端可能存在的问题，从而解决现有技术中对采集到的不合规数据进行直接丢弃，而无法从中发现产生不合规数据的具体原因。此外，为实现上述目的，本专利技术还提出一种数据处理方法，应用于客户端，所述方法包括：针对预设规则，收集不合规数据；将所述不合规数据发送至服务器，以使所述服务器对所述不合规数据进行处理。可选的，所述不合规数据为：具有时间戳错误的数据、和/或与预设格式不完全匹配的数据、和/或乱码的数据。可选的，所述将所述不合规数据发送至服务器，以使所述服务器对所述不合规数据进行处理，包括：将所述不合规数据发送至服务器，以使所述服务器对所述不合规数据进行过滤处理和预设字段的提取处理。可选的，所述将所述不合规数据发送至服务器，以使所述服务器对所述不合规数据进行过滤处理，包括：将所述不合规数据发送至服务器，以使所述服务器对所述不合规数据进行预设属性的校验处理，其中，所述预设属性的校验处理包括但不限于：数据采集时间的有效性、数据采集应用标识的有效性；所述将所述不合规数据发送至服务器，以使所述服务器对所述不合规数据进行预设字段的提取处理，包括：将所述不合规数据发送至服务器，以使所述服务器对所述不合规数据进行用户标识、时间发生时间、采集时间名称、不合规原因、原始日志数据、应用标识以及数据上报字段的提取处理。可选的，所述方法还包括：发送数据分类指令，以使所述服务器对处理后的数据按照预设分类规则进行分类。相较于现有技术，本专利技术所提出的数据处理装置，通过客户端采集不合规数据，并将采集到的不合规数据发送至服务器进行处理。通过服务器处理后的、大量的不合规数据，以实现在统计学的角度去发现客户端可能存在的问题，从而解决现有技术中对采集到的不合规数据进行直接丢弃，而无法从中发现产生不合规数据的具体原因。相较于现有技术，本专利技术所提出的数据处理装置，通过客户端采集不合规数据，并将采集到的不合规数据发送至服务器进行处理。通过服务器处理后的、大量的不合规数据，以实现在统计学的角度去发现客户端可能存在的问题，从而解决现有技术中对采集到的不合规数据进行直接丢弃，而无法从中发现产生不合规数据的具体原因。附图说明图1为实现本专利技术各个实施例中一可选的移动终端的硬件结构示意图；图2为如图1所示的移动终端的无线通信系统示意图；图3为本专利技术实施例所述的数据处理装置的第一种功能模块示意图；图4为本专利技术实施例所述的数据处理装置的第二种功能模块示意图；图5为本专利技术实施例所述的数据处理装置的第三种功能模块示意图；图6为本专利技术实施例所述的数据处理方法的第一种流程示意图；图7为本专利技术实施例所述的数据处理方法的第二种流程示意图；图8为本专利技术实施例所述的数据处理方法的第三种流程示意图；图9为本专利技术所述的终端采集到不合规数据并发送至服务器示意图。附图标记：本专利技术目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。具体实施方式应当理解，此处所描述的具体实施例仅仅用以解释本专利技术，并不用于限定本专利技术。现在将参考附图描述实现本专利技术各个实施例的移动终端。在后续的描述中，使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本专利技术的说明，其本身并没有特定的意义。因此，"模块"与"部件"可以混合地使用。移动终端可以以各种形式来实施。例如，本专利技术中描述的终端可以包括诸如移动电话、智能电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、导航装置等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。下面，假设终端是移动终端。然而，本领域技术人员将理解的是，除了特别用于移动目的的元件之外，根据本专利技术的实施方式的构造也能够应用于固定类型的终端。图1为实现本专利技术各个实施例的移动终端的硬件结构示意。移动终端100可以包括无线通信单元110、输入单元120、用户输入单元130、感测单元140、输出单元150、存储器160、接口单元170、控制器180和电源单元190等等。图1示出了具有各种组件的移动终端，但是应理解的是，并不要求实施所有示出的组件。可以替代地实施更多或更少的组件。将在下面详细描述移动终端的元件。无线通信单元110通常包括一个或多个组件，其允许移动终端100与无线通信系统或网络之间的无线电通信。例如，无线通信单元可以包括广播接收模块、移动通信模块、无线互联网模块、短程通信模块和位置信息模块中的至少一个。广播接收模块经由广播信道从外部广播管理服务器接收广播信号和/或广播相关信息。广播信道可以包括卫星信道和/或地面信道。广播管理服务器可以是生成并发送广播信号和/或广播相关信息的服务器或者接收之前生成的广播信号和/或广播相关信息并且将其发送给终端的服务器。广播信号可以包括TV广播信号、无线电广播信号、数据广播信号等等。而且，广播信号可以进一步包括与TV或无线本文档来自技高网...

【技术保护点】
一种数据处理装置，应用于客户端，其特征在于，所述装置包括：收集模块，用于针对预设规则，收集不合规数据；处理模块，用于将所述不合规数据发送至服务器，以使所述服务器对所述不合规数据进行处理。

【技术特征摘要】
1.一种数据处理装置，应用于客户端，其特征在于，所述装置包括：收集模块，用于针对预设规则，收集不合规数据；处理模块，用于将所述不合规数据发送至服务器，以使所述服务器对所述不合规数据进行处理。2.根据权利要求1所述的数据处理装置，其特征在于，所述不合规数据为：具有时间戳错误的数据、和/或与预设格式不完全匹配的数据、和/或乱码的数据。3.根据权利要求1或2所述的数据处理装置，其特征在于，处理模块，包括：第一处理子模块，用于将所述不合规数据发送至服务器，以使所述服务器对所述不合规数据进行过滤处理；第二处理子模块，用于将所述不合规数据发送至服务器，以使所述服务器对所述不合规数据进行预设字段的提取处理。4.根据权利要求3所述的数据处理装置，其特征在于，所述第一处理子模块，具体用于：将所述不合规数据发送至服务器，以使所述服务器对所述不合规数据进行预设属性的校验处理，其中，所述预设属性的校验处理包括但不限于：数据采集时间的有效性、数据采集应用标识的有效性；所述第二处理子模块，具体用于：将所述不合规数据发送至服务器，以使所述服务器对所述不合规数据进行用户标识、时间发生时间、采集时间名称、不合规原因、原始日志数据、应用标识以及数据上报字段的提取处理。5.根据权利要求3所述的数据处理装置，其特征在于，所述装置还包括：发送模块，用于发送数据分类指令，以使所述服务器对处理后的数据按照预设分类规则进行分类。6.一种数据处理方...

【专利技术属性】
技术研发人员：林浩，
申请(专利权)人：努比亚技术有限公司，
类型：发明
国别省市：广东,44