一种亿级合规指标业务数据的自规范存储系统技术方案

本发明专利技术公开了一种亿级合规指标业务数据的自规范存储系统，通过数据截取单元获取到标的数据组，之后利用数据载分单元对标的数据组进行载入分析，得到单项数据、合项数据和常规数据；再借助数据截分单元将单项数据、合项数据和常规数据传输到特性数据库；利用处理器对单项数据和合项数据进行分项处理，得到若干组单项分数据、合项数据及其对应的解码符；最后利用自管控单元用于结合规则库对存储端接收到的若干组单项分数据、合项数据及其对应的解码符和常规数据，进行存储操作；实现对各个标的数据的特性解析，根据不同特性实现不同的存储操作，保证其数据存储的安全和合理性。保证其数据存储的安全和合理性。保证其数据存储的安全和合理性。

【技术实现步骤摘要】
一种亿级合规指标业务数据的自规范存储系统


[0001]本专利技术属于数据自规范领域，具体是一种亿级合规指标业务数据的自规范存储系统。

技术介绍

[0002]公开号为CN105786410A的专利公开了一种提高数据存储系统的处理速度的方法及数据存储系统，存储系统包括日志存储空间、元数据存储空间、数据存储空间和数据缓存空间，日志存储空间、元数据存储空间和数据缓存空间的读写性能均优于数据存储空间的读写性能，方法包括：接收待存储数据；判断数据存储空间的空闲空间是否大于预设阈值；若大于，将待存储数据写入数据缓存空间,并生成针写入实务记录，以及将待存储数据在数据缓存空间的存储地址写入待存储数据的元数据中；将写入实务记录写入日志存储空间，以及将待存储数据的元数据写入元数据存储空间。通过上述方式，本专利技术能够提高数据存储系统的处理速度，优化数据存储系统的处理性能。
[0003]但是，其针对数据存储时，尤其是涉及到一些业务数据，不同创建人上传在某一共享的存储空间时，如何保证其隐私性，且还能保障数据存储不需要用到多个空间，规范化对数据加密，同时还能对空间自清理，这是一个问题，基于此，提供一种解决方案。

技术实现思路

[0004]本专利技术的目的在于提供一种亿级合规指标业务数据的自规范存储系统。
[0005]本专利技术的目的可以通过以下技术方案实现：
[0006]一种亿级合规指标业务数据的自规范存储系统，包括数据截取单元、数据截分单元、特性数据库、处理器、自管控单元、规则库和存储端；
[0007]数据截取单元获取到标的数据，所有的标的数据构成标的数据组；数据截取单元用于将标的数据组传输到数据载分单元；
[0008]数据载分单元用于对标的数据组进行载入分析，得到单项数据、合项数据和常规数据；
[0009]数据截分单元用于将单项数据、合项数据和常规数据传输到特性数据库；
[0010]特性数据库用于将单项数据、合项数据和常规数据传输到处理器，处理器用于对单项数据和合项数据进行分项处理，得到若干组单项分数据、合项数据及其对应的解码符；
[0011]处理器用于将若干组单项分数据、合项数据及其对应的解码符、常规数据传输到存储端；
[0012]所述存储端包括若干个存储单元，依次为存储单元一、存储单元二...存储单元n；
[0013]自管控单元用于结合规则库对存储端接收到的若干组单项分数据、合项数据及其对应的解码符和常规数据，进行存储操作，存储操作具体为：
[0014]SS1：首先获取到若干组单项分数据；
[0015]SS2：任选一组单项分数据，将该组单项分数据按照名称的最后一位数字依次对应
存储在数字相同的存储单元i内，i＝1...n，此处i的取值为该组单项分数据名称的最后一位数字；
[0016]SS3：任选下一组单项分数据，重复步骤SS2
‑
SS3，完成若干组单项分数据的存储；
[0017]SS4：之后获取到合项数据，将合项数据按照存储单元i取值从小到大的顺序依次存储，存储过程中保证每一个存储单元内存储的合项数据个数为预设值，且存储后会自动隐藏合项数据，仅在用户登录后录入对应的解码符才会显示；
[0018]SS5：获取到常规数据，将常规数据按照个数均匀的存储在所有的存储单元中；且当存储单元的存储空间超过X1时，会自动将对应不同存储单元内的常规数据按照其数据大小，从大到小排列，若其处于前百分之五十，且T1时间内没有访问过，则自动将该常规数据删除；X1为预设值且小于1，T1为预设时间；
[0019]SS6：完成数据存储。
[0020]进一步地，标的数据即为所有的亿级合规指标业务数据。
[0021]进一步地，载入分析具体方式为：
[0022]步骤一：获取到标的数据组；
[0023]步骤二：任选一标的数据，获取到该标的数据的所有访问者；此处的访问者即为拥有对应权限可以访问、查看复制该标的数据的对象；
[0024]步骤三：根据访问者的具体数值对标的数据进行分类，具体为：
[0025]当访问者仅有一人且与创造者一致的对应标的数据标记为单项数据；
[0026]当访问者的人数占对应该平台上所有标的数据的访问者人数比例，将该比例标记为统占比，将统占比低于百分之三十的对应的标的数据，去除掉单项数据之后，剩余的标记为合项数据；
[0027]将剩余的数据标记为常规数据；
[0028]步骤四：得到单项数据、合项数据和常规数据。
[0029]进一步地，分项处理具体方式为：
[0030]S1：获取到所有的单项数据；
[0031]S2：任选一单项数据，同时获取到对应该单项数据的创建者，自动获取到其账号密码；账号密码必须包括数字，且数字位数超过6位且小于10；
[0032]S3：获取到账号密码中所有的数字，将其标记为分散数字，所有的分散数字构成分散数字组；对应将分散数字组内的分散数字个数标记为拆分值；
[0033]S4：之后将单项数据按照单项数据的大小均分为对应拆分值个单项分数据；
[0034]S5：之后获取到分散数字组内的所有的分散数字；获取到分散数字内相同的数字，将其标记为一同数字，若干个一同数字构成一同数字组；
[0035]一同数字中的包括若干个相同的单字构成的单字组；单字即为对应该某一个具体的一同数字有若干个；对一同组进行增别处理，得到更新后的分散数字，将其标记为存项值；
[0036]S6：按照存项值从前到后的顺序，在单项分数据的命名最后一位依次添加一位存项值，更新单项分数据的名称，得到更新名称后的单项分数据；单项分数据名称与原单项数据名称一致；
[0037]S7：得到一组单项分数据；
[0038]S8：任选下一单项数据，重复步骤S2
‑
S8，直到得到所有的单项数据转化后的若干组单项分数据；
[0039]S9：之后获取到所有的合项数据，将合项数据的名称最后一个字符标记为解码符，得到所有合项数据的解码符。
[0040]进一步地，步骤S5中的增别处理具体方式为：
[0041]S501：首先获取到一同组中任意一个一同数字，获取到该一同数字的单字组，按照分散数字组内单字从前到后的顺序，首先对排序在最前面的单字不做处理；
[0042]S502：之后选择排序下一个的单字；
[0043]S503：对其进行加一处理，若加一后其与其他分散数字组内所有的分散数字均不同相同，则产生完毕信号，此时重新将对应选择的排序第二且产生完毕信号的单字重新标记为分散数字；否则重复步骤S503直到产生完毕信号；
[0044]S504：任选下一个单字，按照步骤S503的方式进行相同处理；
[0045]S505：重复步骤S504，对选中的单字按照对应分散数字从前到后的顺序处理完；
[0046]S506：之后选择一同组中任意下一个一同数字，重复步骤S501
‑本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种亿级合规指标业务数据的自规范存储系统，其特征在于，包括数据截取单元、数据截分单元、特性数据库、处理器、自管控单元、规则库和存储端；数据截取单元获取到标的数据，所有的标的数据构成标的数据组；数据截取单元用于将标的数据组传输到数据载分单元；数据载分单元用于对标的数据组进行载入分析，得到单项数据、合项数据和常规数据；数据截分单元用于将单项数据、合项数据和常规数据传输到特性数据库；特性数据库用于将单项数据、合项数据和常规数据传输到处理器，处理器用于对单项数据和合项数据进行分项处理，得到若干组单项分数据、合项数据及其对应的解码符；处理器用于将若干组单项分数据、合项数据及其对应的解码符、常规数据传输到存储端；所述存储端包括若干个存储单元，依次为存储单元一、存储单元二...存储单元n；自管控单元用于结合规则库对存储端接收到的若干组单项分数据、合项数据及其对应的解码符和常规数据，进行存储操作，存储操作具体为：SS1：首先获取到若干组单项分数据；SS2：任选一组单项分数据，将该组单项分数据按照名称的最后一位数字依次对应存储在数字相同的存储单元i内，i＝1...n，此处i的取值为该组单项分数据名称的最后一位数字；SS3：任选下一组单项分数据，重复步骤SS2
‑
SS3，完成若干组单项分数据的存储；SS4：之后获取到合项数据，将合项数据按照存储单元i取值从小到大的顺序依次存储，存储过程中保证每一个存储单元内存储的合项数据个数为预设值，且存储后会自动隐藏合项数据，仅在用户登录后录入对应的解码符才会显示；SS5：获取到常规数据，将常规数据按照个数均匀的存储在所有的存储单元中；且当存储单元的存储空间超过X1时，会自动将对应不同存储单元内的常规数据按照其数据大小，从大到小排列，若其处于前百分之五十，且T1时间内没有访问过，则自动将该常规数据删除；X1为预设值且小于1，T1为预设时间；SS6：完成数据存储。2.根据权利要求1所述的一种亿级合规指标业务数据的自规范存储系统，其特征在于，标的数据即为所有的亿级合规指标业务数据。3.根据权利要求1所述的一种亿级合规指标业务数据的自规范存储系统，其特征在于，载入分析具体方式为：步骤一：获取到标的数据组；步骤二：任选一标的数据，获取到该标的数据的所有访问者；此处的访问者即为拥有对应权限可以访问、查看复制该标的数据的对象；步骤三：根据访问者的具体数值对标的数据进行分类，具体为：当访问者仅有一人且与创造者一致的对应标的数据标记为单项数据；当访问者的人数占对应该平台上所有标的数据的访问者人数比例，将该比例标记为统占比，将统占比低于百分之三十的对应的标的数据，去除掉单项数据之后，剩余的标记为合项数据；将剩余的数据标记为常规数据；
步骤四：得到单项数据、合项数据和常规数据。4.根据...

【专利技术属性】
技术研发人员：段少平，王长海，邸兰青，
申请(专利权)人：金锐软件技术杭州有限公司，
类型：发明
国别省市：