1.一种数据处理方法,其特征在于,包括以下步骤:
S1、确认本阶段的处理数据并进行初步清理,优先删除处理数据内部的重复数据,再锁定异常数据,并将本处理数据内部的异常数据进行删除,从而通过处理数据得到标准化数据;
S2、针对于不同阶段的标准化数据,进行相似度分析,将不同的标准化数据转变为标准向量,再通过分析不同标准化数据的不同标准向量,来确定对应标准化数据的相应特征,以此将不同阶段的标准化数据进行数据分类,并将属于相同分类的标准化数据存储于同一空间处;
S3、针对于存储于同一空间的标准化数据,首先进行数据统一去重处理,对本空间的重复数据采用重复标记进行替换,再对同一存储空间的标准化数据进行加密处理,确定加密逻辑式,并保留至对应存储空间内。
2.根据权利要求1所述的一种数据处理方法,其特征在于,所述步骤S1中,通过处理数据得到标准化数据的具体子步骤包括:将本阶段需要进行处理的数据进行确定,从所确定的数据中存在完成相同的数据,并删除重复数据,保留其中一组数据,处理完毕后,确认二阶段处理数据;
对二阶段处理数据的结果参数按照从小至大的方式进行排列,生成一组参数序列,将本参数序列按照结果参数的个数划分为四等份,若无法完成四等份,则保持中间两等份的结果参数个数一致;
获取第二等份的首位参数,将其标定为SS,再确认第三等份的末位参数,将其标定为MS,再确认MS与SS之间的差值CZ:CZ=MS‑SS,基于所确定的差值CZ确定一组数值区间:[CZ‑
1.5×CZ,CZ+1.5×CZ],将本参数序列内不属于此数值区间的数据标定为异常数据,并从处理数据中剔除此异常数据,以此得到标准化数据。
3.根据权利要求2所述的一种数据处理方法,其特征在于,所述步骤S2中,将不同阶段的标准化数据进行数据分类的子步骤包括:依据操作人员的实操经验,从标准化数据内提取三组不同的特征值,其特征值属于此标准化数据的相关属性数据;
依据不同标准化数据内所对应的不同特征值,按照选定顺序,从三维坐标系内确定对应的空间点位,再从原点出发至空间点位的所在位置,生成此标准数据的标准向量;
从三维坐标系内确定一组基准线,此基准线位于X轴、Y轴及Z轴之间,且基准线分别与X轴、Y轴及Z轴的夹角角度一致,确定标准向量与基准线之间的夹角A,再对其他阶段的标准化数据进行向量化处理,并确定与基准线之间的夹角Ai,其中i代表不同阶段的标准化数据;
依据所确定的夹角Ai以及预设的角度区间,将属于同一角度区间的标准向量划分为同区间向量,其中角度区间为预设区间;
再对同区间向量的标准向量长度进行分类,根据预设值Ys构建若干组长度分类区间:
(0,Ys]、(Ys,2Ys]、……、((n‑1)Ys,nYs],其中Ys为预设值,且n代表对应长度分类区间的个数,依据不同标准向量的长度,将同区间向量的若干个标准向量划分至若干个不同长度分类区间内,依据划分结果,将同区间向量对应的标准化数据存储于同一主空间内,再将主空间划分为n个次空间,再依次将不同长度分类区间所对应的标准化数据存储至相应的次空间内。
4.根据权利要求3所述的一种数据处理方法,其特征在于,所述步骤S3中,对数据进行统一去重处理的具体方式包括:首先确认同一次空间内若干个标准化数据的重复数据,将所确认的若干组重复数据采用对应的重复标记进行替换,其重复标记的表现形式为:Ck,其中k=1、2、……、m,m代表重复数据的个数;
采用重复标记Ck对标准化数据内所出现的若干个重复数据进行依次替换,并在替换完成后,生成重复数据标记替换表,并将替换后的主空间标定为待加密空间。
5.根据权利要求4所述的一种数据处理方法,其特征在于,所述步骤S3中,对待加密空间进行加密处理的具体方式包括:首先确认对应次空间所对应的主空间的加密密钥,并将加密密钥标定为JM;
再依据对应主空间内次空间在构建过程中的时间先后顺序,对次空间进行初排序,对不同次空间内其数据的容量按照排序方式标定为Rt,其中t=1、2、……、g,其中g代表对应次空间的总个数,t为1时,代表此次空间位于主空间内排序位置处的第一位;
采用|R1‑R2|+|R2‑R3|+……+|Rg‑1‑Rg|=HB得到若干个次空间其容量差值的合并值HB;
通过合并值以及加密密钥采用(HB‑JM)得到中间值ZZ,并在本主空间内设置逻辑式,其逻辑式为:Y=HB‑ZZ,并删除本主空间的加密密钥JM,当本主空间内次空间的容量值发生变化时,那么其中间值ZZ便发生相应变化。
6.一种数据处理装置,该处理装置基于权利要求1‑5任一项所述的处理方法进行运行,其特征在于,包括:至少三组处理器:
第一处理器优先删除处理数据内部的重复数据,再锁定异常数据,并将本处理数据内部的异常数据进行删除,从而通过处理数据得到标准化数据;
第二处理器针对于不同阶段的标准化数据,进行相似度分析,将不同的标准化数据转变为标准向量,再通过分析不同标准化数据的不同标准向量,来确定对应标准化数据的相应特征,以此将不同阶段的标准化数据进行数据分类,并将属于相同分类的标准化数据存储于同一空间处;
第三处理器针对于存储于同一空间的标准化数据,首先进行数据统一去重处理,对本空间的重复数据采用重复标记进行替换,再对同一存储空间的标准化数据进行加密处理,确定加密逻辑式,并保留至对应存储空间内。
7.一种数据存储系统,该存储系统对权利要求1‑5任一项所述的处理方法所产生的标准化数据进行存储,其特征在于,该存储系统对所产生的标准化数据进行存储,依据数据的具体分类,将不同分类的标准化数据存储于不同存储空间位置处,其中存储空间包括若干个主空间,且一个主空间内包括若干个次空间;
供外部操作人员进行密钥设置,基于所设置的密钥以及存储的具体数据,设置换算逻辑式,并删除内部的加密密钥;
且每个主空间为一个单组计算机可读存储介质,其存储介质为固态可读式磁盘,用于对标准化数据进行存储,其内部空间的划分由存储系统进行确认并划分。