1.一种动态数据管理方法,其特征在于,所述管理方法包括以下步骤:S1、明确动态数据管理的需求,基于大数据进行动态数据采集;
S2、对不同源的数据进行预处理,采用数据匹配和关联技术将预处理后的不同源数据进行合并,形成统一的数据集,并对数据集进行存储;
S3、对数据集内的数据进行分类,并根据其重要性和敏感程度确定权重,针对分类后的各类数据,制定数据权重计算规则;
S4、基于数据权重计算规则,建立动态调整机制为各类数据赋予权重,并制定相应的处理和加密策略;
S5、基于制定相应的处理和加密策略,设置数据处理优先级和加密优先级的冲突决策预设规则;
S6、根据制定相应的处理和加密策略和冲突决策预设规则,为赋予权重后的各类数据分配处理所用的系统资源,并对各类数据进行分析处理和加密,获得归档数据;
S7、基于归档数据制定访问权限管理策略和监控数据访问,供内部应用、合作伙伴或客户使用,以确保数据的安全性和用户的隐私权益。
2.根据权利要求1所述的一种动态数据管理方法,其特征在于,所述步骤S3包括以下步骤:S3.1、根据数据的特征和用途,将数据集内的数据进行分类,获得分类后的各类数据,数据分类具体包括用户数据、交易数据以及日志数据;
S3.2、根据业务需求和安全级别,评估分类后各类数据的重要性和敏感程度,获得评估结果;
S3.3、基于获得评估结果,建立数据权重计算规则的具体规则和算法,确保最终的权重分配合理且反映实际情况。
3.根据权利要求1所述的一种动态数据管理方法,其特征在于,所述步骤S4包括以下步骤:S4.1、根据业务变化和实际需求,定期或实时调整数据权重计算规则;
S4.2、基于调整的数据权重计算规则,定义明确的触发条件为新数据源加入,并通过自适应算法建立动态调整机制,为触发条件后的各类数据实时赋予新的权重;
S4.3、根据赋予各类数据的权重,制定处理策略和加密策略。
4.根据权利要求1所述的一种动态数据管理方法,其特征在于,所述步骤S5包括以下步骤:S5.1、分析处理优先级和加密优先级可能出现的资源冲突;
S5.2、根据资源冲突的情况,定义决策要素,具体包括数据重要性、业务影响、合规需求和资源成本要素;
S5.3、基于定义的决策要素设定冲突决策预设规则,具体包括优先级规则、资源调配规则以及应急处理规则。
5.根据权利要求1所述的一种动态数据管理方法,其特征在于,所述步骤S6包括以下步骤:S6.1、根据数据的权重和处理优先级,为各类数据分配计算资源和存储资源;
S6.2、监控资源使用情况,确保高权重数据得到足够的资源支持;
S6.3、当资源不足或发生冲突时,根据冲突决策预设规则实时进行调整和分配。
6.一种动态数据管理系统,其特征在于,所述管理系统包括:数据采集模块,用于明确动态数据管理的需求,基于大数据进行动态数据采集;
数据整合模块,用于对不同源的数据进行预处理,采用数据匹配和关联技术将预处理后的不同源数据进行合并,形成统一的数据集,并对数据集进行存储;
权重制定模块,用于对数据集内的数据进行分类,并根据其重要性和敏感程度确定权重,针对分类后的各类数据,制定数据权重计算规则;
权重赋予模块,用于基于数据权重计算规则,建立动态调整机制为各类数据赋予权重,并制定相应的处理和加密策略;
决策模块,用于基于制定相应的处理和加密策略,设置数据处理优先级和加密优先级的冲突决策预设规则;
分配处理模块,用于根据制定相应的处理和加密策略和冲突决策预设规则,为赋予权重后的各类数据分配处理所用的系统资源,并对各类数据进行分析处理和加密,获得归档数据;
访问模块,用于基于归档数据制定访问权限管理策略和监控数据访问,供内部应用、合作伙伴或客户使用,以确保数据的安全性和用户的隐私权益。
7.根据权利要求6所述的一种动态数据管理系统,其特征在于,所述权重制定模块包括:分类模块,用于根据数据的特征和用途,将数据集内的数据进行分类,获得分类后的各类数据,数据分类具体包括用户数据、交易数据以及日志数据;
评估模块,用于根据业务需求和安全级别,评估分类后各类数据的重要性和敏感程度,获得评估结果;
规则设置模块,用于基于获得评估结果,建立数据权重计算规则的具体规则和算法,确保最终的权重分配合理且反映实际情况。
8.根据权利要求6所述的一种动态数据管理系统,其特征在于,所述权重赋予模块包括:调整模块,用于根据业务变化和实际需求,定期或实时调整数据权重计算规则;
动态标识模块,用于基于调整的数据权重计算规则,定义明确的触发条件为新数据源加入,并通过自适应算法建立动态调整机制,为触发条件后的各类数据实时赋予新的权重;
策略制定模块,用于根据赋予各类数据的权重,制定处理策略和加密策略。
9.根据权利要求6所述的一种动态数据管理系统,其特征在于,所述决策模块包括:分析模块,用于分析处理优先级和加密优先级可能出现的资源冲突;
定义标识模块,用于根据资源冲突的情况,定义决策要素,具体包括数据重要性、业务影响、合规需求和资源成本要素;
设定模块,用于基于定义的决策要素设定冲突决策预设规则,具体包括优先级规则、资源调配规则以及应急处理规则。
10.根据权利要求6所述的一种动态数据管理系统,其特征在于,所述分配处理模块包括:一级调度模块,用于根据数据的权重和处理优先级,为各类数据分配计算资源和存储资源;
监控模块,用于监控计算资源和存储资源的使用情况,确保高权重数据得到足够的资源支持;
二级调度模块,用于当资源不足或发生冲突时,根据冲突决策预设规则实时进行调整和分配。