1.一种具有预警功能的互联网数据采集系统,其特征在于,包括:用户分析模块,用于获取来自用户的用户信息,基于所述用户信息确定所述用户的采集权限;
节点分析模块,用于获取互联网节点的节点信息,基于所述节点信息确定所述互联网节点的分发权限;
风险评估模块,用于获取所述用户的数据采集请求,结合所述采集权限和分发权限,对数据采集过程进行风险评估,并根据评估结果进行预警;
所述风险评估模块,包括:
关系建立单元,用于基于用户的数据采集请求,确定采集数据和采集数据对应的采集节点,并建立所述采集数据和采集节点的映射关系;
区间确定单元,用于基于所述映射关系,建立采集队列,并确定所述采集队列中每个采集路径的传输速率置信区间;
预警单元,用于基于所述传输速率置信区间,对数据采集过程中的采集速率进行风险评估,并根据评估结果进行预警;
其中,所述区间确定单元,包括:
队列建立单元,用于基于所述映射关系建立采集路径,并基于所述采集路径和映射关系,建立采集队列;
权限确定单元,用于基于所述采集队列,确定每个采集路径对应的目标采集权限和目标分发权限,并确定每个采集路径的相对采集时间点;
区间估计单元,用于基于所述目标采集权限和目标分发权限,为所述相对采集时间点设置数据标识和节点标识,并基于所述相对采集时间点、数据标识和节点标识对所述采集路径的传输速率的区间进行估计,得到所述采集路径的传输速率置信区间。
2.根据权利要求1所述的一种具有预警功能的互联网数据采集系统,其特征在于,所述用户分析模块,包括:获取单元,用于获取所述用户在互联网中的身份登录数据,以及在互联网中的用户行为数据;
数据分析单元,用于对所述用户行为数据进行数据分析,确定用户行为值;
权限确定单元,用于基于所述用户行为值从权限方案库中调取对应的目标权限,与所述身份登录数据作为关联,得到所述用户的采集权限。
3.根据权利要求2所述的一种具有预警功能的互联网数据采集系统,其特征在于,所述数据分析单元,包括:行为分析单元,用于基于所述用户行为数据,获取用户对业务数据的行为记录,基于所述行为记录,确定每种业务数据的行为特征在预设业务特征空间中的行为特征向量;
向量处理单元,用于将所述行为特征向量分配至分布式向量模型的各个分析节点上,并基于分析节点对所述行为特征向量进行预处理和融合,确定所述用户的用户行为值。
4.根据权利要求1所述的一种具有预警功能的互联网数据采集系统,其特征在于,所述节点分析模块,包括:节点评估单元,用于获取互联网节点的节点信息,并根据所述节点信息确定互联网的节点分布结构,基于所述节点分布结构,确定所有互联网节点之间的连接特征和路径特征,基于所述连接特征为所述互联网节点进行连接评估,确定连接评估值,基于所述路径特征为所述互联网节点进行路径评估,确定路径评估值;
确定单元,用于基于所述连接评估值和路径评估值,确定所述互联网节点的目标数据范围;
权限设置单元,用于基于所述目标数据范围,为所述互联网节点设置分发权限。
5.根据权利要求4所述的一种具有预警功能的互联网数据采集系统,其特征在于,所述确定单元,包括:节点分析单元,用于基于所述节点信息,确定互联网节点的节点类型和节点业务,并基于所述节点类型确定所述互联网节点的数据范围;
阈值确定单元,用于基于所述数据范围,确定所述互联网节点之间的节点关联值,并基于所述连接评估值为每个互联网节点设置第一范围阈值,基于所述路径评估值为每个互联网节点设置第二范围阈值;
数据选取单元,用于从所述数据范围中选取满足所述节点关联值、第一范围阈值和第二范围阈值的目标数据范围。
6.根据权利要求5所述的一种具有预警功能的互联网数据采集系统,其特征在于,所述数据选取单元,包括:数据确定单元,用于基于判断所述第一范围阈值和第二范围阈值的差值是否在预设范围内,若是,从所述数据范围内获取与所述第一范围阈值对应的初始数据范围;否则,基于所述 第二范围阈值对所述第一范围阈值进行修正,并从所述数据范围中获取与修正后的第一范围阈值对应的初始数据范围;
所述数据确定单元,还用于基于所述节点关联值对所述初始数据范围进行验证,判断任意两个互联网节点的初始数据范围的关联度是否满足所述节点关联值的要求;若是,确定所述初始数据范围为目标数据范围;否则,从参与判断的两个互联网节点中选取连接评估值和路径评估值的综合评估值较大的互联网节点对应的初始数据范围,对综合评估值较小的互联网节点对应的初始数据范围进行修正,得到目标数据范围。
7.根据权利要求1所述的一种具有预警功能的互联网数据采集系统,其特征在于,所述预警单元,包括:速率判断单元,用于按照所述采集队列进行数据采集,并获取采集队列中每个采集路径的相对采集时间点对应的传输速率,判断所述传输速率是否在传输速率置信区间内;
若是,确定数据采集过程安全,不进行预警;
否则,对采集路径下的传输数据和接入标识进行检测,判断是否与所述数据标识和节点标识匹配;
若是,确定数据采集过程安全,并进行传输速率变化预警;
否则,确定数据采集过程不安全,并进行数据安全预警。
8.根据权利要求1所述的一种具有预警功能的互联网数据采集系统,其特征在于,所述数据标识用于标识采集数据的特征,所述节点标识用于标识互联网节点的特征。