利索能及
我要发布
收藏
专利号: 2020101396459
申请人: 河南科技学院
专利类型:发明专利
专利状态:已下证
更新日期:2026-05-14
缴费截止日期: 暂无
联系人

摘要:

权利要求书:

1.一种计算机大数据的批处理方法,其特征在于:所述方法包括以下步骤:

S1:通过数据采集模块(1)对音频、视频、图像、文本文件进行采集,并通过数据批量传输模块(2)直接存储至直接存储模块(3)内,形成大数据系统;

S2:用户通过用户终端设备(5)发出查看数据的指令,该指令经网络传输模块(6)输送至总CPU(4);

S3:总CPU(4)分析用户指令,判断用户指令所要查看的具体文件类型,并启用相应文件类型的分CPU;

S4:相应文件类型的分CPU提取出相应类型的直接存储模块(3)中的数据,并运行相应类型的批处理模块(7);

S5:批处理模块(7)对调用的数据进行批量处理,处理后的结果反馈给相应文件类型的分CPU,相应文件类型的分CPU再反馈给总CPU(4);

S6:总CPU(4)一方面将处理结果存储在用户云存储器(8)内,另一方面通过网络传输模块(6)将处理结果反馈至用户终端设备(5)上。

2.根据权利要求1所述的一种计算机大数据的批处理方法,其特征在于:所述数据采集模块(1)包括音频采集单元、视频采集单元、图像采集单元和文本采集单元,所述数据采集模块(1)的采集方法可设置为通过ETL离线采集、通过Flume实时采集以及通过Crawler互联网采集。

3.根据权利要求1所述的一种计算机大数据的批处理方法,其特征在于:所述直接存储模块(3)设置为可扩展的存储模块,所述直接存储模块(3)包括若干个音频存储单元、若干个视频存储单元、若干个图像存储单元和若干个文本存储单元,且所述直接存储模块(3)内亦设置有若干个备份存储单元。

4.根据权利要求1所述的一种计算机大数据的批处理方法,其特征在于:所述总CPU(4)包括音频CPU、视频CPU、图像CPU和文本CPU,所述音频CPU、视频CPU、图像CPU和文本CPU相互独立且可同时进行运算。

5.根据权利要求1所述的一种计算机大数据的批处理方法,其特征在于:所述用户终端设备(5)包括手机、iPad以及计算机,所述S6中总CPU(4)将处理结果反馈给用户终端设备(5)的方式可为短信反馈、电话反馈以及APP软件反馈。

6.根据权利要求1所述的一种计算机大数据的批处理方法,其特征在于:所述批处理模块(7)包括音频批处理单元、视频批处理单元、图像批处理单元和文本批处理单元。