1.一种数据获取方法,其特征在于,包括:
S1,将所设置的数据查询条件和对ElasticSearch返回的数据进行解析的规则提供给预定义的数据获取组件;
S2,调用所述数据获取组件向搜索引擎ElasticSearch发起滚屏查询请求,获取经过解析的搜索引擎ElasticSearch对所述滚屏查询请求的返回结果;
其中,所述滚屏查询请求携带的信息包括:开发人员设置的查询条件、请求上下文ID、请求上下文的有效时间以及offset查询参数。
2.根据权利要求1所述的方法,其特征在于,在步骤S1之前还包括:S0,实现基于ElasticSearch ScrollAPI的数据获取组件。
3.根据权利要求2所述的方法,其特征在于,所述数据获取组件具体包括:准备查询接口类和滚屏查询组件类;
所述准备查询接口类包括prepare方法和parseResult方法,所述prepare方法用于向数据获取组件提供开发人员设置的查询条件,所述parseResult方法用于向数据获取组件提供开发人员设置的对从搜索引擎ElasticSearch中获取到的数据的解析规则;
所述滚屏查询组件类包括doScrollSearch方法,所述doScrollSearch方法用于以ElasticSearch Scroll API的方式获取搜索引擎ElasticSearch中的数据,所述doScrollSearch方法的入参为所述准备查询接口类的实例。
4.根据权利要求3所述的方法,其特征在于,步骤S1进一步包括:S11,将所述准备查询接口类实例化,获得所述准备查询接口类的一个实例对象;
S12,将所述实例对象传递给所述滚屏查询组件的doScrollSearch方法。
5.根据权利要求3所述的方法,其特征在于,步骤S2进一步包括:S21,在所述doScrollSearch方法中回调所述prepare方法获取开发人员设置的查询条件,向搜索引擎ElasticSearch发起滚屏查询请求;
S22,当获取到搜索引擎ElasticSearch对所述滚屏查询请求的返回结果时,回调所述parseResult方法对所述返回结果进行解析,获得经过解析的ElasticSearch数据;
S23,返回所述经过解析的ElasticSearch数据。
6.根据权利要求5所述的方法,其特征在于,在步骤S21中向搜索引擎ElasticSearch发起滚屏查询请求的步骤之后,还包括:使搜索引擎ElasticSearch按照offset字段对数据进行升序排序。
7.根据权利要求5所述的方法,其特征在于,步骤S22还包括:若获知搜索引擎ElasticSearch根据所述请求上下文ID获取不到该请求上下文所对应的数据,则向搜索引擎ElasticSearch重新发起新的滚屏查询请求。
8.一种数据获取设备,其特征在于,包括存储器、处理器、以及总线,所述处理器和存储器通过所述总线完成相互间的通信;
所述存储器存储有可被所述处理器执行的程序指令,所述处理器调用所述存储器中的程序指令,以执行如权利要求1至7任一所述的方法。
9.一种非暂态计算机可读存储介质,其特征在于,所述非暂态计算机可读存储介质存储计算机指令,所述计算机指令使所述计算机执行如权利要求1至7任一所述的方法。