利索能及
我要发布
收藏
专利号: 2019102183902
申请人: 上海智臻智能网络科技股份有限公司
专利类型:发明专利
专利状态:已下证
更新日期:2025-05-11
缴费截止日期: 暂无
联系人

摘要:

权利要求书:

1.一种人工智能引擎优化方法,其特征在于,包括:将待测智能引擎的日志文件中的输入状态量输入测试智能引擎,其中,所述测试智能引擎基于标准样例数据建立;

将所述日志文件中的与所述输入状态量对应的输出结果与所述测试智能引擎输出的测试结果进行比对;

当比对结果不一致时,获取第三方审核机制对于所述输出结果是否正确的判断结果;

当所述第三方审核机制的判断结果为所述输出结果不正确时,获取所述第三方审核机制确定的与所述输入状态量对应的正确结果;以及将所述输入状态量以及所述正确结果输入至所述待测智能引擎进行训练。

2.根据权利要求1所述的方法,其特征在于,所述待测智能引擎基于预设的人工编写模板建立,所述人工编写模板由人工基于所述标准样例数据建立。

3.根据权利要求2所述的方法,其特征在于,所述标准样例数据包括标准问、与所述标准问对应的标准答案以及以下几种数据中的一种或多种:与所述标准问对应的扩展问和与所述标准问对应的样例问;

其中,所述人工编写模板为所述标准问的抽象语义表达式和所述扩展问的抽象语义表达式的集合。

4.根据权利要求1所述的方法,其特征在于,进一步包括:当所述第三方审核机制的判断结果为所述输出结果正确时,将所述输入状态量以及所述输出结果输入所述测试智能引擎进行训练。

5.根据权利要求1所述的方法,其特征在于,在获取所述第三方审核机制确定的与所述输入状态量对应的正确结果之后,所述方法进一步包括:判断所述正确结果与所述测试智能引擎输出的所述测试结果是否一致;

当判断为所述正确结果与所述测试结果不一致时,将所述输入状态量以及所述正确结果输入至所述测试智能引擎进行训练。

6.根据权利要求1所述的方法,其特征在于,所述将待测智能引擎的日志文件中的输入状态量输入测试智能引擎包括:将所述输入状态量输入多个测试智能引擎;

其中,所述将所述日志文件中的所述输入状态量对应的输出结果与所述测试智能引擎输出的测试结果进行比对包括:将所述输出结果与所述多个测试智能引擎各自输出的测试结果进行比对。

7.根据权利要求1所述的方法,其特征在于,所述第三方审核机制包括多个第三方审核小组,其中,所述获取第三方审核机制对于所述输出结果是否正确的判断结果包括:获取多个第三方审核小组对于所述输出结果是否正确的判断结果;以及判断所述多个第三方审核小组的审核结果是否一致;

其中,所述当所述第三方审核机制的判断结果为所述输出结果不正确时,获取所述第三方审核机制确定的与所述输入状态量对应的正确结果包括:当所述多个第三方审核小组的审核结果一致认为所述输出结果不正确时,获取所述第三方审核机制确定的与所述输入状态量对应的正确结果。

8.根据权利要求7述的方法,其特征在于,所述获取第三方审核机制对于所述输出结果是否正确的判断结果进一步包括:当判断所述多个第三方审核小组的审核结果不一致时,获取另一种第三方审核机制对于所述输出结果是否正确的判断结果。

9.根据权利要求7述的方法,其特征在于,所述将待测智能引擎的日志文件中的输入状态量输入测试智能引擎包括:将所述输入状态量输入多个测试智能引擎;

其中,所述将所述日志文件中的所述输入状态量对应的输出结果与所述测试智能引擎输出的测试结果进行比对包括:将所述输出结果与所述多个测试智能引擎各自输出的测试结果进行比对;

其中,所述方法进一步包括:

向所述第三方审核小组隐藏所述测试结果与所述测试智能引擎之间的对应关系。

10.根据权利要求1所述的方法,其特征在于,进一步包括:所述待测智能引擎为实际生产环境使用的人工智能引擎的克隆引擎。

11.根据权利要求1所述的方法,其特征在于,进一步包括:当所述测试智能引擎的输出准确率达到预设条件时,将所述测试智能引擎用作实际生产环境使用的人工智能引擎,将所述待测智能引擎用作测试智能引擎。

12.一种人工智能引擎优化装置,其特征在于,包括:第一输入模块,配置为将待测智能引擎的日志文件中的输入状态量输入测试智能引擎,其中,所述测试智能引擎基于标准样例数据建立;

第一比对模块,配置为将所述日志文件中的与所述输入状态量对应的输出结果与所述测试智能引擎输出的测试结果进行比对;

第一获取模块,配置为当比对结果不一致时,获取第三方审核机制对于所述输出结果是否正确的判断结果;

第二获取模块,配置为当所述第三方审核机制的判断结果为所述输出结果不正确时,获取所述第三方审核机制确定的与所述输入状态量对应的正确结果;以及第一训练模块,配置为将所述输入状态量以及所述正确结果输入至所述待测智能引擎进行训练。

13.一种电子设备,包括:

处理器;以及

存储器,在所述存储器中存储有计算机程序指令,所述计算机程序指令在被所述处理器运行时使得所述处理器执行如权利要求1至11中任一所述的人工智能引擎优化方法。

14.一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序指令,所述计算机程序指令在被处理器运行时使得所述处理器执行如权利要求1至11中任一所述的人工智能引擎优化方法。