利索能及
我要发布
收藏
专利号: 2024100278561
申请人: 承德石油高等专科学校
专利类型:发明专利
专利状态:已下证
更新日期:2026-05-14
缴费截止日期: 暂无
联系人

摘要:

权利要求书:

1.一种基于图像识别的工业机器人智能控制系统,包括控制终端,其特征在于,所述控制终端无线通信连接有数据采集模块、数据处理模块、目标识别模块、路线虚拟验证模块以及路径修整模块;

所述数据采集模块包括摄像采集单元和传感器采集单元,所述摄像采集单元用于设置摄像头获取工业机器人工作场景的图像数据;所述传感器采集单元用于捕捉工业机器人工作场景的环境数据;

所述数据处理模块包括图像数据处理单元和环境数据处理单元;所述图像数据处理单元用于对图像数据进行处理,获取图像边框数据;所述环境数据处理单元用于对环境数据进行处理,获取边框物体数据库;

所述目标识别模块用于根据边框物体数据库对图像边框数据进行识别;

所述路线虚拟验证模块用于对预设的工作规划路线进行虚拟模拟实验,设置关键帧,用于对异常路线插入关键帧;

所述路径修整模块用于根据修整数据集获取异常路线,并对异常路线进行修整,获取工作路线;

所述环境数据包括位置、距离、温度以及姿态信息;

所述图像数据处理单元用于对图像数据进行处理,获取图像边框数据的过程包括:对图像数据进行预处理,获取优质图像数据;建立物体提取网络,基于物体提取网络获取优质图像数据中的物体;将物体进行框出,获取图像边框数据;

所述预处理包括去噪、滤波以及尺寸调整;将尺寸调节设置为统一尺寸,进而获取优质图像数据;

所述物体提取网络用于获取图像数据中的图像边框数据;

所述物体提取网络建立的过程包括:

设置物体识别单元、获取边框单元以及边框物体获取单元,依次相互连接建立物体提取网络;

所述物体识别单元用于识别优质图像数据中的所有物体,物体识别单元接收到优质图像数据,将优质图像数据中的识别到的物体进行标记,生成识别物体图像数据;

获取边框物体数据库的过程包括:

所述获取边框单元用于对接收到的识别物体图像数据中带有标记的物体进行边框处理,所述边框处理用于将标记的图像使用不同颜色的边框进行框住,根据使用边框框住的物体生成物体边框;

将物体边框发送至边框物体获取单元进行处理,根据处理结果,获取边框物体;

所述边框物体获取单元用于根据物体边框获取边框中的物体,并生成边框物体;

在所述边框物体获取单元内设置主干特征提取网络,通过主干特征提取网络对物体进行识别,获得对应的物体名称;

获取边框物体在识别物体图像数据中的边框位置和边框姿态信息,标记为边框位置和边框姿态信息,并将物体名称、边框物体、边框位置和边框姿态信息进行数据关联,生成边框物体数据库;

所述目标识别模块根据边框物体数据库对物体边框进行识别的过程包括:在所述目标识别模块设置目标物体名称,将目标物体名称发送至边框物体数据库,识别到与目标物体名称对应的物体名称,获取对应的边框物体,以及对应的边框物体的边框位置和边框姿态信息,并标记为目标物体位置和目标姿态信息;根据目标物体位置和目标姿态信息进而获取工作规划路线;

所述路线虚拟验证模块对工作规划路线进行虚拟模拟实验的过程包括:将工作规划路线发送至路线虚拟验证模块,根据工作规划路线,获取实时环境数据,根据实时环境数据对工作规划路线进行验证;

设置报警装置,所述报警装置用于连接关键帧,在工作规划路线进行验证过程中,若报警装置发生报警信号,则在报警信号的工作规划路线对应的路线生成异常路线,并启动关键帧,在异常路线插入关键帧,获取关键帧以及关键帧对应的位置距离目标物体位置的距离;进而生成剩余距离,将关键帧与剩余距离进行数据关联,生成修整数据集;并将修整数据集发送至路径修整模块;

路径修整模块接收到修整数据集,提取关键帧,获取关键帧对应的位置,以及对应位置对应的距离,对异常路线进行重新修整,获取工作路线。