利索能及
我要发布
收藏
专利号: 2019106477125
申请人: 广东小天才科技有限公司
专利类型:发明专利
专利状态:已下证
更新日期:2025-11-14
缴费截止日期: 暂无
联系人

摘要:

权利要求书:

1.一种辅助阅读的方法,其特征在于,包括:

通过双摄像装置获取用户特征图像,根据所述用户特征图像计算指示件的空间坐标;

包括,每隔预设周期通过双摄像装置获取用户特征图像;根据上一用户特征图像计算指示件的上一空间坐标,根据当前用户特征图像计算指示件的当前空间坐标,所述用户特征图像包括所述上一用户特征图像和当前用户特征图像;

分析所述上一空间坐标和当前空间坐标,识别所述指示件的动作;

若所述指示件的动作符合预设动作,则获取书本空间点云;

建立所述空间坐标与所述书本空间点云的对应关系,识别所述指示件的指示件位置;

若所述指示件位置表明所述指示件与书本书页接触,则获取所述指示件位置对应的预设书本区域的书本信息;

识别所述书本信息,获取相应的学习资料;

获取初始摄像区域与初始投影区域;

建立所述初始摄像区域与初始投影区域相对应的初始投影映射表;

若未检测到双摄像装置发生移动,则分析所述指示件位置在所述初始摄像区域中对应的目标区域;

结合所述初始投影映射表计算所述目标区域对应的目标投影区域;

若检测到双摄像装置发生移动,则获取当前摄像区域;

结合上一投影映射表对当前投影区域进行动态校正,得到当前投影映射表,所述上一投影映射表包括所述初始投影映射表;

分析所述指示件位置在所述当前摄像区域中对应的目标区域;

结合所述当前投影映射表计算所述目标区域对应的目标投影区域;

将所述学习资料投影至所述指示件位置对应的目标投影区域。

2.根据权利要求1所述的辅助阅读的方法,其特征在于,通过双摄像装置获取用户特征图像,根据所述用户特征图像计算指示件的空间坐标还包括:通过双摄像装置分别获取第一用户特征图像和第二用户特征图像,所述用户特征图像包括所述第一用户特征图像和第二用户特征图像;

根据所述第一用户特征图像、第二用户特征图像以及两者的视觉差计算所述指示件的空间坐标。

3.根据权利要求1所述的辅助阅读的方法,其特征在于,若所述指示件的动作符合预设动作,则获取书本空间点云之后包括:若所述指示件的动作符合预设动作,则开启语音识别;

获取用户语音信息;

解析所述语音信息,执行相应的操作。

4.一种辅助阅读的系统,其特征在于,包括:

分析模块,通过双摄像装置获取用户特征图像,根据所述用户特征图像计算指示件的空间坐标;包括图像获取单元,用于每隔预设周期通过双摄像装置获取用户特征图像;坐标计算单元,用于根据所述图像获取单元获取的上一用户特征图像计算指示件的上一空间坐标,根据所述图像获取单元获取的当前用户特征图像计算指示件的当前空间坐标,所述用户特征图像包括所述上一用户特征图像和当前用户特征图像;

动作识别模块,用于分析所述坐标计算单元计算的所述上一空间坐标和当前空间坐标,识别所述指示件的动作;

点云获取模块,若所述动作识别模块识别出的所述指示件的动作符合预设动作,则获取书本空间点云;

位置识别模块,建立所述分析模块得到的所述空间坐标与所述点云获取模块获取的所述书本空间点云的对应关系,识别所述指示件的指示件位置;

书本获取模块,若所述位置识别模块得出的所述指示件位置表明所述指示件与书本书页接触,则获取所述指示件位置对应的预设书本区域的书本信息;

书本识别模块,识别所述书本获取模块获取的所述书本信息,获取相应的学习资料;

区域获取模块,获取初始摄像区域与初始投影区域;

映射表建立模块,建立所述区域获取模块获取的所述初始摄像区域与初始投影区域相对应的初始投影映射表;

目标区域计算模块,若未检测到双摄像装置发生移动,则分析所述位置识别模块得出的所述指示件位置在所述区域获取模块获取的所述初始摄像区域中对应的目标区域;

投影区域计算模块,结合所述映射表建立模块得到的所述初始投影映射表,计算所述目标区域计算模块得到的所述目标区域对应的目标投影区域;

所述区域获取模块,若检测到双摄像装置发生移动,则获取当前摄像区域;

所述映射表建立模块,结合上一投影映射表对区域获取模块获取的当前投影区域进行动态校正,得到当前投影映射表,所述上一投影映射表包括所述初始投影映射表;

所述目标区域计算模块,分析所述位置识别模块得出的所述指示件位置在所述区域获取模块获取的所述当前摄像区域中对应的目标区域;

所述投影区域计算模块,结合所述映射表建立模块得到的所述当前投影映射表,计算所述目标区域计算模块得到的所述目标区域对应的目标投影区域;

投影模块,将所述书本识别模块获取的所述学习资料投影至所述指示件位置对应的目标投影区域。

5.根据权利要求4所述的辅助阅读的系统,其特征在于,所述分析模块还包括:所述图像获取单元,通过双摄像装置分别获取第一用户特征图像和第二用户特征图像,所述用户特征图像包括所述第一用户特征图像和第二用户特征图像;

所述坐标计算单元,根据所述图像获取单元获取的所述第一用户特征图像、第二用户特征图像以及两者的视觉差计算所述指示件的空间坐标。

6.根据权利要求5所述的辅助阅读的系统,其特征在于,还包括:语音开启模块,若所述动作识别模块识别出的所述指示件的动作符合预设动作,则开启语音识别;

语音获取模块,所述语音开启模块开启语音识别之后,获取用户语音信息;

执行模块,解析所述语音获取模块获取的所述语音信息,执行相应的操作。