欢迎来到知嘟嘟! 联系电话:13095918853 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13095918853
知嘟嘟经纪人
收藏
专利号: 2019103756456
申请人: 广东工业大学
专利类型:发明专利
专利状态:已下证
专利领域: 计算;推算;计数
更新日期:2025-04-14
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.一种手部操作行为的分析方法,其特征在于,包括:获取目标视频,对所述目标视频中的手部和物体进行识别;

按照所述手部与所述物体之间的动作从所述目标视频提取多个子视频;

确定所述子视频的动作分析结果;

根据各个所述子视频的动作分析结果和时序关系,确定所述目标视频的操作行为分析结果;

所述按照所述手部与所述物体之间的动作从所述目标视频提取多个子视频,包括:确定所述目标视频中所述手部和所述物体之间的空间关系;

根据所述空间关系,确定所述手部与所述物体的交互动作过程的起止点;

根据所述交互动作过程的起止点从所述目标视频提取多个子视频,得到多个子视频;

所述根据所述空间关系,确定所述手部与所述物体的交互动作过程的起止点,包括:根据所述手部和所述物体之间的相对速度和相对位置,确定所述手部与所述物体的交互动作过程的起止点;

所述确定所述子视频的动作分析结果,包括:

确定所述子视频中所述物体的物体类别;

根据所述物体类别、预先设置的物体类别与手势类别之间的约束关系,确定所述子视频中所述手部的手势类别;

根据所述物体类别、所述手部的手势类别、预先设置的物体类别和手势类别及动作类别之间的约束关系,确定所述子视频中所述手部的动作类别,以作为所述子视频的动作分析结果;

在所述确定所述子视频中所述物体的物体类别之前,还包括:预先确定物体类别、手势类别、动作类别的发生概率以作为类别确定过程的先验知识;

所述确定所述子视频中所述物体的物体类别,包括:

确定所述子视频中所述物体的物体属性类别和物体形状类别,其中所述物体属性类别包括刚性和柔性。

2.如权利要求1所述的方法,其特征在于,所述根据所述物体类别、预先设置的物体类别与手势类别之间的约束关系,确定所述子视频中所述手部的手势类别,包括:根据所述物体类别、预先设置的物体类别与手势类别之间的约束关系,结合对所述子视频中所述手部的手势类别识别结果,确定所述子视频中所述手部的手势类别。

3.一种手部操作行为的分析装置,其特征在于,包括:视频获取模块:用于获取目标视频,对所述目标视频中的手部和物体进行识别;

子视频提取模块:用于按照所述手部与所述物体之间的动作从所述目标视频提取多个子视频;

动作分析模块:用于确定所述子视频的动作分析结果;

操作行为分析模块:用于根据各个所述子视频的动作分析结果和时序关系,确定所述目标视频的操作行为分析结果;

所述子视频提取模块,包括:用于确定所述目标视频中所述手部和所述物体之间的空间关系;根据所述空间关系,确定所述手部与所述物体的交互动作过程的起止点;根据所述交互动作过程的起止点从所述目标视频提取多个子视频,得到多个子视频;

所述子视频提取模块中的根据所述空间关系,确定所述手部与所述物体的交互动作过程的起止点,包括:用于根据所述手部和所述物体之间的相对速度和相对位置,确定所述手部与所述物体的交互动作过程的起止点;

所述动作分析模块,包括:用于确定所述子视频中所述物体的物体类别;根据所述物体类别、预先设置的物体类别与手势类别之间的约束关系,确定所述子视频中所述手部的手势类别;根据所述物体类别、所述手部的手势类别、预先设置的物体类别和手势类别及动作类别之间的约束关系,确定所述子视频中所述手部的动作类别,以作为所述子视频的动作分析结果;

在所述动作分析模块中的确定所述子视频中所述物体的物体类别之前,还包括:预先确定物体类别、手势类别、动作类别的发生概率以作为类别确定过程的先验知识;

所述动作分析模块中的确定所述子视频中所述物体的物体类别,包括:确定所述子视频中所述物体的物体属性类别和物体形状类别,其中所述物体属性类别包括刚性和柔性。

4.一种手部操作行为的分析设备,其特征在于,包括:存储器:用于存储计算机程序;

处理器:用于执行所述计算机程序以实现如权利要求1‑2任意一项所述的一种手部操作行为的分析方法的步骤。

5.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时用于实现如权利要求1‑2任意一项所述的一种手部操作行为的分析方法的步骤。