欢迎来到知嘟嘟! 联系电话:13095918853 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13095918853
知嘟嘟经纪人
收藏
专利号: 2021107125012
申请人: 重庆邮电大学
专利类型:发明专利
专利状态:已下证
专利领域: 计算;推算;计数
更新日期:2024-02-28
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.一种基于互注意力的特征图编码方法,其特征在于,所述方法包括获取待处理图片的特征图,将待处理的每个特征图经过卷积模块后编码为两个相同且维度可调的第一向量和第二向量;通过第一向量和第二向量计算所有特征图之间的互注意力得分情况,通过公T

式Wij=qi·kj计算所有特征图之间的互注意力得分情况;其中,Wij表示第i个特征图与第j个特征图之间的互注意力得分;qi表示第i个特征图的第一向量;kj表示第j个特征图的第二向量;T表示矩阵转置,n表示特征图个数,且i,j=1,..,n;利用卷积模块对特征图进行重新编码,按如下公式进行重新编码: 其中,Mi表示第i个重新编码后的特征图。

2.根据权利要求1所述的一种基于互注意力的特征图编码方法,其特征在于,所述将待处理图片的每个特征图经过卷积模块后编码为两个相同且维度可调的第一向量和第二向量包括通过卷积模块的若干层卷积层提取出特征图的特征信息,将所述特征信息经过线性操作后编码成两个相同且维度可调的第一向量和第二向量。

3.根据权利要求1所述的一种基于互注意力的特征图编码方法,其特征在于,在利用卷积模块对特征图进行重新编码之后还包括将重新编码后的特征图作为下一卷积模块的输入,并继续编码为两个相同且维度可调的第一向量和第二向量,通过第一向量和第二向量计算所有特征图之间的互注意力得分情况,利用卷积模块对特征图进行重新编码。

4.一种基于互注意力的特征图编码装置,其特征在于,包括:特征图采集模块,用于获取待处理图片的特征图;

第一卷积模块,用于对待处理的每个特征图编码为两个相同且维度可调的第一向量和第二向量;

互注意力计算模块,用于通过第一向量和第二向量计算所有特征图之间的互注意力得T

分情况;所述互注意力计算模块通过公式Wij=qi·kj计算所有特征图之间的互注意力得分情况;其中,Wij表示第i个特征图与第j个特征图之间的互注意力得分;qi表示第i个特征图的第一向量;kj表示第j个特征图的第二向量;T表示矩阵转置,n表示特征图个数,且i,j=

1,..,n;

第二卷积模块,用于对待处理的特征图重新编码为新的特征图;所述第二卷积模块对输入特征图按如下公式进行重新编码: 其中,Mi表示第i个重新编码后的特征图;Mj表示第j个编码前的特征图。

5.根据权利要求4所述的一种基于互注意力的特征图编码装置,其特征在于,所述第一卷积模块包括卷积单元和线性单元;通过若干卷积单元提取出特征图的特征信息,将所述特征信息经过线性单元编码成两个相同且维度可调的第一向量和第二向量。

6.一种电子设备,包括:

至少一个处理器,以及,

与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行如权利要求1~3任一项所述的一种基于互注意力的特征图编码方法。