欢迎来到知嘟嘟! 联系电话:13095918853 卖家免费入驻,海量在线求购! 卖家免费入驻,海量在线求购!
知嘟嘟
我要发布
联系电话:13095918853
知嘟嘟经纪人
收藏
专利号: 2021103231065
申请人: 宁波大学
专利类型:发明专利
专利状态:已下证
专利领域: 计算;推算;计数
更新日期:2024-02-23
缴费截止日期: 暂无
价格&联系人
年费信息
委托购买

摘要:

权利要求书:

1.一种拼接图像质量评价方法,其特征在于包括以下步骤:步骤1:选取N个视点的多视点图像,将多视点图像的第 个视点的视图记为 令Isti表示由N个视点的多视点图像拼接得到的拼接图像;其中,N为正整数,N>1, Isti的宽度为Width且高度为Height;

步骤2:采用尺度不变特征转换,提取出多视点图像的不同视点的视图中的所有特征点,将 中的第 个特征点记为 将 中的所有特征点构成的集合记为 然后采用随机抽样一致方法,建立多视点图像的相邻视(γ)

点的视图中的特征点之间的匹配关系,将多视点图像的第γ个视点的视图 中的第q个特征点 与多视点图像的第γ+1个视点的视图 中的匹配特征点的偏移向量记为其

中, 为正整数, 表示 中的特征点的总个数, 表示 的(γ) (γ) (γ)

横坐标位置, 表示 的纵坐标位置,1≤γ≤N‑1,q 为正整数,1≤q ≤Q ,(γ)

Q 表示 中的特征点的总个数, 表示 的横坐标位置, 表示 的纵坐标位置, 用于表示水平方向, 用于表示垂直方向, 表示的水平偏移量, 表示 的垂直偏移量;

步骤3:采用尺度不变特征转换,提取出Isti中的所有特征点;然后采用随机抽样一致方法,建立多视点图像的不同视点的视图中的特征点与Isti中的特征点之间的匹配关系,将中的第 个特征点 与Isti中的匹配特征点的偏移向量记为其中,

表示 的水平偏移量,

表示 的垂直偏移量;

步骤4:计算Isti的鬼影失真,记为fgho,其中,D和B均为中间

变量,符号“|| ||2”为求取矩阵的2‑范数符号, 表示多视点图像的第γ(γ)

个视点的视图 中的第q 个特征点 与Isti中的匹配特征点的偏移向量,表示多视点图像的第γ+1个

视点的视图 中坐标位置为

的特征点与Isti中的匹配特征点的偏移向量;

步骤5:计算Isti的错位失真,记为fdis,(γ+1)

其中, 表示多视点图像的第γ+1个视点的视图 中的第q 个特征点 的(γ+1) (γ+1) (γ+1)纵坐标位置,1≤q ≤Q ,Q 表示 中的特征点的总个数;

步骤6:计算Isti的倾斜失真,记为fske,其中,对 中的所有特征点按特征点的横坐标位置的大小进行排序,选择横坐标位置最小的5%的特征点和横坐标位置最大的5%的特征点,将所选择的横坐标位置最小的5%的特征点随机与所选择的横坐标位置最大的5%的特征点一一对应两两连接,构成 条直线,将 对应的所有直线构成的集合记为 表示中的第 条直线, 表示 对应的直线的数量, 的值等于所选择的横坐标位置最小的5%的特征点的数量或所选择的横坐标位置最大的5%的特征点的数量;根据 中的每个特征点与Isti中的匹配特征点的偏移向量,获得 中的每条直线的两个特征点在Isti中的匹配特征点,进而获得 中的每条直线在Isti中的匹配直线, 表示 在Isti中的匹配直线,符号“<>”表示内积操作符号,符号“|| ||”为求取矩阵的1‑范数符号;

步骤7:计算Isti的几何失真,记为fgeo, 其中, 表示 的几何失真,对应表示 的第1个元素、第2

个元素、第4个元素、第5个元素、第7个元素、第8个元素,符号“| |”表示取绝对值操作符号,表示 与Isti之间的相似性变换矩阵, 为的转置, 为 的逆,

和 对应表示

中的第1个特征点 的横坐标位置和纵坐标位置, 和 对应表示 中的第 个特征点 的横坐标位置和纵坐标位置,A1、A2、A3、A4、A5、A6、A7、A8均为中间变量, 表示 中的

第1个特征点 与Isti中的匹配特征点的偏移向量 的水平偏移量,表示 中的第1

个特征点 与Isti中的匹配特征点的偏移向量 的垂直偏移量,表示 中的第 个特征点 与Isti中的匹配特征点的偏移向量的水平偏移量,

表示 中的第 个特征点 与Isti中的匹配特征点的偏移向量 的垂直偏移量,

的维数为 的维数

为 的维数为8×1;

步骤8:根据fgho、fdis、fske和fgeo,获得Isti的局部特征矢量,记为Flocal,Flocal=[fgho,fdis,fske,fgeo];其中,Flocal的维数为1×4,符号“[]”为矢量表示符号,[fgho,fdis,fske,fgeo]表示将fgho、fdis、fske和fgeo连接起来形成一个特征矢量;

步骤9:计算Isti的全局特征矢量,记为Fglobal;其中,Fglobal的维数为1×11;

步骤10:根据Flocal和Fglobal,获得Isti的特征矢量,记为F,F=[Flocal,Fglobal];其中,F的维数为1×15;

步骤11:将n'幅拼接图像及每幅拼接图像对应的原始多视点图像构成拼接图像集合;

然后采用主观质量评价方法,获取拼接图像集合中的每幅拼接图像的平均主观评分差值,将拼接图像集合中的第i幅拼接图像的平均主观评分差值记为DMOSi;并按照步骤1至步骤

10的过程,以相同的方式获取拼接图像集合中的每幅拼接图像的特征矢量,将拼接图像集合中的第i幅拼接图像的特征矢量记为Fi;其中,n'为正整数,n'>1,i为正整数,1≤i≤n',DMOSi∈[0,100],Fi的维数为1×15;

步骤12:从拼接图像集合中随机选择m幅拼接图像构成训练集;然后将训练集中的所有拼接图像的特征矢量和平均主观评分差值构成训练样本数据集合;接着采用支持向量回归作为机器学习的方法,对训练样本数据集合中的所有特征矢量进行训练,使得经过训练得到的回归函数值与平均主观评分差值之间的误差最小,拟合得到最优的权重矢量 和最优的偏置项 再利用得到的最优的权重矢量 和最优的偏置项 构造拼接图像的支持向量回归训练模型,记为 其中,m为正整数,1≤m<n', 为函数表示形式,Finp表示拼接图像的支持向量回归训练模型的输入矢量,为拼接图像的特征矢量,Finp的维数为1×15, 为 的转置, 表示拼接图像的支持向量回归训练模型的输入矢量Finp的线性函数;

步骤13:将拼接图像集合中剩余的n'‑m幅拼接图像构成测试集;然后将测试集中的所有拼接图像的特征矢量构成测试样本数据集合;接着根据构造得到的拼接图像的支持向量回归训练模型,对测试样本数据集合中的每个特征矢量进行测试,预测得到测试样本数据集合中的每个特征矢量对应的拼接图像的客观质量评价预测值,将测试样本数据集合中的第η个特征矢量对应的拼接图像的客观质量评价预测值记为qualityη,其中,η为正整数,1≤η≤n'‑m,Fη表示测试样本数据集合中的第η个特征矢量,Fη的维数为1×15, 表示Fη的线性函数;

步骤14:重复执行步骤12至步骤13共number次,并使拼接图像集合中的每幅拼接图像至少有一次属于测试集,经过number次执行后计算拼接图像集合中的每幅拼接图像的若干个客观质量评价预测值的平均值,再将拼接图像集合中的每幅拼接图像的若干个客观质量评价预测值的平均值作为该幅拼接图像的最终的客观质量评价预测值;其中,number为正整数,number≥100。

2.根据权利要求1所述的一种拼接图像质量评价方法,其特征在于所述的步骤9中,Fglobal的获取过程为:

步骤9_1:对多视点图像的N个视点的视图进行去除重叠区域操作,在进行去除重叠区域操作后再重组得到重组的多视点图像,记为 其中,1≤x'≤Width',1≤y'≤Height',Width'表示重组的多视点图像的宽度,Height'表示重组的多视点图像的高度,表示 中坐标位置为(x',y')的像素点的像素值;

步骤9_2:对 进行归一化操作,将 经归一化操作后得到的图像记为 将 中坐标位置为(x',y')的像素点的像素值记为并对Isti进行归一化操作,将Isti经归一化操作后得到的图像记为 将 中坐标位置为(x,y)的像素点的像素值记为其中,μorg表示 中的所有像素点的像素值的均值,σorg表示 中的所有像素点的像素值的标准差,

1≤x≤Width,1≤y≤Height,Isti(x,y)表示Isti中坐标位置为(x,y)的像素点的像素值,μsti表示Isti中的所有像素点的像素值的均值,σsti表示Isti中的所有像素点的像素值的标准差,步骤9_3:采用广义高斯分布模型对 的颜色分布进行拟合,拟合得到的拟合曲线,记为Corg(h), 并采用广义高斯分布模型对 的颜色分布进行拟合,拟合得到 的拟合曲线,记为Csti(h), 其中,0≤h≤255,αorg表示拟合曲线Corg(h)的尺度参数,βorg表示拟合曲线Corg(h)的形状参数,exp()表示以自然基数e为底的指数函数,符号“| |”为取绝对值符号, t为积分变量,αsti表示拟合曲线Csti(h)的尺度参数,βsti表示拟合曲线Csti(h)的形状参数,步骤9_4:将 在YUV颜色空间的Y分量、U分量和V分量对应记为和 并将Isti在YUV颜色空间的Y分量、U分量和V分量对应记为和 其中, 表示 中坐标位置为(x',y')的像素点的像素值, 表示 中坐标位置为(x',y')的像素点的像素值,表示 中坐标位置为(x',y')的像素点的像素值, 表示中坐标位置为(x,y)的像素点的像素值, 表示 中坐标位置为(x,y)的像素点的像素值, 表示 中坐标位置为(x,y)的像素点的像素值;

步骤9_5:计算 的直方图分布,记为 计算的直方图分布,记为 计算 的直方图分布,记为计算 的直方图分布,记为 计算的直方图分布,记为 计算 的直方图分布,记为其中, 表示 中的第j个直方图节点的出现概率, 表示 中的第j个直方图节点的出现概率, 表示中的第j个直方图节点的出现概率, 表示中的第j个直方图节点的出现概率, 表示 中的第j个直方图节点的出现概率, 表示 中的第j个直方图节点的出现概率;

步骤9_6:计算 的均值、标准差和斜度,对应记为 和计算 的均值、标准差和斜度,对应记为 和计算 的均值、标准差和斜度,对应记为 和计算 的均值、标准差和斜度,对应记为 和计算 的均值、标准差和斜度,对应记为 和计算 的均值、标准差和斜度,对应记为 和步骤9_7:将αorg、βorg、 和 按序排列构成的特征矢量,记为Forg,

并将αsti、βsti、 和 按序排列构成Isti的特征矢量,记为Fsti,

步骤9_8:计算Isti的全局特征矢量Fglobal,Fglobal=Forg‑Fsti。