隐有的帧率上转换凡是采用基于块婚配的活动弥
时间:2019-11-17    0次浏览    

  当前像素从第t帧302指向第t-1帧301的活动矢量为当前像素的后向运 动矢量321。当前像素的后向活动矢量321指向第t-1帧301的像素为第t-1帧 参考像素,第t-1帧参考像素从第t-1帧301指向第t帧302的活动矢量为第 t-1帧参考像素的前向活动矢量312。

  光流法分为稀少光流和浓密光流两大类。“浓密”是指一帧中每个像素都有 一个活动矢量;而稀少光流只要部门像素有活动矢量。本发现的实施例进行视 频插帧优选地利用浓密光流,以便使每个像素都有活动矢量。利用浓密光流获 得基于像素级的活动矢量进行插帧能够处理现有手艺存正在的块效应问题,且光 流法估量出的活动矢量愈加切确。

  对于第t帧302中的当前像素的后向活动矢量321,是计较其灰度值取第 t-1帧参考像素的灰度值的差值,以及其取第t-1帧参考像素的前向活动矢量 312间的距离来判断靠得住性,正在道理上取上述阐述不异,故不做赘述。

  当前像素正在后向参考帧303中的灰度值取前向参考像素正在前向参考帧302 中的灰度值的差值计较公式如下,

  该专利手艺材料仅供研究查看手艺能否侵权等消息,商用须获得专利权人授权。该专利全数属于大学深圳研究生院,未经大学深圳研究生院许可,私行商用是侵权行为。若是您想采办此专利、获得贸易授权和手艺合做,请联系【客服】

  S3、对帧序列中的每一帧进行空域上采样,使得空域上采样后获得的帧的 尺寸正在程度标的目的和竖曲标的目的均扩大一倍,使得由S1获得的活动矢量的值扩大一 倍。

  靠得住性判断处置单位还用于对光流法的锯齿问题和/或噪声问题进行处置, 处置体例为:对相邻两帧之间的双向活动矢量进行基于图像朋分的滑润滤波处 理;或者,对相邻两帧进行空域上采样;或者,对相邻两帧进行空域上采样, 对颠末空域上采样后的相邻两帧之间的双向活动矢量进行基于图像朋分的滑润 滤波处置;或者,对相邻两帧之间的双向活动矢量进行基于图像朋分的滑润滤 波处置,对颠末滑润滤波处置后的相邻两帧进行空域上采样。系统还包罗内插 帧修补单位,用于对内插帧中的洞点进行修补,对颠末洞点修补后的内插帧进 行下采样,获得最终的内插帧。

  具体地,以图2为例,第t帧302的某一像素为当前像素,当前像素从第t 帧302指向第t+1帧303的活动矢量为当前像素的前向活动矢量323。当前像素 的前向活动矢量323指向第t+1帧303的像素为前向参考像素,前向参考像素 从第t+1帧303指向第t帧302的活动矢量为前向参考像素的后向活动矢量332。

  内插帧修补单位对内插帧中的洞点进行修补的体例为:对于内插帧中的某 一洞点,阐发取该洞点像素相邻的预设范畴的非洞点像素的活动矢量,取得这 些非洞点像素的活动矢量中最合适的活动矢量,用该最合适的活动矢量来做为 映照洞点像素的活动矢量,从而进行浮泛区域插值。

  现有的帧率上转换凡是采用基于块婚配的活动弥补内插,其基于的是块, 因而存正在块效应以及不切确等问题;本发现的帧率上转换采用光流法计较获得 相邻两帧之间的双向活动矢量,其基于的是像素,因而愈加切确,不存正在块效 应等问题。

  本实施例利用前后向参考帧(即相邻两帧)对应像素的灰度值的差值(用 AD暗示)以及活动矢量间的距离(用MVD暗示)来判断活动矢量能否靠得住。

  对于第t帧302中的当前像素的前向活动矢量323,若是当前像素满脚其取 前向参考像素的灰度值差值小于灰度值差值阈值Th_AD,且当前像素的前向活动 矢量323取前向参考像素的后向活动矢量332间的距离小于活动矢量阈值距离 Th_MVD,则当前像素的前向活动矢量323是靠得住的,不然不靠得住。本实施例的 Th_AD设置为20,Th_MVD设置为3。

  为便于申明,以帧序列中的第t-1帧、第t帧、第t+1帧为例,第t帧为 后向参考帧,第t+1帧为前向参考帧,博狗官网。本实施例以第t帧为从视角进行申明, 此中,t为大于1的整数。对于第t帧中的某一像素,其标的目的指向第t-1帧的运 动矢量为该像素的后向活动矢量,其指向第t+1帧的活动矢量为该像素的前向 活动矢量。如许,浩繁的像素都具备对应的双向活动矢量,视频帧序列之间的 活动矢量即形成活动矢量场,所谓双向活动矢量即指畴前向参考帧到后向参考 帧的前向活动矢量,以及从后向参考帧到前向参考帧的后向活动矢量。

  此中,ADt(x)为当前像素的灰度值取前向参考像素的灰度值的差值,Ft(x)为当前 像素正在后向参考帧302中的灰度值,Ft+1(x+Vx)为前向参考像素正在前向参考帧303 中的灰度值,Vx为当前像素从后向参考帧302到前向参考帧303的前向活动矢量 323,x为当前像素正在后向参考帧302中的,x+Vx为前向参考像素正在前向参 考帧中的,t为后向参考帧302的序号,t+1为前向参考帧303的序号。

  靠得住性判断处置单位对相邻两帧进行空域上采样的体例为:将相邻两帧中 的每一帧图像的像素数量按照预定倍数扩大,并将双向活动矢量的值按照预定 倍数扩大。内插帧修补单位对内插帧进行下采样的体例为:将内插帧图像的像 素数量按照预定倍数缩减,并将双向活动矢量的值按照预定倍数缩减。

  此中,MVDt(x)为当前像素的前向活动矢量323和前向参考像素的后向活动矢量332间的距离,为当前像素的前向活动矢量,为前向参考像素的后向活动矢量,x为当前像素正在后向参考帧302中的,x’为前向参考像素正在前向参考帧303中的,·代表欧几里得距离。


Copyright 2019-2022 http://www.rid0216.cn 版权所有 未经协议授权禁止转载