当前位置: 首页 > news >正文

AV1技术学习:Translational Motion Compensation

编码块根据运动矢量在参考帧中找到相应的预测块,如下图所示,当前块的左上角的位置为(x0, y0),在参考帧中找到同样位置(x0, y0)的块,根据运动矢量移动到目标参考块(左上角位置为:(x1, y1))。

 AV1允许 1/8 亚像素运动矢量精度。亚像素是通过可分插值滤波器产生的,如下图所所示,首先通过所有的行计算水平插值,然后在水平插值所得亚像素(橙色)的基础上,进行垂直插值,产生最终的亚像素(绿色)。很明显,中间像素(橙色)可以重复使用以产生多个最终亚像素(绿色)。

常用的基于块的编码器运动估计是通过绝对差和(SAD)或平方误差和(SSE)的测量来进行的,这往往有利于与直流和低频分量相似的参考块,而对高频分量的预测不太可靠。具有高截止频率的插值滤波器可以更好的预测参考区域的高频分量,适用于参考块和当前块高频分量高度相关的情况;相反地,具有低截止频率的插值滤波器可以去除与当前块不太相关的高频分量。

在 VP9 中采用自适应插值滤波方案,即 VP9 中的编码块可以从三个 8 抽头的插值滤波器中选择,这些插值滤波器使用不同的频域的截止频率,所选的插值滤波器同时应用于垂直和水平方向。

AV1 中继承了 VP9 插值滤波器的设计,并且对其进行了扩展,支持垂直和水平方向使用不同的插值滤波器,通过该方法可以利用垂直方向和水平方向之间潜在的时间统计差异来提高预测质量。垂直和水平方向可以从三个有限脉冲响应(FIR)滤波器中选择:SMOOTH、REGULAR 和 SHARP (按照截止频率升序排列)

在变换域中,预测信号和源信号之间的相关性热图如下图所示,可以看到,SHARP 滤波器在水平和垂直方向上高频区域中具有更高的相关性,并且同一滤波器在水平和垂直方向的相关性分布是不同的。

为了降低解码器的复杂性,SMOOTH 和 REGULAR 滤波器采用六抽头 FIR 滤波器设计。SHARP滤波器继续使用 8 抽头 FIR 设计来减轻截止频率附近的纹波效应。对应于亚像素插值的滤波器系数为

其频率响应如上图所示。为了进一步降低最坏情况下(所有编码块划分为 4×4 块)的复杂度,当编码块的尺寸为 4 或更小时,使用两个额外的四抽头插值滤波器。亚像素插值的滤波系数为 

因为抽头系数比较少,SHARP 滤波器是不适用此种情况的。

http://www.lryc.cn/news/401098.html

相关文章:

  • mysql中的存储过程
  • 07:串口通信二
  • 识别视频中的人数并统计出来
  • 【TypeDB 】机器学习和符号 AI 在机器人技术中的作用
  • EPLAN 去掉PDF中的红色跳转标识
  • 【car】深入浅出学习机械燃油车知识、结构、原理、维修、保养、改装、编程
  • 语音识别概述
  • 勒索防御第一关 亚信安全AE防毒墙全面升级 勒索检出率提升150%
  • elementui 日历组件el-calendar使用总结
  • RK3568 安卓12 EC20模块NOCONN没有ip的问题(已解决)
  • 【NLP自然语言处理】基于BERT实现文本情感分类
  • CSS选择器(1)
  • Claude 3.5 Sonnet模型发布,对比ChatGPT4o孰强孰弱
  • MySQL 分库分表
  • AutoMQ 社区双周精选第十二期(2024.06.29~2024.07.12)
  • Web开发:<div>标签作用
  • 如何使用unittest框架来编写和运行单元测试
  • 2024最新超详细SpringMvc常用注解总结
  • Linux硬件中断(IRQ)的基础知识
  • DP讨论——适配器模式
  • window下tqdm进度条
  • 记录些Redis题集(1)
  • 防火墙双机热备带宽管理综合实验
  • 【Redis】哨兵(sentinel)
  • 2024年高职云计算实验室建设及云计算实训平台整体解决方案
  • 入门实战篇,利用PADS Layout画电阻电容电感的封装
  • 解决npm install 安装报错记录贴
  • CollectionUtils的使用
  • WEB前端03-CSS3基础
  • 【java深入学习第7章】用 Spring Boot 和 Java Mail 轻松实现邮件发送功能