当前位置: 首页 > news >正文

快速总结AFPN

AFPN: Asymptotic Feature Pyramid Network for Object Detection

解决的问题

特征金字塔架构的提出是为了解决尺度变化的问题,图像中物体真正有用的特征在顶部最高层需要通过多个中间尺度传播,并与这些尺度的特征交互,才能与底部的低层特征融合,便是最常见的是物体特征在缩放时丢失的细节信息,以经典的FPN网络为例,存在高层特征里面低层特征细节不足的问题。
而在不同尺度的特征交互,可以避免传输中的信息丢失或退化,但是在特征融合中,逐元素求和不是一种有效的方法,因为不同级别之间在某个位置可能存在不同对象的矛盾。
AFPN的引入在多融合过程中利用自适应空间融合操作来过滤特征,保留有用的信息进行融合。

设计原理

设计过程仅采用普通的卷积组件,没有加入self-attention等机制

渐进式架构设计原理

在这里插入图片描述
AFPN 在初始阶段融合了两个低级特征。 后续阶段融合了高级特征,而最终阶段则将顶级特征添加到特征融合过程。 黑箭头表示卷积,青绿色箭头表示自适应空间融合。

其中导致了非相邻层次特征直接融合效果差原因:非相邻层次特征之间的语义差距大于相邻层次特征之间的语义差距,尤其是对于底部和顶部的特征。
必须对齐维度为特征融合做准备,利用 1×1卷积和双线性插值方法对特征进行上采样;使用不同的卷积核和步长进行下采样,具体取决于所需的下采样率。

自适应空间融合

在这里插入图片描述
根据多级特征融合过程中为不同级别的特征分配不同的空间权重,增强关键级别的重要性并减轻来自不同对象的矛盾信息的影响

论文贡献

(1)引入了渐进式特征金字塔网络 (AFPN),它促进了跨非相邻级别的直接特征融合,从而防止了特征信息在传输和交互过程中的丢失或退化。
(2)为了抑制不同级别特征之间信息的矛盾,我们将自适应空间融合操作融入多级特征融合过程。
(3)在 MS COCO 2017 验证集和测试集上的大量实验表明,与其他特征金字塔网络相比,我们的方法在取得更具竞争力的结果的同时,表现出优异的计算效率。

http://www.lryc.cn/news/459229.html

相关文章:

  • Linux 内核中USB鼠标枚举失败问题总结
  • 十六进制转二进制
  • Python保存CSV文件,Excel打开后中文乱码
  • 数据湖数据仓库数据集市数据清理以及DataOps
  • 「Ubuntu」文件权限说明(drwxr-xr-x)
  • JS-学生管理系统(功能实现)
  • C# 屏幕录制工具
  • 前端开发攻略---前端ocr图片文字提取功能
  • 平凯星辰亮相 2024开放原子开源生态大会,分享开源教育及社区治理经验
  • OCR经典神经网络(二)文本检测算法DBNet算法原理及其在icdar15数据集上的应用
  • 论文笔记:Prompt-Based Meta-Learning For Few-shot Text Classification
  • 光耦知识分享 | AC晶体管光耦在照明控制领域的应用与选型推荐
  • RBTree(红黑树)的介绍和实现
  • 信息安全数学基础(30)指数及其基本性质
  • Android开发首页底部tab切换图标有动画效果
  • Web前端高级工程师培训:异步处理专题
  • ESP32-C3实现热点并在浏览器中输入域名访问网页
  • 基于Python的自然语言处理系列(32):spaCy属性扩展
  • STM32 输入捕获模式详解:PWM 输入捕获与 PWI 模式(续篇)
  • 【C++】set/map(重点解析)
  • 【算法篇】动态规划类(1)(笔记)
  • mysql学习教程,从入门到精通,SQL 约束(Constraints)(41)
  • 使用CSS3与JavaScript实现炫酷的3D旋转魔方及九宫格交换动效
  • springboot项目通过maven的profile功能实现通过不同文件夹的方式来组织不同环境配置文件
  • GAN(Generative Adversarial Nets)
  • linux下使用mpi求自然数和
  • WebGl学习使用attribute变量绘制一个水平移动的点
  • 机器学习四大框架详解及实战应用:PyTorch、TensorFlow、Keras、Scikit-learn
  • linux源码安装slurm以及mung和openssl
  • 分享蓝牙耳机A2DP音频卡顿原因及解决思路