当前位置: 首页 > news >正文

(aaai2025) FD2-Net: Frequency-Driven Feature Decomposition Network

论文:FD2-Net: Frequency-Driven Feature Decomposition Network for
Infrared-Visible Object Detection
代码:https://github.com/like413/FD2-Net

这个论文核心思想认为:多源融合目标检测方法忽略了频率上的互补特征,如可见光图像中丰富的高频细节和红外图像中有价值的低频热信息,从而限制了检测性能。作者的思路是(如下图中的II所示),分别对可见光和红外图像提取高频、低频特征,将二者重新耦合。

image-20241224220200972

为此,作者提出了Frequency-Driven Feature Decomposition Network (FD2Net),如下图所示,包括三个部分:特征分解编码器,多模态重建,多尺度检测头。

image-20241224220449062

  1. Feature decomposition encoder:高频使用DCT变换提取,低频使用大核卷积来提取。然后交叉融合。
  2. Multimodal Reconstruction:在特征上进行互补的 mask,然后再分别重建回可见光与红外图像。
  3. Multi-Scale Detection Heads 就是FPN。

网络特点是,一方面要重建,另一方面要检测。二者同时训练。其它部分可以参考作者论文,这里不过多介绍。

http://www.lryc.cn/news/509250.html

相关文章:

  • 深度学习之目标检测——RCNN
  • 2014年IMO第3题
  • 国高材服务 | 高分子结晶动力学表征——高低温热台偏光显微镜
  • 跨站请求伪造之基本介绍
  • Hadoop集群(HDFS集群、YARN集群、MapReduce​计算框架)
  • 单元测试(UT,C++版)经验总结(gtest+gmock)
  • Mysql高级部分总结(二)
  • 纠正一下网络管理
  • homebrew,gem,cocoapod 换源,以及安装依赖
  • Java字符串的|分隔符转List实现方案
  • Kafka可视化工具 Offset Explorer (以前叫Kafka Tool)
  • DeepWalk 原理详解
  • GitLab安装|备份数据|迁移数据及使用教程
  • 嵌入式linux驱动框架 I2C系统驱动程序模型分析
  • 深度学习实验十七 优化算法比较
  • 一个双非选手的秋招总结
  • 如何提高永磁电动机的节电效果
  • 在一个服务器上抓取 Docker 镜像并在另一个服务器上运行
  • 开源轮子 - Logback 和 Slf4j
  • 内部知识库的未来展望:技术融合与用户体验的双重升级
  • 【Linux系列】Shell 命令:`echo ““ > img.sh`及其应用
  • 【RAG实战】语言模型基础
  • 【MySQL】7.0 入门学习(七)——MySQL基本指令:帮助、清除输入、查询等
  • 我的 2024 年终总结
  • STM32CUBEMX+STM32H743ZIT6+IAP+UART在线升级初始化和代码解析
  • 半连接转内连接 | OceanBase SQL 查询改写
  • Git使用经历
  • 永磁同步电机控制算法-自适应带宽LADRC转速控制器
  • 基于springboot+vue实现的博物馆游客预约系统 (源码+L文+ppt)4-127
  • LeetCode 1705.吃苹果的最大数目:贪心(优先队列) - 清晰题解