基于深度网络特征交互的RGB-T显著目标检测
DOI:
CSTR:
作者:
作者单位:

1.华北理工大学人工智能学院 唐山 063210;2.河北省工业智能感知重点实验室 唐山 063210

作者简介:

通讯作者:

中图分类号:

TP391.41; TN911.73

基金项目:

河北省教育厅重点课题(ZD2022102)、河北省工业智能感知重点实验室项目(SZX2021013)资助


RGB-T salient object detection based on deep network feature interaction
Author:
Affiliation:

1.College of Artificial Intelligence, North China University of Science and Technology,Tangshan 063210, China; 2.Hebei Provincial Key Laboratory of Industrial Intelligent Perception,Tangshan 063210, China

Fund Project:

  • 摘要
  • |
  • 图/表
  • |
  • 访问统计
  • |
  • 参考文献
  • |
  • 相似文献
  • |
  • 引证文献
  • |
  • 资源附件
  • |
  • 文章评论
    摘要:

    针对现有方法中多模态间的互补信息利用不充分、特征交互易引入噪声的问题,提出了一种深度特征交互网络。首先,在编码阶段提出了深度特征多层交互模块,使用深度特征作为特征交互的线索,以充分利用可见光的纹理信息和热成像的位置信息。其次,设计了纹理位置特征交互模块,通过纹理信息与位置信息进行交互以实现同层级间的特征互补。然后,在解码阶段提出了膨胀卷积特征融合模块,通过膨胀卷积块提高模型感受野,使模型关注网络中的多尺度信息。最后,在公共RGB-T数据集VT5000、VT1000、VT821进行了广泛实验,实验表明,所提出网络的平均绝对误差分别达到2.2%、1.5%、2.5%,与领域内先进的方法相比,取得了优异的性能。

    Abstract:

    A deep feature interaction network is proposed to address the problems of insufficient utilization of complementary information between multimodalities and the tendency of feature interaction to introduce noise in existing methods. First, a deep feature multilayer interaction module is proposed in the coding stage, which uses depth features as cues for feature interaction to fully utilize the texture information of visible light and the position information of thermal imaging. Second, a texture-position feature interaction module is designed to interact texture information with position information to achieve feature complementarity between the same layers. Then, the inflated convolutional feature fusion module is proposed in the decoding stage, which improves the model sensory field by inflating the convolutional block so that the model focuses on the multi-scale information in the network. Finally, extensive experiments are conducted on the public RGB-T datasets VT5000, VT1000 and VT821, which show that the average absolute errors of the proposed networks reach 2.2%, 1.5% and 2.5%, respectively, and achieve excellent performance compared with the stateof-the-art methods in the field.

    参考文献
    相似文献
    引证文献
引用本文

魏明军,杨轩,葛一珲,刘亚志,李辉.基于深度网络特征交互的RGB-T显著目标检测[J].电子测量技术,2025,48(13):174-182

复制
分享
相关视频

文章指标
  • 点击次数:
  • 下载次数:
  • HTML阅读次数:
  • 引用次数:
历史
  • 收稿日期:
  • 最后修改日期:
  • 录用日期:
  • 在线发布日期: 2025-08-04
  • 出版日期:
文章二维码

重要通知公告

①《电子测量技术》期刊收款账户变更公告