基于深度融合学习的RGBT视觉目标跟踪基于深度融合学习的RGBT视觉目标跟踪 摘要:近年来,随着RGBT(可见光和红外相机)技术的快速发展,RGBT视觉目标跟踪在计算机视觉领域引起了广泛的关注。针对多模态信息的异构性,传统的目标跟踪算法往往难以有效融合不同传感器提供的信息。本文提出了一种基于深度融合学习的RGBT视觉目标跟踪...
摘要:可见光-热红外(RGB-T)目标跟踪因受光照条件限制较小受到关注。针对不同尺度特征的分辨率与语义信息存在差异、可见光与热红外两种模态信息不一致的特点,以及现有网络在多模态融合策略上的不足,提出一种RGB-T目标跟踪网络。网络采用孪生结构,首先将主干特征提取网...
为了解决复杂RGBT数据的融合问题,我们提出了一种渐进式融合网络。首先,通过属性对融合过程进行解耦,能够使用较少模型参数实现多模态数据的有效融合,克服了对大规模训练数据的依赖。其次,我们为RGBT目标跟踪中挑战属性设计单独的融合分支。分支结构简单,因为它只需要学习特定挑战属性下的融合模式。我们只需要用带有特定属性...
基于多模态特征融合的RGBT目标跟踪研究 本文提出了一种基于多模态特征双向增强的RGBT跟踪网络.首先,网络联合模态的特定特征和共享特征来充分建模物体的外观表示.其次,本文设计了双向特征融合模块来充分融合... 赵伟 - 《安徽大学》 被引量: 0发表: 2023年 融合多模态特征的RGB-T目标跟踪算法研究 视觉目标跟踪旨在...
摘要 可见光-热红外(RGB-T)目标跟踪因受光照条件限制较小受到关注。针对不同尺度特征的分辨率与语义信息存在差异、可见光与热红外两种模态信息不一致的特点,以及现有网络在多模态融合策略上的不足,提出一种RGB-T目标跟踪网络。...展开更多 RGB-T(RGB-Thermal) object tracking has received much attention in the...
爱企查为您提供一种基于目标感知增强融合结构的rgbt目标跟踪方法2024年专利信息查询,包括专利申请信息、专利类别、专利发明人等专利信息查询,让您更轻松的了解一种基于目标感知增强融合结构的rgbt目标跟踪方法专利信息,查询更多关于一种基于目标感知增强融合结构的rgbt目标
专利摘要:本发明公开了一种基于注意力多模态特征融合的无监督RGB‑T目标跟踪方法,先采用分层卷积神经网络来提取RGB图像和热红外图像的特征;再使用特征融合模块将来自不同水平及不同模态的特征进行同步融合;再对融合得到的特征进行两次前向跟踪得到响应图;接着,将融合特征逆序,原先的模板图作为搜索图,搜索图作为模板图...
3.根据权利要求1所述的基于渐进式融合Transformer与动态指导学习的RGBT跟踪方 法,其特征在于,所述步骤S2包括: S21、将所述可见光与热红外模板帧、所述可见光与热红外搜索帧,分别输入预置骨干 网络ResNet50,以提取得到所述模板帧特征以及所述搜索帧特征; S22、将所述模板帧特征以及所述搜索帧特征的不同模态特征...
1、有鉴于此,本发明提供了基于中期融合元框架和复合视觉提示的rgbt目标跟踪方法,通过一种可调节的中期融合元框架和多形式、多阶段的复合提示策略,以极少量需要微调的额外参数实现上游知识在当前任务上参数高效的知识迁移,极大地减少了训练设备的负担,充分释放了提示学习在rgbt跟踪任务中的巨大潜力,并在模态主导性动态变...
问答 实 战 竞赛 刷题 职 业 职通车 找实习 发布 AI研习社>>ICCV2020 顶会交流>>Multi-Modal Fusion for End-to-End RGB-T Trac... 该论文推荐于ICCV2020 顶会交流去小组看看 > 论文名称:Multi-Modal Fusion for End-to-End RGB-T Tracking ...