
基本信息:
- 专利标题: 一种针对复杂照明环境下的红外可见光图像融合方法
- 申请号:CN202411847116.9 申请日:2024-12-16
- 公开(公告)号:CN119784603A 公开(公告)日:2025-04-08
- 发明人: 彭进业 , 陈宇 , 王珺 , 彭盛霖 , 刘璐 , 张晓丹 , 汪霖 , 赵万青
- 申请人: 西北大学
- 申请人地址: 陕西省西安市太白北路229号
- 专利权人: 西北大学
- 当前专利权人: 西北大学
- 当前专利权人地址: 陕西省西安市太白北路229号
- 代理机构: 西安泛想力专利代理事务所(普通合伙)
- 代理人: 石琳丹
- 主分类号: G06T5/50
- IPC分类号: G06T5/50 ; G06T5/60 ; G06V10/80 ; G06V10/82 ; G06V10/28 ; G06N3/0455 ; G06N3/0464 ; G06N3/084
摘要:
本发明提供一种针对复杂照明环境下的红外可见光图像融合方法,方法包括:分别获取多种场景下配准后的多对红外图像和可见光图像形成训练图像子集,以得到训练数据集,并将训练数据集利用场景感知网络进行标识;将标识为夜间场景的训练图像子集输入到掩膜建模算法,以生成指导网络训练的掩膜;构建分层式红外可见光图像融合网络;构建损失函数指导分层式红外可见光图像融合网络训练。根据本发明通过用场景感知网络和掩码建模算法构造融合损失,以适应不同光照场景;还通过设计梯度增强模块在特征层面增强混合模态中的纹理信息;本发明还通过在深度语义层面引入多尺度语义交互模块有效利用双模态特征中的语义信息。
IPC结构图谱:
G | 物理 |
--G06 | 计算;推算;计数 |
----G06T | 一般的图像数据处理或产生 |
------G06T5/00 | 图像的增强或复原,如从位像到位像地建立一个类似的图形 |
--------G06T5/50 | .通过使用多于一幅图像的,例如平均、减少 |