科创中国
基于跨模态融合和模态去相关的跨模态行人再识别方法
发布时间: 2023-08-28
基本信息
合作方式：
合作开发
成果类型：
发明专利,实用新型专利
行业领域：
电子信息技术
成果介绍
本发明涉及一种基于跨模态融合和模态去相关的跨模态行人再识别方法，该方法利用两个部分充分挖掘两个模态样本图像和特征间的关联：跨模态通道融合和模态去相关五元组损失。
成果亮点
跨模态通道融合作为数据增强，相当于在数据集中补充了同时具有RGB和红外图像信息的新样本，使得模型的输入空间更加连续。CCM不会引入额外的参数或模型，可以很容易地与其他方法结合。该方法同时考虑了两个模态的图像信息，促使模型学习模态间的关联。模态去相关五元组损失约束了正样本对和负样本对内部的距离关系，从而减小特征与其所属模态的相关性，消除特征中冗余的模态特定信息。该方法从图像和特征层面同时解决模态差异问题，能更好地提升跨模态检索的性能。
团队介绍
重庆大学，简称重大，旧称四川省立重庆大学、国立重庆大学，位于中国重庆市，是教育部直属，是一所以理工学科为侧重点的综合性大学。重庆大学在1929年由中华民国军事将领刘湘创办，校址最初设于渝中区菜园坝，1933年迁至现址沙坪坝区嘉陵江江畔。2000年，原重庆大学、重庆建筑大学、重庆建筑高等专科学校合并组成新的重庆大学。
重庆大学是中华人民共和国顶尖高校之一，是双一流A类和原985工程、原211工程重点建设大学，同时入选2011计划、111计划、卓越工程师教育培养计划、卓越法律人才教育培养计划、海外高层次人才引进计划、中国政府奖学金来华留学生接收院校、教育部来华留学示范基地、国家建设高水平大学公派研究生项目。
该校也是中俄工科大学联盟、国际商管学院促进协会、工商管理硕士协会、欧洲质量改善系统、中英大学工程教育与研究联盟、重庆市大学联盟、中国酿酒高校联盟、卓越大学联盟成员。是中国著名的建筑老八校和电气五虎 （页面存档备份，存于互联网档案馆）之一。
成果资料
下载app