您所在的位置: 成果库 特征融合方法、装置、计算机设备及计算机可读存储介质

特征融合方法、装置、计算机设备及计算机可读存储介质

成果类型：: 发明专利

发布时间: 2023-10-30 15:48:21

科技成果产业化落地方案
方案提交机构：天津市滨海新区| 宋学姮 | 2023-11-08 15:37:00
成果简介 技术亮点 应用前景 团队概括 产生的效益 转化方式
本发明实施例公开一种特征融合方法、装置、计算机设备及计算机可读存储介质，该方法包括：获取第一数据的第一全局特征和第一局部特征；获取第二数据的第二全局特征和第二局部特征；将第一全局特征、第一局部特征、第二全局特征和第二局部特征输入训练好的特征融合模型，得到第一融合特征和第二融合特征，第一融合特征根据第一全局特征和第二局部特征融合得到，第二融合特征根据第二全局特征和第一局部特征融合得到；对第一融合特征和第二融合特征进行特征融合处理，得到第三融合特征。本发明实施例，可以提高融合特征的准确性。
一种特征融合方法，其特征在于，包括： 获取第一数据的第一全局特征和第一局部特征，所述第一数据包括第一目标的信息； 获取第二数据的第二全局特征和第二局部特征，所述第二数据包括第二目标的信息； 将所述第一全局特征、所述第一局部特征、所述第二全局特征和所述第二局部特征输入训练好的特征融合模型，得到第一融合特征和第二融合特征，所述第一融合特征根据所述第一全局特征和所述第二局部特征融合得到，所述第二融合特征根据所述第二全局特征和所述第一局部特征融合得到； 对所述第一融合特征和所述第二融合特征进行特征融合处理，得到第三融合特征，所述第三融合特征用于描述所述第一目标和所述第二目标的融合特征。

  1. 特征融合模块 ：这是一种硬件或软件模块，用于实施特征融合操作。在深度学习框架中，可以使用特征融合层或操作来执行特征融合。

  2. FPGA（现场可编程门阵列） ：FPGA可以用于自定义特征融合的硬件加速，适用于嵌入式系统和高性能计算。

  3. GPU（图形处理单元） ：GPU可以用于并行计算特征融合，提高计算效率。

中国科学院深圳先进技术研究院提升了粤港地区及我国先进制造业和现代服务业的自主创新能力，推动我国自主知识产权新工业的建立，成为国际一流的工业研究院。 深圳先进院目前已初步构建了以科研为主的集科研、教育、产业、资本为一体的微型协同创新生AC态系统，由九个研究平台，国科大深圳先进技术学院，多个特色产业育成基地、多支产业发展基金、多个具有独立法人资质的新型专业科研机构等组成。开展先进技术研究，促进科技发展。信息、电子、通讯技术研究新材料、新能源技术研究高性能计算、自动化、精密机械研究生物医学与医疗仪器研究相关学历教育、博士后培养与学术交流。

  1. 加法融合 ：将多个特征向量相加，得到一个融合后的特征向量。

  2. 乘法融合 ：将多个特征向量相乘，得到一个融合后的特征向量。

  3. 拼接融合 ：将多个特征向量在某个维度上拼接成一个更长的向量。

  4. 加权融合 ：为每个特征向量分配权重，然后将它们加权求和以融合成一个新特征向量。

  5. 卷积融合 ：使用卷积操作将多个特征图融合在一起，常用于计算机视觉任务。

  6. 注意力融合 ：通过注意力机制，为每个特征向量分配不同的权重，然后根据权重融合它们。

技术转让

特征融合在深度学习和机器学习中发挥着重要作用，可以帮助模型更好地理解和利用多源信息。选择适当的特征融合方法和装置取决于具体任务的需求、可用资源和性能要求。