您所在的位置: 成果库 一种基于多模态数据融合的手绘图像实时检索方法

一种基于多模态数据融合的手绘图像实时检索方法

发布时间: 2023-06-19

基本信息

合作方式： 合作开发
成果类型： 发明专利,实用新型专利
行业领域：
电子信息技术
成果介绍
本发明属于动态草图检索领域，具体涉及一种基于多模态数据融合的手绘图像实时检索方法；
成果亮点
该方法包括：使用完成训练的改进神经网络模型提取样本的图像特征与标签特征构建数据库，向模型输入目标图像的手绘草图和标签信息，得到草图的图像特征向量和标签特征向量；拼接草图的图像特征向量和标签特征向量，得到草图联合嵌入向量；计算草图联合嵌入向量和数据库中每个样本的联合嵌入向量的相似度，得到相似度集合；将相似度集合中的元素按照从大到小的顺序进行排序，取相似度最高的前K张样本图像作为最终的检索结果；本发明减少了手绘草图的早期检索时间，提高了检索效率。
团队介绍
唐晓宇，戴大伟，刘颖格，李玉堂，夏书银，王国胤
成果资料