科创中国

电子信息技术

本申请涉及图像处理领域，提供了一种基于文本的图像编辑方法和电子设备，所述方法包括：获取目标源图像的图像整体特征和图像局部特征，以及目标文本的句子整体特征和句子词特征；根据图像整体特征、图像局部特征、句子整体特征和句子词特征，基于图像编辑模型对目标源图像进行编辑，得到目标编辑图像；其中，图像编辑模型包括：采样编码模块和至少一个级联的生成模块。采用编码模块可以输出图像编辑过程的中间编辑结果，若中间编辑结果不满足用户需求，图像编辑模型可以调整中间编辑结果，将调整后的中间结果输入至少一个级联的生成模块，从而解决了ManiGAN输出的图像编辑结果不符合用户要求的问题。

一种基于文本的图像编辑方法，其特征在于，所述方法包括： 获取目标源图像的图像整体特征和图像局部特征，以及目标文本的句子整体特征和句子词特征； 根据所述图像整体特征、所述图像局部特征、所述句子整体特征和所述句子词特征，基于图像编辑模型对所述目标源图像进行编辑，得到目标编辑图像； 其中，所述图像编辑模型包括：采样编码模块和至少一个级联的生成模块；所述图像编辑模型对所述目标源图像的处理过程包括：利用所述采样编码模块对所述图像整体特征、所述句子整体特征和所述图像局部特征进行采样编码处理，得到第一编辑图像，并输出所述第一编辑图像；响应于用户指令，将所述第一编辑图像、所述图像局部特征和所述句子词特征输入所述至少一个级联的生成模块中进行高维视觉特征提取，得到所述目标编辑图像，或者将所述目标源图像、所述图像局部特征和所述句子词特征输入到所述至少一个级联的生成模块中进行高维视觉特征提取，得到所述目标编辑图像。

中国科学院深圳先进技术研究院提升了粤港地区及我国先进制造业和现代服务业的自主创新能力，推动我国自主知识产权新工业的建立，成为国际一流的工业研究院。 深圳先进院目前已初步构建了以科研为主的集科研、教育、产业、资本为一体的微型协同创新生AC态系统，由九个研究平台，国科大深圳先进技术学院，多个特色产业育成基地、多支产业发展基金、多个具有独立法人资质的新型专业科研机构等组成。开展先进技术研究，促进科技发展。信息、电子、通讯技术研究新材料、新能源技术研究高性能计算、自动化、精密机械研究生物医学与医疗仪器研究相关学历教育、博士后培养与学术交流。

点击查看