科创中国

电子信息技术

1.一种基于生成对抗网络的个性化肖像生成系统，其特征在于所述个性化肖像生成系统包括反演模块、潜在编码混合模块、合成网络模块、层调节模块、双模型间融合控制模块和多模型间融合控制模块，其中：所述反演模块负责获取位于预训练StyleGAN2潜在空间，对应于源图像和风格参考图像的潜在编码；所述潜在编码混合模块负责生成用于微调合成网络模块的潜在编码族；所述合成网络模块负责使用预训练的权重，输入潜在编码族，输出用于训练合成网络的数据集；所述层调节模块负责粗略的进行粒度特征风格化程度控制，通过替换对应分辨率层中的权重和偏移量进行层调节；所述双模型间融合控制模块负责使用微调获得的风格模型和微调前的基础模型进行层权重缩放和推理路径组合，对粒度特征进行精细化控制；所述多模型间融合控制模块负责利用多个微调获得的风格模型，在多个模型间进行层权重缩放和权重线性组合，获得无参考图像对应的新风格化模型。

本发明公开了一种基于生成对抗网络的个性化肖像生成系统及方法，所述个性化肖像生成系统包括反演模块、潜在编码混合模块、合成网络模块、层调节模块、双模型间融合控制模块和多模型间融合控制模块。本发明在保证源图像人脸身份信息的情况下，能够较好的对源图像进行风格化处理，生成风格化肖像。在上述基础上，能够实现对人脸不同粒度特征的风格化强度控制，实现融合的多风格模型风格化人脸源图像，实现根据已有风格模型在无风格参考图像制作个性化训练集的条件下生成新风格的风格化模型。

2020年6月7日，习近平总书记致信祝贺哈尔滨工业大学（简称哈工大）建校100周年。贺信指出：哈尔滨工业大学历史悠久。新中国成立以来，在党的领导下，学校扎根东北、爱国奉献、艰苦创业，打造了一大批国之重器，培养了一大批杰出人才，为党和人民作出了重要贡献。习近平总书记希望学校在新的起点上，坚持社会主义办学方向，紧扣立德树人根本任务，在教书育人、科研攻关等工作中，不断改革创新、奋发作为、追求卓越，努力为实现“两个一百年”奋斗目标和中华民族伟大复兴的中国梦作出新的更大贡献。在习近平总书记贺信精神的引领下，全体哈工大人正奋力开创中国特色、世界一流、哈工大规格的新百年卓越之路。