说明:收录全文最新的团体标准 提供单次或批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210508195.5 (22)申请日 2022.05.11 (71)申请人 咪咕文化科技有限公司 地址 100032 北京市西城区德胜门外大街 11号5幢40 0室(德胜园区) 申请人 中国移动通信集团有限公司 (72)发明人 谢中流 钟凯宇 郑曌琼 丁保阳  张术  (74)专利代理 机构 深圳市世纪恒程知识产权代 理事务所 4 4287 专利代理师 刘瑞花 (51)Int.Cl. G06T 3/00(2006.01) G06V 10/40(2022.01) G06V 10/80(2022.01) (54)发明名称 风格化图片生成方法、 装置、 设备及存储介 质 (57)摘要 本发明公开了风格化图片生成方法、 装置、 设备及存储介质, 该方法包括: 确定待处理的目 标图片对应的目标风格类型和属性特征向量, 并 根据属性特征向量确定目标图片对应的风格强 度特征; 提取目标图片 的全局属性特征; 根据目 标风格类型查找预设风格特征库, 得到目标风格 类型匹配的风格特征; 将全局属性特征、 风格特 征和风格强度特征进行拼接得到融合特征, 并根 据融合特征生成目标图片 对应的风格化图片。 本 发明实现了风格化图片生 成的多样性, 使得目标 图片中的目标对象与风格化图片的风格更加协 调。 权利要求书2页 说明书12页 附图4页 CN 114897670 A 2022.08.12 CN 114897670 A 1.一种风格化图片生成方法, 其特 征在于, 所述 风格化图片生成方法包括: 确定待处理的目标图片对应的目标风格类型和属性特征向量, 并根据 所述属性特征向 量确定所述目标图片对应的风格强度特 征; 提取所述目标图片的全局 属性特征; 根据所述目标风格类型查找预设风格特征库, 得到所述目标风格类型匹配的风格特 征; 将所述全局属性特征、 所述风格特征和所述风格强度特征进行拼接得到融合特征, 并 根据所述融合特 征生成所述目标图片对应的风格化图片。 2.如权利要求1所述的方法, 其特征在于, 所述确定待处理 的目标图片对应的目标风格 类型和属性特征向量, 并根据所述属性特征向量确定所述目标图片对应的风格强度特征的 步骤包括: 获取预训练的属性 解耦编码器; 采用所述属性解耦编码器识别所述目标图片, 得到所述目标图片对应的目标风格类型 和风格强度特 征。 3.如权利要求2所述的方法, 其特 征在于, 所述属性 解耦编码器的训练包括: 获取具有属性标注的样本对象数据, 所述属性标注包括样本对象的属性标签和风格标 签; 采用所述样本对象数据迭代训练原始属性解耦编码器, 所述原始属性解耦编码器包括 依次连接的U ‑Net网络和若干个三层的全连接网络; 获取每次训练后的每个所述全连接网络的交叉损失, 并确定每个所述全连接网络的交 叉损失的加权和; 在所述加权和小于或者等于预设交叉损 失时, 停止所述原始属性解耦编码器的训练, 并将停止训练的所述原 始属性解耦编码器存 储为所述属性 解耦编码器。 4.如权利要求1所述的方法, 其特征在于, 所述提取所述目标图片的全局属性特征的步 骤包括: 获取预训练的全局信息编码器; 采用所述全局信息编码器识别所述目标图片, 得到所述目标图片的全局 属性特征。 5.如权利要求4所述的方法, 其特征在于, 所述将所述全局属性特征、 所述风格特征和 所述风格强度特征进 行拼接得到融合特征, 并根据所述融合特征生成所述目标图片对应的 风格化图片的步骤 包括: 基于所述全局属性特征、 所述风格特征和所述风格强度特征的通道维度, 将所述全局 属性特征、 所述风格特征和所述 风格强度特 征进行叠加得到所述融合特 征; 获取预训练的风格解码器; 采用所述 风格解码器识别所述融合特 征, 输出所述目标图片对应的风格化图片。 6.如权利要求5所述的方法, 其特征在于, 所述全局信 息编码器和所述风格解码器的训 练包括: 获取具有风格标签的训练风格数据图片、 训练风格强度 数据和预训练 的属性解耦编码 器; 采用所述训练风格数据图片训练原始全局信 息编码器, 以由所述原始全局信 息编码器权 利 要 求 书 1/2 页 2 CN 114897670 A 2输出所述训练风格数据图片的训练全局 属性特征; 从预设风格特 征库获取 所述风格标签匹配的训练风格特 征; 将所述训练风格数据图片输入所述属性解耦编码器, 得到所述训练风格数据图片对应 的训练风格强度特 征; 将所述训练全局属性特征、 所述训练风格特征和所述训练风格强度特征进行拼接, 得 到融合训练特 征; 采用所述融合训练特征训练原始风格解码器, 以由所述所述原始风格解码器输出所述 训练风格数据图片对应的训练风格化图片; 根据所述风格标签, 获取与所述训练风格化图片相匹配的预设风格图片, 并将所述训 练风格化图片和所述预设风格图片输入损失函数判别网络, 得到损失值; 在所述损失值小于或者等于预设值 时, 停止所述原始全局信 息编码器和所述原始风格 解码器的训练, 并将停止训练的所述原始全局信息编 码器和所述原始风格解码器存储为所 述全局信息编码器和所述 风格解码器。 7.如权利要求1所述的方法, 其特 征在于, 所述 风格化图片生成方法, 还 包括: 获取待处 理的目标图片; 在所述目标图片中不包含提取所述目标风格类型的预设触发动作时, 执行所述确定待 处理的目标图片对应的目标风格类型和属性特征向量, 并根据所述属性特征向量确定所述 目标图片对应的风格强度特 征的步骤。 8.一种风格化图片生成装置, 其特 征在于, 所述 风格化图片生成装置包括: 第一获取模块, 用于确定待处理的目标图片对应的目标风格类型和属性特征向量, 并 根据所述属性特 征向量确定所述目标图片对应的风格强度特 征; 第二获取模块, 用于提取 所述目标图片的全局 属性特征; 第三获取模块, 用于根据所述目标风格类型查找预设风格特征库, 得到所述目标风格 类型匹配的风格特 征; 图片生成模块, 用于将所述全局属性特征、 所述风格特征和所述风格强度特征进行拼 接得到融合特 征, 并根据所述融合特 征生成所述目标图片对应的风格化图片。 9.一种终端设备, 其特征在于, 所述终端设备包括: 存储器、 处理器及存储在所述存储 器上并可在所述处理器上运行的风格化图片生成程序, 所述风格化图片生成程序被所述处 理器执行时实现如权利要求1 ‑7中任一项所述的风格化图片生成方法的步骤。 10.一种存储介质, 其特征在于, 其上存储有风格化图片生成程序, 所述风格化图片生 成程序被处 理器执行时实现权利要求1 ‑7中任一项所述的风格化图片生成方法的步骤。权 利 要 求 书 2/2 页 3 CN 114897670 A 3

.PDF文档 专利 风格化图片生成方法、装置、设备及存储介质

文档预览
中文文档 19 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共19页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 风格化图片生成方法、装置、设备及存储介质 第 1 页 专利 风格化图片生成方法、装置、设备及存储介质 第 2 页 专利 风格化图片生成方法、装置、设备及存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常 于 2024-03-18 12:51:22上传分享
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。