(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210751838.9 (22)申请日 2022.06.28 (71)申请人 北京字跳网络技 术有限公司 地址 100190 北京市海淀区紫金 数码园4号 楼2层0207 (72)发明人 王秋雨  (74)专利代理 机构 北京远智汇知识产权代理有 限公司 1 1659 专利代理师 刘茜阳 (51)Int.Cl. G06T 3/00(2006.01) G06V 10/422(2022.01) G06V 10/54(2022.01) G06V 10/80(2022.01) G06V 10/82(2022.01) (54)发明名称 图像处理方法、 装置、 电子设备及存 储介质 (57)摘要 本公开实施例提供了一种图像处理方法、 装 置、 电子设备及存储介质, 该方法包括: 获取待处 理图像; 确定待处理图像中与目标对象相对应的 对象结构特征, 以及确定与待应用参考风格图像 相对应的风格纹理特征; 基于对象结构特征和风 格纹理特征, 确定与待处理图像相对应的目标风 格图像。 基于上述技术方案, 实现了对于图像风 格化处理的全面性, 从而提高了图像的显示效果 以及用户体验的技 术效果。 权利要求书2页 说明书15页 附图7页 CN 114926326 A 2022.08.19 CN 114926326 A 1.一种图像处 理方法, 其特 征在于, 包括: 获取待处 理图像; 确定所述待处理图像中与目标对象相对应的对象结构特征, 以及确定与待应用参考风 格图像相对应的风格纹 理特征; 基于所述对象结构特征和所述风格纹理特征, 确定与 所述待处理图像相对应的目标风 格图像。 2.根据权利要求1所述的方法, 其特 征在于, 所述获取待处 理图像, 包括: 在检测到触发特效处 理操作时, 采集所述待处 理图像; 或, 将上传的待处 理视频中的至少一个视频帧, 分别作为所述待处 理图像。 3.根据权利要求1所述的方法, 其特征在于, 所述待应用参考风格图像是通过如下方式 确定的: 将预先设定的风格图像作为所述待应用参 考风格图像; 或, 当检测到触发特效处理操作或接收到上传的待处理视频时, 于显示界面展示至少一种 待选择风格图像; 基于所述选择的待选择风格图像, 确定所述待应用参 考风格图像。 4.根据权利要求3所述的方法, 其特 征在于, 还 包括: 基于预先训练得到的编码器提取所述待选择参考风格图像的风格纹理特征并存储至 目标缓存位置, 以在确定与所述待应用参考风格图像相对应的风格纹理特征时, 从所述 目 标缓存位置调取相应的风格纹 理特征。 5.根据权利要求1所述的方法, 其特征在于, 所述确定所述待处理图像中与目标对象相 对应的对象结构特 征, 以及确定与待应用参 考风格图像相对应的风格纹 理特征, 包括: 基于预先训练得到的编码器提取所述待处理图像中与所述目标对象相对应的对象结 构特征; 基于对至少一个待选择风格图像的触发操作, 确定待应用参考风格图像, 并调取预先 存储的与所述待应用参 考风格图像相对应的风格纹 理特征。 6.根据权利要求1所述的方法, 其特征在于, 所述确定所述待处理图像中与目标对象相 对应的对象结构特 征, 以及确定与待应用参 考风格图像相对应的风格纹 理特征, 包括: 获取于显示界面上触发选择的待应用参 考风格图像; 将所述待应用参考风格图像和所述待处理图像输入至预先训练得到的编码器中, 得到 所述待处 理图像的对象结构特 征, 以及所述待应用参 考风格图像的风格纹 理特征。 7.根据权利要求6所述的方法, 其特征在于, 所述将所述待应用参考风格图像和所述待 处理图像输入至预先训练得到的编码器中, 得到所述待处理图像的对 象结构特征, 以及所 述待应用参 考风格图像的风格纹 理特征, 包括: 分别确定所述待应用参 考图像和所述待处 理图像的标识属性; 基于所述编码器依据 所述标识属性提取所述待处理图像的对象结构特征, 以及所述待 应用参考风格图像的风格纹 理特征。 8.根据权利要求6所述的方法, 其特征在于, 所述编码器包括第一编码器和第二编码 器, 所述将所述待应用参考风格图像和所述待处理图像输入至预先训练得到的编码器中, 得到所述待处理图像的对 象结构特征, 以及所述待应用参考风格图像的风格纹理特征, 包权 利 要 求 书 1/2 页 2 CN 114926326 A 2括: 基于所述第 一编码器对所述待处理图像进行特征提取, 得到所述对象结构特征以及对 象纹理特征; 以及, 基于所述第 二编码器对所述待应用参考风格图像进行特征提取, 得到所述风格纹理特 征以及风格结构特 征; 获取所述对象结构特 征和所述 风格纹理特征。 9.根据权利要求1所述的方法, 其特征在于, 所述基于所述对象结构特征和所述风格纹 理特征, 确定与所述待处 理图像相对应的目标风格图像, 包括: 基于目标生成器对所述对象结构特征和所述风格纹理特征重建处理, 得到所述目标风 格图像。 10.根据权利要求1所述的方法, 其特 征在于, 还 包括: 在检测到拍摄特效视频或接收到上传的录屏视频时, 将至少一个视频帧作为待处理图 像, 并确定与所述待处 理图像相对应的目标风格图像; 对待处理图像的目标风格图像拼接处 理, 得到目标 特效视频。 11.根据权利要求3 ‑8中任一所述的方法, 其特征在于, 所述编码器包括至少两个分支 结构, 第一分支结构用于提取结构特征, 第二分支结构用于提取纹理特征, 所述结构特征中 包括对象结构特征和 风格结构特征, 所述纹理特征中包括对 象纹理特征和风格纹理特征, 所述分支结构包括至少一个卷积层。 12.根据权利要求1 ‑9中任一所述的方法, 其特征在于, 所述待应用参考风格图像的风 格纹理特征与至少一种漫画风格纹理特征、 时代风格纹理特征或地域风格纹理特征相对 应。 13.一种图像处 理装置, 其特 征在于, 包括 待处理图像获取模块, 用于获取待处 理图像; 特征提取模块, 用于确定所述待处理图像中与目标对象相对应的对象结构特征, 以及 确定与待应用参 考风格图像相对应的风格纹 理特征; 风格图像确定模块, 用于基于所述对象结构特征和所述风格纹理特征, 确定与所述待 处理图像相对应的目标风格图像。 14.一种电子设备, 其特 征在于, 所述电子设备包括: 一个或多个处 理器; 存储装置, 用于存 储一个或多个程序, 当所述一个或多个程序被所述一个或多个处理器执行, 使得所述一个或多个处理器实 现如权利要求1 ‑12中任一所述的图像处 理方法。 15.一种包含计算机可执行指令的存储介质, 所述计算机可执行指令在由计算机处理 器执行时用于执 行如权利要求1 ‑12中任一所述的图像处 理方法。权 利 要 求 书 2/2 页 3 CN 114926326 A 3

.PDF文档 专利 图像处理方法、装置、电子设备及存储介质

文档预览
中文文档 25 页 50 下载 1000 浏览 0 评论 309 收藏 3.0分
温馨提示:本文档共25页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 图像处理方法、装置、电子设备及存储介质 第 1 页 专利 图像处理方法、装置、电子设备及存储介质 第 2 页 专利 图像处理方法、装置、电子设备及存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 人生无常 于 2024-03-18 17:28:59上传分享
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。