医药安全标准网
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210842963.0 (22)申请日 2022.07.18 (71)申请人 北京奇艺世纪科技有限公司 地址 100080 北京市海淀区北一 街2号爱奇 艺创新大厦10、 1 1层 (72)发明人 史培培  (74)专利代理 机构 北京集佳知识产权代理有限 公司 11227 专利代理师 王娇娇 (51)Int.Cl. G06T 17/00(2006.01) (54)发明名称 三维重建方法、 装置、 电子设备及存 储介质 (57)摘要 本发明提供一种三维重建方法、 装置、 电子 设备及存储介质, 对于目标对象的正面图像, 首 先对该正面图像进行姿态估计得到三维模型和 相机参数, 该三维模型中包含目标对象的姿态参 数和形状参数; 进而根据三维模型、 相机参数、 以 及正面图像中的可见像素, 重建目标对象的纹理 图, 并对该目标对象的纹理图进行填充, 进一步, 将填充后的目标对象的纹理图融合至三维模型 中得到三维重建模型。 基于本发明, 只需上传一 张正面图像即可实现正面图像中目标对象的三 维重建模型的构建, 以此重建目标对象的虚拟形 象, 能够显著提升短视频制作、 虚拟形象制作等 场景下的虚拟形象设计效率。 权利要求书2页 说明书8页 附图3页 CN 115222886 A 2022.10.21 CN 115222886 A 1.一种三维重建方法, 其特 征在于, 所述方法包括: 获取目标对象的正面图像, 并对所述正面图像进行姿态估计得到三维模型和相机参 数, 所述三维模型中包 含所述目标对象的姿态参数和形状参数; 根据所述三维模型、 所述相机参数、 以及所述正面图像 中的可见像素, 重建所述目标对 象的纹理图, 并对所述目标对象的纹 理图进行填充; 将填充后的所述目标对象的纹 理图融合至所述 三维模型中得到三维重建模型。 2.根据权利要求1所述的方法, 其特 征在于, 所述获取目标对象的正 面图像, 包括: 获取所述目标对象在T型姿势或A型姿势下全身的正 面图像。 3.根据权利要求1所述的方法, 其特征在于, 所述根据所述三维模型、 所述相机参数、 以 及所述正面图像中的可 见像素, 重建所述目标对象的纹 理图, 包括: 基于所述相机参数将所述三维模型投影至所述正面图像中, 以确定所述可见像素与 所 述三维模型中顶点的对应关系; 获取所述三维模型中与所述可 见像素具有对应关系的顶点在指定纹 理图中的坐标; 基于所获取的坐标确定所述可见像素在所述指定纹理图中的纹理像素值, 以将所述可 见像素的纹 理像素值构成所述目标对象的纹 理图。 4.根据权利要求1所述的方法, 其特征在于, 所述对所述目标对象的纹理图进行填充, 包括: 在所述目标对象的纹理图中对所述可见像素进行语义分析, 得到所述可见像素的语义 信息; 按照所述可见像素的语义信 息将所述目标对象的纹理图划分为多个纹理区域, 每个纹 理区域对应一种语义信息、 且 任意两个纹 理区域的语义信息不同; 分别对每个纹理区域进行纹理填充, 并按照每个纹理区域在所述目标对象的纹理图中 的位置对填充后的多个纹 理区域进行拼接 。 5.根据权利要求1所述的方法, 其特 征在于, 所述方法还 包括: 获取目标动作的姿态参数; 将所述目标动作姿态参数赋值给所述三维重建模型的姿态参数, 以驱动所述三维重建 模型执行所述目标动作。 6.一种三维重建装置, 其特 征在于, 所述装置包括: 姿态估计模块, 用于获取目标对象的正面图像, 并对所述正面图像进行姿态估计得到 三维模型和相机参数, 所述 三维模型中包 含所述目标对象的姿态参数和形状参数; 纹理重建填充模块, 用于根据 所述三维模型、 所述相机参数、 以及所述正面图像中的可 见像素, 重建所述目标对象的纹 理图, 并对所述目标对象的纹 理图进行填充; 模型重建模块, 用于将填充后的所述目标对象的纹理图融合至所述三维模型中得到三 维重建模型。 7.根据权利要求6所述的装置, 其特征在于, 用于获取目标对象的正面图像的所述姿态 估计模块, 具体用于: 获取所述目标对象在T型姿势或A型姿势下全身的正 面图像。 8.根据权利要求6所述的装置, 其特征在于, 用于根据所述三维模型、 所述相机参数、 以 及所述正面图像中的可见像素, 重建所述 目标对象的纹理图的所述纹理重建填充模块, 具权 利 要 求 书 1/2 页 2 CN 115222886 A 2体用于: 基于所述相机参数将所述三维模型投影至所述正面图像中, 以确定所述可见像素与 所 述三维模型中顶点的对应关系; 获取所述三 维模型中与所述可见像素具有对应关系的顶点 在指定纹理图中的坐标; 基于所获取的坐标确定所述可见像素在所述指定纹理图中的纹理 像素值, 以将所述可 见像素的纹 理像素值构成所述目标对象的纹 理图。 9.一种电子设备, 其特征在于, 所述电子设备包括: 至少一个存储器和至少一个处理 器; 所述存储器存储有应用程序, 所述处理器调用所述存储器存储的应用程序, 所述应用程 序用于实现权利要求1 ‑5任意一项所述的三维重建方法。 10.一种存储介质, 其特征在于, 所述存储介质存储有计算机程序代码, 所述计算机程 序代码执 行时实现权利要求1 ‑5任意一项所述的三维重建方法。权 利 要 求 书 2/2 页 3 CN 115222886 A 3

PDF文档 专利 三维重建方法、装置、电子设备及存储介质

文档预览
中文文档 14 页 50 下载 1000 浏览 0 评论 0 收藏 3.0分
温馨提示:本文档共14页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 三维重建方法、装置、电子设备及存储介质 第 1 页 专利 三维重建方法、装置、电子设备及存储介质 第 2 页 专利 三维重建方法、装置、电子设备及存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 SC 于 2024-02-24 00:44:39上传分享
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。