(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210876107.7 (22)申请日 2022.07.25 (71)申请人 北京达佳互联信息技 术有限公司 地址 100085 北京市海淀区上地西路6号1 幢1层101D1-7 (72)发明人 苏泳　 (74)专利代理 机构 北京铭硕知识产权代理有限 公司 11286 专利代理师 曾世骁　王兆赓 (51)Int.Cl. G06T 17/00(2006.01) G06T 15/20(2011.01) G06T 7/11(2017.01) G06T 7/593(2017.01) G06T 7/90(2017.01) (54)发明名称 图像处理方法和装置、 电子设备、 计算机可 读存储介质 (57)摘要 本公开关于一种图像处理方法和装置、 电子 设备、 计算机 可读存储介质， 图像处理方法包括： 获取二维图像的图像分割信息和深度信息， 图像 分割信息用于记录二维图像的至少两个分割 区 域， 深度信息用于记录二维图像的每个像素点的 深度值； 根据图像分割信息和深度信息， 确定与 二维图像的每个 分割区域各自关联的三维模型； 根据二维图像的颜色信息， 确定每个三维模型的 颜色信息； 根据每个三维模型及其颜色信息， 对 每个三维模 型进行渲染处理， 得到与每个三维模 型相应的各个渲染图像； 基于各个渲染图像得到 二维图像对应的三维图像。 本公开能减少不同拍 摄对象交界处的拉伸， 有助于拓宽摄像头的漫游 角度， 实现多层次的三维图像 。 权利要求书2页 说明书13页 附图7页 CN 115239883 A 2022.10.25 CN 115239883 A 1.一种图像处 理方法， 其特 征在于， 所述图像处 理方法包括： 获取二维图像的图像分割信 息和深度信 息， 所述图像分割信 息用于记录所述二维图像 的至少两个分割区域， 所述深度信息用于记录所述 二维图像的每 个像素点的深度值； 根据所述图像分割信 息和所述深度信 息， 确定与 所述二维图像的每个所述分割区域各 自关联的三维模型； 根据所述 二维图像的颜色信息， 确定每 个所述三维模型的颜色信息； 根据每个所述三维模型及其颜色信息， 对每个所述三维模型进行渲染处理， 得到与每 个所述三维模型相应的各个渲染图像； 基于各个所述 渲染图像得到所述 二维图像对应的三维图像。 2.如权利要求1所述的图像处理方法， 其特征在于， 将所述二维图像中除所述分割区域 以外的区域记为相应的所述分割区域的非分割区域， 其中， 所述根据所述图像分割信息和 所述深度信息， 确定与所述 二维图像的每 个所述分割区域各自关联的三维模型， 包括： 对所述二维图像的每个所述分割区域， 根据相应的所述分割区域的深度值， 调整相应 的所述非分割区域的深度值， 并将相应的所述分割区域的深度值和相应的所述非分割区域 调整后的深度值作为调整深度信息； 根据所述二维图像的每个所述分割区域各自对应的所述调整深度信 息， 确定所述二维 图像的每 个所述分割区域各自关联的所述 三维模型。 3.如权利要求2所述的图像处理方法， 其特征在于， 所述根据相应的所述分割区域的深 度值， 调整相应的所述非分割区域的深度值， 包括： 确定相应的所述分割区域内的各个 像素点的深度值的统计值， 作为 参考深度值； 根据所述 参考深度值， 调整相应的所述非分割区域的深度值。 4.如权利要求3所述的图像处理方法， 其特征在于， 所述根据所述参考深度值， 调整相 应的所述非分割区域的深度值， 包括： 将相应的所述非分割区域的深度值 替换为所述 参考深度值； 或 在相应的所述分割区域的边界处建立深度过渡带， 将相应的所述非分割区域中除相应 的所述深度过渡带以外的区域的深度值替换为所述参考深度值， 并使得相应的所述深度过 渡带内的各个像素点的深度值依照像素点所处的位置 自边界处的深度值至所述参考深度 值逐渐变化。 5.如权利要求1所述的图像处理方法， 其特征在于， 所述根据所述图像分割信 息和所述 深度信息， 确定与所述 二维图像的每 个所述分割区域各自关联的三维模型， 包括： 基于所述二维图像的最大深度值， 对所述二维图像的至少一个所述分割区域的深度值 进行偏移调整， 其中， 不同的所述分割区域的偏移量 不同； 根据偏移调 整后所述二维图像的每个所述分割区域的深度值， 确定与 所述二维图像的 每个所述分割区域各自关联的所述 三维模型。 6.如权利要求1到5中的任一权利要求所述的图像处理方法， 其特征在于， 所述至少两 个分割区域包括 非背景区域， 其中， 所述根据所述二 维图像的颜色信息， 确定每个所述三 维 模型的颜色信息， 包括： 对于所述二维图像的每个所述非背景区域， 从所述二维图像中获取相应的所述非背景 区域的颜色信息， 作为与相应的所述非背景区域关联的所述 三维模型的颜色信息 。权　利　要　求　书 1/2 页 2 CN 115239883 A 27.如权利要求6所述的图像处理方法， 其特征在于， 所述根据每个所述三维模型及其颜 色信息， 对每个所述三维模型进行渲染处理， 得到与每个所述三维模型相应的各个渲染 图 像， 包括： 对所述二维图像的每个所述非背景区域所关联的所述三维模型， 在每个所述三维模型 对应于相应的所述非背景区域部分的边界处建立 渲染过渡带； 根据每个所述三维模型的颜色信 息， 对每个所述三维模型对应于相应的所述非背景区 域的部分及对应的所述渲 染过渡带进 行渲染处理， 得到与每个所述三维模 型相应的各个所 述渲染图像， 其中， 所述 渲染过渡带内的渲染效果逐渐 变化。 8.如权利要求1到5中的任一权利要求所述的图像处理方法， 其特征在于， 所述至少两 个分割区域包括背 景区域， 其中， 所述根据所述二维图像的颜色信息， 确定每个所述三 维模 型的颜色信息， 包括： 对于所述二维图像的所述背景区域， 将所述二维图像在全局范围内的颜色信 息作为相 应的所述 三维模型的颜色信息； 或 获取所述二维图像的补充背景图像， 将所述补充背景图像在全局范围内的颜色信 息作 为与所述二维 图像的所述背景区域关联 的所述三维模型 的颜色信息， 其中， 所述补充背景 图像是将所述二维图像中除所述背景区域以外的其他所述分割区域的内容替换为预测的 背景内容后得到的图像。 9.一种图像处 理装置， 其特 征在于， 所述图像处 理方法装置： 获取单元， 被配置为执行获取二维图像的图像分割信息和深度信息， 所述图像分割信 息用于记录所述二维图像的至少两个分割区域， 所述深度信息用于记录所述二维图像的每 个像素点的深度值； 建模单元， 被配置为执行根据所述图像分割信息和所述深度信息， 确定与所述二维图 像的每个所述分割区域各自关联的三维模型； 取色单元， 被配置为执行根据所述二维图像的颜色信息， 确定每个所述三维模型的颜 色信息； 渲染单元， 被配置为执行根据每个所述三维模型及其颜色信息， 对每个所述三维模型 进行渲染处 理， 得到与每 个所述三维模型相应的各个渲染图像； 合并单元， 被配置为执 行基于各个所述 渲染图像得到所述 二维图像对应的三维图像。 10.一种电子设备， 其特 征在于， 包括： 至少一个处 理器； 至少一个存 储计算机可 执行指令的存 储器， 其中， 所述计算机可执行指令在被所述至少一个处理器运行时， 促使所述至少一个处 理器执行如权利要求1到8中的任一权利要求所述的图像处 理方法。 11.一种计算机可读存储介质， 其特征在于， 当所述计算机可读存储介质中的指令被至 少一个处理器运行时， 促使所述至少一个处理器执行如权利要求 1到8中的任一权利要求所 述的图像处 理方法。 12.一种计算机程序产品， 包括计算机指令， 其特征在于， 所述计算机指令被至少一个 处理器执行时实现如权利要求1到8中的任一权利要求所述的图像处 理方法。权　利　要　求　书 2/2 页 3 CN 115239883 A 3