(19)国家知识产权局
(12)发明 专利申请
(10)申请公布号
(43)申请公布日
(21)申请 号 202210844711.1
(22)申请日 2022.07.18
(71)申请人 维沃移动通信有限公司
地址 523863 广东省东莞 市长安镇维沃路1
号
(72)发明人 罗一衍
(74)专利代理 机构 北京润泽恒知识产权代理有
限公司 1 1319
专利代理师 乔珊珊
(51)Int.Cl.
G06T 7/10(2017.01)
G06T 17/00(2006.01)
G06T 3/00(2006.01)
(54)发明名称
人脸分割方法及其装置
(57)摘要
本申请公开了一种人脸分割方法及其装置,
属于图像处理技术领域。 该人脸分割方法包括:
根据预先采集的三维人脸点云数据, 构建可形变
人脸模型; 其中, 所述可形变人脸模型中每个数
据坐标点表 示的人脸部位已标记; 调整所述可形
变人脸模型的形变参数, 得到多个不同的三维人
脸模型; 将所述三维人脸模型分别投影为二维人
脸图像; 根据所述三维人脸模型与所述二维人脸
图像之间的投影 关系, 以及所述可形变人脸模型
中每个数据坐标点表示的人脸部位, 对所述二维
人脸图像进行分割处 理。
权利要求书3页 说明书12页 附图3页
CN 115100216 A
2022.09.23
CN 115100216 A
1.一种人脸分割方法, 其特 征在于, 所述方法包括:
根据预先采集的三维人脸点云数据, 构建可形变人脸模型; 其中, 所述可形变人脸模型
中每个数据坐标点表示的人脸部位已标记;
调整所述可 形变人脸模型的形变参数, 得到多个不同的三维人脸模型;
将所述三维人脸模型分别投影为 二维人脸图像;
根据所述三维人脸模型与 所述二维人脸图像之间的投影关系, 以及所述可形变人脸模
型中每个数据坐标点表示的人脸部位, 对所述 二维人脸图像进行分割处 理。
2.根据权利要求1所述的人脸分割方法, 其特征在于, 所述根据 预先采集的三维人脸点
云数据, 构建可 形变人脸模型, 包括:
将所述预先采集的三维人脸点云数据, 映射至所述可形变人脸模型的拓扑空间中, 得
到目标人脸数据;
根据所述目标人脸数据, 得到构成所述可形变人脸模型的均值人脸模型、 形状基向量
和表情基向量。
3.根据权利要求2所述的人脸分割方法, 其特征在于, 所述将所述预先采集的三维人脸
点云数据, 映射至所述可 形变人脸模型的拓扑空间中, 得到目标 人脸数据, 包括:
获取预先采集的M个人物的三维人脸的第一点云数据; 其中, 所述第 一点云数据包括所
述M个人物中每 个人物的N个表情的点云数据和无表情的点云数据;
将所述第一 点云数据映射至所述拓扑空间中, 得到所述目标 人脸数据;
所述根据所述目标人脸数据, 得到构成所述可形变人脸模型的均值人脸模型、 形状基
向量和表情基向量, 包括:
提取所述目标 人脸数据中M个人物的无表情人脸数据的形状特 征数据;
根据所述形状特 征数据, 得到所述均值人脸模型和所述形状 基向量;
根据所述目标 人脸数据, 得到所述 N个表情中的每 个表情的均值人脸数据;
提取每个表情的均值人脸数据中的表情特 征数据;
根据所述表情特 征数据, 得到所述表情基向量。
4.根据权利要求2所述的人脸分割方法, 其特征在于, 所述将所述预先采集的三维人脸
点云数据, 映射至所述可 形变人脸模型的拓扑空间中, 得到目标 人脸数据, 包括:
获取预先采集的M个无表情三维人脸的第二 点云数据;
将所述第二 点云数据映射至所述拓扑空间中, 得到所述目标 人脸数据;
所述根据所述目标人脸数据, 得到构成所述可形变人脸模型的均值人脸模型、 形状基
向量和表情基向量, 包括:
提取所述目标 人脸数据中的形状特 征数据;
根据所述形状特 征数据, 得到所述均值人脸模型和所述形状 基向量;
对所述均值人脸模型进行N个不同表情的形变建模, 得到 叠加表情模型;
将所述叠加表情模型与所述均值人脸模型进行线性相减, 得到所述表情基向量。
5.根据权利要求1所述的人脸分割方法, 其特征在于, 所述将所述三维人脸模型分别投
影为二维人脸图像, 包括:
为每个所述三维人脸模型分别添加预设人脸配饰和/或预设场景信 息; 其中, 所述预设
场景信息包括: 背景信息和光照信息中的至少一个;权 利 要 求 书 1/3 页
2
CN 115100216 A
2将添加所述预设人脸配饰和/或所述预设场景信息的三维人脸模型, 分别投影为所述
二维人脸图像。
6.一种人脸分割装置, 其特 征在于, 所述装置包括:
模型构建模块, 用于根据预先采集的三维人脸点云数据, 构建可形变人脸模型; 其中,
所述可形变人脸模型中每 个数据坐标点表示的人脸部位已标记;
模型调整模块, 用于调整所述可形变人脸模型的形变参数, 得到多个不同的三维人脸
模型;
投影模块, 用于将所述 三维人脸模型分别投影为 二维人脸图像;
图像分割模块, 用于根据所述三维人脸模型与所述二维人脸图像之间的投影关系, 以
及所述可形变人脸模型中每个数据坐标点表示的人脸部位, 对所述二维人脸图像进行分割
处理。
7.根据权利要求6所述的人脸分割装置, 其特 征在于, 所述模型构建模块包括:
映射单元, 用于将所述预先采集的三维人脸点云数据, 映射至所述可形变人脸模型的
拓扑空间中, 得到目标 人脸数据;
构建单元, 用于根据所述目标人脸数据, 得到构成所述可形变人脸模型的均值人脸模
型、 形状基向量和表情基向量。
8.根据权利要求7 所述的人脸分割装置, 其特 征在于, 所述映射单 元包括:
第一获取子单元, 用于获取预先采集的M个人物 的三维人脸的第一点云数据; 其中, 所
述第一点云数据包括所述M个人物中每 个人物的N个表情的点云数据和无表情的点云数据;
第一映射子单元, 用于将所述第一点云数据映射至所述拓扑空间中, 得到所述目标人
脸数据;
所述构建单 元包括:
第一提取子单元, 用于提取所述目标人脸数据中M个人物的无表情人脸数据的形状特
征数据;
第一构建子单元, 用于根据所述形状特征数据, 得到所述均值人脸模型和所述形状基
向量;
第一处理子单元, 用于根据 所述目标人脸数据, 得到所述N个表情中的每个表情的均值
人脸数据;
第二提取子单 元, 用于提取每 个表情的均值人脸数据中的表情特 征数据;
第二构建子单 元, 用于根据所述表情特 征数据, 得到所述表情基向量。
9.根据权利要求7 所述的人脸分割装置, 其特 征在于, 所述映射单 元包括:
第二获取子单 元, 用于获取 预先采集的M个无表情三维人脸的第二 点云数据;
第二映射子单元, 用于将所述第二点云数据映射至所述拓扑空间中, 得到所述目标人
脸数据;
所述构建单 元包括:
第三提取子单 元, 用于提取 所述目标 人脸数据中的形状特 征数据;
第三构建子单元, 用于根据所述形状特征数据, 得到所述均值人脸模型和所述形状基
向量;
建模子单元, 用于对所述均值人脸模型进行N个不同表情的形变建模, 得到叠加表情模权 利 要 求 书 2/3 页
3
CN 115100216 A
3
专利 人脸分割方法及其装置
文档预览
中文文档
19 页
50 下载
1000 浏览
0 评论
0 收藏
3.0分
温馨提示:本文档共19页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
本文档由 SC 于 2024-02-24 00:44:39上传分享