(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210920029.6 (22)申请日 2022.08.01 (30)优先权数据 17/513,392 2021.10.28 US (71)申请人 上海联影智能医疗科技有限公司 地址 200232 上海市徐汇区龙腾大道 2879 号3楼3674室 (72)发明人 斯里克里希纳·卡拉南　郑梦　 吴子彦　 (74)专利代理 机构 上海弼兴律师事务所 31283 专利代理师 罗朗　王卫彬 (51)Int.Cl. G06T 17/00(2006.01) G06N 3/04(2006.01) G06N 3/08(2006.01)G16H 50/50(2018.01) (54)发明名称 身体建模的系统和方法 (57)摘要 可以基于人的一个或多个图像使用预先训 练过的神经网络来获得人的三维(3D)模型。 这种 模型可能受到估计偏差和/或其他类型的缺陷或 错误的影响。 本文描述了用于改进3D模型和/或 用于生成3D模型的神经网络的系统、 方法和装 置。 所提出的技术可以从图像中提取诸如身体关 键点位置和/或体形的信息并使用所提取的信息 来细化3D 模型和/或神经网络。 在示例中， 3D模型 和/或神经网络可以通过最小 化从图像提取的身 体关键点位置和/或体形与从3D 模型确定的对应 身体关键点位置和/或体形之间的差异来细化。 细化可以 以迭代和交替的方式执 行。 权利要求书2页 说明书8页 附图6页 CN 115272582 A 2022.11.01 CN 115272582 A 1.一种用于获得 人体模型的设备， 包括： 一个或多个处 理器， 其被 配置为： 获得人的三维(3D)模型， 其中， 所述3D模型基于所述人的一个或多个图像使用一个或 多个神经网络来 生成， 并且其中， 所述 一个或多个神经网络被预 先训练以生成所述3D模型； 获得所述人的所述 一个或多个图像； 基于所述人的所述一个或多个图像来确定所述人的第一组身体关键点位置或所述人 的第一组体形参数； 以及 基于所述人的所述第一组身体关键点位置或所述人的所述第一组体形参数中的至少 一个来调节所述人的所述3D模型。 2.根据权利要求1所述的设备， 其中， 所述 一个或多个处 理器还被 配置为： 基于所述人的所述3D模型来确定所述人的第二组身体关键点位置或所述人的第二组 体形参数中的至少一个； 以及 通过最小化所述人的所述第一组身体关键点位置与所述第二组身体关键点位置之间 的差异或所述人 的所述第一组体形参数与所述第二组体形参数之间的差异中的至少一个 来调节所述人的所述3D模型。 3.根据权利要求2所述的设备， 其中， 所述人的所述第 一组身体关键点位置与 所述第二 组身体关键点位置之 间的所述差异包括第一欧几里得距离， 或所述人的所述第一组体形参 数与所述第二组体形参数之间的所述差异包括第二欧几里 得距离。 4.根据权利要求2所述的设备， 其中， 所述人的所述第 一组身体关键点位置和所述人的 所述第一组体形参数独立于所述人的所述第二组身体关键点位置和所述人的所述第二组 体形参数来确定 。 5.根据权利要求1所述的设备， 还包括被配置为捕捉所述人的所述一个或多个图像的 至少一个视 觉传感器、 颜色传感器、 深度传感器或红外传感器。 6.根据权利要求1所述的设备， 其中， 所述一个或多个处理器被配置为基于所述人的所 述第一组身体关键点位置或所述人的所述第一组体形参数中的至少一个来调节所述一个 或多个神经网络的参数。 7.根据权利要求6所述的设备， 其中， 所述一个或多个处理器被配置为以交替方式调节 所述一个或多个神经网络的所述 参数和所述人的所述3D模型。 8.根据权利 要求1所述的设备， 其中， 所述人的所述3D模型包括蒙皮多人线性(SMPL)模 型。 9.根据权利要求1所述的设备， 其中， 所述一个或多个处理器还被配置为在基于所述人 的所述第一组身体关键点位置或所述人的所述第一组体形参数中的至少一个来调节所述 人的所述3D模型之后向接收装置 输出所述人的所述3D模型的表示。 10.一种用于获得 人体模型的方法， 所述方法包括： 获得人的三维(3D)模型， 其中， 所述3D模型基于所述人的一个或多个图像使用一个或 多个神经网络来 生成， 并且其中， 所述 一个或多个神经网络被预 先训练以生成所述3D模型； 获得所述人的所述 一个或多个图像； 基于所述人的所述一个或多个图像来确定所述人的第一组身体关键点位置或所述人 的第一组体形参数中的至少一个； 以及权　利　要　求　书 1/2 页 2 CN 115272582 A 2基于所述人的所述第一组身体关键点位置或所述人的所述第一组体形参数中的至少 一个来调节所述人的所述3D模型。权　利　要　求　书 2/2 页 3 CN 115272582 A 3