(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210830536.0 (22)申请日 2022.07.15 (71)申请人 中关村科 学城城市大脑 股份有限公 司 地址 100081 北京市海淀区中关村南大街5 号1区689号楼海淀科技大厦6层 (72)发明人 王铁心　李维　邢云　董镇毓　 吕峥　郑禄秀　李健　朱智慧　 (74)专利代理 机构 北京唯智勤实知识产权代理 事务所(普通 合伙) 11557 专利代理师 孙姣 (51)Int.Cl. G06T 17/00(2006.01) G06T 15/00(2011.01) G06T 19/20(2011.01)G06F 3/0481(2022.01) G06Q 30/06(2012.01) G06N 3/04(2006.01) G06N 3/08(2006.01) (54)发明名称 动作视频发送方法、 装置、 设备和介质 (57)摘要 本公开的实施例公开了动作视频发送方法、 装置、 设备和介质。 该方法的一具体实施方式包 括： 响应于检测到目标用户在目标应用界面上已 点击针对目标服饰的查看按钮， 指示目标应用在 目标应用界面上生成用户信息输入框； 响应于接 收到目标用户在用户信息输入框所输入的用户 信息， 生成与用户信息相对应的初始三维用户模 型； 将目标服饰的服饰图案信息渲染至初始三维 用户模型， 以生成渲染服饰的三维用户模型； 响 应于检测到目标用户在目标应用界面上已点击 针对渲染服饰的三维用户模型的目标动作执行 按钮， 生成与渲染服饰的三维用户模 型相对应的 目标动作视频； 将目标动作视频发送至目标应 用。 该实施方式可以准确地生 成针对服饰的定制 视频。 权利要求书3页 说明书11页 附图2页 CN 115272564 A 2022.11.01 CN 115272564 A 1.一种动作视频发送方法， 包括： 响应于检测到目标用户在目标应用界面上已点击针对目标服饰的查看按钮， 指示目标 应用在所述目标应用界面上生成用户信息 输入框； 响应于接收到所述目标用户在所述用户信 息输入框所输入的用户信 息， 生成与所述用 户信息相对应的初始三维用户模型； 将所述目标服饰的服饰图案信 息渲染至所述初始三维用户模型， 以生成渲染服饰的三 维用户模型； 响应于检测到所述目标用户在目标应用界面上已点击针对所述渲染服饰的三维用户 模型的目标动作执行按钮， 生成与所述渲染服饰的三维用户模型相对应的目标动作视频， 其中， 所述目标动作执 行按钮为目标动作信息对应的动作执 行按钮； 将所述目标动作视频发送至所述目标应用， 以供在所述目标应用界面展示所述目标动 作视频。 2.根据权利要求1所述的方法， 其中， 在所述将所述目标服饰的服饰图案信 息渲染至所 述初始三维用户模型， 以生成渲染服饰的三维用户模型之后， 所述方法还 包括： 在所述目标应用界面上展示所述渲染服饰的三维用户模型， 以及在所述目标应用界面 展示针对动作信息集的动作信息 选择框； 响应于接收到所述目标用户在所述动作信 息选择框 中所选择的动作信 息， 将所选择的 动作信息确定为目标动作信息， 以及生成针对所述目标动作信息的动作执行按钮， 其中， 所 述目标动作信息为所述动作信息集中的信息 。 3.根据权利要求1所述的方法， 其中， 所述生成与 所述渲染服饰的三维用户模型相对应 的目标动作视频， 包括： 确定所述目标用户在目标应用界面对所述渲染服饰的三维用户模型进行旋转的旋转 角度； 根据所述旋转角度， 生成相对应的初始服饰图像； 从预先训练的图像生成模型集中筛选出与 所述目标动作信 息相对应图像生成模型， 作 为目标图像生成模型； 将所述初始服饰图像输入至所述目标图像生成模型， 以生成用户服饰图像集和动作关 联值， 其中， 所述动作关联值表征所述用户服饰图像集中各个用户服饰图像对应主体间的 动作关联程度； 响应于确定所述动作关联值大于预定阈值， 根据所述用户服饰图像集， 生成所述目标 动作视频。 4.根据权利要求3所述的方法， 其中， 所述图像生成模型集中的每个图像生成模型是通 过以下步骤训练的： 获取待生成视频的第一帧服饰图像， 其中， 所述第一帧服饰图像为目标用户点击目标 应用界面中视频生成按钮而生成的图像， 所述目标应用界面为展示渲染服饰的三 维用户模 型的界面， 所述第一帧服饰图像为所述 三维用户模型在目标旋转角度下的截面图像； 确定所述图像生成模型对应的动作信息； 确定针对所述第 一帧服饰图像的、 与所述动作信息相关联的动作视频， 其中， 所述动作 视频包括的第一帧图像的用户动作姿态与所述第一帧服饰图像的用户动作姿态相同；权　利　要　求　书 1/3 页 2 CN 115272564 A 2对于所述动作视频所包括的多帧动作图像中的每帧动作图像， 将所述动作图像和所述 第一帧服饰图像输入至初始图像生成模型， 以得到与所述动作图像中动作姿态相对应的服 饰图像和动作关联值， 其中， 所述多帧动作图像为所述动作视频对应动作图像序列中去除 第一帧图像的多帧图像， 所述动作关联值表征 所述服饰图像与所述动作信息的关联关系； 将所得到的服饰图像集和所述多帧动作图像分别 输入至初始姿态相似度确定模型， 以 生成相似度值 集； 根据所述相似度值集和所得到的动作关联值集， 对所述初始图像生成模型进行训练， 得到训练后的所述图像生成模型。 5.根据权利要求4所述的方法， 其中， 所述根据所述相似度值集和所得到的动作关联值 集， 对所述初始图像生成模型进行训练， 得到训练后的所述图像生成模型， 包括： 确定所述动作关联值 集对应的均值； 响应于确定所述相似度集中各个相似度大于或等于第 一阈值、 且所述均值大于或等于 第二阈值， 将所述初始图像生成模型确定为训练后的所述图像生成模型。 6.根据权利要求5所述的方法， 其中， 在所述响应于确定所述相似度集中各个相似度 大 于或等于第一阈值、 且所述均值大于或等于第二阈值， 将所述初始图像生成模型确定为训 练后的所述图像生成模型之前， 所述方法还 包括： 响应于确定所述相似度集存在相似度小于所述第 一阈值、 且所述均值大于或等于所述 第二阈值， 确定所述相似度集中数值小于所述第一阈值的至少一个相似度； 确定所述至少一个相似度对应的至少一帧动作图像； 将所述至少一帧动作图像对应的特征权重设置为第 一数值， 以及将多帧动作图像 中的 至少一个目标动作图像的特征权重设置为第二数值， 其中， 所述第一数值大于所述第二数 值， 所述至少一个目标动作图像为所述多帧动作图像中去除所述至少一帧动作图像的动作 图像； 根据所述第一数值和所述第二数值， 再次对所述初始图像生成模型进行训练。 7.根据权利要求4所述的方法， 其中， 所述初始姿态相似度确定模型包括： 初始姿态关 键点确定模型和初始关键点相似度确定模型； 以及 所述将所得到的服饰图像集和所述多帧动作图像分别输入至初始姿态相似度确定模 型， 以生成相似度值 集， 包括： 对于所述 服饰图像集中的每 个服饰图像， 执 行相似度值 生成步骤： 将所述服饰图像输入至所述初始姿态关键点确定模型， 生成与 所述服饰图像相关联的 关键点坐标集， 作为第一关键点 坐标集； 确定所述多帧动作图像中的、 与所述 服饰图像相关联的动作图像， 作为目标动作图像； 将所述目标动作图像输入至所述初始姿态关键点确定模型， 生成与 所述目标动作图像 相关联的关键点 坐标集， 作为第二关键点 坐标集； 将所述第一关键点坐标集和所述第二关键点坐标集输入至所述初始关键点相似度确 定模型， 以生成所述相似度值 集。 8.一种动作视频发送装置， 包括： 指示单元， 被配置成响应于检测到目标用户在目标应用界面上已点击针对目标服饰的 查看按钮， 指示目标应用在所述目标应用界面上生成用户信息 输入框；权　利　要　求　书 2/3 页 3 CN 115272564 A 3