CN110175897A - 一种3d合成试衣方法和系统 - Google Patents

Abstract

本发明公开一种3D合成试衣方法和系统，包括以下步骤：1)获取服装的两张照片；2)识别服装照片的轮廓线和关键节点；3)计算两张照片相同的拟合点进行拟合，生成基础版型的服装虚拟三维模型；4)对人体进行深度图拍摄，以得到单张深度图像；5)将单张深度图像变换为三维点云，并获取所述三维点云和重建模型顶点及参数化人体模型顶点之间的匹配点对；6)根据匹配点对建立能量函数，并共同求解重建模型上每一个顶点的非刚性运动位置变换参数和参数化人体体态模型参数；7)对所述能量函数进行求解；该基于身体数据和衣服数据生成的3D合成图像能方便快捷的体验试衣。

Description

一种3D合成试衣方法和系统

技术领域

本发明为3D图像应用技术领域，主要涉及一种3D合成试衣方法和系统。

背景技术

穿衣不仅讲究合适，更讲究品质，传统的试衣方法最普遍的是，顾客直接去商场选择好自己喜欢的衣服然后一件一件的试，这样不仅耗时，人更容易疲惫。在网上选择喜欢衣服，只能提供大概常规参数，然后买回来试衣，而可能因为参数不准确，或者不合身还需退货，这样会带来极大的不便。通过人们的移动终端设备就能方便快捷的体验试衣，减少退货率成为目前亟待解决的技术问题。

发明内容

本发明要解决的技术问题是提供一种的基于身体数据和衣服数据生成3D合成图像，能方便快捷的体验试衣。

为解决上述问题，本发明采用如下技术方案：

一种3D合成试衣方法，包括以下步骤：

1)获取服装的两张照片；

2)识别服装照片的轮廓线和关键节点；

3)计算两张照片相同的拟合点进行拟合，生成基础版型的服装虚拟三维模型；

4)对人体进行深度图拍摄，以得到单张深度图像；

5)将单张深度图像变换为三维点云，并获取所述三维点云和重建模型顶点及参数化人体模型顶点之间的匹配点对；

6)根据匹配点对建立能量函数，并共同求解重建模型上每一个顶点的非刚性运动位置变换参数和参数化人体体态模型参数；

7)对所述能量函数进行求解，并根据求解结果将重建模型与三维点云进行对齐；

8)通过深度图更新和补全对齐后的模型，以进行实时人体动态三维重建；

9)在二维坐标(y，z)平面内，利用图片移动工具将人体三维模型与服装虚拟三维模型匹配，在二维坐标(y，z)平面内，移动服装虚拟三维模型使其完全覆盖人体模型。

作为优选，所述步骤1)中两张照片分别为正面照和背面照。

作为优选，所述步骤3)中基于曲线计算两张照片中相同的拟合点进行拟合。

作为优选，所述曲线为贝赛尔曲线。

作为优选，所述步骤2)还包括检查服装照片的轮廓线和关键节点是否有偏差，若有则人工微调轮廓线和关键节点。

本发明还提供一种3D合成试衣系统：包括

服装摄像模块，用于获取服装的照片；

服装照片识别调整模块，与服装摄像模块连接，用于识别服装照片的轮廓线和关键节点；

服装数据计算模块，计算两张照片相同的拟合点进行拟合，生成基础版型的服装虚拟三维模型；

人体深度拍摄模块，用于对人体进行深度图拍摄，以得到单张深度图像；

变换匹配模块，与人体深度拍摄模块连接，将单张深度图像变换为三维点云，并获取所述三维点云和重建模型顶点及参数化人体模型顶点之间的匹配点对；

函数建立模块，与变换匹配模块连接，根据匹配点对建立能量函数，并共同求解重建模型上每一个顶点的非刚性运动位置变换参数和参数化人体体态模型参数；

解析模块，与函数建立模块连接，对所述能量函数进行求解，并根据求解结果将重建模型与三维点云进行对齐；

更新补全模块，与解析模块连接，用于将深度图更新和补全对齐后的模型，以进行实时人体动态三维重建；

覆盖处理模块，与服装数据计算模块和更新补全模块连接，用于在二维坐标(y，z)平面内，利用图片移动工具将人体三维模型与服装虚拟三维模型匹配，在二维坐标(y，z)平面内，移动服装虚拟三维模型使其完全覆盖人体模型。

本发明的有益效果为：分别对人体和衣服建立三维模型后，采用覆盖的方式将衣服模型和人体模型拟合，不仅可以达到试穿的效果，同时合成速度较快，使用体验好。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为实施例1一种3D合成试衣方法的流程图。

图2为实施例2一种3D合成试衣方法的流程图。

图3为本发明的一种3D合成试衣系统的连接框图。

图中：

1、服装摄像模块；2、服装照片识别调整模块；3、服装数据计算模块；4、人体深度拍摄模块；5、变换匹配模块；6、函数建立模块；7、解析模块；8、更新补全模块；9、覆盖处理模块。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。

实施例1

如图1所示，一种3D合成试衣方法，包括以下步骤：

1)获取服装的两张照片；

2)识别服装照片的轮廓线和关键节点；

3)计算两张照片相同的拟合点进行拟合，生成基础版型的服装虚拟三维模型；

4)对人体进行深度图拍摄，以得到单张深度图像；

5)将单张深度图像变换为三维点云，并获取所述三维点云和重建模型顶点及参数化人体模型顶点之间的匹配点对；

6)根据匹配点对建立能量函数，并共同求解重建模型上每一个顶点的非刚性运动位置变换参数和参数化人体体态模型参数；

7)对所述能量函数进行求解，并根据求解结果将重建模型与三维点云进行对齐；

8)通过深度图更新和补全对齐后的模型，以进行实时人体动态三维重建；

9)在二维坐标(y，z)平面内，利用图片移动工具将人体三维模型与服装虚拟三维模型匹配，在二维坐标(y，z)平面内，移动服装虚拟三维模型使其完全覆盖人体模型。

实施例2

1)获取服装的两张照片；

2)识别服装照片的轮廓线和关键节点；

3)计算两张照片相同的拟合点进行拟合，生成基础版型的服装虚拟三维模型；

4)对人体进行深度图拍摄，以得到单张深度图像；

5)将单张深度图像变换为三维点云，并获取所述三维点云和重建模型顶点及参数化人体模型顶点之间的匹配点对；

6)根据匹配点对建立能量函数，并共同求解重建模型上每一个顶点的非刚性运动位置变换参数和参数化人体体态模型参数；

7)对所述能量函数进行求解，并根据求解结果将重建模型与三维点云进行对齐；

8)通过深度图更新和补全对齐后的模型，以进行实时人体动态三维重建；

9)在二维坐标(y，z)平面内，利用图片移动工具将人体三维模型与服装虚拟三维模型匹配，在二维坐标(y，z)平面内，移动服装虚拟三维模型使其完全覆盖人体模型。

作为优选，所述步骤1)中两张照片分别为正面照和背面照。

在本实施例中，所述步骤3)中基于曲线计算两张照片中相同的拟合点进行拟合。

在本实施例中，所述曲线为贝赛尔曲线。

在本实施例中，所述步骤2)还包括检查服装照片的轮廓线和关键节点是否有偏差，若有则人工微调轮廓线和关键节点。

本发明还提供一种3D合成试衣系统：包括

服装摄像模块1，用于获取服装的照片；

服装照片识别调整模块2，与服装摄像模块连接，用于识别服装照片的轮廓线和关键节点；

服装数据计算模块3，计算两张照片相同的拟合点进行拟合，生成基础版型的服装虚拟三维模型；

人体深度拍摄模块4，用于对人体进行深度图拍摄，以得到单张深度图像；

变换匹配模块5，与人体深度拍摄模块连接，将单张深度图像变换为三维点云，并获取所述三维点云和重建模型顶点及参数化人体模型顶点之间的匹配点对；

函数建立模块6，与变换匹配模块连接，根据匹配点对建立能量函数，并共同求解重建模型上每一个顶点的非刚性运动位置变换参数和参数化人体体态模型参数；

解析模块7，与函数建立模块连接，对所述能量函数进行求解，并根据求解结果将重建模型与三维点云进行对齐；

更新补全模块8，与解析模块连接，用于将深度图更新和补全对齐后的模型，以进行实时人体动态三维重建；

覆盖处理模块9，与服装数据计算模块和更新补全模块连接，用于在二维坐标(y，z)平面内，利用图片移动工具将人体三维模型与服装虚拟三维模型匹配，在二维坐标(y，z)平面内，移动服装虚拟三维模型使其完全覆盖人体模型。

本发明的有益效果为：分别对人体和衣服建立三维模型后，采用覆盖的方式将衣服模型和人体模型拟合，不仅可以达到试穿的效果，同时合成速度较快，使用体验好。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何不经过创造性劳动想到的变化或替换，都应涵盖在本发明的保护范围之内。

Claims (6)

1.一种3D合成试衣方法，其特征在于：包括以下步骤：

1)获取服装的两张照片；

2)识别服装照片的轮廓线和关键节点；

3)计算两张照片相同的拟合点进行拟合，生成基础版型的服装虚拟三维模型；

4)对人体进行深度图拍摄，以得到单张深度图像；

5)将单张深度图像变换为三维点云，并获取所述三维点云和重建模型顶点及参数化人体模型顶点之间的匹配点对；

6)根据匹配点对建立能量函数，并共同求解重建模型上每一个顶点的非刚性运动位置变换参数和参数化人体体态模型参数；

7)对所述能量函数进行求解，并根据求解结果将重建模型与三维点云进行对齐；

8)通过深度图更新和补全对齐后的模型，以进行实时人体动态三维重建；

9)在二维坐标(y，z)平面内，利用图片移动工具将人体三维模型与服装虚拟三维模型匹配，在二维坐标(y，z)平面内，移动服装虚拟三维模型使其完全覆盖人体模型。

2.根据权利要求1所述的3D合成试衣方法，其特征在于：所述步骤1)中两张照片分别为正面照和背面照。

3.根据权利要求2所述的3D合成试衣方法，其特征在于：所述步骤3)中基于曲线计算两张照片中相同的拟合点进行拟合。

4.根据权利要求3所述的3D合成试衣方法，其特征在于：所述曲线为贝赛尔曲线。

5.根据权利要求4所述的3D合成试衣方法，其特征在于：所述步骤2)还包括检查服装照片的轮廓线和关键节点是否有偏差，若有则人工微调轮廓线和关键节点。

6.一种3D合成试衣系统，其特征在于：包括

服装摄像模块，用于获取服装的照片；

服装照片识别调整模块，与服装摄像模块连接，用于识别服装照片的轮廓线和关键节点；

服装数据计算模块，计算两张照片相同的拟合点进行拟合，生成基础版型的服装虚拟三维模型；

人体深度拍摄模块，用于对人体进行深度图拍摄，以得到单张深度图像；

变换匹配模块，与人体深度拍摄模块连接，将单张深度图像变换为三维点云，并获取所述三维点云和重建模型顶点及参数化人体模型顶点之间的匹配点对；

函数建立模块，与变换匹配模块连接，根据匹配点对建立能量函数，并共同求解重建模型上每一个顶点的非刚性运动位置变换参数和参数化人体体态模型参数；

解析模块，与函数建立模块连接，对所述能量函数进行求解，并根据求解结果将重建模型与三维点云进行对齐；

更新补全模块，与解析模块连接，用于将深度图更新和补全对齐后的模型，以进行实时人体动态三维重建；

覆盖处理模块，与服装数据计算模块和更新补全模块连接，用于在二维坐标(y，z)平面内，利用图片移动工具将人体三维模型与服装虚拟三维模型匹配，在二维坐标(y，z)平面内，移动服装虚拟三维模型使其完全覆盖人体模型。